陈杭星

项目介绍

• 数据模型开发

  技能点：sql、hdfs、hbase、hive、python 、maven、java、linux

  基于hive库做数据分析，模型建设
  

• 数据展示平台

  技能点：python、django、html、js、css、axios、vue、nginx、uwsgi

  python+django+vue 前后端分离
  

• 自动化运维平台

  技能点：python、java、shell、nagios、supervisor、maven、git、spring、springmvc、springboot、hibernate、thrift、linux

  对服务器中的服务进行监控，集成supervisor实现对进程的监控，编写python脚本对配置文件的操作。集成nagios对服务器信息的监控，编写shell脚本对nagios部署安装。通过集成sshxcute对服务器命令的操作。对监控的服务器实现主对agent的操作，实现心跳连接。
  

• 数据治理

  技能点：java、shell、maven、git、spring、springmvc、springboot、hibernate、hdfs

  负责数据服务模块的编写，将数据根据标签筛选抽取后存储到hdfs，编写微服务对目标数据管理，权限认证等。

• kettle插件开发

  技能点：java、maven、kettle

  开源的rabbitMQ
  阿里的maxCompute(odps)、dataHub、TableStore(ots)

• kettle与腾讯TBDS4.0对接

  技能点：kettle、hdfs、hive、hbase、kafka、hdfs

  权限认证
  插件版本适配