岗位职责：

1.负责大数据整体的计算平台开发与应用; 2.负责搭建及消息流处理的分布式大数据平台; 

2.负责数据接入.数据清洗.底层重构.业务主题建模.部署和维护等工作; 

3.对系统存在的问题进行跟踪和定位并及时解决;   

4.严格执行工作计划,主动汇报并高效完成任务保证部门及个人工作目标实现; 

任职资格： 

1.大专以上学历,3~5年大数据相关工作经验;   

2.掌握计算机基础知识.分布式系统技术原理,较强的动手能力和学习能力;  

3.熟悉2门以上数据处理语言,如SQL.Java.Python等;  

4.熟悉HDFS.Kudu.YARN.Spark.Hive.Impala.Kylin.HBase/MongoDB.Redis.ELK等5种以上大数据平台组件;  

5.熟练掌握并运用Flume.Kafka.SparkStreaming等流式计算框架,做个1个及以上有的流式项目开发; 

6.具有BI系统的开发实施经验,能够独立开发ETL.Cube建模.OLAP开发.报表开发等;一定的应用系统分析与设计能力,有良好.规范的编程习惯和文档编写习惯;   

7.有较强的学习能力,对技术有钻研精神,并有较高的热情,热衷于新技术.新理论.新开发实践的学习和实践。