岗位职责： 

 1. 负责大数据项目数据集成工作的开发、测试与调优；

 2. 负责项目中数据处理工作（数据采集、清洗、汇总、集成等） 

 任职要求： 

 1. 本科及以上学历，计算机相关专业，熟悉数据分析系统体系架构，熟悉数据仓库建模理论、模型设计思路, 并用于实际项目实践； 

 2. 熟练掌握Python、JAVA编程语言； 

 3. 熟悉linux系统环境； 

 4. 熟练掌握SQL脚本编写与调优；

 5. 熟练掌握hive SQL开发； 

 6. 熟悉hdfs、mapreduce、spark实现原理与机制；

7. 熟练掌握kafka、storm、spark streaming编程框架，并具备项目实施经验；