工作职责：

1.  海量数据的清洗、预处理、转化及分析。

2.  利用机器学习方法对数据进行深度挖掘。

3.  完成数据的抽取、转换和加载；

4.  负责数据仓库的需求理解、方案设计并实现；

5.  为提升系统可用性进行数据仓库性能调优；

任职资格：

1、熟悉分布式计算平台Hadoop，Spark和MPI，常用数据库HBase，MySQL，MongoDb和Hive，能够独立完成数据的存储和处理操作；

2、熟悉常见的机器学习算法和数据挖掘算法，包括LR，SVM，DNN，RNN；

3、熟悉Linux和Windows系统，能够使用Java，Python，C/C++进行在双平台上进行独立开发，以及相关环境部署和配置；

4、熟悉高并发和高吞吐环境下的系统规划；

5、具有一定的英语阅读能力，能够无障碍的阅读技术相关文档；