2017-07-20 15:00
大数据研发工程师
职位描述:
1、参与公司的数据平台的开发建设;
2、设计和研发数据分析相关的工具平台;
3、研究和设计公司的大数据仓库平台,负责数据仓库中的数据计算ETL pipeline的设计和开发,管理和维护 。
4、利用数据挖掘、机器学习相关算法,解决业务需求
5、对海量的业务数据、设备据进行挖掘分析,发现数据和业务背后的规律,完成对设备状态分析的建模;
岗位要求:
1. 三年以上大数据研发经验;
2. 熟悉linux下开发!精通java,具有良好的编程习惯和算法基础 ;
3. 熟悉大数据开发相关技术,如hadoop、hive、spark、impala、storm、hbase等 ;
4.能深入了解hadoop集群及其周边常用模块(YARN/Zookeeper/Flume/Kafka/RabbitMQ);
5. 熟练数据仓库,对多维数据建模有深入理解,玩过kylin的优先考虑;
6. 有OLAP引擎相关开发经验优先;
7. 有BI开发经验,有网站数据、用户数据、电商、点击流、精准营销等相关经验;
8. 熟悉常用数据挖掘与机器学习算法优先;
9. 思维敏捷,有较强的钻研学习能力,较好的沟通能力、团队合作 。