2017-04-14 10:43
数据仓库工程师
岗位职责:
1、负责大数据仓库(ODS、EDW、CSL、ADM)的设计、开发、测试;
2、负责各业务系统数据源业务探查、数据探查、ID调研、准确性完整性验证;
3、为前端展示提供数据支持,为业务人员提供数据查询;
4、大数据仓库日常管理、跑批、维护、监控。
任职要求:
1、2年以上大数据仓库项目开发经验,本科以上学历;
2、熟悉hbase、hive、Phoenix等大数据分布式数据存储,熟悉sqoop、datax、azkaban等大数据ETL调度工具;
3、熟悉inmon企业数据仓库(EDW)设计理论与技术、Kimball维度建模理论与技术;
4、了解PowerDesigner、ERwin等建模工具,熟悉概念模型、逻辑模型、物理模型;
5、熟悉P2P、互联网金融业务优先;
6、熟悉Hadoop,spark生态圈优先;
7、责任心强、思路清晰、学习力强。
8、熟练使用Python/Java或其他语言进行复杂业务逻辑的数据处理工作,具备海量数据处理以及性能优化的能力