ETL高级工程师岗位职责及相关职位要求

ETL高级工程师职位要求

1、计算机、数学或统计等专业，本科以上学历；

2、精通SQL语言；熟悉数据仓库设计、建模；

3、精通Python，能够编写脚本处理、分析数据；

4、熟悉批量离线式分布式并行计算技术（如Hadoop、MapReduce、Hive、Spark等）

5、熟悉SQLServer、MySQL数据库；了解Redis等非关系型数据库；

6、熟悉至少一种常用ETL工具（如Kettle、SSIS、Gobblin）；了解常用报表工具（如ReportingServices以及各类开源报表）；

7、了解常用数据挖掘方法（回归、决策树、聚类等）。

ETL高级工程师岗位职责

1、负责国际网站后台数据仓库搭建、维护；

2、运用各类大数据工具设计ETL流程，消费生产环境埋点、日志等数据；

3、日常数据监控以及数据预警，异常数据解读挖掘，并与业务同事沟通解决方案；

4、分析用户的特征和行为数据，挖掘不同类型用户的行为特性，为实际的业务运营提供数据支持；

5、从数据分析结果中寻找insight和商业价值，并以简明扼要的形式传导到其他部分，指导实际的业务运营；

6、处理国际网站的临时数据需求，并对于常用重要需求转化成数据产品。

篇2:中级ETL工程师岗位职责

中级ETL工程师比孚科技上海比孚信息科技有限公司,比孚,比孚科技,比孚职位描述:

1.负责数据仓库/数据集市ETL设计开发;

2.负责与业务部门数据需求的沟通与确认;

任职资格:

1.三以上工作经验;

2.熟悉主流ETL开发工具,如:SSIS、Kettle、Datastage等;

3.熟练掌握主流数据库的使用,如:SQLServer、Mysql、Oracle,对SQL查询优化有丰富的经验;

4.熟悉主流报表工具,如:Tableau、PowerBi、Cognos;

5.良好的沟通技能,清晰的逻辑思维能力;

6.工作认真仔细,积极主动,具备较强的自主学习、自我总结能力。

篇3:ETL数据工程师岗位职责任职要求

ETL数据工程师岗位职责

岗位职责:

1.参与金融大数据研发;

2.参与数据仓库ETL流程的优化及解决ETL相关技术问题;

3.负责数据基础架构的升级和优化,不断提升系统的稳定性和效率;

4.设计并实现对机器学习、数据挖掘的系统性支持;

岗位要求:

1.计算机相关专业,本科及以上学历;

2.具备良好的编程习惯,熟悉常用的数据结构和算法;

3.熟练掌握PHP/Python/java任一语言;

4.具备良好的数据库理论基础知识,较强的sql书写能力,熟练使用MySQL/postgres等数据库;

5.有数据处理,ETL流程优化实战经验,熟悉kettle/informatica等抽取工具;

6.有使用kafka,storm,sparkstreaming实时数据处理系统建设经验优先。

ETL数据工程师岗位