首页 > 制度大全 > 数据处理工程师岗位职责

数据处理工程师岗位职责

2024-07-28 阅读 1297

数据处理工程师全日制本科以上学历(985/211),计算机科学与技术/软件工程/数据相关专业

1、3年以上ETL开发经验,熟悉ETL开发规范和流程;

2、熟练使用DataStage、Informatica、Kettle、Hive、PLSQL、SPARK、MapReduce等工具中的一个或多个,有开发、维护经验;

3、熟练编写存储过程,擅长SQL优化;

4、熟悉Oracle、SQLServer等常用数据库中的一个或多个;

5、熟悉perl、shell脚本,Linux操作系统;

6、有大型数据仓库、BI相关项目的开发经验,精通架构、建模者优先;

7、熟练使用Erwin或PowerDesigner等进行数据建模;

8.以下经验优先考虑:流式处理、日志处理、数据仓库全日制本科以上学历(985/211),计算机科学与技术/软件工程/数据相关专业

1、3年以上ETL开发经验,熟悉ETL开发规范和流程;

2、熟练使用DataStage、Informatica、Kettle、Hive、PLSQL、SPARK、MapReduce等工具中的一个或多个,有开发、维护经验;

3、熟练编写存储过程,擅长SQL优化;

4、熟悉Oracle、SQLServer等常用数据库中的一个或多个;

5、熟悉perl、shell脚本,Linux操作系统;

6、有大型数据仓库、BI相关项目的开发经验,精通架构、建模者优先;

7、熟练使用Erwin或PowerDesigner等进行数据建模;

8.以下经验优先考虑:流式处理、日志处理、数据仓库

篇2:大数据处理工程师岗位职责

数据处理工程师(大数据项目)全成通信上海全成通信技术有限公司,全成通信,全成岗位职责:

1、负责大数据平台的日常维护和监控

2、负责大数据项目日报发布工作

3、负责日报数据的统计

4、负责大数据项目日常数据的计算、分析和维护

任职要求:

1、一年以上相关工作经验,有电信行业经验者优先

2、熟悉Linux和Excel,熟练使用perl或者其他的脚本语言

3、具有OracleDLL/DML技术的使用经验

4、具有良好的团队合作精神,有较强的学习能力、适应能力、沟通能力

篇3:数据处理工程师岗位职责数据处理工程师职责任职要求

数据处理工程师岗位职责

数据处理工程师1)直接面对客户,参与项目运作中数据处理,了解客户软硬件要求;

2)参与、协助数据收集和模型建构;

3)安装、调试公司软件在客户端上线;

4)开发常用数据处理功能,帮助业务团队提高工作效率;

5)与香港、新加坡和纽约团队合作,为亚太地区技术服务提供支持。·计算机或软件相关专业,本科及以上学历;

·掌握两门以及常见数据库设计开发技术,Mysql、Oracle、SqlServer、Hive等;

·具有参加过ETL开发项目,处理过(大)数据经验优先;

·工作细心、认真负责且善于沟通,能快速理解业务,对数据敏感,并能主导项目的进度,保证团队产出。1)直接面对客户,参与项目运作中数据处理,了解客户软硬件要求;

2)参与、协助数据收集和模型建构;

3)安装、调试公司软件在客户端上线;

4)开发常用数据处理功能,帮助业务团队提高工作效率;

5)与香港、新加坡和纽约团队合作,为亚太地区技术服务提供支持。