搜索数据挖掘高级研发工程师2378职位描述与岗位职责任职要求

2024-07-27 阅读 6559

职位描述：

岗位职责:

岗位职责：

1，参与和建设搜索数据（包括QueryLog）挖掘系统；

2，建立离线数据ETL流程体系，使得整个数据流转（抽取、转换、加载）变得更加高效、便捷；

3、负责和外部合作方对接，建立起OPPO移动互联网搜索数据准入规范和相关项目核心代码研发；

能力要求：

1、三年以上相关工作经验；

2、精通Java/Python语言，对数据挖掘有浓厚的兴趣；

3、精通MySQL数据库，具备mysql索引优化、查询优化、存储优化能力；

4、熟悉MapReduce和实时计算（Flink/Spark），有大规模数据分析和处理的经验；

5、优秀的分析问题和解决问题能力，对解决挑战性的问题充满激情；

6、有NoSQL数据库或者Hadoop/Hive等分布式计算方面背景优先；

7、有过著名搜索引擎离线或Dump相关研发工作的经验或有过开源社区代码贡献优先；

篇2:数据挖掘员岗位职责

1.负责大数据基础平台及大数据分析的项目管理工作;

2.基于海量数据,支持业务对数据的分析和使用;

3.负责构建数据分析体系,大量运营数据的分类汇总、分析研究和数据建模;

4.研究大数据探索前沿技术;

负责公司现有软件的整合与开发、升级工作。

岗位要求:

1.具有扎实的Java基础,熟悉Shell,Python、R、Scala等一种以上语言;

2.熟悉大数据处理相关技术,包括但不限于Hadoop、Hive、Hbase、Impala、Spark、Kafaka、Flume、Sqoop、Storm、Redis、Kylin等,并且有实践经验,能解决应用中的复杂问题;

3.熟悉BI和大数据领域的解决方案,具备该领域全面的技术积累,包括报表平台,OLAP引擎,ETL,数据仓库建模和设计,了解海量分布式数据处理分析架构;

4.喜欢数据分析,对数字有敏感性,工作条理性强,逻辑清晰;

5.良好的沟通协调能力,高度的工作责任心,能承受较大的工作压力;

6.具有海量数据处理、数据挖掘、数据分析相关项目的工作经验者优先;

7.有机器学习(mlib)、深度学习(tensorflow/caffe)相关工作经验者优先。

篇3:数据挖掘主管岗位职责

高级数据挖掘技术主管职位描述:

1、负责底层数据开发工作以及用户标签体系开发工作的日常管理。

2、负责用户标签体系的建立和完善

3、参与多款数据产品的算法设计和优化

任职要求:

1、硕士以上学历,计算机、数学、统计学等相关专业,接受过统计学和机器学习的专业训练

2、至少熟悉java或者python其中一门,有三年以上使用经验

3、熟悉各种统计算法、有机器学习、数据挖掘三年以上相关经验;熟悉推荐系统、文本挖掘相关算法者优先

4、有并行计算经验、熟悉hadoop、spark生态系统使用

5、团队合作能力强、沟通能力优秀。有管理经验者优先。

6、可享受期权奖励职位描述: