首页 > 制度大全 > 大数据分析与挖掘职位描述与岗位职责任职要求

大数据分析与挖掘职位描述与岗位职责任职要求

2024-07-29 阅读 7044

职位描述

工作职责:

1、参与数据分析与挖掘系统的需求分析,方案设计、系统研发和业务挖掘工作

2、参与图像大数据挖掘项目的开发

任职资格:

1、熟悉Java平台IO、多线程、网络等基础知识和相关框架

2、熟悉Linux基础知识和常用命令,能较强的分析和解决问题能力

3、熟悉HDFS、Hbase、Hive等大数据存储技术工具,原理和应用

4、熟悉Yarn/Mesos、MapReduce/Spark,Kylin等大数据分析技术的一种或多种

5、熟悉数据集成和大规模数据转换技术和工具,如Kettle,Sqoop,Flume等

6、熟悉数据采集工程(爬虫)工作原理,能编写和部署大规模爬虫系统

篇2:数据分析挖掘师岗位职责数据分析挖掘师职责任职要求

数据分析挖掘师岗位职责

数据分析师/数据挖掘师1、对部门日志数据进行清理、整合;

2、对各种数据进行分析有洞察力的分析;

3、针对既定商业目标进行建模;

4、协助大数据工程师进行产品化。

任职资格

1、数据分析工作经验3年及以上,有丰富数据建模经验,包括分类、推荐、预测、文本分类等;

2、有数据ETL实现能力及较强的coding能力,掌握R或是Python(统计包)等统计工具,熟练掌握SQL,熟悉linux/shell基本功能;

3、有hive使用经验优先,有技术BI、大数据相关工作经验优先,对sparkmllib有了解优先;

4、具备良好的数据和商业敏感度、优秀的逻辑思维能力,乐于从纷繁的数据中寻找业务规律,较好的商业洞察力。1、对部门日志数据进行清理、整合;

2、对各种数据进行分析有洞察力的分析;

3、针对既定商业目标进行建模;

4、协助大数据工程师进行产品化。

任职资格

1、数据分析工作经验3年及以上,有丰富数据建模经验,包括分类、推荐、预测、文本分类等;

2、有数据ETL实现能力及较强的coding能力,掌握R或是Python(统计包)等统计工具,熟练掌握SQL,熟悉linux/shell基本功能;

3、有hive使用经验优先,有技术BI、大数据相关工作经验优先,对sparkmllib有了解优先;

4、具备良好的数据和商业敏感度、优秀的逻辑思维能力,乐于从纷繁的数据中寻找业务规律,较好的商业洞察力。

篇3:资深数据挖掘数据分析工程师职位描述与岗位职责任职要求

职位描述

岗位描述:

1.数据统计分析:游戏业务用户行为数据统计与分析,产品效果评估与分析,为产品策略优化迭代提供强有力的数据支持

2.数据挖掘:从海量日志数据中发掘有价值的信息,建立多个维度上的模型,用于指导产品优化

岗位要求

1.数学、统计、金融、计算机或者相关专业本科以上学历

2.熟悉Java/Python,熟练掌握SQL,具有3年以上开发或者统计分析经验

3.了解HADOOP大数据平台架构,熟悉HDFS/HBase/Hive/MapReduce,熟练掌握Mapreduce程序开发

4.对数据仓库系统架构具有良好的认知,熟悉数据仓库相关技术,如ETL、报表开发,具备数据分析技术并具有相关项目经验

5.掌握常用的数据分析工具、数据挖掘、机器学习算法是加分项