资深数据仓库工程师岗位职责资深数据仓库工程师职责任职要求
资深数据仓库工程师岗位职责
资深数据仓库工程师职位描述:
1、负责数据平台架构的整体规划和设计;
2、根据上层业务逻辑整合优化平台数据流程,技术难点攻关;
3、对数据及业务开发团队提供技术支持,协助方案规划。
任职要求
1、精通数据仓库实施方法论、深入了解数据仓库体系架构,精通逻辑模型和物理模型建模、中间层模型理论以及多维模型的设计;
2、对hive、hbase、hadoop、map/reduce、spark有深入了解;
3、精通主流数据库技术(如Oracle、SQLServer、MySQL等),精通SQL,有较强的SQL编码及数据存储、性能调优经验;
4、能够对业务需求进行抽象并据此进行架构设计;
5、具有较强的沟通,表达及文档编写能力,有大数据建设经验者优先;
6、数据java开发,有相关的工作经验;
7、熟悉数据仓库相关技术,如ETL、调度相关、报表开发。
职位描述:
1、负责数据平台架构的整体规划和设计;
2、根据上层业务逻辑整合优化平台数据流程,技术难点攻关;
3、对数据及业务开发团队提供技术支持,协助方案规划。
任职要求
1、精通数据仓库实施方法论、深入了解数据仓库体系架构,精通逻辑模型和物理模型建模、中间层模型理论以及多维模型的设计;
2、对hive、hbase、hadoop、map/reduce、spark有深入了解;
3、精通主流数据库技术(如Oracle、SQLServer、MySQL等),精通SQL,有较强的SQL编码及数据存储、性能调优经验;
4、能够对业务需求进行抽象并据此进行架构设计;
5、具有较强的沟通,表达及文档编写能力,有大数据建设经验者优先;
6、数据java开发,有相关的工作经验;
7、熟悉数据仓库相关技术,如ETL、调度相关、报表开发。
篇2:数据仓库研发工程师岗位职责
搜狗金融-数据仓库研发工程师-北京-02173(MJ001926)搜狗北京搜狗科技发展有限公司,北京搜狗科技,搜狗,搜狗科技,搜狗翻译,搜狗词典,搜狗岗位职责:
1、数据仓库、数据集市的数据模型设计
2、数据仓库ETL规则设计和开发
3、利用HQL进行数据清洗,根据应用场景建立数据集市。
4、数据仓库数据导入,建表,日常任务跑批,日志监控。
5、数据仓库需求调研和需求分析
任职条件:
1、熟悉python,熟练使用shell编程解决数据清洗;
2、熟练使用Hadoop、Hive、Sqoop,熟练使用hiveSQL并有一定编写map/reduce开发经验;
3、熟悉数据仓库建模理论,了解数据仓库数据分层架构,精通3NF和多维数据模型设计;
4、具备大中型数据仓库架构设计、模型设计、ETL设计的相关经验;
5、具备海量数据处理、有性能调优经、金融、电商、电信、互联网行业数据模型经验者优先
这是一款定位于服务平台互联网用户的金融产品,由搜狗公司内部孵化,深度挖掘搜狗在互联网端的用户规模优势以及多年的大数据能力积累。在当下大热的互联网金融领域,搜狗将发挥用户服务和智能算法优势,并结合平台的综合运营实力。
篇3:BI数据仓库工程师岗位职责
BI工程师-数据仓库涂鸦智能杭州涂鸦科技有限公司,涂鸦智能,爱相机岗位职责:
1.负责业务数据调研、需求理解,数据采集方案设计及实现;
2.负责建立数据模型,根据业务设计数据主题;
3.负责数据模型的ETL编写,参与团队ETL流程的优化及解决ETL相关技术问题;
4.理解业务方的数据需求,提供面向业务的OLAP、报表、数据提取等数据服务;
任职要求:
1.本科及以上学历,计算机相关专业,2-5年企业级数据平台相关系统开发经验;
2.SQL技能娴熟,精通hive-sql,presto-sql
3.具有扎实的计算机操作系统、数据结构等编程基础,熟悉Java或scala语言;
4.有过2年以上bi项目经验,熟悉开源的bi工具如:metabase,superset,redash.有实际操作经验。
7.有良好的沟通能力,善于主动思考和行动,有极强的责任心和自驱力。