大数据平台高级工程师平台产品方向职位描述与岗位职责任职要求
职位描述:
工作职责:
1、负责公司级的统一数据平台和分析型产品的研发,服务于今日头条全公司的数十个用户产品线;
2、设计和实现Web后端和关键数据服务,用数据?量产品并驱动产品演进。
任职要求:
1、熟悉互联网产品和服务的开发过程,熟悉后端技术架构,具备良好的系统设计能力;
2、扎实的计算机基础,对技术有热情,愿意不断尝试新技术和业务挑战;
3、熟悉Python和Go语言优先;
4、有大数据集、分布式计算工具(Hadoop,Spark,Hive,Storm)等应用开发经验优先;
5、有产品sense,兼具pm技能者优先。
篇2:平台运维工程师岗位职责
平台运维工程师一1、Cloudera大数据平台集群规划与搭建;
2、大数据平台安全防护与应急响应;
3、协助研发团队对存储资源以及集群资源统一分配与调度、性能调优、故障分析与诊断;
4、实时监控接入平台的SaaS服务的所有数据安全等;
5、按照安全架构师的统一规划实施数据平台等保三级相关配套防护措施;
6、与Cloudera等合作伙伴保持良好互动,协调IaaS运维工程师解决数据
二1、PaaS平台日常运行和维护;
2、PaaS资源安全防护与应急响应;
3、协助研发团队对容器与容器镜像资源统一分配与调度、性能调优、故障分析与诊断;
4、实时监控接入平台物联设备应用安全、数据安全和网络安全等;
5、配合集团PaaS平台集群对接,保证上海PaaS平台高可用性;
6、与PaaS合作伙伴保持良好互动,协调IaaS运维工程师解决各种突发问题
一1、Cloudera大数据平台集群规划与搭建;
2、大数据平台安全防护与应急响应;
3、协助研发团队对存储资源以及集群资源统一分配与调度、性能调优、故障分析与诊断;
4、实时监控接入平台的SaaS服务的所有数据安全等;
5、按照安全架构师的统一规划实施数据平台等保三级相关配套防护措施;
6、与Cloudera等合作伙伴保持良好互动,协调IaaS运维工程师解决数据
二1、PaaS平台日常运行和维护;
2、PaaS资源安全防护与应急响应;
3、协助研发团队对容器与容器镜像资源统一分配与调度、性能调优、故障分析与诊断;
4、实时监控接入平台物联设备应用安全、数据安全和网络安全等;
5、配合集团PaaS平台集群对接,保证上海PaaS平台高可用性;
6、与PaaS合作伙伴保持良好互动,协调IaaS运维工程师解决各种突发问题
篇3:数据平台开发工程师岗位职责
资深数据平台开发工程师(严选)-邮件事业部172网易集团网易(杭州)网络有限公司,杭州网易,网易,网易杭州,网易游戏,网易网络,网易集团,网易工作职责:
1、负责离线计算平台的开发和维护工作;
2、负责HBase/TiDB的开发与维护工作;
3、负责Alluxio/Arrow等开发与维护工作。
任职要求:
1、5年以上相关领域开发经验,熟悉Java/Go/C++的一种;
2、对数据库系统或分布式系统的原理和架构有较好的了解;
3、优秀的发现和解决问题能力,良好的沟通能力和团队意识。
加分项:
1、熟悉Hadoop生态,参加过开源项目;
2、熟悉Hive、Spark、HDFS、HBase、TiDB中至少一种产品的实现细节;
3、有数据库/数据治理产品的开发和运维经验。