大数据研发工程师岗位职责12篇

第1篇 空间大数据研发工程师职位描述与岗位职责任职要求

职位描述：

岗位职责:

1、研究空间大数据前沿技术，参与空间大数据分析平台的设计和开发；

2、与算法工程师对接，参与空间大数据分析算法的代码实现；

3、其它相关的gis开发工作；

任职资格:

1、计算机、地理信息等相关专业背景，本科及以上学历；

2、对空间数据结构有深刻理解，熟悉空间数据库引擎；

3、扎实的编程基础，能够熟练运用java/scala语言；

4、熟悉大数据管理系统和分布式计算框架，如：hbase、cassandra、mongodb、spark/flink等；

5、熟悉gis领域主流的分布式数据存储方案，有geomesa、geowave、geotrellis、geoserver、geotools、arcgis soe使用经验者优先；

6、具备较强的学习创新能力，能够通过快速学习解决实际问题；

第2篇 大数据研发工程师-广告系统数据平台职位描述与岗位职责任职要求

职位描述：

工作职责：

1、广告各类在线业务的离线数据加工与在线数据服务开发与维护；

2、数据服务接口及产品需求研发迭代，代码review、bug修复及日常服务运维；

3、针对海量数据处理和查询需求，设计适应业务变化的合理的多维数据分析系统架构，满足多样性的需求；

4、海量日志清洗加工，并抽象出可以多业务复用的数据模型。

任职要求：

1、计算机相关专业本科及以上学历，熟悉hadoop架构和工作原理，精通mapreduce编程；精通hive，有hql优化经验；

2、熟悉java，python等多种编程技术，编程能力强，有web服务开发经验，具备独立完成模块开发能力；

3、理解基本的设计模式，能将业务需求快速理解成技术需求；

4、熟练使用mysql，熟练使用elasticsearch、druid者优先；熟悉其原理者优先；

5、善于沟通，工作积极主动，责任心强，具备良好的团队协作能力；

6、具备良好的问题分析与解决能力，有较强学习能力和逻辑思维能力。

额外加分项:：

github等开源社区贡献者；

具备大规模分布式服务设计能力和经验。

第3篇 高级大数据研发工程师（数据可视化）职位描述与岗位职责任职要求

职位描述：

岗位职责：

1.负责全公司的数据平台数据可视化研发工作

2.独立完成数据可视化研发工作

任职要求：

1.计算机、电子通信、数学、统计或者相关专业本科及以上学历

2.熟练掌握java/python中的一种语言

3.熟悉数据可视化开发，熟悉echarts应用开发的优先

4.熟悉web开发，熟悉html，js，css

5.熟悉quick bi的优先

6.具备良好的团队合作精神，工作有激情

7.对数据敏感，有产品思维的优先

第4篇 品牌广告大数据研发工程师-核心广告系统职位描述与岗位职责任职要求

职位描述：

工作职责：

1、负责品牌广告业务平台及其相关系统的研发

2、负责现有系统的问题分析和改进，提高系统性能，保证系统稳定性

3、持续改进系统架构、核心算法或者核心技术等，保证系统高性能、高可用性和高可扩展性

4、新技术预研，完成项目的选型和设计，难点公关

任职要求：

1、本科及以上学历，一年以上大数据系统开发经验

2、熟悉python语言， 熟练使用linu_

3、对常用的redis、kafka等工具系统有一定的了解

4、有大数据集、分布式计算工具(hadoop，spark，hive，storm， es)等应用开发经验优先

5、有良好的团队合作精神，较强的沟通能力

6、愿意深入了解业务知识，并能敏锐的发现业务痛点

7、有品牌广告系统、dmp、舆情、指数平台方向开发经验者优先

第5篇 高级/资深大数据研发工程师职位描述与岗位职责任职要求

职位描述：

工作职责：

1、负责字节跳动用户行为的理解和建模，帮助公司各项业务满足用户需求，提升用户覆盖；

2、负责在数据建设层面，对用户隐私进行脱敏处理，保证后续数据研发过程中保护用户隐私；

3、探索、挖掘公司各项指标、用户满意度、用户增长上的各项规律，并利用这些规律帮助产品提升和扩展，增加用户满意度，扩展用户群体。

任职要求：

1、本科及以上学历，计算机、统计学、数学等相关专业；

2、强的编程和数据工具运用能力，有hadoop，hive，spark，kafka，elasticsearch或者其他的大数据工具的使用经验；

3、对数据仓库、数据建模有一定认知；有过数据使用相关经验。

第6篇 大数据研发工程师-抖音/火山职位描述与岗位职责任职要求

职位描述：

工作职责：

1、负责抖音/火山等多个业务线的策略算法建设与优化工作；

2、通过海量数据，分析与挖掘各种潜在关联，不断优化策略效果，保障用户体验；

4、负责实时及离线特征抽取、融合，为数据挖掘及策略平台提供特征服务；

5、负责大数据能力在产品功能上的落地，推动产品数据化和智能化。

任职要求：

1、计算机等相关专业，硕士或以上学历，3年以上大数据、人工智能相关经验；

2、熟悉hive/hadoop/spark/flink/clickhouse/druid等大数据开发技术；

3、有良好的业务和产品sense，执行力、推动力强优先；

4、有丰富的行业经验，丰富的专业知识，独特的行业见解，有战略视野和规划能力优先；

5、优秀的理解沟通能力，崇尚数据说话，深信数据在驱动业务、支撑决策上的价值优先。

第7篇 大数据研发工程师职位描述与岗位职责任职要求

职位描述：

工作职责：

1、打造业界领先的通用数据平台，包括实时数据流、数据仓库、调度系统、查询引擎，用户行为分析，abtest 实验系统等，降低数据的使用门槛，实现数据的最大价值

2、打造业界领先的存储、计算等分布式系统，为海量数据和大规模业务系统提供可靠的基础设施

任职要求：

1、熟悉多项大数据领域的开源框架，e.g. hadoop， hive， presto， storm， spark， kafka， hbase， redis， rocksdb， elasticsearch， druid， etc.

2、强悍的编码和 troubleshooting 能力

3、乐于挑战没有明显答案的问题，对新技术有强烈的学习热情

第8篇 实时大数据研发工程师/数据技术专家（p6-p8）职位描述与岗位职责任职要求

职位描述：

职责描述：

基于flink开源大数据计算平台，在阿里集团整体业务场景下，

1. 研发实时流计算数据研发平台，支持包括核心电商、云计算、大文娱、创新业务在内的等各个综合业务板块务；

2. 研发实时olap（elasticsearch，druid）赋能业务

3. 研发实时智能化（算法加工程）赋能业务

任职要求：

1.具备扎实的计算机理论基础， 对数据结构及算法有较强的功底

2.精通java语言编程，具备优秀的系统debug/profiling能力和经验

3. 熟悉常见的面向对象设计模式，具备优秀的系统架构设计能力

4.熟悉hadoop/hbase/flink/spark streaming等开源大数据技术，在开源社区活跃者优先

5.熟悉elasticsearch/druid 等olap开源技术优先

6.具备实际的大数据业务开发经验以及良好的项目沟通和协调能力

7. 具备实时流计算数据开发经验、全栈开发经验优先

第9篇 广告大数据研发工程师/专家（p6-p8）3职位描述与岗位职责任职要求

职位描述：

职责描述：

社交广告系统数据工程平台研发，偏重系统架构设计与实现，参加以下一到多项工作：

1. 搭建数据仓库，存储并处理海量的实时、批量数据，满足广告业务的定向、分析和模型特征等业务需要

2. 建设数据发布系统，将数据仓库的数据应用到广告在线业务

3. 特征工程工程系统建设，为模型方提供特征数据流和特征离线调研、评估平台，并保证模型训练和预测阶段的特征线上与线下一致性；

4. 用户标识映射、画像数据在线服务的开发与维护；

5. 广告后台海量日志数据和广告主数据处理平台；

6. 报表和广告策略的统计数据生成和存储；

7. 多维透视业务索引和存储；

任职要求：

重点大学本科以上学历，计算机相关专业；

具有扎实的数据结构和算法功底；

熟练使用 java，scala，c/c++， python；

有海量数据处理经验，熟悉 hadoop，spark，hbase，beam等开源框架 ；

有分布式系统，tensorflow等机器学习系统等经验优先 ；

有较强学习能力和逻辑思维能力，具备良好的问题分析与解决能力；

善于沟通，工作积极主动，责任心强，具备良好的团队协作能力

第10篇 高级实时大数据研发工程师/数据技术专家职位描述与岗位职责任职要求

职位描述：

职责描述：

基于flink开源大数据计算平台，在集团整体业务场景下，

1. 研发实时流计算数据研发平台，支持包括核心电商、云计算、大文娱、创新业务在内的等各个综合业务板块务；

2. 研发实时olap（elasticsearch，druid）赋能业务

3. 研发实时智能化（算法加工程）赋能业务

任职要求：

1.具备扎实的计算机理论基础， 对数据结构及算法有较强的功底

2.精通java语言编程，具备优秀的系统debug/profiling能力和经验

3. 熟悉常见的面向对象设计模式，具备优秀的系统架构设计能力

4.熟悉hadoop/hbase/flink/spark streaming等开源大数据技术，在开源社区活跃者优先

5.熟悉elasticsearch/druid 等olap开源技术优先

6.具备实际的大数据业务开发经验以及良好的项目沟通和协调能力

7. 具备实时流计算数据开发经验、全栈开发经验优先

第11篇 大数据研发工程师-平台服务方向职位描述与岗位职责任职要求

职位描述：

工作职责：

1、针对字节跳动全局性数据分析要求，打造行业领先的数据平台，对全球用户数据，打造高效稳定的batch和rt数据流；

2、利用大数据工具，打造计算，传输，分析，监控平台；满足字节跳动全球用户产品的指标计算，多维分析等需求；

3、构建高效稳定的数据服务，支撑字节跳动全球各重要业务的用户增长。

任职要求：

1、计算机、数学相关专业本科及以上学历，一年以上大数据开发工作经验，数据挖掘和bi分析领域优先；

2、熟悉多项大数据领域的开源框架，e.g. hadoop， hive， presto， storm， spark， kafka， hbase， redis， rocksdb， elasticsearch， druid等；

3、强悍的编码和学习能力；善于发现问题，积极探索原因。

第12篇 大数据研发工程师-产品运营方向职位描述与岗位职责任职要求

职位描述：

工作职责：

1、负责企业级大数据平台的研发，服务于今日头条公司内外的几十条产品线；

2、不局限于按部就班的研发工作，有强烈的产品sense，对用户体验敏感，能够综合运用技术/产品/运营方案，提升终端用户体验；

3、平台产品包括但不限于：用户行为分析，查询中心，bi报表，元数据管理，abtest系统，数据开发套件等；

任职要求：

1、计算机等相关专业优先，本科及以上学历；

2、复合型人才，有研发能力的pm，或有产品运营能力的研发等均可投递；

3、做事积极主动，优秀的组织协调，推进执行能力，思路手段灵活，对用户体验负责；有数据分析，大数据研发，数据产品设计，售前售后等经验之一者，优先考虑；