数据开发岗位要求15篇

第1篇 大数据开发工程师（杭州）职位描述与岗位职责任职要求

职位描述：

岗位职责：

1.参与大数据精准学平台设计与研发，在大数据采集、存储、分析及应用领域都会有所涉及。

2.参与需求分析、系统架构设计、并完成需求设计相应文档的编写。

3.参与核心代码实现、系统性能优化。

4.保质保量地完成项目组分配的开发任务。

5.协助项目经理进行技术支持工作，共同解决产品研发过程遇到的技术难题。

任职要求：

1. 具备3年及以上大数据系统开发经验，计算机相关专业本科及以上学历；

2. 有实时流处理经验，掌握flink、storm等实时处理框架；

3. 熟悉并会使用spark mllib、机器学习、自然语言处理等相关技术和算法；

4. 具有hadoop/spark，以及kafka、flume、hbase、hive、zookeeper等大数据生态圈实际开发经验。深入了解hadoop/spark生态圈产品的工作原理及应用场景；

5. 具备较强的数据分析，问题分析，逻辑思维能力，良好的沟通，团队协作能力。

第2篇 java大数据开发高级工程师岗位职责职位要求

职责描述：

岗位要求:

1、计算机或相关专业本科以上学历，3年以上专业java开发经验，有过大型项目经验优先；

2、精通 jdbc、jsp / ibatis /spring/ struts2等java主流技术；

3、熟悉web容器及主流开源框架，熟悉http的基本工作原理；

4、熟悉io、多线程、集合类等基础框架，熟悉缓存、消息、搜索等机制；

5、熟悉linu_操作系统，熟悉mysql数据库；，精通sql语言；

6、有大型项目架构设计开发和数据库优化经验优先；

7、具有良好的团队协作精神，较强的沟通能力，具备良好的问题定位分析能力和新兴技术学习能力。

岗位职责：

1.负责研发公司自主呼叫中心产品；

2.协助实施部门定位跟踪产品问题；

3.客户化项目定制开发

岗位要求：

学历要求：大专

语言要求：不限

年龄要求：不限

工作年限：3-5年

第3篇 高级数据开发工程师职位描述与岗位职责任职要求

职位描述：

职责描述：

1、承担现有数据平台的开发和优化工作

2、根据业务需求进行数据模型的调研、设计、开发及验证工作，并持续进行模型优化

3、负责数据模型架构的构建，建立数据抽取、清洗、校验等数据加工流程规范及olap多维数据分析模型

4、负责实时计算平台搭建。

职位要求：

1、3-5年以上的相关工作经验

2、熟悉分布式计算平台

3、有日志采集，数据处理，数据仓库建模，etl等经验

4、熟悉java、python、spark开发

5、熟练掌握linu_ shell及sql语言

6、有独立负责数据某一模块的实际项目经验

7、有过用户画像等方面开发经验者优先

8、有实时处理开发经验者优先

第4篇 健康科技中心-高级大数据开发工程师职位描述与岗位职责任职要求

职位描述：

职位描述：

1. 基于hadoop生态系统进行大数据平台建设；

2. 负责各业务条线相关指标数据的数据建模

3. 负责基于sqoop，hive、spark、sparksql、mysql进行大数据开发

4. 负责离线运算、实时计算平台项目的设计、开发及运维

5. 负责对数据平台进行性能调优

任职要求：

1.统招本科或以上学历，6年以上大数据开发工作经验；

2.熟练掌握shell、python开发语言；

3.熟练掌握hadoop、hive、hbase、spark、spark sql、storm、sqoop、kafka、flume、sparkmlib等分布式框架原理，有相关的调优、运维、开发经验；

4.熟练掌握mysql数据库集群；

5. 精通主流etl开发工具，如：informatica、data services、kettle;精通主流调度工具，如：azkaban， oozie；

6.有数据仓库、分析系统、用户画像等产品开发经验者优先；

7.有较强的数据和业务结合能力；

8.有医疗或者大健康背景优先；

9.有较强的独立、主动的学习能力，良好的沟通表达能力。

第5篇 大数据开发经理职位描述与岗位职责任职要求

职位描述：

岗位职责：

1、参与大数据平台、工具平台的架构、设计以及实现；

2、参与对项目的开发需求进行评审，制定项目的设计文档、开发计划文档等；

3、负责公司各类数据产品数据抽取、清洗，以及数据算法与存储的设计和优化；

4、优化大数据平台的性能，提高稳定性；

5、负责大数据平台的组件升级与参数优化。

岗位要求：

1、本科及以上学历，3年以上相关技术背景，具备扎实的数据结构和算法基础，扎实的工程实现能力；

2、熟悉hadoop大数据相关技术体系，包括但不限于hbase、hdfs、storm、kafka、spark、hive、flume等；

3、精通java或python，能熟练编写规范代码，有较强的数据库及sql开发调优能力；

4、熟悉自然语言处理/机器学习/数据挖掘领域，熟悉常用的机器学习算法优先考虑；

5、有大规模数据收集，日志处理经验，有电商数据分析背景优先考虑；

6、深入研究过大数据框架的运行机制、实现原理、源码者优先考虑。

第6篇 大数据开发工程师/架构师职位描述与岗位职责任职要求

职位描述：

1、8年以上后端开发经验，有大数据处理经验；有实时处理工作经历并有一定解决方案者优先；

2、熟悉大数据开源技术，包含（不限于）hadoop/spark/storm/hive/hbase/impala /flume/kafka/solr/es分布式框架/计算/存储/检索等相关技术，并有一定的hadoop生态系统运维经验；

3、至少掌握java/scala/python其中一门开发语言；

4、掌握sql，sparksql进行数据开发；较好的sql性能调优经验；

5、优秀的分析、解决问题能力，充分的数据敏感度；有一定的高性能支撑经验和故障排除能力；

6、具备强烈的工作责任感，喜欢钻研，态度乐观，团队意识强。

第7篇 大数据开发架构师职位描述与岗位职责任职要求

职位描述：

大数据架构师

岗位描述：

1. 负责公司大数据基础框架的整体架构设计，结合公司实际业务情况进行技术选型；

2. 负责数据存储、计算平台的整体评估、设计以及核心功能模块的开发；

3. 协助团队解决开发过程中的技术难题，负责新技术的调研，并能在团队内推广应用；

岗位要求：

1. 计算机相关专业本科以上学历，5年以上工作经验，3年以上大数据相关经验；

2. 熟悉常用的数据结构、算法以及数据建模理论；

3. 有过支撑每日亿级别数据的大数据平台建设经验，了解数据仓库实施方法论、了解数据仓库体系，并支撑过实际业务场景；

4. 具备较强的编码能力，掌握 java/scala/python 开发语言之一，熟练使用 sql 进行数据访问；

5. 精通 hadoop 生态系统基础设施，包括flume、kafka、hbase、hive、spark、storm等；

6. 有团队管理经验者优先；

第8篇 后端数据开发工程师职位描述与岗位职责任职要求

职位描述：

职责描述：

1. 配合产品经理，参与数据平台发展各阶段产品需求分析和功能设计；

2. 基于确定的产品功能需求，参与平台后端系统架构设计、接口定义实现及测试、构建部署和运维等各阶段工作；

3. 根据产品或技术实现发展需要，按需进行一些新技术的研究，并评估将其引入现有平台实现的可行性。

任职要求：

1. 本科及以上学历，至少3年及以上的实际开发经验；

2. 熟练掌握c/c++/python/java/go/javascript其中至少2种及以上程序设计语言，并且自认为具有良好的编程素养；

3. 熟练掌握常用的数据结构及算法；

4. 熟悉linu_系统开发，熟悉网络编程、文件系统，有分布式系统开发经验；

5. 应具有熟练的技术领域相关的英文文献阅读能力；

6. 有良好的沟通能力和团队合作能力，能够自主驱动，具备良好的问题定位分析能力。

优先考虑：

1. 熟悉containerization和virtual machine平台和相关技术，熟悉docker、kubernetes和kvm等，并具有相关的实际运用经验；

2. 熟悉当前主流的云计算平台，如应熟悉aws、azure和阿里云其中至少一种平台的iaas，并具有相关的项目经验；

3. 有开源项目实际参与经验。

第9篇 数据开发岗位职责数据开发职责任职要求

数据开发岗位职责

职责描述:

1、建立数据质量控制体系，对公司各项数据进行检验，保证数据的准确性。

2、独立完成数据开发相关工作，例如爬虫、指标库编写等。

3、承担其他数据工作，例如数据采集、数据处理、指标数理、指标提取等。

任职要求:

1、3年以上相关工作经验，计算机及相关专业本科以上学历，有证券、基金等金融行业工作背景优先。

2、编程基本功扎实，精通c/c++/java/go/c#任意一种语言，熟悉python/shell等任意一门脚本语言。

3、精通mysql、oracle等关系数据库;熟悉mongodb、redis等非关系型数据库。

4、具有数据敏感性，良好的数据分析与报告能力。

5、积极主动，责任心强，具有良好的对外沟通和团队协作能力。

第10篇 大数据开发主管职位描述与岗位职责任职要求

职位描述：

岗位职责：

负责大数据平台项目架构设计；

负责与客户进行具体业务需求沟通，引导客户需求并确认；

负责需求分析以及平台设计、数据模型设计工作，并输出相关文档，与第三方进行沟通，并确认项目关键节点进度。

任职要求：

国家正规院校统招本科以上学历，有5年以上工作经验，至少1年以上大数据架构师工作经验、熟悉大数据平台项目的操作流程；

熟练掌握python、hadoop、spark、kafka等工具；

较好的沟通理解能力和主动性。

第11篇 java大数据开发职位描述与岗位职责任职要求

职位描述：

职责描述：

1. 参与大数据平台和大数据处理框架的架构规划设计；

2. 参与数据治理工作，提升数据易用性及数据质量；

3. 理解并合理抽象业务需求，发挥数据价值，主动思考不断优化，与业务团队紧密合作；

4. 配合大数据负责人完成hadoop、spark等集群的管理、优化和维护，保证集群规模持续、稳定。

任职要求：

1. 两年以上相关工作经验；

2. 熟练掌握java语言，熟练使用linu_，强悍的编码和处理问题能力；

3. 熟悉大数据开源栈spark/hadoop、hive、hbase、elasticsearch、kafka、redis， strom/spark-streaming/flink，有至少tb以上级大数据处理经验. 有sparkstreaming的实时统计开发经验优先；

4. 对数据敏感，认真细致，善于从数据中发现疑点；

5. 善于沟通，具备优秀的技术与业务结合能力；

6. 学习能力强，喜欢研究开源新技术，有团队观念，具备独立解决问题的能力

第12篇 dmp数据开发工程师-核心广告系统职位描述与岗位职责任职要求

职位描述：

工作职责：

1、支撑dmp人群包计算的业务需求，参与服务端代码开发；

2、支撑dmp标签的技术升级，参与数据产出流程性能优化；

3、支持dmp大规模数据的计算和分析。

任职要求：

1、本科及以上学历，计算机、通信等相关专业，1-2年相关工作经验；

2、有良好的数据结构、算法基础和扎实的编程能力；

3、熟悉python/java/c++/scala其中任意一门或者多门语言;

4、熟悉hadoop/kafka/spark/storm/flink/hive其中的若干技术；

5、具有良好的团队沟通意识和快速学习能力;

6、加分项: 熟悉大数据处理或者dmp业务.

第13篇 大数据开发leader职位描述与岗位职责任职要求

职位描述：

岗位职责：

1、负责整体大数据平台体系的建设工作。

2、负责带领团队完成基于大数据平台的业务项目的开发、实施和维护工作。

3、负责解决大数据平台建设过程中的技术难点和性能调优工作。

4、负责指导和培训团队成员，共同提升大数据技能。

任职要求：

1、计算机相关专业，至少5年以上大数据开发经验；

2、熟悉大数据、数据仓库，分布式架构技术理论，具有大数据整体系统架构设计和实战经验，，有从无到有建设大数据平台经验者优先；

3、熟悉大数据生态圈技术，不限于hadoop、hdfs、hive、hbase、spark、storm、flume、sqoop、kylin等，阅读过底层源码者优先；

4、熟悉至少一种编程语言，python，java，scala等，精通sql；

5、2年以上技术团队管理经验，有阿里，百度，腾讯，滴滴，美团等互联网大数据工作经验者优先；

6、逻辑思维清晰，具备高度的责任感和良好的沟通协调能力，遇事积极主动。

第14篇 高级大数据开发工程师职位描述与岗位职责任职要求

职位描述：

岗位职责：

1. 基于公司大数据产品进行数据开发，包括数据的采集，清洗，预处理，存储，建模，分析挖掘等

2. 根据业务用户需要分析数据，提供数据支持

3. 参与公司大数据产品的运维和监控，保障数据质量和服务稳定性

任职要求：

1. 具备本科以上学历， 计算机， 软件以及相关专业， 5年以上大数据开发经验

2. 熟悉数据仓库维度建模， 并能根据客户需求进行数据开发， 向模型更新数据

3. 使用过至少一种以上的etl工具

4. 熟练掌握java， 对hadoop相关的技术和组件(hdfs， mr， hbase， hive， spark， storm， kafka等）有全面深入了解

5. 熟练掌握shell或者python中的一种

6. 具备spark开发经验者优先

7. 具备实时计算(kafka+storm/spark streaming) 经验者优先

8. 具备数据分析和数据挖掘方面经验者优先

第15篇 大数据开发工程师（驻场开发）职位描述与岗位职责任职要求

职位描述：

岗位职责：

（1）根据业务进行数据需求的调研、设计、开发及验证工作，并持续进行数据业务的优化；

（2）负责大数据整体设计和开发工作，包括数据接入、清洗、计算、校验等数据加工流程，并沉淀文档；

（3）持续对系统的技术架构进行改进和优化，提升海量数据的查询性能和用户体验。

（4）此岗位需驻场开发半年左右（地点：新疆）

任职资格：

（1）统招本科或以上学历，计算机、数学等相关专业，工作至少3年以上；

（2）熟悉java/scala开发，有脚本语言（shell，python)开发经验者优先；

（3）至少熟悉一种大数据处理栈技术，如hadoop、spark; 熟悉流计算应用开发，如spark streaming， flink;熟练掌握大数据生态各个工具的原理及使用，如hive， sqoop， kafka等

（4）掌握hbase、redis、elastic search等开源大数据存储技术，并能结合不同的业务场景深入使用；

（5）熟悉storm，spark streaming，flink，beam至少一种

（6）熟悉kafka，redis，es等相关组件

（7）对解决具有挑战性的数据问题充满激情，具有良好的分析问题和解决问题的能力，能够胜任部分数据分析，挖掘，建模工作。