etl工程师岗位职责16篇

第1篇 数据仓库etl开发工程师岗位职责

数据仓库etl资深开发工程师 1.5年以上做bi、数据仓库etl开发方向,行业不限;

2.过去做北京汽车项目;

3.英语能基本读写;

4.开发经验丰富,能迅速完成交办相关工作;

5.沟通能力良好,具备团队合作精神,能适应一定压力开展工作。 1.5年以上做bi、数据仓库etl开发方向,行业不限;

2.过去做北京汽车项目;

3.英语能基本读写;

4.开发经验丰富,能迅速完成交办相关工作;

5.沟通能力良好,具备团队合作精神,能适应一定压力开展工作。

第2篇 中级etl工程师岗位职责

中级etl工程师 比孚科技 上海比孚信息科技有限公司,比孚,比孚科技,比孚 职位描述:

1. 负责数据仓库/数据集市etl设计开发;

2. 负责与业务部门数据需求的沟通与确认;

任职资格:

1. 三以上工作经验;

2. 熟悉主流etl开发工具,如:ssis 、kettle、datastage等;

3. 熟练掌握主流数据库的使用,如:sql server、mysql、oracle,对sql查询优化有丰富的经验;

4. 熟悉主流报表工具,如:tableau、powerbi、cognos;

5. 良好的沟通技能,清晰的逻辑思维能力;

6. 工作认真仔细,积极主动,具备较强的自主学习、自我总结能力。

第3篇 dw数据仓库etl工程师职位描述与岗位职责任职要求

职位描述：

职责描述：

1. 负责数据仓库开发需求收集和分析；

2. 负责数据模型体系构建及数据主题设计和开发；

3. 负责数据抽取、清洗、转化等数据处理程序开发；

4. 负责对公司数据仓库平台整体架构改进与流程优化；

5. 负责bi报表开发和优化。

任职资格：

1. 2年以上数据仓库工作经验；

2. 熟悉数据库、etl、bi建模等工具；

3. 良好编程习惯，以及较强的学习能力和沟通能力。

第4篇 etl工程师岗位职责职位要求

职责描述：

岗位职责：

1、根据概要设计，进行详细设计的文档编写；

2、负责etl过程的设计/开发实施、单元测试；

3、负责项目中etl相关需求调研、源数据调研、整体设计；

4、负责项目中环境安装及配置。

5、维护和升级现有etl任务和存储过程，快速定位并修复现有系统缺陷

职位要求：

1、 大专及以上学历，计算机相关专业，3年以上 etl 工作经验。

2、 熟悉etl开发流程，有hadoop和etl工作经验；有从传统数据库抽取数据到hive数据仓库经验，了解sqoop应用原理者优先。

3、 熟悉主流数据库sql server、oracle、db2、mysql等；熟悉开源的etl工具。

4、有海量数据处理工作经验，数据分析和挖掘经验者优先；

5、做过数据仓库、ods项目，对数据治理、数据标准及元数据有很好理念及实施经验的优先；

6、熟练使用脚本语言：如perl、python、shell等任意一种以上；

7、熟悉linu_系统指令和性能优化；

8、善于学习新技术，对新技术有较强的接受能力；工作认真细致，愿意于人交流沟通。

9、有大型数据仓库系统研发、设计经验者优先；

10、熟悉 java 语言或 hadoop 技术者优先；

岗位要求：

学历要求：大专

语言要求：不限

年龄要求：不限

工作年限：3-4年经验

第5篇 etl研发工程师岗位职责

大数据研发工程师(etl) 永辉云创 永辉云创科技有限公司,永辉云创,超级物种,永辉云创 职责描述:

1、负责大数据平台的设计以及开发工作,维护升级等等;

2、负责离线/实时的数据存储和加工处理,保证数据质量,负责数据监体系的建立和维护;

2、负责海量数据的清洗、处理和挖掘工作,支持数据分析师和算法工程师的数据需求;

3、对数据敏感,基于海量数据进行业务分析,灵活运用可视化工具,参与产品与应用的数据研发,分析数据成因,发掘数据商业价值;

4、研究前沿技术,解决实际场景中的业务问题,优化离线/实时大数据计算任务的性能。

任职要求:

1、计算机或相关专业本科及以上学历,3年以上大数据开发经验;

2、熟悉linu_/uni_开发环境,精通python/java/scala/shell两种以上;

3、熟悉常用开源分布式系统,对hadoop/hive/spark/storm/flink/hbase/kylin中的一项或多项有深入了解;,能够独立排查及解决分布式系统的问题;

4、良好的团队精神和合作意识,强烈的责任心,对工作有激情,良好的沟通能力,能吃苦耐劳;

5、有2年以上的电商领域的优先。

第6篇 etl研发工程师职位描述与岗位职责任职要求

职位描述：

岗位职责

1.负责数据仓库模型设计和优化，基于hadoop／hive／odps(ma_couputer)、adb等进行数据仓库etl开发和维护工作；

2.负责日常作业的部署和调度研发及维护工作；

3.负责制定数据标准制定，数据质量标准，从而有效的进行数据治理工作。

4.负责各类业务数据的etl任务及数据仓库部署和管理，持续改进优化etl、分析处理、数据呈现等流程，协调海量数据压力问题；

任职资格

1.三年以上数据仓库／etl／数据处理相关开发经验；

2.具备mysql、oracle或hive等主流平台的数据开发及调优经验，熟悉python或java优先；

3.具备良好的学习能力，善于沟通，具备较强的业务推动能力和执行力；

4.熟悉数据仓库体系架构、建模理论和模型设计思路，能用于项目实践；

5.有良好的快速学习能力和团队协作能力；

6.有java或python项目研发经验者先考虑；

7.有产品意识，善于沟通，积极主动，能够以目标为导向理解工作中相关任务的处理优先级关系。

第7篇 etl数据工程师职位描述与岗位职责任职要求

职位描述：

职责：

1. 按业务分析需求进行建模；

2. 进行数据仓库需求分析、方案设计、etl装载过程设计；

3. 从业务数据库到数据仓库的etl开发；

4. 结合业务流程和需求进行数据分析；

任职资格：

1. 本科以上学历，计算机等信息技术相关专业；

2. 有互联网金融相关工作经验，了解相关数据流和业务背景优先；

3. 两年及以上数据仓库相关工作经验，对数据仓库系统架构具有良好的认识，熟悉数据仓库相关技术，如 etl、报表开发，具备数据分析技术并具有相关项目经验；

4. 具有hive、spark、mysql、oracle等至少一种大型数据库的应用开发经验，熟悉数据标准管理、元数据管理、数据质量管理；

5. 具备python统计和数据挖掘相关基本开发能力；

6. 沟通能力好，善于规划和总结，注重团队合作及知识共享，能承担一定的工作压力；

第8篇 etl/bi工程师职位描述与岗位职责任职要求

职位描述：

岗位职责：

1、数仓开发、etl开发；

2、银行业数据模型的设计辅助、mapping和落地等；

3、shell脚本开发维护；

4、银行业务系统的数据调研和分析；

任职要求：

1、本科及以上学历，计算机或相关专业；

2、2年以上oracle、db2等数据库开发经验，熟悉数据库体系结构；

3、精通pl/sql编程，精通存储过程开发；

4、熟悉linu_操作系统；

5、熟悉etl调度工具和前端工具；

6、软件基础理论知识扎实，具备良好的数据结构、算法功底，有一定独立分析、技术研究能力；

7、良好的沟通能力、团队合作精神、乐于；

8、具备较强的自学能力，有一点抗压能力，能够接受出差性质的工作。

如有以下技术背景优先考虑：

1、有银行业系统开发经验；

2、参与过数仓项目开发、实施；

3、有数据治理项目经验的。

第9篇 数据仓库/etl/bi工程师职位描述与岗位职责任职要求

职位描述：

职责描述：

1、负责数据仓库建模，业务数据集市建设开发

2、负责数据仓库etl流程的优化及解决etl相关技术问题、etl流程监控，保障数据平台架构稳定性

3、建立数据分析指标体系，不断完善指标体系和分析模型；

4、通过专项分析，输出专项分析报告

5、负责数据分析相关需求和数据测试的工作

任职要求：

学历要求：

全日制统考类本科及以上学历，计算机、通信、电子、软件工程、统计学、应用数学、数据分析等相关专业

专业技能：

1、熟悉数据仓库各类模型建模理论，熟悉数据仓库数据分层架构和多维数据模型设计；

2、丰富的数据分析经验，熟练掌握sql、hql、sparksql，擅长运用其分析并完成复杂业务数据查询

3、掌握至少一种数据库开发技术：mysql/oracle/db2等，灵活运用sql实现海量数据etl加工处理；

4、熟悉hadoop生态（如：hdfs/mapreduce/hive/hbase等），并有相关实践经验；

5、熟练掌握一门或多门编程语言（如：python/shell/java/c++等），并有大型项目建设经验者优先；

素质：

1、敏锐的数据观察和分析能力，及时发现和分析其中隐含的变化和问题并给出建议；

2、良好的沟通能力和团队精神，较强的学习能力，能承担一定的工作压力。

经验：

至少2年以上数据仓库（离线&实时）模型设计开发、etl设计开发的相关经验，有通信运营商o域/b域大数据、智慧城市大数据的数据仓库、etl设计研发经验者优先'

第10篇 大数据开发高级工程师-etl方向职位描述与岗位职责任职要求

职位描述：

工作职责:

1、 根据公司数据分析需求进行基于hadoop 平台的项目开发；

2、 根据需求进行数据仓库模型设计，熟练使用kettle工具进行etl程序的开发；包括实时数据加工，计算，etl，管理， 监控等；

3、 负责针对源系统进行数据抽取、处理、分析等相关工作，及项目中涉及到的数据库创建、维护及提供数据接口工作；

4、 负责设计并优化基于hive 的数据仓库的建设；

5、 制定数据库备份和恢复策略及工作流程与规范。

6、能出具消费品品牌制造行业应用的数据分析技术解决方案，并落地。

任职资格:

1．从事数据仓库领域至少2年以上，熟悉数据仓库模型设计与etl开发经验 ，具备海量数据加工处理相关经验；

2. 熟悉数据仓库领域知识和技能者优先，包括但不局限于：元数据管理、数据开发测试工具与方法、数据质量、主数据管理；

3．有从事分布式数据存储与计算平台应用开发经验，熟悉hadoop生态相关技术并有相关实践经验着优先，重点考察hive、hdfs、hbase;

4. 熟练掌握kettlesqoop、data_、airflow等;

5. 有消费品品牌制造、零售行业经验，尤其快消品行业和财务领域数据项目经验者优先;

6. 熟悉分布式计算presto/imapa优先;

7．有实时计算方面的经验的优先。

第11篇 etl高级工程师岗位职责及相关职位要求

etl高级工程师职位要求

1、计算机、数学或统计等专业，本科以上学历；

2、精通sql语言；熟悉数据仓库设计、建模；

3、精通python，能够编写脚本处理、分析数据；

4、熟悉批量离线式分布式并行计算技术（如hadoop、mapreduce、hive、spark等）

5、熟悉sqlserver、mysql数据库；了解redis等非关系型数据库；

6、熟悉至少一种常用etl工具（如kettle、ssis、gobblin）；了解常用报表工具（如reporting services以及各类开源报表）；

7、了解常用数据挖掘方法（回归、决策树、聚类等）。

etl高级工程师岗位职责

1、负责国际网站后台数据仓库搭建、维护；

2、运用各类大数据工具设计etl流程，消费生产环境埋点、日志等数据；

3、日常数据监控以及数据预警，异常数据解读挖掘，并与业务同事沟通解决方案；

4、分析用户的特征和行为数据，挖掘不同类型用户的行为特性，为实际的业务运营提供数据支持；

5、从数据分析结果中寻找insight和商业价值，并以简明扼要的形式传导到其他部分，指导实际的业务运营；

6、处理国际网站的临时数据需求，并对于常用重要需求转化成数据产品。

第12篇 高级/资深etl工程师职位描述与岗位职责任职要求

职位描述：

岗位职能：

1. 基于公司数据建设需要，完成数据平台构建、数据内容开发等工作。包括：数据平台基础设施建设、数据采集、etl、数仓及数据集市、数据应用产品等开发工作；

2. 充分理解需求文档，基于此进行自测，交付高质量的开发代码和数据内容；

3. 工作中对数据平台基础设施、数据内容建设等工作主动深度思考，提升效能并积极建言、促进组织和系统发展；

4. 其他根据部门需要安排事宜；

岗位要求：

1. 信息技术类、数学、统计学、计量经济学类专业，研究生及以上学历。优秀候选人学历可以放宽至本科，工作年限5年以上；

2. 熟悉数据仓库模型设计和精通etl开发经验 ，掌握3nf，kimball的维度建模设计方法，具备海量数据加工处理（etl）相关经验 ；

3. 掌握至少一种数据库开发技术：oracle、teradata、db2、mysql等，精通并灵活运用sql实现海量数据etl加工处理 ；

4. 熟悉linu_系统常规shell处理命令，灵活运用shell做的文本处理和系统操作 ；

5. 有从事分布式数据存储与计算平台应用开发经验，熟悉hadoop生态相关技术并有相关实践经验着优先，重点考察hdfs、hive（hql)、hbase ；

6. 熟练掌握一门或多门编程语言，并有大型项目建设经验者优先，重点考察python、perl、java ；

7. 熟悉数据仓库领域知识和技能者优先，包括但不局限于：数据开发测试工具与方法、数据质量等；

8. 良好的语言沟通与表达能力和自我驱动动力。

第13篇 etl数据工程师岗位职责

etl数据开发工程师 etl数据开发工程师

岗位职责:

1、负责大数据、bi系统相关模块的实施,项目管理工作,包括但不限于需求管理、项目规划、过程实施、上线验收、交付运营等;

2、依据业务场景、分析需求提供技术、业务解决方案并加以实现;

3、与技术部门对接,解决数据建模、报表和报告在系统开发遇到的问题;

4、协助项目经理进行项目交付或协助商务开展售前支持或poc工作。

任职资格:

1、本科及以上学历,计算机、统计学、应用数学等相关专业;

2、熟悉hadoop平台,2年以上hive、sqoop开发经验;

3、了解bi系统,有数据管理经验,有维度建模相关经验;

4、3年以上相关工作经验,有银行或金融数据分析经验者优先;

5、熟悉db2、oracle等数据库及sql数据查询,熟悉hadoop者优先;

6、熟悉linu_开发环境和shell脚本;

7、具备银行项目设计、开发、优化等经验者加分;

8、优秀的业务理解能力、逻辑性和沟通能力,能跨部门合作沟通。

etl数据开发工程师

岗位职责:

1、负责大数据、bi系统相关模块的实施,项目管理工作,包括但不限于需求管理、项目规划、过程实施、上线验收、交付运营等;

2、依据业务场景、分析需求提供技术、业务解决方案并加以实现;

3、与技术部门对接,解决数据建模、报表和报告在系统开发遇到的问题;

4、协助项目经理进行项目交付或协助商务开展售前支持或poc工作。

任职资格:

1、本科及以上学历,计算机、统计学、应用数学等相关专业;

2、熟悉hadoop平台,2年以上hive、sqoop开发经验;

3、了解bi系统,有数据管理经验,有维度建模相关经验;

4、3年以上相关工作经验,有银行或金融数据分析经验者优先;

5、熟悉db2、oracle等数据库及sql数据查询,熟悉hadoop者优先;

6、熟悉linu_开发环境和shell脚本;

7、具备银行项目设计、开发、优化等经验者加分;

8、优秀的业务理解能力、逻辑性和沟通能力,能跨部门合作沟通。

第14篇 etl工程师职位描述与岗位职责任职要求

职位描述：

职责描述：

1、负责数据分析、加工、清理、处理程序的开发

2、负责数据相关平台的搭建、开发、维护、优化

3、分布式平台应用开发（hadoop/spark/hive/hbase）

4、开发数据统计系统，各类统计程序报表。

任职要求：

1、2年以上java或python开发工作经验，java基础扎实；

2、熟悉常见在线与离线大数据系统， 如hive， hbase， es， kafka等的工作原理与开发调优; 具有mapreduce开发经验，有实际大数据项目经验；

3、熟练掌握oracle、mysql等主流数据库上的开发；

4、具有良好的沟通能力、组织能力及团队协作精神，有较强的分析和解决问题的能力.

第15篇 etl工程师（中级数据仓库工程师）职位描述与岗位职责任职要求

职位描述：

职责描述：

1、 负责数据仓库建模和etl技术工作，参与数据项目各类数据源etl的接口设计和文档、流程规范；

2、负责项目中数据清洗、数据处理、数据校验相关开发工作；

3. 配合使用主流数据挖掘工具、etl工具、bi展现的设计和开发；

4、 能够按照公司全面质量管理的要求，高质量地完成各类技术支持工作。

任职要求：

1.计算机相关专业本科以上学历，3年以上工作经验；

2.熟悉etl开发、数据仓库设计流程，熟悉mysql、oracle， ms sql server等主流数据库，表结构设计，存储过程编写；

3.有一定的sql调优知识和经验，具有bi相关知识；

4.有hana、hive经验优先；

5.具备财务基础知识或者erp基础知识者优先；

第16篇 etl工程师 - 银行监管报表职位描述与岗位职责任职要求

职位描述：

职责描述：

overview

we are a leading provider of collateral management and regulatory compliance software solutions to banks and financial institutions on a worldwide basis. we are currently seeking a consultant， to be based in our singapore office to be responsible for providing consultancy to our clients in relation to their regulatory reporting requirements for the monetary authority of singapore.

main role & responsibilities

•be part of the specialist team which provide regulatory subject matter e_pertise to clients

•keep abreast of any regulatory changes advised by the regulator

•support the senior consultant at client workshops to identify data requirements and how they map to the agile reporter data model.

•use etl tool to map and transform client data such as to satisfy the project scope and specification within the timetable set by and agreed with the project manager/senior consultant.

•report to the project manager/senior consultant any delays or e_pected delays to a project， whether due to internal or customer delays， and in particular to highlight any potential scheduling conflicts that could result in such a delay.

•perform product testing as requested by the line manager to be completed within the deadlines set.

任职要求：

degree level

2+ years e_perience in etl/bi

e_perience with rdbms software (e.g. sql server， oracle)

previous e_perience of the implementation of major regulatory changes is a plus

basic knowledge of hkma， mas or apra reporting is a plus

languages

english

chinese (mandarin)