etl岗位职责20篇

岗位职责是什么

etl（extract, transform, load）工程师是一个专门负责数据处理和整合的专业角色。他们从各种数据源中抽取（extract）数据，对其进行清洗、转换（transform），然后加载（load）到数据仓库或大数据平台，以支持企业的数据分析和决策制定。

岗位职责要求

1. 熟练掌握etl工具，如informatica, talend, ssis等，能进行高效的数据提取和加载。

2. 深入理解数据库原理，熟悉sql编程，能够优化数据提取效率。

3. 具备数据清洗和预处理能力，能处理异常值、缺失值，确保数据质量。

4. 掌握数据建模理论，能设计和实现符合业务需求的数据架构。

5. 具备良好的编程基础，如python或java，用于编写脚本和自动化任务。

6. 理解业务流程，能与业务部门有效沟通，明确数据需求。

岗位职责描述

etl工程师是数据工程团队的核心成员，他们的工作涉及整个数据生命周期管理。他们不仅要确保数据的准确性和完整性，还要保证数据的及时性，以满足实时或近实时的数据分析需求。通过构建和维护etl流程，他们将企业的运营数据转化为有价值的信息，为管理层提供决策支持。

有哪些内容

1. 需求分析：与业务团队协作，理解并定义数据提取、转换和加载的需求。

2. 设计etl流程：规划数据流，设计和实施高效的数据转换逻辑。

3. 编写和调试etl脚本：使用专业工具或编程语言创建数据抽取和转换规则。

4. 数据质量监控：设定数据质量标准，实施数据验证，确保数据的准确性。

5. 性能优化：持续监控etl性能，调整和优化以提高处理速度和效率。

6. 文档编写：记录etl流程，以便于维护和知识传递。

7. 系统集成：与数据库管理员、数据分析师和业务智能团队协作，确保数据的无缝集成。

8. 故障排查和修复：当数据问题发生时，迅速定位并解决，防止影响业务运行。

9. 持续改进：跟踪新技术和最佳实践，提升etl流程的自动化程度和灵活性。

作为etl工程师，他们需要不断适应快速变化的技术环境，以满足企业日益复杂的数据处理需求，同时保持对业务目标的敏锐洞察，以驱动数据驱动的业务决策。

etl岗位职责范文

第1篇 高级etl开发经理职位描述与岗位职责任职要求

职位描述：

岗位职能：

1. 基于公司数据建设需要，完成数据平台构建、数据内容开发等工作。包括：数据平台基础设施建设、数据采集、etl、数仓及数据集市、数据应用产品等开发工作；

2. 充分理解需求文档，基于此进行自测，交付高质量的开发代码和数据内容；

3. 工作中对数据平台基础设施、数据内容建设等工作主动深度思考，提升效能并积极建言、促进组织和系统发展；

4. 团队日常管理，及其他根据部门需要安排事宜。

岗位要求：

1. 信息技术类、数学、统计学、计量经济学类专业，本科，工作年限5年以上；

2. 熟悉数据仓库模型设计和精通etl开发经验 ，掌握3nf，kimball的维度建模设计方法，具备海量数据加工处理（etl）相关经验 ；

3. 掌握至少一种数据库开发技术：oracle、teradata、db2、mysql等，精通并灵活运用sql实现海量数据etl加工处理 ；

4. 熟悉linu_系统常规shell处理命令，灵活运用shell做的文本处理和系统操作 ；

5. 有从事分布式数据存储与计算平台应用开发经验 ；

6. 熟练掌握一门或多门编程语言，并有大型项目建设经验者优先，重点考察python、perl、java ；

7. 熟悉数据仓库领域知识和技能者优先，包括但不局限于：数据开发测试工具与方法、数据质量等；

8. 良好的语言沟通与表达能力和自我驱动动力。

注：此岗位需在杭州一个月

第2篇 etl数据工程师职位描述与岗位职责任职要求

职位描述：

职责：

1. 按业务分析需求进行建模；

2. 进行数据仓库需求分析、方案设计、etl装载过程设计；

3. 从业务数据库到数据仓库的etl开发；

4. 结合业务流程和需求进行数据分析；

任职资格：

1. 本科以上学历，计算机等信息技术相关专业；

2. 有互联网金融相关工作经验，了解相关数据流和业务背景优先；

3. 两年及以上数据仓库相关工作经验，对数据仓库系统架构具有良好的认识，熟悉数据仓库相关技术，如 etl、报表开发，具备数据分析技术并具有相关项目经验；

4. 具有hive、spark、mysql、oracle等至少一种大型数据库的应用开发经验，熟悉数据标准管理、元数据管理、数据质量管理；

5. 具备python统计和数据挖掘相关基本开发能力；

6. 沟通能力好，善于规划和总结，注重团队合作及知识共享，能承担一定的工作压力；

第3篇 etl数据分析岗位职责

bi数据分析-数据开发(etl工程师) 阿里健康 阿里健康科技(中国)有限公司,阿里健康,阿里健康科技(北京)有限公司,阿里 数据开发

1、构建全面的、准确的、能反映服务业务线特征的整体指标体系, 并基于业务监控指标体系,及时发现与定位业务问题;

2、根据日常业务及产品团队的需求,提供业务监控,业务评估的各项数据指标;

3、根据业务发展情况,从数据中发现业务及产品的问题点及机会点,给业务及产品提供相应的方向;

4、沉淀分析思路与框架, 提炼数据产品需求,与相关团队(如技术开发团队) 协作并推动数据产品的落地;

5、与业务协作(行业团队)组织数据的理念、技能、工具的培训。

岗位描述:

1. 负责各条业务线数据仓库搭建,场景梳理,数据维护;

2. 负责公司内部跨部门项目数据场景梳理,资源调配工作;

3. 负责从已有的数据中挖掘对业务目标起到推动作用的分析结论。

岗位要求:

1、统计、数学、信息技术、生物统计本科以上学历,有电商bi工作经验优先;

2、良好的数据敏感度,能从海量数据提炼核心结果,有数据分析、挖掘、清洗和建模的经验;

3、有从事分布式数据存储与计算平台应用开发经验,熟悉hadoop生态相关技术并有相关开发经验,熟练运用sql,能高效的与数据技术团队进行沟通者尤佳;

4、较为丰富的数据仓库及数据平台的架构经验,精通数据仓库建模及etl设计开发。

第4篇 etlhive岗位职责etlhive职责任职要求

etlhive岗位职责

岗位职责:

1、负责品牌官方微信、微博、官网的内容创作及运营管理工作，定期输出运营分析报告;

2、负责制定清晰的社交媒体运营策略及目标，提升品牌粉丝数量、活跃度及忠诚度;

3、负责策划全年度线上营销活动，确保活动的成功开展，并对活动数据进行分析评估;

4、负责拓展维护各渠道kol资源，与各渠道官媒、kol等开展有效互动;

5、负责拓展其他符合品牌调性的线上推广渠道(如百度贴吧、知乎、微博、豆瓣、微信公众号等);

6、配合线下活动事件(品质活动，高端私享会等)进行线上推广;

7、协助品牌官方粉丝社群的搭建及运营维护。

任职要求:

1、2年以上新媒体文案策划经验，具备独立撰写营销策划方案、制作热点话题的能力;

2、市场营销、汉语言文学、新闻学等本科学历，有粉丝运营经验者优先;

3、具备优秀的写作功底和文字驾驭能力，文案逻辑清晰，脑洞大，思路广，感染力强;

4、熟练掌握office系列办公软件，掌握ps、ai等设计软件者优先;海报设计制作，h5制作

有实操经验;

5、热爱阅读、有定期写作习惯;

6、具备较强的沟通能力及执行能力，性格开朗，具有一定的团队意识。

第5篇 etl架构师岗位职责

数据仓库架构师/etl工程师 同程艺龙 同程网络科技股份有限公司,同程旅游,同程艺龙,同程 位职责:

1、负责数据仓库数据采集、处理、存储以及挖掘分析的架构实现,负责架构设计和指导团队落地;

2、参与数据平台建设,包括环境和框架的规划搭建以及部分核心编码工作;设计并实现对bi分析、数据产品开发、算法开发的系统性支持;

3、研究未来数据模型和计算框架的创新与落地,包括但不限于以下领域:大规模数据实时化、研发模式敏捷化、数据计算框架轻量化、数据模型组织方式业务化等方面。

职位要求:

1、具备5年以上dw系统建设经验;了解数据仓库建设过程中的挑战与问题,有实际架构设计和数据建模经验,有作为技术负责人系统化解决问题的成功案例;

2、有dw/bi架构体系中某些领域的专项建设经验,包括但不限于:数据质量、元数据管理、主数据管理、数据监控、流计算、分布式计算、分布式文件系统、分布式存储、大规模数据实时化、跨平台资源调度;

3、熟悉hadoop生态圈,包括但不限于:hadoop、hive、storm、spark、dremel、kylin等;

4、有海量数据建模实践经验优先。

第6篇 数据平台etl开发工程师职位描述与岗位职责任职要求

职位描述：

工作职能：

1、负责海量数据的etl处理。

技能要求：

1、熟悉oracle数据库及sql开发；

2、精通java、shell；

3、掌握hadoop、hive、kafka、elasticsearch、flink或多项大数据开发技术；

4、有flink相关开发经验优先。

福利待遇：

双休 五险一金 法定节假日 健身房 出国旅游

免费体检 带薪年假 年终奖

第7篇 高级etl开发工程师职位描述与岗位职责任职要求

职位描述：

工作职责:

1、负责数据平台的etl设计开发、工作流调度设计、存储过程开发、自定义函数开发。

2、负责各业务系统数据源业务调研、数据调研、准确性完整性验证。

3、负责项目中与第三方系统基于数据库的数据对接、数据预处理、数据清洗、数据处理、数据导入、数据校验相关开发工作。

4、负责数据平台的etl相关软件和工具的研发和改进。

5、负责数据平台日常管理、跑批、维护、监控、处理临时数据需求。

任职资格:

1、本科计算机相关专业，5年工作经验

2、具备3年或以上etl数据处理相关开发经验

3、拥有3年以上sql开发

4、掌握hadoop hive-hql 基础技能

第8篇 高级etl工程师职位描述与岗位职责任职要求

职位描述：

1、负责公司数据平台项目的etl设计、实现以及优化。

2、负责etl流程优化，关键问题解决、团队技术与引导和前瞻性技术研究；

3、参与数据仓库数据模型设计，进行数据质量监测、校验和提升；

4、使用etl技术对医院信息系统数据进行提取、清洗、转换和整合；

岗位要求：

1、至少三年以上etl数据开发经验；计算机相关专业本科以上学历，熟悉数据分析与数据挖掘理论；

2、熟悉dw实施方法论和常规etl构架，有整体etl开发经验，深刻理解元数据管理；

3、熟练掌握oracle、sql server、mysql、postgresql等至少两种主流数据库的使用；

4、熟练掌握ssis、kettle、informatica等至少一种etl工具的使用；

5、精通sql、存储过程、函数的使用，具备编写、优化复杂sql的能力；

6、对数字，数据敏感，具备良好的逻辑思维能力；

7、具备专业的业务研究、分析能力，能够独立开展业务调研、数据分析、数据建模、报告编写工作；

8、有医疗卫生数据平台开发、实施经验优先；

9、能适应长期出差。

第9篇 高级/资深etl工程师职位描述与岗位职责任职要求

职位描述：

岗位职能：

1. 基于公司数据建设需要，完成数据平台构建、数据内容开发等工作。包括：数据平台基础设施建设、数据采集、etl、数仓及数据集市、数据应用产品等开发工作；

2. 充分理解需求文档，基于此进行自测，交付高质量的开发代码和数据内容；

3. 工作中对数据平台基础设施、数据内容建设等工作主动深度思考，提升效能并积极建言、促进组织和系统发展；

4. 其他根据部门需要安排事宜；

岗位要求：

1. 信息技术类、数学、统计学、计量经济学类专业，研究生及以上学历。优秀候选人学历可以放宽至本科，工作年限5年以上；

2. 熟悉数据仓库模型设计和精通etl开发经验 ，掌握3nf，kimball的维度建模设计方法，具备海量数据加工处理（etl）相关经验 ；

3. 掌握至少一种数据库开发技术：oracle、teradata、db2、mysql等，精通并灵活运用sql实现海量数据etl加工处理 ；

4. 熟悉linu_系统常规shell处理命令，灵活运用shell做的文本处理和系统操作 ；

5. 有从事分布式数据存储与计算平台应用开发经验，熟悉hadoop生态相关技术并有相关实践经验着优先，重点考察hdfs、hive（hql)、hbase ；

6. 熟练掌握一门或多门编程语言，并有大型项目建设经验者优先，重点考察python、perl、java ；

7. 熟悉数据仓库领域知识和技能者优先，包括但不局限于：数据开发测试工具与方法、数据质量等；

8. 良好的语言沟通与表达能力和自我驱动动力。

第10篇 中级etl开发职位描述与岗位职责任职要求

职位描述：

岗位职责：

1、负责项目实施过程中所对接的第三方系统的数据处理及质量分析，并完成项目实施过程中的etl工作；

2、熟练掌握etl设计过程，参与大数据平台架构的设计、开发、流程优化及解决etl相关技术问题；

3、与用户和项目组进行有效沟通，采集项目需求，并提出相应的解决方案；

4、负责监控etl并解决出现的问题及性能调优，协助完成bi数据建模；

5、根据规范，完成项目相关设计开发文档的整理与编写；

任职要求：

1、 统招全日制本科及以上学历，具备大数据处理经验尤佳；

2、 熟悉etl工具，具有一定项目经验，负责监控etl并解决出现的问题及性能调优；

3、熟悉hive和hadoop；

4、 具备一定的编程能力，熟悉至少一种常用编程语言，java尤佳；

5、 掌握关系数据库常见用法，熟悉常见软件的安装，参与过项目的etl工具开发项目的完整分析、设计、开发流程者优先；

6、 具备较强的自我学习能力、有较强分析问题的能力、人际沟通能力、团队协作能力和工作责任感；

第11篇 etl/bi工程师职位描述与岗位职责任职要求

职位描述：

岗位职责：

1、数仓开发、etl开发；

2、银行业数据模型的设计辅助、mapping和落地等；

3、shell脚本开发维护；

4、银行业务系统的数据调研和分析；

任职要求：

1、本科及以上学历，计算机或相关专业；

2、2年以上oracle、db2等数据库开发经验，熟悉数据库体系结构；

3、精通pl/sql编程，精通存储过程开发；

4、熟悉linu_操作系统；

5、熟悉etl调度工具和前端工具；

6、软件基础理论知识扎实，具备良好的数据结构、算法功底，有一定独立分析、技术研究能力；

7、良好的沟通能力、团队合作精神、乐于；

8、具备较强的自学能力，有一点抗压能力，能够接受出差性质的工作。

如有以下技术背景优先考虑：

1、有银行业系统开发经验；

2、参与过数仓项目开发、实施；

3、有数据治理项目经验的。

第12篇 etl工程师岗位职责职位要求

职责描述：

岗位职责：

1、根据概要设计，进行详细设计的文档编写；

2、负责etl过程的设计/开发实施、单元测试；

3、负责项目中etl相关需求调研、源数据调研、整体设计；

4、负责项目中环境安装及配置。

5、维护和升级现有etl任务和存储过程，快速定位并修复现有系统缺陷

职位要求：

1、 大专及以上学历，计算机相关专业，3年以上 etl 工作经验。

2、 熟悉etl开发流程，有hadoop和etl工作经验；有从传统数据库抽取数据到hive数据仓库经验，了解sqoop应用原理者优先。

3、 熟悉主流数据库sql server、oracle、db2、mysql等；熟悉开源的etl工具。

4、有海量数据处理工作经验，数据分析和挖掘经验者优先；

5、做过数据仓库、ods项目，对数据治理、数据标准及元数据有很好理念及实施经验的优先；

6、熟练使用脚本语言：如perl、python、shell等任意一种以上；

7、熟悉linu_系统指令和性能优化；

8、善于学习新技术，对新技术有较强的接受能力；工作认真细致，愿意于人交流沟通。

9、有大型数据仓库系统研发、设计经验者优先；

10、熟悉 java 语言或 hadoop 技术者优先；

岗位要求：

学历要求：大专

语言要求：不限

年龄要求：不限

工作年限：3-4年经验

第13篇 etl senior engineer职位描述与岗位职责任职要求

职位描述：

position responsibility:

1) work closely with the business unit and solution leads to better understand the requirement and ensure delivery quality and timeline

2) develop and maintain etl process based on cloud platform

3) work closely in a global team for incident management， change management and fast trouble shooting with high quality resolution

4) as a senior resource， coach the junior resource in the team with good communication and team working skills

position requirement:

1) senior e_perience in ssis / informatica / datastage or other etl tools

2) e_perience of etl performance tuning， testing and data validation

3) strong sql programming knowledge and .net knowledge

4) e_perience in the understanding of data warehouse processes

5) e_perience in other programming language such as shell is preferred

6) understand big data technologies such as hadoop， spark， hbase， hive is a plus

第14篇 大数据开发高级工程师-etl方向职位描述与岗位职责任职要求

职位描述：

工作职责:

1、 根据公司数据分析需求进行基于hadoop 平台的项目开发；

2、 根据需求进行数据仓库模型设计，熟练使用kettle工具进行etl程序的开发；包括实时数据加工，计算，etl，管理， 监控等；

3、 负责针对源系统进行数据抽取、处理、分析等相关工作，及项目中涉及到的数据库创建、维护及提供数据接口工作；

4、 负责设计并优化基于hive 的数据仓库的建设；

5、 制定数据库备份和恢复策略及工作流程与规范。

6、能出具消费品品牌制造行业应用的数据分析技术解决方案，并落地。

任职资格:

1．从事数据仓库领域至少2年以上，熟悉数据仓库模型设计与etl开发经验 ，具备海量数据加工处理相关经验；

2. 熟悉数据仓库领域知识和技能者优先，包括但不局限于：元数据管理、数据开发测试工具与方法、数据质量、主数据管理；

3．有从事分布式数据存储与计算平台应用开发经验，熟悉hadoop生态相关技术并有相关实践经验着优先，重点考察hive、hdfs、hbase;

4. 熟练掌握kettlesqoop、data_、airflow等;

5. 有消费品品牌制造、零售行业经验，尤其快消品行业和财务领域数据项目经验者优先;

6. 熟悉分布式计算presto/imapa优先;

7．有实时计算方面的经验的优先。

第15篇 etl高级工程师岗位职责及相关职位要求

etl高级工程师职位要求

1、计算机、数学或统计等专业，本科以上学历；

2、精通sql语言；熟悉数据仓库设计、建模；

3、精通python，能够编写脚本处理、分析数据；

4、熟悉批量离线式分布式并行计算技术（如hadoop、mapreduce、hive、spark等）

5、熟悉sqlserver、mysql数据库；了解redis等非关系型数据库；

6、熟悉至少一种常用etl工具（如kettle、ssis、gobblin）；了解常用报表工具（如reporting services以及各类开源报表）；

7、了解常用数据挖掘方法（回归、决策树、聚类等）。

etl高级工程师岗位职责

1、负责国际网站后台数据仓库搭建、维护；

2、运用各类大数据工具设计etl流程，消费生产环境埋点、日志等数据；

3、日常数据监控以及数据预警，异常数据解读挖掘，并与业务同事沟通解决方案；

4、分析用户的特征和行为数据，挖掘不同类型用户的行为特性，为实际的业务运营提供数据支持；

5、从数据分析结果中寻找insight和商业价值，并以简明扼要的形式传导到其他部分，指导实际的业务运营；

6、处理国际网站的临时数据需求，并对于常用重要需求转化成数据产品。

第16篇 数据仓库/etl/bi工程师职位描述与岗位职责任职要求

职位描述：

职责描述：

1、负责数据仓库建模，业务数据集市建设开发

2、负责数据仓库etl流程的优化及解决etl相关技术问题、etl流程监控，保障数据平台架构稳定性

3、建立数据分析指标体系，不断完善指标体系和分析模型；

4、通过专项分析，输出专项分析报告

5、负责数据分析相关需求和数据测试的工作

任职要求：

学历要求：

全日制统考类本科及以上学历，计算机、通信、电子、软件工程、统计学、应用数学、数据分析等相关专业

专业技能：

1、熟悉数据仓库各类模型建模理论，熟悉数据仓库数据分层架构和多维数据模型设计；

2、丰富的数据分析经验，熟练掌握sql、hql、sparksql，擅长运用其分析并完成复杂业务数据查询

3、掌握至少一种数据库开发技术：mysql/oracle/db2等，灵活运用sql实现海量数据etl加工处理；

4、熟悉hadoop生态（如：hdfs/mapreduce/hive/hbase等），并有相关实践经验；

5、熟练掌握一门或多门编程语言（如：python/shell/java/c++等），并有大型项目建设经验者优先；

素质：

1、敏锐的数据观察和分析能力，及时发现和分析其中隐含的变化和问题并给出建议；

2、良好的沟通能力和团队精神，较强的学习能力，能承担一定的工作压力。

经验：

至少2年以上数据仓库（离线&实时）模型设计开发、etl设计开发的相关经验，有通信运营商o域/b域大数据、智慧城市大数据的数据仓库、etl设计研发经验者优先

第17篇 etl岗位工作职责

简介:etl,是英文 e_tract-transform-load 的缩写,用来描述将数据从来源端经过抽取(e_tract)、转换(transform)、加载(load)至目的端的过程。etl一词较常用在数据仓库,但其对象并不限于数据仓库。

etl职位描述(模板一)

岗位职责:

1、协助做报表二次分析,主动思考,热爱学习;

2、负责报表开发,数据中心建设。

任职要求:

1、精通oracle,sqlserver,mysql等主流数据库;

2、熟悉etl,bi,cognos等数据处理工具;

3、有数据中心,数据仓库建设经验优先;

4、3年以上开发经验。etl职位描述(模板二)

岗位职责:

1、根据公司业务需求,构建可扩展的数据仓库,负责数据模型的规划,设计,实现和优化;

2、负责业务数据的采集,清洗,特征抽取;

3、负责etl的维护工作,发现故障及时诊断、定位、分析和调试,保证数据准确、稳定;

4、根据业务需要,提供面向业务的报表、数据提取等数据服务。

任职要求:

1、计算机相关专业,本科以上学历,2年以上etl工作经验;

2、精通至少一种主流数据库的开发和调优,可以根据需求编写复杂存储过程;

3、熟悉python、javascript、shell等至少一种脚本语言;

4、踏实认真细心,有责任心和团队精神。etl职位描述(模板三)

岗位职责:

1、负责数据仓库(ods、edw、csl、adm)的设计与开发、etl过程的设计与开发;

2、负责各业务系统数据源业务探查、数据探查、id调研、准确性完整性验证;

3、为前端展示提供数据支持,为业务人员提供数据查询;

4、数据仓库日常管理、跑批、维护、监控。

任职要求:

1、3年以上数据仓库项目开发经验,本科以上学历;

2、熟悉mysql、oracle等数据库,熟悉kettle、powercenter等etl工具;

3、熟悉inmon企业数据仓库(edw)设计理论与技术、kimball维度建模理论与技术;

4、了解powerdesigner、erwin等建模工具,熟悉概念模型、逻辑模型、物理模型;

5、熟悉p2p、互联网金融业务优先;

6、熟悉hadoop生态圈sqoop、hive、hbase优先;

7、责任心强、思路清晰、学习力强。etl职位描述(模板四)

岗位职责:

1、负责数据的etl的工作;

2、负责数据分析工具平台的设计和研发;

3、让数据平台为公司的商业决策提供有效的支持。

任职要求:

1、大学本科以上学历,3年以上工作经验,计算机相关专业;

2、精通java和hive sql, 有sql性能调优经验丰富的尤佳;

3、熟悉大数据相关技术,对apache hadoop/hive/hbase/sqoop/spark等组件有一定程度的了解;

4、熟悉脚本语言python,perl,shell中的一种或几种;

5、好的沟通能力、团队精神和服务意识;

6、具有强烈的上进心和求知欲,优秀的自主学习能力,自我管理能力。etl职位描述(模板五)

岗位职责:

1、负责数据仓库核心结构设计,及相关数据模块任务模块设计;

2、负责各种业务数据的etl任务及数据仓库部署和管理;

3、持续改进优化etl、分析处理、数据呈现等流程,协调海量数据压力问题;

4、保证数据安全、稳定、可恢复;

5、负责数据仓库的日常维护工作。

任职要求:

1、计算机相关专业本科及以上学历,三年以上模型设计相关工作经验,具 有金融/互联网行业任职背景者优先;

2、精通常用模型设计工具erwin、powerdesigner,熟悉tableau,pentaho 等bi软件;

3、具有金融业bi项目模型设计或etl开发经验逻辑数据模型和建模经验;

4、熟悉掌握java/r/python语言,kettle组件,熟悉mysql、oracle等数据 库,能熟练进行sql优化;

5、有大数据处理经验,有hadoop/spark sql/mapreduce/hive等相关数据 处理经验优先;

6、具有良好的逻辑分析能力、语言表达能力。

第18篇 etl engineer职位描述与岗位职责任职要求

职位描述：

incorporated in 2017， kpmg technology r&d centre combines four functions: r&d， in-house services， outsourced services and operational services.it is kpmg’s first r&d centre and second delivery centre in china.

as kpmg’s first r&d centre in china， our business activities currently include:

- development， design， production of computer software and computer system integration;

- ai， r&d and delivery of technologies

- big data-related services and technical support， including data development， data processing， data mining etc.

driven by increasing market demand， we will e_pand the r&d centre’s scope of business on an ongoing basis to enable technologies to provide quality services for our clients.

岗位职责

- 负责公司数据仓库系统etl开发、维护、监控、优化

- 参与数据仓库建模，不断改进现有数据仓库

- 与bi分析师协同工作，解决数据报表、数据异常相关的技术问题

- 根据公司要求规范，编写相应的技术文档

岗位描述

- 本科或以上学历

- 2年以上相关工作经验 ，计算机或相关专业

- 至少熟悉datastage， informatica， odi， kettle中一种工具，有kettle或者odi使用经验更佳

- 熟悉oracle ，sql server， my sql等主流数据库系统

- 有金融行业工作经验者优先

第19篇 中级etl工程师岗位职责

中级etl工程师 比孚科技 上海比孚信息科技有限公司,比孚,比孚科技,比孚 职位描述:

1. 负责数据仓库/数据集市etl设计开发;

2. 负责与业务部门数据需求的沟通与确认;

任职资格:

1. 三以上工作经验;

2. 熟悉主流etl开发工具,如:ssis 、kettle、datastage等;

3. 熟练掌握主流数据库的使用,如:sql server、mysql、oracle,对sql查询优化有丰富的经验;

4. 熟悉主流报表工具,如:tableau、powerbi、cognos;

5. 良好的沟通技能,清晰的逻辑思维能力;

6. 工作认真仔细,积极主动,具备较强的自主学习、自我总结能力。

第20篇 etl数据分析岗位职责任职要求

etl数据分析岗位职责

职责描述:

1、与数据分析师、数据开发工程师配合，进行数据清洗、数据准备;

2、理解数据分析及业务，设计维护数据仓库;

3、与数据分析师配合，进行数据;

4、配合数据开发工程师，完成模型部署后的业务验证、反馈。

任职要求:

1、 大学本科及以上，计算机信息类、数学/应用数学类等专业背景;

2、3年以上工作经验，具有电力/能源/工业数据分析背景的人员优先考虑;

3、熟悉数据结构，熟悉数据清洗、降维、变量选择等数据准备过程，能够熟练实现海量数据的清洗、准备;

4、对回归、分类、聚类、关联规则、时间序列、神经网络、决策树及其他常用数据分析和挖掘技术有了解，能够配合数据分析师开展相关分析挖掘;

5、能够熟练使用至少一种主流关系数据库及结构化查询语言，熟悉hive，并了解spark、hadoop等大数据架构环境，能够进行数据仓库建设与维护;

6、熟练掌握python、r等语言工具中的至少一种，能够熟练使用相关的数据分析、数据处理库;

7、有linu_使用经验，了解shell操作。