第1篇 etl工程师职位描述与岗位职责任职要求
职位描述:
职责描述:
1、负责数据分析、加工、清理、处理程序的开发
2、负责数据相关平台的搭建、开发、维护、优化
3、分布式平台应用开发(hadoop/spark/hive/hbase)
4、开发数据统计系统,各类统计程序报表。
任职要求:
1、2年以上java或python开发工作经验,java基础扎实;
2、熟悉常见在线与离线大数据系统, 如hive, hbase, es, kafka等的工作原理与开发调优; 具有mapreduce开发经验,有实际大数据项目经验;
3、熟练掌握oracle、mysql等主流数据库上的开发;
4、具有良好的沟通能力、组织能力及团队协作精神,有较强的分析和解决问题的能力.
第2篇 etl工程师(中级数据仓库工程师)职位描述与岗位职责任职要求
职位描述:
职责描述:
1、 负责数据仓库建模和etl技术工作,参与数据项目各类数据源etl的接口设计和文档、流程规范;
2、负责项目中数据清洗、数据处理、数据校验相关开发工作;
3. 配合使用主流数据挖掘工具、etl工具、bi展现的设计和开发;
4、 能够按照公司全面质量管理的要求,高质量地完成各类技术支持工作。
任职要求:
1.计算机相关专业本科以上学历,3年以上工作经验;
2.熟悉etl开发、数据仓库设计流程,熟悉mysql、oracle, ms sql server等主流数据库,表结构设计,存储过程编写;
3.有一定的sql调优知识和经验,具有bi相关知识;
4.有hana、hive经验优先;
5.具备财务基础知识或者erp基础知识者优先;
第3篇 高级/资深etl工程师职位描述与岗位职责任职要求
职位描述:
岗位职能:
1. 基于公司数据建设需要,完成数据平台构建、数据内容开发等工作。包括:数据平台基础设施建设、数据采集、etl、数仓及数据集市、数据应用产品等开发工作;
2. 充分理解需求文档,基于此进行自测,交付高质量的开发代码和数据内容;
3. 工作中对数据平台基础设施、数据内容建设等工作主动深度思考,提升效能并积极建言、促进组织和系统发展;
4. 其他根据部门需要安排事宜;
岗位要求:
1. 信息技术类、数学、统计学、计量经济学类专业,研究生及以上学历。优秀候选人学历可以放宽至本科,工作年限5年以上;
2. 熟悉数据仓库模型设计和精通etl开发经验 ,掌握3nf,kimball的维度建模设计方法,具备海量数据加工处理(etl)相关经验 ;
3. 掌握至少一种数据库开发技术:oracle、teradata、db2、mysql等,精通并灵活运用sql实现海量数据etl加工处理 ;
4. 熟悉linu_系统常规shell处理命令,灵活运用shell做的文本处理和系统操作 ;
5. 有从事分布式数据存储与计算平台应用开发经验,熟悉hadoop生态相关技术并有相关实践经验着优先,重点考察hdfs、hive(hql)、hbase ;
6. 熟练掌握一门或多门编程语言,并有大型项目建设经验者优先,重点考察python、perl、java ;
7. 熟悉数据仓库领域知识和技能者优先,包括但不局限于:数据开发测试工具与方法、数据质量等;
8. 良好的语言沟通与表达能力和自我驱动动力。
第4篇 大数据etl工程师职位描述与岗位职责任职要求
职位描述:
岗位职责:
负责etl设计、模型设计、开发、技术支持等工作,并保证数据安全、及时、稳定、可恢复
任职要求:
1、3年及以上数据处理(etl)开发经验,能独立完成数据处理开发工作
2、熟悉mysql/oracle等标准数据库,熟练上述数据库的开发
3、有hadoop和hivesql的使用经验
4、熟悉etl设计,熟悉数据仓库的架构、开发规范和流程
5、熟悉至少一种etl开发工具,如datastage,informatica, kettle等
6、具备数据仓库实施经验者优先
福利待遇:
试用期全额工资、六险一金、体检、年假、节假日礼品等
第5篇 高级etl工程师职位描述与岗位职责任职要求
职位描述:
1、负责公司数据平台项目的etl设计、实现以及优化。
2、负责etl流程优化,关键问题解决、团队技术与引导和前瞻性技术研究;
3、参与数据仓库数据模型设计,进行数据质量监测、校验和提升;
4、使用etl技术对医院信息系统数据进行提取、清洗、转换和整合;
岗位要求:
1、至少三年以上etl数据开发经验;计算机相关专业本科以上学历,熟悉数据分析与数据挖掘理论;
2、熟悉dw实施方法论和常规etl构架,有整体etl开发经验,深刻理解元数据管理;
3、熟练掌握oracle、sql server、mysql、postgresql等至少两种主流数据库的使用;
4、熟练掌握ssis、kettle、informatica等至少一种etl工具的使用;
5、精通sql、存储过程、函数的使用,具备编写、优化复杂sql的能力;
6、对数字,数据敏感,具备良好的逻辑思维能力;
7、具备专业的业务研究、分析能力,能够独立开展业务调研、数据分析、数据建模、报告编写工作;
8、有医疗卫生数据平台开发、实施经验优先;
9、能适应长期出差。
第6篇 etl工程师 - 银行监管报表职位描述与岗位职责任职要求
职位描述:
职责描述:
overview
we are a leading provider of collateral management and regulatory compliance software solutions to banks and financial institutions on a worldwide basis. we are currently seeking a consultant, to be based in our singapore office to be responsible for providing consultancy to our clients in relation to their regulatory reporting requirements for the monetary authority of singapore.
main role & responsibilities
•be part of the specialist team which provide regulatory subject matter e_pertise to clients
•keep abreast of any regulatory changes advised by the regulator
•support the senior consultant at client workshops to identify data requirements and how they map to the agile reporter data model.
•use etl tool to map and transform client data such as to satisfy the project scope and specification within the timetable set by and agreed with the project manager/senior consultant.
•report to the project manager/senior consultant any delays or e_pected delays to a project, whether due to internal or customer delays, and in particular to highlight any potential scheduling conflicts that could result in such a delay.
•perform product testing as requested by the line manager to be completed within the deadlines set.
任职要求:
degree level
2+ years e_perience in etl/bi
e_perience with rdbms software (e.g. sql server, oracle)
previous e_perience of the implementation of major regulatory changes is a plus
basic knowledge of hkma, mas or apra reporting is a plus
languages
english
chinese (mandarin)
第7篇 etl工程师岗位职责职位要求
职责描述:
岗位职责:
1、根据概要设计,进行详细设计的文档编写;
2、负责etl过程的设计/开发实施、单元测试;
3、负责项目中etl相关需求调研、源数据调研、整体设计;
4、负责项目中环境安装及配置。
5、维护和升级现有etl任务和存储过程,快速定位并修复现有系统缺陷
职位要求:
1、 大专及以上学历,计算机相关专业,3年以上 etl 工作经验。
2、 熟悉etl开发流程,有hadoop和etl工作经验;有从传统数据库抽取数据到hive数据仓库经验,了解sqoop应用原理者优先。
3、 熟悉主流数据库sql server、oracle、db2、mysql等;熟悉开源的etl工具。
4、有海量数据处理工作经验,数据分析和挖掘经验者优先;
5、做过数据仓库、ods项目,对数据治理、数据标准及元数据有很好理念及实施经验的优先;
6、熟练使用脚本语言:如perl、python、shell等任意一种以上;
7、熟悉linu_系统指令和性能优化;
8、善于学习新技术,对新技术有较强的接受能力;工作认真细致,愿意于人交流沟通。
9、有大型数据仓库系统研发、设计经验者优先;
10、熟悉 java 语言或 hadoop 技术者优先;
岗位要求:
学历要求:大专
语言要求:不限
年龄要求:不限
工作年限:3-4年经验
第8篇 dw数据仓库etl工程师职位描述与岗位职责任职要求
职位描述:
职责描述:
1. 负责数据仓库开发需求收集和分析;
2. 负责数据模型体系构建及数据主题设计和开发;
3. 负责数据抽取、清洗、转化等数据处理程序开发;
4. 负责对公司数据仓库平台整体架构改进与流程优化;
5. 负责bi报表开发和优化。
任职资格:
1. 2年以上数据仓库工作经验;
2. 熟悉数据库、etl、bi建模等工具;
3. 良好编程习惯,以及较强的学习能力和沟通能力。
21位用户关注