管理者范文网 > 安全管理 > 岗位职责 > 工程岗位职责
栏目

数据仓库工程师岗位职责16篇

发布时间:2023-04-01 热度:95

数据仓库工程师岗位职责

第1篇 高级数据仓库开发工程师职位描述与岗位职责任职要求

职位描述:

职责描述:

1.能够独立的分析和设计数据仓库需求解决方案;

2.善于和用户沟通、准确了解和定义业务需求并设计解决方案;

3.熟练掌握mysql数据库,精通sql语句编写;

5.有数据仓库/数据集市相关项目背景者有限考虑;

6.5年以上数据库实际项目开发经验;

7.熟练掌握etl工具,掌握kettle/informatica开发者优先;

8.熟悉shell、perl等脚本语言者优先;

9.良好的沟通和学习能力。

第2篇 数据仓库工程师—(杭州)营销服务事业部职位描述与岗位职责任职要求

职位描述:

岗位职责:

1、负责金融行业数据仓库开发工作

2、负责与多个应用对接的接口和框架设计

3、充分理解产品需求,能够结合需求进行任务设计,完成详细设计文档的编写。

岗位要求:

1. 从事数据仓库及商业智能(bi)领域工作至少3年以上,熟悉数据仓库模型设计方法论,并有实际的模型设计经验,有大型数仓建设经验优先;

2. 精通数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、主数据管理、性能调优等;

3.有主流商业/开源etl工具(informatica、datastage、kettle等)使用经验者优先;

4. 熟悉hadoop生态相关技术并有相关实践经验,包括hdfs、map-reduce、hive、hbase、spark等,具备海量数据加工处理(etl)相关经验;

5. 具有较强的团队意识与良好的沟通能力及高度的工作责任感,热爱技术,有很强的钻研能力,乐于接受有挑战性的任务;

6、有团队管理经验优先。

第3篇 数据仓库需求开发工程师职位描述与岗位职责任职要求

职位描述:

岗位职责:

1)负责数据需求沟通、需求调研、需求分析、需求跟踪;

2)负责业务源系统业务梳理、 信息调研、数据分析;

3)负责逻辑数据模型设计、业务映射规则整理,数据业务规则、数据准确性等质量核对、校验;

4)负责数据业务开发;

任职要求:

1)本科以上及同等学历,计算机、软件等相关专业毕业;

2)五年以上工作经验;

3)熟练数据库sql语言,掌握数据库中mysql/oracle/gp等至少2种;

4)熟悉linu_系统,具备shell编程等开发能力;

5)熟悉通信行业基本业务及业务流程从事通信行业数模型设计经验优先;

6)熟悉大数据技术(hadoop、hive等),并具备一定的数据处理开发经验;

7)熟悉数据仓库模型优先具有较强的逻辑分析能力、文字表达能力;

8)具有较强的需求判断、引导能力,逻辑思维能力强,良好的沟通表达和文档交付能力

加分项:

有移动通信行业(移动、电信、联通)tb、pb级数据分析和处理经验;

有java,python等开发基础;

第4篇 数据仓库etl开发工程师岗位职责

数据仓库etl资深开发工程师 1.5年以上做bi、数据仓库etl开发方向,行业不限;

2.过去做北京汽车项目;

3.英语能基本读写;

4.开发经验丰富,能迅速完成交办相关工作;

5.沟通能力良好,具备团队合作精神,能适应一定压力开展工作。 1.5年以上做bi、数据仓库etl开发方向,行业不限;

2.过去做北京汽车项目;

3.英语能基本读写;

4.开发经验丰富,能迅速完成交办相关工作;

5.沟通能力良好,具备团队合作精神,能适应一定压力开展工作。

第5篇 外包高级数据仓库开发工程师职位描述与岗位职责任职要求

职位描述:

职责描述:

1.能够独立的分析和设计数据仓库需求解决方案;

2.善于和用户沟通、准确了解和定义业务需求并设计解决方案;

3.熟练掌握mysql数据库,精通sql语句编写;

5.有数据仓库/数据集市相关项目背景者有限考虑;

6.5年以上数据库实际项目开发经验;

7.熟练掌握etl工具,掌握kettle/informatica开发者优先;

8.熟悉shell、perl等脚本语言者优先;

9.良好的沟通和学习能力。

第6篇 etl工程师(中级数据仓库工程师)职位描述与岗位职责任职要求

职位描述:

职责描述:

1、 负责数据仓库建模和etl技术工作,参与数据项目各类数据源etl的接口设计和文档、流程规范;

2、负责项目中数据清洗、数据处理、数据校验相关开发工作;

3. 配合使用主流数据挖掘工具、etl工具、bi展现的设计和开发;

4、 能够按照公司全面质量管理的要求,高质量地完成各类技术支持工作。

任职要求:

1.计算机相关专业本科以上学历,3年以上工作经验;

2.熟悉etl开发、数据仓库设计流程,熟悉mysql、oracle, ms sql server等主流数据库,表结构设计,存储过程编写;

3.有一定的sql调优知识和经验,具有bi相关知识;

4.有hana、hive经验优先;

5.具备财务基础知识或者erp基础知识者优先;

第7篇 数据仓库工程师职位描述与岗位职责任职要求

职位描述:

【职位描述】

1.负责数据分析模型设计,进行维度建模,数据仓库设计、优化,etl数据处理;

2.负责公司各业务底层数据标准化处理,挖掘不同业务场景的业务标签;

3.基于业务,对业务数据与用户行为数据进行整合,分析并挖掘数据业务价值;

【职位要求】

1、本科及以上学历,计算机、数学、统计及相关专业,3年以上工作经验;

2、有1-3年数据仓库相关开发经验,需要有互联网金融行业经验;

3、精通数据仓库模型,能够熟练进行事实表、维度表、汇总表的建模,具备大型数据仓库开发实际经验;

4、有丰富的 sql 编程经验及 etl 流程,有spark sql/hive相关开发经验,有ma_compute 使用经验更佳;

5、了解结构化数据与非结构化数据处理方法;

6、熟练使用java/scala/python等开发语言中的一种;

7、有强烈的责任心,良好的沟通能力,团队合作精神和优秀的执行能力。

【更多福利】

定期:组织行业或专业会,共同学习才能有进步

职业发展:优秀员工、优秀团队、灵活的晋升与调薪机制

丰厚奖金:项目奖金、年终奖、期权计划

员工关怀:年度体检、生日会、节日礼物、team building、结婚生育礼金、抚恤金

节日假期:法定假期、额外补充年假、带薪病假、姨妈假、“38”节假期

【我们的团队】

信用飞是一家垂直于航旅领域的消费金融科技公司,致力于“科技让金融更简单”来提高飞行人群的金融体验。在金融领域,信用飞是京东金融战略合作伙伴;在航空领域,信用飞是春秋航空、航班管家、东方航空、首都航空等多家航司的优质合作伙伴,为飞行人群提供在航空场景支付、分期、借贷等金融服务。信用飞致力于用科技优化航空金融,让更多人在飞行过程中享受更好的权益和服务,越飞越有钱。团队由来自春秋航空、携程、腾讯、阿里巴巴、网易、渣打银行、滴滴出行等行业精英组成,目前业务迅速扩张中。

【技术团队】

技术氛围浓厚,团队成员背景及技术水平优秀,由来自腾讯、阿里、2345、富友支付等行业技术精英组成,团队不定期举办各类技术会以及外部技术大牛培训会,擅于,一起学习,共同成长~

【工作地点】

长宁区淮海西路432号凯利大厦4楼

(地铁3号线、4号线、10号线虹桥路站4号出口步行400米,地铁11号线交通大学站5号出口步行800米)

第8篇 资深数据仓库研发工程师职位描述与岗位职责任职要求

职位描述:

岗位职责:

1.负责数据仓库研发工作

2.负责数据建模以及数据仓库应用产品的设计和开发

3.负责数据仓库etl流程的优化及解决etl相关技术问题

4.负责数据仓库和业务数据集市建设

5.业务模型抽象、数据模型设计开发

6.参与业务指标体系建设

任职要求:

1.本科及以上学历,计算机、电子通信、数学、统计或者相关专业

2.三年以上工作经验

3.熟练掌握hiveql

4.熟悉hadoop生态,掌握hive/spark/storm/kafka 等的使用和性能调优

5.具备大型数据仓库架构设计、模型设计、etl 设计的相关经验

6.扎实的 java/scala 基础

7.具备海量数据处理和数据挖掘研发经验的优先

8.具备良好的团队合作精神,工作有激情

第9篇 资深数据仓库工程师岗位职责资深数据仓库工程师职责任职要求

资深数据仓库工程师岗位职责

资深数据仓库工程师职位描述:

1、负责数据平台架构的整体规划和设计;

2、根据上层业务逻辑整合优化平台数据流程,技术难点攻关;

3、对数据及业务开发团队提供技术支持,协助方案规划。

任职要求

1、精通数据仓库实施方法论、深入了解数据仓库体系架构,精通逻辑模型和物理模型建模、中间层模型理论以及多维模型的设计;

2、对hive、hbase、hadoop、map/reduce、spark有深入了解;

3、精通主流数据库技术(如oracle、sqlserver、mysql等),精通sql,有较强的sql编码及数据存储、性能调优经验;

4、能够对业务需求进行抽象并据此进行架构设计;

5、具有较强的沟通,表达及文档编写能力,有大数据建设经验者优先;

6、数据java开发,有相关的工作经验;

7、熟悉数据仓库相关技术,如 etl、调度相关、报表开发。

职位描述:

1、负责数据平台架构的整体规划和设计;

2、根据上层业务逻辑整合优化平台数据流程,技术难点攻关;

3、对数据及业务开发团队提供技术支持,协助方案规划。

任职要求

1、精通数据仓库实施方法论、深入了解数据仓库体系架构,精通逻辑模型和物理模型建模、中间层模型理论以及多维模型的设计;

2、对hive、hbase、hadoop、map/reduce、spark有深入了解;

3、精通主流数据库技术(如oracle、sqlserver、mysql等),精通sql,有较强的sql编码及数据存储、性能调优经验;

4、能够对业务需求进行抽象并据此进行架构设计;

5、具有较强的沟通,表达及文档编写能力,有大数据建设经验者优先;

6、数据java开发,有相关的工作经验;

7、熟悉数据仓库相关技术,如 etl、调度相关、报表开发。

第10篇 bi数据仓库工程师岗位职责

bi工程师-数据仓库 涂鸦智能 杭州涂鸦科技有限公司,涂鸦智能,爱相机 岗位职责:

1. 负责业务数据调研、需求理解,数据采集方案设计及实现;

2. 负责建立数据模型,根据业务设计数据主题;

3. 负责数据模型的etl编写,参与团队etl流程的优化及解决etl相关技术问题;

4. 理解业务方的数据需求,提供面向业务的olap、报表、数据提取等数据服务;

任职要求:

1. 本科及以上学历,计算机相关专业,2-5年企业级数据平台相关系统开发经验;

2. sql技能娴熟,精通hive-sql,presto-sql

3. 具有扎实的计算机操作系统、数据结构等编程基础,熟悉java或scala语言;

4. 有过2年以上bi项目经验,熟悉开源的bi工具如:metabase,superset,redash.有实际操作经验。

7. 有良好的沟通能力,善于主动思考和行动,有极强的责任心和自驱力。

第11篇 数据仓库工程师岗位职责

资深数据仓库工程师(严选)-邮件事业部172 网易集团 网易(杭州)网络有限公司,杭州网易,网易,网易杭州,网易游戏,网易网络,网易集团,网易 工作职责:

1. 负责电商数据仓库搭建、etl开发与维护;

2. 完成数据统计、编写计算任务、接口开发;

3. 参于数据规范制定、文档编写。

任职要求:

1.本科以上学历,软件工程/计算机/通信/数学等相关专业;

2.熟悉hive sql语言,熟悉shell, python等至少一种脚本语言;

3.有hadoop、spark、flink等至少一种大数据平台的使用经验;

4.理解能力强,善于沟通,有责任心和团队精神;

5.有数据仓库建设、商业数据分析、增长项目经验者优先。

第12篇 数据仓库开发工程师职位描述与岗位职责任职要求

职位描述:

职责描述:

1、负责数据仓库的模型规划设计工作;

2、负责数据仓库etl规则设计、数据映射工作;

3、负责数据仓库建设需求调研、业务沟通;

4、负责业务模型抽象和数据模型的设计开发。

任职要求:

1、计算机相关专业本科及以上学历;

2、5年以上数据仓库建模经验;

3、熟悉etl、数据仓库开发及相关技术,熟悉hive等主流数据库技术,精通sql开发与优化;

4、熟练掌握维度建模理论,有能力分析业务数据,完成数据仓库模型设计;

5、有实时数据处理开发经验(如flink/sparkstreaming/storm)优先;

6、对apache kylin以及其他olap技术深入了解者优先;

7、工作态度踏实认真、积极主动,可接受较高强度工作,具备良好的沟通能力和协调能力。

第13篇 dw数据仓库etl工程师职位描述与岗位职责任职要求

职位描述:

职责描述:

1. 负责数据仓库开发需求收集和分析;

2. 负责数据模型体系构建及数据主题设计和开发;

3. 负责数据抽取、清洗、转化等数据处理程序开发;

4. 负责对公司数据仓库平台整体架构改进与流程优化;

5. 负责bi报表开发和优化。

任职资格:

1. 2年以上数据仓库工作经验;

2. 熟悉数据库、etl、bi建模等工具;

3. 良好编程习惯,以及较强的学习能力和沟通能力。

第14篇 资深数据仓库工程师职位描述与岗位职责任职要求

职位描述:

工作职责

1、基于公司数据建设需要,完成数据内容开发等工作,维护与完善数据模型各类信息;

2、负责各业务线系统的信息调研、表与字段的关系梳理,根据业务及日常需求来优化模型;

3、工作中对数据平台基础设施、数据内容建设等工作主动深度思考,提升效能、促进组织和系统发展;

4、负责核心数据仓库模型代码开发,跟进etl的完成。负责接入源系统数据的脚本开发、数据测试与验证、以及调度开发等工作;

5、与上游系统与下游应用同事沟通协作,推动各类需求在数据模型中的落地;

6、跟踪、监测、维护及优化数据模型,确保数据模型被使用。

任职资格

1、本科以上学历,5年或以上金融行业数据类工作经验;

2、熟悉hadoop生态系统组件,如:hive、mapreduce、spark、hbase等;具备编写、优化复杂sql的能力;

3、负责过大型数据平台或数据仓库设计,具有扎实的大数据和数据仓库的理论功底;

4、掌握一定的数据质量管理方法论、评估模型设计、质量报表设计,能够根据数据质量要求制定数据质量探查规则并进行实施;

5、掌握一定元数据管理方法论、元数据管理设计。

6、能够围绕业务和产品特征建模并解决问题;

7、具有丰富的数据实践经验;

8、基于公司数据建设需要,完成数据内容开发等工作,维护与完善数据模型各类信息。

第15篇 数据仓库/etl/bi工程师职位描述与岗位职责任职要求

职位描述:

职责描述:

1、负责数据仓库建模,业务数据集市建设开发

2、负责数据仓库etl流程的优化及解决etl相关技术问题、etl流程监控,保障数据平台架构稳定性

3、建立数据分析指标体系,不断完善指标体系和分析模型;

4、通过专项分析,输出专项分析报告

5、负责数据分析相关需求和数据测试的工作

任职要求:

学历要求:

全日制统考类本科及以上学历,计算机、通信、电子、软件工程、统计学、应用数学、数据分析等相关专业

专业技能:

1、熟悉数据仓库各类模型建模理论,熟悉数据仓库数据分层架构和多维数据模型设计;

2、丰富的数据分析经验,熟练掌握sql、hql、sparksql,擅长运用其分析并完成复杂业务数据查询

3、掌握至少一种数据库开发技术:mysql/oracle/db2等,灵活运用sql实现海量数据etl加工处理;

4、熟悉hadoop生态(如:hdfs/mapreduce/hive/hbase等),并有相关实践经验;

5、熟练掌握一门或多门编程语言(如:python/shell/java/c++等),并有大型项目建设经验者优先;

素质:

1、敏锐的数据观察和分析能力,及时发现和分析其中隐含的变化和问题并给出建议;

2、良好的沟通能力和团队精神,较强的学习能力,能承担一定的工作压力。

经验:

至少2年以上数据仓库(离线&实时)模型设计开发、etl设计开发的相关经验,有通信运营商o域/b域大数据、智慧城市大数据的数据仓库、etl设计研发经验者优先'

第16篇 数据仓库架构工程师岗位职责

数据仓库架构师/etl工程师 同程艺龙 同程网络科技股份有限公司,同程旅游,同程艺龙,同程 位职责:

1、负责数据仓库数据采集、处理、存储以及挖掘分析的架构实现,负责架构设计和指导团队落地;

2、参与数据平台建设,包括环境和框架的规划搭建以及部分核心编码工作;设计并实现对bi分析、数据产品开发、算法开发的系统性支持;

3、研究未来数据模型和计算框架的创新与落地,包括但不限于以下领域:大规模数据实时化、研发模式敏捷化、数据计算框架轻量化、数据模型组织方式业务化等方面。

职位要求:

1、具备5年以上dw系统建设经验;了解数据仓库建设过程中的挑战与问题,有实际架构设计和数据建模经验,有作为技术负责人系统化解决问题的成功案例;

2、有dw/bi架构体系中某些领域的专项建设经验,包括但不限于:数据质量、元数据管理、主数据管理、数据监控、流计算、分布式计算、分布式文件系统、分布式存储、大规模数据实时化、跨平台资源调度;

3、熟悉hadoop生态圈,包括但不限于:hadoop、hive、storm、spark、dremel、kylin等;

4、有海量数据建模实践经验优先。

《数据仓库工程师岗位职责16篇.doc》
将本文的Word文档下载,方便收藏和打印
推荐度:
点击下载文档

相关专题

相关信息

分类查询入口

一键复制