etl岗位职责

时间：2023-03-06 08:19:28 岗位职责我要投稿

etl岗位职责15篇

　　在我们平凡的日常里，需要使用岗位职责的场合越来越多，岗位职责是指工作者具体工作的内容、所负的责任，及达到上级要求的标准，完成上级交付的任务。那么相关的岗位职责到底是怎么制定的呢？下面是小编帮大家整理的etl岗位职责，欢迎大家分享。

etl岗位职责15篇

etl岗位职责1

　　职责描述：

　　1、负责数据分析、加工、清理、处理程序的开发

　　2、负责数据相关平台的'搭建、开发、维护、优化

　　3、分布式平台应用开发（hadoop/spark/hive/hbase）

　　4、开发数据统计系统，各类统计程序报表。

　　任职要求：

　　1、2年以上java或python开发工作经验，java基础扎实；

　　2、熟悉常见在线与离线大数据系统，如hive， hbase， es， kafka等的工作原理与开发调优; 具有mapreduce开发经验，有实际大数据项目经验；

　　3、熟练掌握oracle、mysql等主流数据库上的开发；

　　4、具有良好的沟通能力、组织能力及团队协作精神，有较强的分析和解决问题的能力.

etl岗位职责2

　　职位描述：

　　1.基于公司数据建设需要，完成数据平台构建、数据内容开发等工作。包括：数据平台基础设施建设、数据采集、etl、数仓及数据集市、数据应用产品等开发工作；

　　2.充分理解需求文档，基于此进行自测，交付高质量的开发代码和数据内容；

　　3.工作中对数据平台基础设施、数据内容建设等工作主动深度思考，提升效能并积极建言、促进组织和系统发展；

　　4.团队日常管理，及其他根据部门需要安排事宜。

　　岗位要求：

　　1.信息技术类、数学、统计学、计量经济学类专业，本科，工作年限5年以上；

　　2.熟悉数据仓库模型设计和精通etl开发经验，掌握3nf，kimball的维度建模设计方法，具备海量数据加工处理（etl）相关经验；

　　3.掌握至少一种数据库开发技术：oracle、teradata、db2、mysql等，精通并灵活运用sql实现海量数据etl加工处理；

　　4.熟悉linux系统常规shell处理命令，灵活运用shell做的'文本处理和系统操作；

　　5.有从事分布式数据存储与计算平台应用开发经验；

　　6.熟练掌握一门或多门编程语言，并有大型项目建设经验者优先，重点考察python、perl、java；

　　7.熟悉数据仓库领域知识和技能者优先，包括但不局限于：数据开发测试工具与方法、数据质量等；

　　8.良好的语言沟通与表达能力和自我驱动动力。

　　注：此岗位需在杭州一个月

etl岗位职责3

　　岗位职责:

　　1、负责大数据、bi系统相关模块的实施,项目管理工作,包括但不限于需求管理、项目规划、过程实施、上线验收、交付运营等;

　　2、依据业务场景、分析需求提供技术、业务解决方案并加以实现;

　　3、与技术部门对接,解决数据建模、报表和报告在系统开发遇到的.问题;

　　4、协助项目经理进行项目交付或协助商务开展售前支持或poc工作。

　　任职资格:

　　1、本科及以上学历,计算机、统计学、应用数学等相关专业;

　　2、熟悉hadoop平台,2年以上hive、sqoop开发经验;

　　3、了解bi系统,有数据管理经验,有维度建模相关经验;

　　4、3年以上相关工作经验,有银行或金融数据分析经验者优先;

　　5、熟悉db2、oracle等数据库及sql数据查询,熟悉hadoop者优先;

　　6、熟悉linux开发环境和shell脚本;

　　7、具备银行项目设计、开发、优化等经验者加分;

　　8、优秀的业务理解能力、逻辑性和沟通能力,能跨部门合作沟通。

　　etl数据开发工程师

　　岗位职责:

　　1、负责大数据、bi系统相关模块的实施,项目管理工作,包括但不限于需求管理、项目规划、过程实施、上线验收、交付运营等;

　　2、依据业务场景、分析需求提供技术、业务解决方案并加以实现;

　　3、与技术部门对接,解决数据建模、报表和报告在系统开发遇到的问题;

　　4、协助项目经理进行项目交付或协助商务开展售前支持或poc工作。

　　任职资格:

　　1、本科及以上学历,计算机、统计学、应用数学等相关专业;

　　2、熟悉hadoop平台,2年以上hive、sqoop开发经验;

　　3、了解bi系统,有数据管理经验,有维度建模相关经验;

　　4、3年以上相关工作经验,有银行或金融数据分析经验者优先;

　　5、熟悉db2、oracle等数据库及sql数据查询,熟悉hadoop者优先;

　　6、熟悉linux开发环境和shell脚本;

　　7、具备银行项目设计、开发、优化等经验者加分;

　　8、优秀的业务理解能力、逻辑性和沟通能力,能跨部门合作沟通。

etl岗位职责4

　　职位描述：

　　职责：

　　1.按业务分析需求进行建模；

　　2.进行数据仓库需求分析、方案设计、etl装载过程设计；

　　3.从业务数据库到数据仓库的etl开发；

　　4.结合业务流程和需求进行数据分析；

　　任职资格：

　　1.本科以上学历，计算机等信息技术相关专业；

　　2.有互联网金融相关工作经验，了解相关数据流和业务背景优先；

　　3.两年及以上数据仓库相关工作经验，对数据仓库系统架构具有良好的认识，熟悉数据仓库相关技术，如etl、报表开发，具备数据分析技术并具有相关项目经验；

　　4.具有hive、spark、mysql、oracle等至少一种大型数据库的'应用开发经验，熟悉数据标准管理、元数据管理、数据质量管理；

　　5.具备python统计和数据挖掘相关基本开发能力；

　　6.沟通能力好，善于规划和总结，注重团队合作及知识共享，能承担一定的工作压力；

etl岗位职责5

　　职责描述：

　　1、负责数据仓库建模，业务数据集市建设开发

　　2、负责数据仓库etl流程的优化及解决etl相关技术问题、etl流程监控，保障数据平台架构稳定性

　　3、建立数据分析指标体系，不断完善指标体系和分析模型；

　　4、通过专项分析，输出专项分析报告

　　5、负责数据分析相关需求和数据测试的'工作

　　任职要求：

　　学历要求：

　　全日制统考类本科及以上学历，计算机、通信、电子、软件工程、统计学、应用数学、数据分析等相关专业

　　专业技能：

　　1、熟悉数据仓库各类模型建模理论，熟悉数据仓库数据分层架构和多维数据模型设计；

　　2、丰富的数据分析经验，熟练掌握sql、hql、sparksql，擅长运用其分析并完成复杂业务数据查询

　　3、掌握至少一种数据库开发技术：mysql/oracle/db2等，灵活运用sql实现海量数据etl加工处理；

　　4、熟悉hadoop生态（如：hdfs/mapreduce/hive/hbase等），并有相关实践经验；

　　5、熟练掌握一门或多门编程语言（如：python/shell/java/c++等），并有大型项目建设经验者优先；

　　素质：

　　1、敏锐的数据观察和分析能力，及时发现和分析其中隐含的变化和问题并给出建议；

　　2、良好的沟通能力和团队精神，较强的学习能力，能承担一定的工作压力。

　　经验：

　　至少2年以上数据仓库（离线&实时）模型设计开发、etl设计开发的相关经验，有通信运营商o域/b域大数据、智慧城市大数据的数据仓库、etl设计研发经验者优先'

etl岗位职责6

　　职位描述：

　　岗位职责：

　　1、负责项目实施过程中所对接的第三方系统的数据处理及质量分析，并完成项目实施过程中的etl工作；

　　2、熟练掌握etl设计过程，参与大数据平台架构的设计、开发、流程优化及解决etl相关技术问题；

　　3、与用户和项目组进行有效沟通，采集项目需求，并提出相应的.解决方案；

　　4、负责监控etl并解决出现的问题及性能调优，协助完成bi数据建模；

　　5、根据规范，完成项目相关设计开发文档的整理与编写；

　　任职要求：

　　1、统招全日制本科及以上学历，具备大数据处理经验尤佳；

　　2、熟悉etl工具，具有一定项目经验，负责监控etl并解决出现的问题及性能调优；

　　3、熟悉hive和hadoop；

　　4、具备一定的编程能力，熟悉至少一种常用编程语言，java尤佳；

　　5、掌握关系数据库常见用法，熟悉常见软件的安装，参与过项目的etl工具开发项目的完整分析、设计、开发流程者优先；

　　6、具备较强的自我学习能力、有较强分析问题的能力、人际沟通能力、团队协作能力和工作责任感；

etl岗位职责7

　　职责描述：

　　1、负责数据仓库建模和etl技术工作，参与数据项目各类数据源etl的接口设计和文档、流程规范；

　　2、负责项目中数据清洗、数据处理、数据校验相关开发工作；

　　3. 配合使用主流数据挖掘工具、etl工具、bi展现的'设计和开发；

　　4、能够按照公司全面质量管理的要求，高质量地完成各类技术支持工作。

　　任职要求：

　　1.计算机相关专业本科以上学历，3年以上工作经验；

　　2.熟悉etl开发、数据仓库设计流程，熟悉mysql、oracle， ms sql server等主流数据库，表结构设计，存储过程编写；

　　3.有一定的sql调优知识和经验，具有bi相关知识；

　　4.有hana、hive经验优先；

　　5.具备财务基础知识或者erp基础知识者优先；

etl岗位职责8

　　职位描述：

　　工作职责:

　　1、根据公司数据分析需求进行基于hadoop平台的项目开发；

　　2、根据需求进行数据仓库模型设计，熟练使用kettle工具进行etl程序的开发；包括实时数据加工，计算，etl，管理，监控等；

　　3、负责针对源系统进行数据抽取、处理、分析等相关工作，及项目中涉及到的数据库创建、维护及提供数据接口工作；

　　4、负责设计并优化基于hive的'数据仓库的建设；

　　5、制定数据库备份和恢复策略及工作流程与规范。

　　6、能出具消费品品牌制造行业应用的数据分析技术解决方案，并落地。

　　任职资格:

　　1．从事数据仓库领域至少2年以上，熟悉数据仓库模型设计与etl开发经验，具备海量数据加工处理相关经验；

　　2.熟悉数据仓库领域知识和技能者优先，包括但不局限于：元数据管理、数据开发测试工具与方法、数据质量、主数据管理；

　　3．有从事分布式数据存储与计算平台应用开发经验，熟悉hadoop生态相关技术并有相关实践经验着优先，重点考察hive、hdfs、hbase;

　　4.熟练掌握kettlesqoop、datax、airflow等;

　　5.有消费品品牌制造、零售行业经验，尤其快消品行业和财务领域数据项目经验者优先;

　　6.熟悉分布式计算presto/imapa优先;

　　7．有实时计算方面的经验的优先。

etl岗位职责9

　　职位描述：

　　岗位职能：

　　2.充分理解需求文档，基于此进行自测，交付高质量的开发代码和数据内容；

　　3.工作中对数据平台基础设施、数据内容建设等工作主动深度思考，提升效能并积极建言、促进组织和系统发展；

　　4.其他根据部门需要安排事宜；

　　岗位要求：

　　1.信息技术类、数学、统计学、计量经济学类专业，研究生及以上学历。优秀候选人学历可以放宽至本科，工作年限5年以上；

　　2.熟悉数据仓库模型设计和精通etl开发经验，掌握3nf，kimball的维度建模设计方法，具备海量数据加工处理（etl）相关经验；

　　3.掌握至少一种数据库开发技术：oracle、teradata、db2、mysql等，精通并灵活运用sql实现海量数据etl加工处理；

　　4.熟悉linux系统常规shell处理命令，灵活运用shell做的文本处理和系统操作；

　　5.有从事分布式数据存储与计算平台应用开发经验，熟悉hadoop生态相关技术并有相关实践经验着优先，重点考察hdfs、hive（hql)、hbase；

　　6.熟练掌握一门或多门编程语言，并有大型项目建设经验者优先，重点考察python、perl、java；

　　7.熟悉数据仓库领域知识和技能者优先，包括但不局限于：数据开发测试工具与方法、数据质量等；

　　8.良好的`语言沟通与表达能力和自我驱动动力。

etl岗位职责10

　　etl高级工程师职位要求

　　1、计算机、数学或统计等专业，本科以上学历；

　　2、精通sql语言；熟悉数据仓库设计、建模；

　　3、精通python，能够编写脚本处理、分析数据；

　　4、熟悉批量离线式分布式并行计算技术（如hadoop、mapreduce、hive、spark等）

　　5、熟悉sqlserver、mysql数据库；了解redis等非关系型数据库；

　　6、熟悉至少一种常用etl工具（如kettle、ssis、gobblin）；了解常用报表工具（如reporting services以及各类开源报表）；

　　7、了解常用数据挖掘方法（回归、决策树、聚类等）。

　　etl高级工程师岗位职责

　　1、负责国际网站后台数据仓库搭建、维护；

　　2、运用各类大数据工具设计etl流程，消费生产环境埋点、日志等数据；

　　3、日常数据监控以及数据预警，异常数据解读挖掘，并与业务同事沟通解决方案；

　　4、分析用户的特征和行为数据，挖掘不同类型用户的'行为特性，为实际的业务运营提供数据支持；

　　5、从数据分析结果中寻找insight和商业价值，并以简明扼要的形式传导到其他部分，指导实际的业务运营；

　　6、处理国际网站的临时数据需求，并对于常用重要需求转化成数据产品。

etl岗位职责11

　　bi数据分析-数据开发(etl工程师)阿里健康阿里健康科技(中国)有限公司,阿里健康,阿里健康科技(北京)有限公司,阿里数据开发

　　1、构建全面的、准确的、能反映服务业务线特征的整体指标体系,并基于业务监控指标体系,及时发现与定位业务问题;

　　2、根据日常业务及产品团队的需求,提供业务监控,业务评估的各项数据指标;

　　3、根据业务发展情况,从数据中发现业务及产品的问题点及机会点,给业务及产品提供相应的方向;

　　4、沉淀分析思路与框架,提炼数据产品需求,与相关团队(如技术开发团队)协作并推动数据产品的落地;

　　5、与业务协作(行业团队)组织数据的理念、技能、工具的`培训。

　　岗位描述:

　　1.负责各条业务线数据仓库搭建,场景梳理,数据维护;

　　2.负责公司内部跨部门项目数据场景梳理,资源调配工作;

　　3.负责从已有的数据中挖掘对业务目标起到推动作用的分析结论。

　　岗位要求:

　　1、统计、数学、信息技术、生物统计本科以上学历,有电商bi工作经验优先;

　　2、良好的数据敏感度,能从海量数据提炼核心结果,有数据分析、挖掘、清洗和建模的经验;

　　3、有从事分布式数据存储与计算平台应用开发经验,熟悉hadoop生态相关技术并有相关开发经验,熟练运用sql,能高效的与数据技术团队进行沟通者尤佳;

　　4、较为丰富的数据仓库及数据平台的架构经验,精通数据仓库建模及etl设计开发。

etl岗位职责12

　　职责描述：

　　岗位职责：

　　1、根据概要设计，进行详细设计的.文档编写；

　　2、负责etl过程的设计/开发实施、单元测试；

　　3、负责项目中etl相关需求调研、源数据调研、整体设计；

　　4、负责项目中环境安装及配置。

　　5、维护和升级现有etl任务和存储过程，快速定位并修复现有系统缺陷

　　职位要求：

　　1、大专及以上学历，计算机相关专业，3年以上etl工作经验。

　　2、熟悉etl开发流程，有hadoop和etl工作经验；有从传统数据库抽取数据到hive数据仓库经验，了解sqoop应用原理者优先。

　　3、熟悉主流数据库sql server、oracle、db2、mysql等；熟悉开源的etl工具。

　　4、有海量数据处理工作经验，数据分析和挖掘经验者优先；

　　5、做过数据仓库、ods项目，对数据治理、数据标准及元数据有很好理念及实施经验的优先；

　　6、熟练使用脚本语言：如perl、python、shell等任意一种以上；

　　7、熟悉linux系统指令和性能优化；

　　8、善于学习新技术，对新技术有较强的接受能力；工作认真细致，愿意于人交流沟通。

　　9、有大型数据仓库系统研发、设计经验者优先；

　　10、熟悉java语言或hadoop技术者优先；

　　岗位要求：

　　学历要求：大专

　　语言要求：不限

　　年龄要求：不限

　　工作年限：3-4年经验

etl岗位职责13

　　职位描述：

　　岗位职责：

　　1、数仓开发、etl开发；

　　2、银行业数据模型的设计辅助、mapping和落地等；

　　3、shell脚本开发维护；

　　4、银行业务系统的'数据调研和分析；

　　任职要求：

　　1、本科及以上学历，计算机或相关专业；

　　2、2年以上oracle、db2等数据库开发经验，熟悉数据库体系结构；

　　3、精通pl/sql编程，精通存储过程开发；

　　4、熟悉linux操作系统；

　　5、熟悉etl调度工具和前端工具；

　　6、软件基础理论知识扎实，具备良好的数据结构、算法功底，有一定独立分析、技术研究能力；

　　7、良好的沟通能力、团队合作精神、乐于；

　　8、具备较强的自学能力，有一点抗压能力，能够接受出差性质的工作。

　　如有以下技术背景优先考虑：

　　1、有银行业系统开发经验；

　　2、参与过数仓项目开发、实施；

　　3、有数据治理项目经验的。

etl岗位职责14

　　职位描述：

　　工作职责:

　　1、负责数据平台的'etl设计开发、工作流调度设计、存储过程开发、自定义函数开发。

　　2、负责各业务系统数据源业务调研、数据调研、准确性完整性验证。

　　3、负责项目中与第三方系统基于数据库的数据对接、数据预处理、数据清洗、数据处理、数据导入、数据校验相关开发工作。

　　4、负责数据平台的etl相关软件和工具的研发和改进。

　　5、负责数据平台日常管理、跑批、维护、监控、处理临时数据需求。

　　任职资格:

　　1、本科计算机相关专业，5年工作经验

　　2、具备3年或以上etl数据处理相关开发经验

　　3、拥有3年以上sql开发

　　4、掌握hadoop?hive-hql?基础技能

etl岗位职责15

　　岗位职责

　　1.负责数据仓库模型设计和优化，基于hadoop／hive／odps(maxcouputer)、adb等进行数据仓库etl开发和维护工作；

　　2.负责日常作业的部署和调度研发及维护工作；

　　3.负责制定数据标准制定，数据质量标准，从而有效的进行数据治理工作。

　　4.负责各类业务数据的etl任务及数据仓库部署和管理，持续改进优化etl、分析处理、数据呈现等流程，协调海量数据压力问题；

　　任职资格

　　1.三年以上数据仓库／etl／数据处理相关开发经验；

　　2.具备mysql、oracle或hive等主流平台的数据开发及调优经验，熟悉python或java优先；

　　3.具备良好的学习能力，善于沟通，具备较强的'业务推动能力和执行力；

　　4.熟悉数据仓库体系架构、建模理论和模型设计思路，能用于项目实践；

　　5.有良好的快速学习能力和团队协作能力；

　　6.有java或python项目研发经验者先考虑；

　　7.有产品意识，善于沟通，积极主动，能够以目标为导向理解工作中相关任务的处理优先级关系。

【etl岗位职责】相关文章：

etl岗位职责03-06

etl工程师岗位职责（通用20篇）01-31