etl岗位职责

时间:2023-03-06 08:17:14 岗位职责 我要投稿

etl岗位职责

  在社会一步步向前发展的今天,人们运用到岗位职责的场合不断增多,岗位职责是指一个岗位所需要去完成的工作内容以及应当承担的责任范围,职责是职务与责任的统一,由授权范围和相应的责任两部分组成。什么样的岗位职责才是有效的呢?以下是小编为大家整理的etl岗位职责,仅供参考,大家一起来看看吧。

etl岗位职责

etl岗位职责1

  职责描述:

  1、负责数据仓库建模,业务数据集市建设开发

  2、负责数据仓库etl流程的优化及解决etl相关技术问题、etl流程监控,保障数据平台架构稳定性

  3、建立数据分析指标体系,不断完善指标体系和分析模型;

  4、通过专项分析,输出专项分析报告

  5、负责数据分析相关需求和数据测试的.工作

  任职要求:

  学历要求:

  全日制统考类本科及以上学历,计算机、通信、电子、软件工程、统计学、应用数学、数据分析等相关专业

  专业技能:

  1、熟悉数据仓库各类模型建模理论,熟悉数据仓库数据分层架构和多维数据模型设计;

  2、丰富的数据分析经验,熟练掌握sql、hql、sparksql,擅长运用其分析并完成复杂业务数据查询

  3、掌握至少一种数据库开发技术:mysql/oracle/db2等,灵活运用sql实现海量数据etl加工处理;

  4、熟悉hadoop生态(如:hdfs/mapreduce/hive/hbase等),并有相关实践经验;

  5、熟练掌握一门或多门编程语言(如:python/shell/java/c++等),并有大型项目建设经验者优先;

  素质:

  1、敏锐的数据观察和分析能力,及时发现和分析其中隐含的变化和问题并给出建议;

  2、良好的沟通能力和团队精神,较强的学习能力,能承担一定的工作压力。

  经验:

  至少2年以上数据仓库(离线&实时)模型设计开发、etl设计开发的相关经验,有通信运营商o域/b域大数据、智慧城市大数据的数据仓库、etl设计研发经验者优先'

etl岗位职责2

  1.5年以上做bi、数据仓库etl开发方向,行业不限;

  2.过去做北京汽车项目;

  3.英语能基本读写;

  4.开发经验丰富,能迅速完成交办相关工作;

  5.沟通能力良好,具备团队合作精神,能适应一定压力开展工作。 1.5年以上做bi、数据仓库etl开发方向,行业不限;

  2.过去做北京汽车项目;

  3.英语能基本读写;

  4.开发经验丰富,能迅速完成交办相关工作;

  5.沟通能力良好,具备团队合作精神,能适应一定压力开展工作。

etl岗位职责3

  职责描述:

  1、负责数据分析、加工、清理、处理程序的开发

  2、负责数据相关平台的搭建、开发、维护、优化

  3、分布式平台应用开发(hadoop/spark/hive/hbase)

  4、开发数据统计系统,各类统计程序报表。

  任职要求:

  1、2年以上java或python开发工作经验,java基础扎实;

  2、熟悉常见在线与离线大数据系统, 如hive, hbase, es, kafka等的.工作原理与开发调优; 具有mapreduce开发经验,有实际大数据项目经验;

  3、熟练掌握oracle、mysql等主流数据库上的开发;

  4、具有良好的沟通能力、组织能力及团队协作精神,有较强的分析和解决问题的能力.

etl岗位职责4

  职位描述:

  工作职责:

  1、负责数据平台的`etl设计开发、工作流调度设计、存储过程开发、自定义函数开发。

  2、负责各业务系统数据源业务调研、数据调研、准确性完整性验证。

  3、负责项目中与第三方系统基于数据库的数据对接、数据预处理、数据清洗、数据处理、数据导入、数据校验相关开发工作。

  4、负责数据平台的etl相关软件和工具的研发和改进。

  5、负责数据平台日常管理、跑批、维护、监控、处理临时数据需求。

  任职资格:

  1、本科计算机相关专业,5年工作经验

  2、具备3年或以上etl数据处理相关开发经验

  3、拥有3年以上sql开发

  4、掌握hadoop?hive-hql?基础技能

etl岗位职责5

  etl高级工程师职位要求

  1、计算机、数学或统计等专业,本科以上学历;

  2、精通sql语言;熟悉数据仓库设计、建模;

  3、精通python,能够编写脚本处理、分析数据;

  4、熟悉批量离线式分布式并行计算技术(如hadoop、mapreduce、hive、spark等)

  5、熟悉sqlserver、mysql数据库;了解redis等非关系型数据库;

  6、熟悉至少一种常用etl工具(如kettle、ssis、gobblin);了解常用报表工具(如reporting services以及各类开源报表);

  7、了解常用数据挖掘方法(回归、决策树、聚类等)。

  etl高级工程师岗位职责

  1、负责国际网站后台数据仓库搭建、维护;

  2、运用各类大数据工具设计etl流程,消费生产环境埋点、日志等数据;

  3、日常数据监控以及数据预警,异常数据解读挖掘,并与业务同事沟通解决方案;

  4、分析用户的特征和行为数据,挖掘不同类型用户的行为特性,为实际的业务运营提供数据支持;

  5、从数据分析结果中寻找insight和商业价值,并以简明扼要的`形式传导到其他部分,指导实际的业务运营;

  6、处理国际网站的临时数据需求,并对于常用重要需求转化成数据产品。

etl岗位职责6

  bi数据分析-数据开发(etl工程师)阿里健康阿里健康科技(中国)有限公司,阿里健康,阿里健康科技(北京)有限公司,阿里数据开发

  1、构建全面的、准确的、能反映服务业务线特征的整体指标体系,并基于业务监控指标体系,及时发现与定位业务问题;

  2、根据日常业务及产品团队的'需求,提供业务监控,业务评估的各项数据指标;

  3、根据业务发展情况,从数据中发现业务及产品的问题点及机会点,给业务及产品提供相应的方向;

  4、沉淀分析思路与框架,提炼数据产品需求,与相关团队(如技术开发团队)协作并推动数据产品的落地;

  5、与业务协作(行业团队)组织数据的理念、技能、工具的培训。

  岗位描述:

  1.负责各条业务线数据仓库搭建,场景梳理,数据维护;

  2.负责公司内部跨部门项目数据场景梳理,资源调配工作;

  3.负责从已有的数据中挖掘对业务目标起到推动作用的分析结论。

  岗位要求:

  1、统计、数学、信息技术、生物统计本科以上学历,有电商bi工作经验优先;

  2、良好的数据敏感度,能从海量数据提炼核心结果,有数据分析、挖掘、清洗和建模的经验;

  3、有从事分布式数据存储与计算平台应用开发经验,熟悉hadoop生态相关技术并有相关开发经验,熟练运用sql,能高效的与数据技术团队进行沟通者尤佳;

  4、较为丰富的数据仓库及数据平台的架构经验,精通数据仓库建模及etl设计开发。

etl岗位职责7

  职责描述:

  1、 负责数据仓库建模和etl技术工作,参与数据项目各类数据源etl的接口设计和文档、流程规范;

  2、负责项目中数据清洗、数据处理、数据校验相关开发工作;

  3. 配合使用主流数据挖掘工具、etl工具、bi展现的设计和开发;

  4、 能够按照公司全面质量管理的要求,高质量地完成各类技术支持工作。

  任职要求:

  1.计算机相关专业本科以上学历,3年以上工作经验;

  2.熟悉etl开发、数据仓库设计流程,熟悉mysql、oracle, ms sql server等主流数据库,表结构设计,存储过程编写;

  3.有一定的`sql调优知识和经验,具有bi相关知识;

  4.有hana、hive经验优先;

  5.具备财务基础知识或者erp基础知识者优先;

etl岗位职责8

  职位描述:

  1.基于公司数据建设需要,完成数据平台构建、数据内容开发等工作。包括:数据平台基础设施建设、数据采集、etl、数仓及数据集市、数据应用产品等开发工作;

  2.充分理解需求文档,基于此进行自测,交付高质量的.开发代码和数据内容;

  3.工作中对数据平台基础设施、数据内容建设等工作主动深度思考,提升效能并积极建言、促进组织和系统发展;

  4.团队日常管理,及其他根据部门需要安排事宜。

  岗位要求:

  1.信息技术类、数学、统计学、计量经济学类专业,本科,工作年限5年以上;

  2.熟悉数据仓库模型设计和精通etl开发经验,掌握3nf,kimball的维度建模设计方法,具备海量数据加工处理(etl)相关经验;

  3.掌握至少一种数据库开发技术:oracle、teradata、db2、mysql等,精通并灵活运用sql实现海量数据etl加工处理;

  4.熟悉linux系统常规shell处理命令,灵活运用shell做的文本处理和系统操作;

  5.有从事分布式数据存储与计算平台应用开发经验;

  6.熟练掌握一门或多门编程语言,并有大型项目建设经验者优先,重点考察python、perl、java;

  7.熟悉数据仓库领域知识和技能者优先,包括但不局限于:数据开发测试工具与方法、数据质量等;

  8.良好的语言沟通与表达能力和自我驱动动力。

  注:此岗位需在杭州一个月

etl岗位职责9

  职位描述:

  岗位职能:

  1.基于公司数据建设需要,完成数据平台构建、数据内容开发等工作。包括:数据平台基础设施建设、数据采集、etl、数仓及数据集市、数据应用产品等开发工作;

  2.充分理解需求文档,基于此进行自测,交付高质量的开发代码和数据内容;

  3.工作中对数据平台基础设施、数据内容建设等工作主动深度思考,提升效能并积极建言、促进组织和系统发展;

  4.其他根据部门需要安排事宜;

  岗位要求:

  1.信息技术类、数学、统计学、计量经济学类专业,研究生及以上学历。优秀候选人学历可以放宽至本科,工作年限5年以上;

  2.熟悉数据仓库模型设计和精通etl开发经验,掌握3nf,kimball的维度建模设计方法,具备海量数据加工处理(etl)相关经验;

  3.掌握至少一种数据库开发技术:oracle、teradata、db2、mysql等,精通并灵活运用sql实现海量数据etl加工处理;

  4.熟悉linux系统常规shell处理命令,灵活运用shell做的`文本处理和系统操作;

  5.有从事分布式数据存储与计算平台应用开发经验,熟悉hadoop生态相关技术并有相关实践经验着优先,重点考察hdfs、hive(hql)、hbase;

  6.熟练掌握一门或多门编程语言,并有大型项目建设经验者优先,重点考察python、perl、java;

  7.熟悉数据仓库领域知识和技能者优先,包括但不局限于:数据开发测试工具与方法、数据质量等;

  8.良好的语言沟通与表达能力和自我驱动动力。

etl岗位职责10

  职责描述:

  1、负责大数据平台的设计以及开发工作,维护升级等等;

  2、负责离线/实时的数据存储和加工处理,保证数据质量,负责数据监体系的建立和维护;

  2、负责海量数据的清洗、处理和挖掘工作,支持数据分析师和算法工程师的数据需求;

  3、对数据敏感,基于海量数据进行业务分析,灵活运用可视化工具,参与产品与应用的.数据研发,分析数据成因,发掘数据商业价值;

  4、研究前沿技术,解决实际场景中的业务问题,优化离线/实时大数据计算任务的性能。

  任职要求:

  1、计算机或相关专业本科及以上学历,3年以上大数据开发经验;

  2、熟悉linux/unix开发环境,精通python/java/scala/shell两种以上;

  3、熟悉常用开源分布式系统,对hadoop/hive/spark/storm/flink/hbase/kylin中的一项或多项有深入了解;,能够独立排查及解决分布式系统的问题;

  4、良好的团队精神和合作意识,强烈的责任心,对工作有激情,良好的沟通能力,能吃苦耐劳;

  5、有2年以上的电商领域的优先。

etl岗位职责11

  职位描述:

  1、负责公司数据平台项目的etl设计、实现以及优化。

  2、负责etl流程优化,关键问题解决、团队技术与引导和前瞻性技术研究;

  3、参与数据仓库数据模型设计,进行数据质量监测、校验和提升;

  4、使用etl技术对医院信息系统数据进行提取、清洗、转换和整合;

  岗位要求:

  1、至少三年以上etl数据开发经验;计算机相关专业本科以上学历,熟悉数据分析与数据挖掘理论;

  2、熟悉dw实施方法论和常规etl构架,有整体etl开发经验,深刻理解元数据管理;

  3、熟练掌握oracle、sql server、mysql、postgresql等至少两种主流数据库的使用;

  4、熟练掌握ssis、kettle、informatica等至少一种etl工具的使用;

  5、精通sql、存储过程、函数的使用,具备编写、优化复杂sql的.能力;

  6、对数字,数据敏感,具备良好的逻辑思维能力;

  7、具备专业的业务研究、分析能力,能够独立开展业务调研、数据分析、数据建模、报告编写工作;

  8、有医疗卫生数据平台开发、实施经验优先;

  9、能适应长期出差。

etl岗位职责12

  职位描述:

  工作职能:

  1、负责海量数据的etl处理。

  技能要求:

  1、熟悉oracle数据库及sql开发;

  2、精通java、shell;

  3、掌握hadoop、hive、kafka、elasticsearch、flink或多项大数据开发技术;

  4、有flink相关开发经验优先。

  福利待遇:

  双休五险一金法定节假日健身房出国旅游

  免费体检带薪年假年终奖

etl岗位职责13

  职责描述:

  岗位职责:

  1、根据概要设计,进行详细设计的文档编写;

  2、负责etl过程的`设计/开发实施、单元测试;

  3、负责项目中etl相关需求调研、源数据调研、整体设计;

  4、负责项目中环境安装及配置。

  5、维护和升级现有etl任务和存储过程,快速定位并修复现有系统缺陷

  职位要求:

  1、大专及以上学历,计算机相关专业,3年以上etl工作经验。

  2、熟悉etl开发流程,有hadoop和etl工作经验;有从传统数据库抽取数据到hive数据仓库经验,了解sqoop应用原理者优先。

  3、熟悉主流数据库sql server、oracle、db2、mysql等;熟悉开源的etl工具。

  4、有海量数据处理工作经验,数据分析和挖掘经验者优先;

  5、做过数据仓库、ods项目,对数据治理、数据标准及元数据有很好理念及实施经验的优先;

  6、熟练使用脚本语言:如perl、python、shell等任意一种以上;

  7、熟悉linux系统指令和性能优化;

  8、善于学习新技术,对新技术有较强的接受能力;工作认真细致,愿意于人交流沟通。

  9、有大型数据仓库系统研发、设计经验者优先;

  10、熟悉java语言或hadoop技术者优先;

  岗位要求:

  学历要求:大专

  语言要求:不限

  年龄要求:不限

  工作年限:3-4年经验

etl岗位职责14

  职位描述:

  岗位职责:

  1、数仓开发、etl开发;

  2、银行业数据模型的设计辅助、mapping和落地等;

  3、shell脚本开发维护;

  4、银行业务系统的数据调研和分析;

  任职要求:

  1、本科及以上学历,计算机或相关专业;

  2、2年以上oracle、db2等数据库开发经验,熟悉数据库体系结构;

  3、精通pl/sql编程,精通存储过程开发;

  4、熟悉linux操作系统;

  5、熟悉etl调度工具和前端工具;

  6、软件基础理论知识扎实,具备良好的'数据结构、算法功底,有一定独立分析、技术研究能力;

  7、良好的沟通能力、团队合作精神、乐于;

  8、具备较强的自学能力,有一点抗压能力,能够接受出差性质的工作。

  如有以下技术背景优先考虑:

  1、有银行业系统开发经验;

  2、参与过数仓项目开发、实施;

  3、有数据治理项目经验的。

etl岗位职责15

  职位描述:

  岗位职责:

  1、负责项目实施过程中所对接的第三方系统的数据处理及质量分析,并完成项目实施过程中的etl工作;

  2、熟练掌握etl设计过程,参与大数据平台架构的设计、开发、流程优化及解决etl相关技术问题;

  3、与用户和项目组进行有效沟通,采集项目需求,并提出相应的解决方案;

  4、负责监控etl并解决出现的问题及性能调优,协助完成bi数据建模;

  5、根据规范,完成项目相关设计开发文档的整理与编写;

  任职要求:

  1、统招全日制本科及以上学历,具备大数据处理经验尤佳;

  2、熟悉etl工具,具有一定项目经验,负责监控etl并解决出现的问题及性能调优;

  3、熟悉hive和hadoop;

  4、具备一定的编程能力,熟悉至少一种常用编程语言,java尤佳;

  5、掌握关系数据库常见用法,熟悉常见软件的安装,参与过项目的'etl工具开发项目的完整分析、设计、开发流程者优先;

  6、具备较强的自我学习能力、有较强分析问题的能力、人际沟通能力、团队协作能力和工作责任感;

【etl岗位职责】相关文章:

etl岗位职责15篇03-06

etl工程师岗位职责(通用20篇)01-31

商场数据仓库ETL系统架构设计05-09

仓管员的岗位职责-岗位职责01-15

值班岗位职责-岗位职责07-25

业务代表的岗位职责-岗位职责01-11

保险内勤的岗位职责-岗位职责01-11

销售分析的岗位职责-岗位职责01-11

库管岗位职责-岗位职责01-10