数据仓库工程师的岗位职责

时间:2023-04-02 17:49:02 岗位职责 我要投稿

数据仓库工程师的岗位职责

  在当下社会,岗位职责对人们来说越来越重要,岗位职责主要强调的是在工作范围内所应尽的责任。那么制定岗位职责真的很难吗?以下是小编收集整理的数据仓库工程师的岗位职责,仅供参考,欢迎大家阅读。

数据仓库工程师的岗位职责

数据仓库工程师的岗位职责1

  职责:

  1.负责企业级数据仓库设计、规划、建设、实施、管理,数据仓库架构设计与数据开发,创建数据仓库、数据集市

  2.熟悉数据仓库领域知识,从架构和技术层面参与建设数据仓库,包括元数据管理、数据质量、主数据管理、性能优化和调优。

  3.负责数据仓库平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地

  4.配合和协助数据分析/数据挖掘形成底层/中间层的`业务逻辑切片

  任职资格:

  1. 本科或硕士以上学历,计算机工程相关专业

  2. 熟悉大数据相关技术能力(Hadoop/MapReduce/Hive/Hbase等),熟练进行数仓Hive建设和软件架构,较强的数据抽象能力

  3.精通SQL,具备海量数据处理和Hive/Spark性能调优经验,3年以上大规模分布式数据仓库建设经验

  4.熟练使用Druid/Kylin之一进行数据挖掘模型设计,熟练掌握Java/Scala之一,具备良好的coding素养和习惯,了解脚本语言,如Python、Shell等

  5.强烈的责任心,工作态度积极主动,有较好的团队精神和沟通能力,工作细致认真

数据仓库工程师的岗位职责2

  职责:

  1、负责公司数据仓库/数据集市模型设计,优化现有数据仓库模型;

  2、参与数据仓库支持工具设计;

  3、参与数据仓库需求定义;

  4、参与数据治理、元数据建设、优化数据开发流程。

  任职资格:

  1、计算机、数学、统计或相关专业本科及以上学历,数据挖掘/平台和BI分析领域优先;

  2、 3年及以上数据仓库设计开发经验;

  3、熟悉HIVE,有HQL使用经验者优先;

  4、精通数据仓库建模方法,对kimball维度建模理论有深入的`了解;

  5、有实际数仓建设项目负责人经验者优先;

  6、熟悉Hadoop生态圈以及大数据环境的OLAP框架者优先。

数据仓库工程师的岗位职责3

  职责:

  1.建设公司级数据仓库,并根据业务变化持续迭代和优化;

  2.对业务数据进行梳理和抽象,建设数据仓库的数据模型;

  3.对业务数据进行采集、清洗、转换和存储;

  4.支撑BI、用户数据、用户运营、用户画像、房源数据、推荐系统等核心数据平台产品;

  5.研究大数据前沿技术,不断持续优化大数据平台,为业务提供价值。

  任职资格:

  1.本科及以上计算机、统计学、数据库、机器学习等相关专业,5年以上数据相关工作;

  2.对业务数据有敏锐的理解能力,并能快速梳理和分析业务数据;

  3.熟练掌握SQL语言、熟悉MySQL,对Shell、Java(主要开发语言)、Python编程非常熟悉;

  4.熟悉常用的ETL技术和原则;精通数据仓库数据库设计规范和实操;

  5.熟悉Hadoop、Hive、HBase、Spark、Storm等开源平台者优先;

  6.具有较强的.分析和解决问题的能力,良好的学习能力和团队合作精神,追求价值实现,认同目标管理和敏捷。

数据仓库工程师的岗位职责4

  职责:

  1、负责数据库业务程序开发(包括脚本、函数、存储过程等),编写数据库设计文档,进行SQL代码规范审核;

  2、负责数据库库表模型设计,数据库架构搭建和优化策略,和开发人员SQL代码开发技能提升;

  3、协助进行数据提取和数据分析,负责BI系统后端ETL数据抽取;

  4、利用相关建模软件(数据分析软件)进行数据建模工作。

  任职要求:

  1、有电商行业工作经验,熟悉电商业务优先;

  2、工作经验2—5年;

  3、本科及以上学历,计算机相关专业;

  4、熟悉Oracle,mysql等主流数据库,精通SQL各种查询汇聚,具有BI/数据仓库经验者优先;

  5、善于与人沟通,为人正直、诚信,有较强的事业心,对工作认真负责。

数据仓库工程师的岗位职责5

  职责:

  1、负责制定数据仓库平台技术体系架构、数据架构及规范;

  2、负责设计和实施公司业务数据的`实时/离线数据ETL架构方案;

  3、负责调度架构设计与开发;

  4、负责数据仓库平台运维以及日常数据运营等管理;

  5、负责关键技术攻关;

  任职要求:

  1、5年以上数据仓库项目开发经验,参与过数据仓库架构设计,对ETL开发流程、调度架构有深入理解;

  2、精通mysql、 oralce 、greenplum等至少一种数据库,丰富的SQL性能调优经验;

  3、熟练使用Java、Shell、Python、Perl等至少一种脚本语言;

  4、熟悉数据治理理论,数据质量、元数据管理流程和方法;

  5、了解Hadoop/Hive/HBase/Spark/Storm等技术及其生态圈;

  6、沟通能力好、责任心强,具有良好的团队合作精神和敬业精神;

数据仓库工程师的岗位职责6

  1、分析各工艺提供的工艺流程及设计规则,理解所用工艺器件的`平面和纵向结构;

  2、负责模拟及数模混合电路、电源类电路的全局/模块级版图规划、版图设计,版图验证、版图指导;

  3、能与模拟工程师紧密合作,完成版图性能优化,如匹配、噪音敏感性、ESD保护设计、Latch up等可靠性设计;

  4、负责项目相关文档的撰写,完成版图物理验证、包括DRC、LVS、ERC、EXT,完成寄生参数提取;

  5、能承担高压高性能模拟、混合信号模拟电路、大功率电源类IC产品版图设计,tapeout等工作。

数据仓库工程师的岗位职责7

  1、维护数据库稳定运行,持续发现和解决潜在的问题;

  2、负责数据库的性能优化,使用新技术和新架构满足日益增长的'业务需求;

  3、负责数据库的监控系统设计,为开发团队提供平台支持;

  4、负责数据库的运维方面的相关工作,包括数据库的安装部署、压力测试、备份恢复、知识库管理等

  5、负责数据库进行容量规划、架构设计,提高业务高可用性和容灾能力;

  6、负责数据库相关工作的整体规划,提供决策建议。

数据仓库工程师的岗位职责8

  职责:

  1、负责建设数据仓库架构,包括元数据管理、ETL调度、数据集成、OLAP等子系统的设计和开发;

  2、制定和推广数据字典,建立完善的元数据管理规范,负责数据质量监控设计;

  3、搭建和维护数据仓库表,解决业务人员在仓库系统流程、工具使用、数据处理等遇到的问题;

  4、负责数据仓库和其它业务系统接口。

  5、基于对数据的`理解和业务需求,对数据进行整理、分析和用户画像搭建。

  岗位要求:

  1、计算机相关专业本科及以上学历,有2年以上数据仓库、ETL工作经验;

  2、熟悉SQL、Shell等相关技术,有海量数据处理、ETL及任务调度优化、数据仓库建模等经验;

  3、熟悉Linux环境,了解Java/Python服务端系统开发;

  4、熟悉Hadoop/Spark/Hive/Hbase/Kafka/Flume等大数据技术者优先;

  5、逻辑清晰、对数据敏感,良好的沟通能力和协作能力,敢于接受挑战,能够承受压力;

数据仓库工程师的岗位职责9

  职责:

  1、负责ETL开发、作业调度和数据平台建设

  2、负责数据仓库的设计、开发和优化,建立结构层次合理、灵活可扩展的'数据仓库

  3、设计并研发BI分析相关的数据产品

  4、结合对数据的理解和业务需求,对数据进行整理、分析和挖掘

  任职要求

  1、计算机相关专业本科及以上学历,有2年以上数据仓库、ETL工作经验

  2、有海量数据处理、ETL及作业调度优化、数据仓库建模等经验

  3、熟悉Linux、SQL、Python或Java、Shell脚本,有Hadoop/Hive/Spark/HBase/Kylin/Impala等大数据技术使用经验

  4、逻辑清晰,对数据敏感,深入了解业务,具备自己独特的想法并能提出合理的建议

数据仓库工程师的岗位职责10

  职责:

  1负责大数据平台、数据仓库多维模型设计

  2负责大数据平台相关生产系统数据的抽取、清洗、转换等工作

  3负责BI平台设计与报表开发工作

  岗位要求:

  1、精通数据仓库建模理论,有参与过2个以上的数据仓库建设经验;

  2、精通ETL开发,熟悉数据的抽取、常用数据脚本编写、存储过程的编写;

  3、熟悉BI平台,有数据报表设计和开发经验;

  4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一种主流关系数据库;

  5、具备良好的团队协作精神,良好的.沟通能力;

  6、供应链、物流行业数据从业经历者优先。

数据仓库工程师的岗位职责11

  职责:

  1.利用数据仓库建模及相关技术,参与数据仓库模型的设计。

  2.参与企业级大数据仓库项目的落地开发。

  3.参与企业级主数据管理项目的实施落地。

  4.利用hadoop生态相关技术,负责大数据中心的数据处理流程,包括数据清洗、融合、统计、挖掘等。

  任职要求

  1.熟悉数据仓库产品,对数据处理、维度建模、数据分析等有深刻认识,具备数据仓库架构设计、模型设计、ETL设计的相关经验、熟悉数据仓库架构,熟悉数据仓库项目的实施流程,有一个以上企业级数据仓库项目设计经验者优先;

  2.熟悉数据治理及主数据管理的'理论知识,掌握主数据管理项目的实施方法和落地过程,至少参与过一个主数据管理项目的实施落地。

  3.精通JAVA、Python等编程语言;精通Oracle、Mysql等主流数据库,精通SQL;

  4.具备基于Hadoop大数据平台开发经验,熟悉hadoop生态体系,熟悉Hadoop、Hbase、Hive,Spark,Impala等常用组件,进行常用的ETL开发工作;

  5.熟悉常用的数据分析及数据挖掘方法及实现;

  6.具备较强的代码能力,有较强的数据分析能力;具备优秀的沟通能力、学习能力;

  7.相关专业硕士以上学历,或本科学历相关工作经验超过2年,具有智能制造领域相关经验或背景者优先,能力突出者可适当放宽要求。

数据仓库工程师的岗位职责12

  职责:

  1、负责制定数据仓库平台技术体系架构、数据架构及规范;

  2、负责设计和实施公司业务数据的实时/离线数据ETL架构方案;

  3、负责调度架构设计与开发;

  4、负责数据仓库平台运维以及日常数据运营等管理;

  5、负责关键技术攻关;

  岗位要求:

  1、计算机、数学、统计等相关专业本科及以上学历,3年以上数据仓库项目开发经验,参与过数据仓库架构设计,对ETL开发流程、调度架构有深入理解;

  2、精通mysql等数据库,丰富的`SQL性能调优经验;

  3、熟练使用Java、Shell等脚本语言;

  4、熟悉数据治理理论,数据质量、元数据管理流程和方法;

  5、了解Hadoop/Hive/HBase/Spark/Storm等技术及其生态圈;

  6、沟通能力好、责任心强,具有良好的团队合作精神和敬业精神;

数据仓库工程师的岗位职责13

  职责:

  1、负责数据仓库建设、设计、优化和落地

  2、负责数据ETL任务开发及日常维护

  3、对数据ETL任务进行性能调优及性能瓶颈分析

  4、学习新技术,提高整个平台的计算能力和效率

  任职要求:

  1、计算机相关专业,全日制本科及以上学历,2—5年工作经验

  2、熟悉数据仓库理论基础,对数据模型建设、应用层建设有比较丰富的'经验

  3、熟练使用SHELL或PYTHON

  4、熟悉HADOOP相关的大数据技术:HDFS,MAPREDUCE,HIVE

  5、能对HIVE进行性能分析及调优

  6、有MAPREDUCE开发经验优先

  7、良好的沟通能力、组织协调能力、应变能力,极强的责任心、学习能力。

数据仓库工程师的岗位职责14

  职责:

  1、为用户提供服务器技术服务,在分公司主管和公司业务部门的领导下,开展技术咨询、项目支持工作;

  2、负责总公司在分公司市场开展业务所需要的技术工作;

  3、协调分公司当地技术活动与总公司相应部门的协调;

  4、配合分公司完成全年的销售任务;

  5、履行各业务部的技术要求,加强项目管理。

  6、能够充分了解用户各个系统、存储、服务器、网络等情况,并结合高校用户实际情况提出可行的优化建议;、了解网络相关知识,熟悉TCP/IP协议线,有调试过交换机、路由器、防火墙、各类安全产品经验优先,有HCNP或等同以上证书优先。

  任职条件:

  (1)本科以上学历,计算机相关专业,具有一年以上计算机通信等相关工作经验者优先(优秀应届毕业生亦可);

  (2)掌握存储、服务器等技术和解决方案;

  (3)具有撰写标书的工作经验,从事过大型网络的'设计、施工或维护工作;

  (4)具有项目管理经验,能够按照ISO9001及相应要求进行项目管理;

  (5)具有较强的学习能力和表达能力;

数据仓库工程师的岗位职责15

  职责:

  1.参与传统数仓和大数据数仓日常开发工作;

  2.参与大数据仓库设计、规划和开发;

  3.参与日常工作的优化,提出建设性意见;

  4.负责管理项目,负责板块内的'资源协调、进度管理、交付管理;

  5.参与数据仓库、数据集市体系架构的设计、规划与开发, 参与大数据、ETL开发,sql性能优化。

  任职要求:

  1.全日制本科,计算机等相关专业。3年以上数仓开发经验,有银行、金融从业经验者优先。

  2.2年以上项目管理经验,具备PMP证书优先.

  3.熟悉oracle/hive/spark,熟悉数据处理和性能优化,有UDF自定义函数、MR开发经验优先;

  4.熟悉常用ETL工具,熟悉常用的Linux指令,熟悉shell/python任意一种脚本语言。

【数据仓库工程师的岗位职责】相关文章:

数据仓库工程师岗位职责03-13

数据仓库工程师岗位职责 15篇03-13

数据仓库工程师岗位职责 (15篇)03-13

数据仓库工程师的主要职责10-19

ERP系统中数据仓库的应用11-11

工程师的岗位职责01-04

工程师岗位职责07-07

工程师岗位职责01-09

IT工程师岗位职责10-03

工艺工程师工程师岗位职责12-21