大数据研发工程师岗位职责

时间：2023-04-06 13:41:23 岗位职责我要投稿

相关推荐

大数据研发工程师岗位职责

　　在发展不断提速的社会中，岗位职责的使用频率呈上升趋势，岗位职责具有提高内部竞争活力，更好地发现和使用人才的作用。想学习制定岗位职责却不知道该请教谁？下面是小编收集整理的大数据研发工程师岗位职责，仅供参考，大家一起来看看吧。

大数据研发工程师岗位职责

大数据研发工程师岗位职责1

　　职位描述：

　　工作职责：

　　1、广告各类在线业务的离线数据加工与在线数据服务开发与维护；

　　2、数据服务接口及产品需求研发迭代，代码review、bug修复及日常服务运维；

　　3、针对海量数据处理和查询需求，设计适应业务变化的'合理的多维数据分析系统架构，满足多样性的需求；

　　4、海量日志清洗加工，并抽象出可以多业务复用的数据模型。

　　任职要求：

　　1、计算机相关专业本科及以上学历，熟悉hadoop架构和工作原理，精通mapreduce编程；精通hive，有hql优化经验；

　　2、熟悉java，python等多种编程技术，编程能力强，有web服务开发经验，具备独立完成模块开发能力；

　　3、理解基本的设计模式，能将业务需求快速理解成技术需求；

　　4、熟练使用mysql，熟练使用elasticsearch、druid者优先；熟悉其原理者优先；

　　5、善于沟通，工作积极主动，责任心强，具备良好的团队协作能力；

　　6、具备良好的问题分析与解决能力，有较强学习能力和逻辑思维能力。

　　额外加分项:：

　　github等开源社区贡献者；

　　具备大规模分布式服务设计能力和经验。

大数据研发工程师岗位职责2

　　职位描述：

　　工作职责：

　　1、负责品牌广告业务平台及其相关系统的研发

　　2、负责现有系统的问题分析和改进，提高系统性能，保证系统稳定性

　　3、持续改进系统架构、核心算法或者核心技术等，保证系统高性能、高可用性和高可扩展性

　　4、新技术预研，完成项目的选型和设计，难点公关

　　任职要求：

　　1、本科及以上学历，一年以上大数据系统开发经验

　　2、熟悉python语言，熟练使用linux

　　3、对常用的redis、kafka等工具系统有一定的了解

　　4、有大数据集、分布式计算工具(hadoop，spark，hive，storm，es)等应用开发经验优先

　　5、有良好的'团队合作精神，较强的沟通能力

　　6、愿意深入了解业务知识，并能敏锐的发现业务痛点

　　7、有品牌广告系统、dmp、舆情、指数平台方向开发经验者优先

大数据研发工程师岗位职责3

　　职位描述：

　　工作职责：

　　1、打造业界领先的通用数据平台，包括实时数据流、数据仓库、调度系统、查询引擎，用户行为分析，abtest实验系统等，降低数据的使用门槛，实现数据的`最大价值

　　2、打造业界领先的存储、计算等分布式系统，为海量数据和大规模业务系统提供可靠的基础设施

　　任职要求：

　　1、熟悉多项大数据领域的开源框架，e.g. hadoop，hive，presto，storm，spark，kafka，hbase，redis，rocksdb，elasticsearch，druid，etc.

　　2、强悍的编码和troubleshooting能力

　　3、乐于挑战没有明显答案的问题，对新技术有强烈的学习热情

大数据研发工程师岗位职责4

　　职位描述：

　　岗位职责:

　　1、研究空间大数据前沿技术，参与空间大数据分析平台的设计和开发；

　　2、与算法工程师对接，参与空间大数据分析算法的代码实现；

　　3、其它相关的gis开发工作；

　　任职资格:

　　1、计算机、地理信息等相关专业背景，本科及以上学历；

　　2、对空间数据结构有深刻理解，熟悉空间数据库引擎；

　　3、扎实的编程基础，能够熟练运用java/scala语言；

　　4、熟悉大数据管理系统和分布式计算框架，如：hbase、cassandra、mongodb、spark/flink等；

　　5、熟悉gis领域主流的`分布式数据存储方案，有geomesa、geowave、geotrellis、geoserver、geotools、arcgis soe使用经验者优先；

　　6、具备较强的学习创新能力，能够通过快速学习解决实际问题；

大数据研发工程师岗位职责5

　　职位描述：

　　职责描述：

　　社交广告系统数据工程平台研发，偏重系统架构设计与实现，参加以下一到多项工作：

　　1.搭建数据仓库，存储并处理海量的实时、批量数据，满足广告业务的定向、分析和模型特征等业务需要

　　2.建设数据发布系统，将数据仓库的数据应用到广告在线业务

　　3.特征工程工程系统建设，为模型方提供特征数据流和特征离线调研、评估平台，并保证模型训练和预测阶段的特征线上与线下一致性；

　　4.用户标识映射、画像数据在线服务的开发与维护；

　　5.广告后台海量日志数据和广告主数据处理平台；

　　6.报表和广告策略的`统计数据生成和存储；

　　7.多维透视业务索引和存储；

　　任职要求：

　　重点大学本科以上学历，计算机相关专业；

　　具有扎实的数据结构和算法功底；

　　熟练使用java，scala，c/c++，python；

　　有海量数据处理经验，熟悉hadoop，spark，hbase，beam等开源框架；

　　有分布式系统，tensorflow等机器学习系统等经验优先；

　　有较强学习能力和逻辑思维能力，具备良好的问题分析与解决能力；

　　善于沟通，工作积极主动，责任心强，具备良好的团队协作能力

大数据研发工程师岗位职责6

　　职位描述：

　　工作职责：

　　1、针对字节跳动全局性数据分析要求，打造行业领先的数据平台，对全球用户数据，打造高效稳定的batch和rt数据流；

　　2、利用大数据工具，打造计算，传输，分析，监控平台；满足字节跳动全球用户产品的'指标计算，多维分析等需求；

　　3、构建高效稳定的数据服务，支撑字节跳动全球各重要业务的用户增长。

　　任职要求：

　　1、计算机、数学相关专业本科及以上学历，一年以上大数据开发工作经验，数据挖掘和bi分析领域优先；

　　2、熟悉多项大数据领域的开源框架，e.g. hadoop，hive，presto，storm，spark，kafka，hbase，redis，rocksdb，elasticsearch，druid等；

　　3、强悍的编码和学习能力；善于发现问题，积极探索原因。

大数据研发工程师岗位职责7

　　职位描述：

　　工作职责：

　　1、负责字节跳动用户行为的理解和建模，帮助公司各项业务满足用户需求，提升用户覆盖；

　　2、负责在数据建设层面，对用户隐私进行脱敏处理，保证后续数据研发过程中保护用户隐私；

　　3、探索、挖掘公司各项指标、用户满意度、用户增长上的各项规律，并利用这些规律帮助产品提升和扩展，增加用户满意度，扩展用户群体。

　　任职要求：

　　1、本科及以上学历，计算机、统计学、数学等相关专业；

　　2、强的编程和数据工具运用能力，有hadoop，hive，spark，kafka，elasticsearch或者其他的.大数据工具的使用经验；

　　3、对数据仓库、数据建模有一定认知；有过数据使用相关经验。

大数据研发工程师岗位职责8

　　职位描述：

　　工作职责：

　　1、负责抖音/火山等多个业务线的策略算法建设与优化工作；

　　2、通过海量数据，分析与挖掘各种潜在关联，不断优化策略效果，保障用户体验；

　　4、负责实时及离线特征抽取、融合，为数据挖掘及策略平台提供特征服务；

　　5、负责大数据能力在产品功能上的'落地，推动产品数据化和智能化。

　　任职要求：

　　1、计算机等相关专业，硕士或以上学历，3年以上大数据、人工智能相关经验；

　　2、熟悉hive/hadoop/spark/flink/clickhouse/druid等大数据开发技术；

　　3、有良好的业务和产品sense，执行力、推动力强优先；

　　4、有丰富的行业经验，丰富的专业知识，独特的行业见解，有战略视野和规划能力优先；

　　5、优秀的理解沟通能力，崇尚数据说话，深信数据在驱动业务、支撑决策上的价值优先。

大数据研发工程师岗位职责9

　　职位描述：

　　职责描述：

　　基于flink开源大数据计算平台，在阿里集团整体业务场景下，

　　1.研发实时流计算数据研发平台，支持包括核心电商、云计算、大文娱、创新业务在内的等各个综合业务板块务；

　　2.研发实时olap（elasticsearch，druid）赋能业务

　　3.研发实时智能化（算法加工程）赋能业务

　　任职要求：

　　1.具备扎实的计算机理论基础，对数据结构及算法有较强的功底

　　2.精通java语言编程，具备优秀的系统debug/profiling能力和经验

　　3.熟悉常见的面向对象设计模式，具备优秀的系统架构设计能力

　　4.熟悉hadoop/hbase/flink/spark streaming等开源大数据技术，在开源社区活跃者优先

　　5.熟悉elasticsearch/druid等olap开源技术优先

　　6.具备实际的`大数据业务开发经验以及良好的项目沟通和协调能力

　　7.具备实时流计算数据开发经验、全栈开发经验优先

大数据研发工程师岗位职责10

　　职位描述：

　　工作职责：

　　1、负责企业级大数据平台的研发，服务于今日头条公司内外的几十条产品线；

　　2、不局限于按部就班的研发工作，有强烈的'产品sense，对用户体验敏感，能够综合运用技术/产品/运营方案，提升终端用户体验；

　　3、平台产品包括但不限于：用户行为分析，查询中心，bi报表，元数据管理，abtest系统，数据开发套件等；

　　任职要求：

　　1、计算机等相关专业优先，本科及以上学历；

　　2、复合型人才，有研发能力的pm，或有产品运营能力的研发等均可投递；

　　3、做事积极主动，优秀的组织协调，推进执行能力，思路手段灵活，对用户体验负责；有数据分析，大数据研发，数据产品设计，售前售后等经验之一者，优先考虑；

大数据研发工程师岗位职责11

　　职位描述：

　　岗位职责：

　　1.负责全公司的数据平台数据可视化研发工作

　　2.独立完成数据可视化研发工作

　　任职要求：

　　1.计算机、电子通信、数学、统计或者相关专业本科及以上学历

　　2.熟练掌握java/python中的一种语言

　　3.熟悉数据可视化开发，熟悉echarts应用开发的.优先

　　4.熟悉web开发，熟悉html，js，css

　　5.熟悉quick bi的优先

　　6.具备良好的团队合作精神，工作有激情

　　7.对数据敏感，有产品思维的优先

大数据研发工程师岗位职责12

　　职位描述：

　　职责描述：

　　基于flink开源大数据计算平台，在集团整体业务场景下，

　　1.研发实时流计算数据研发平台，支持包括核心电商、云计算、大文娱、创新业务在内的等各个综合业务板块务；

　　2.研发实时olap（elasticsearch，druid）赋能业务

　　3.研发实时智能化（算法加工程）赋能业务

　　任职要求：

　　1.具备扎实的计算机理论基础，对数据结构及算法有较强的功底

　　2.精通java语言编程，具备优秀的系统debug/profiling能力和经验

　　3.熟悉常见的面向对象设计模式，具备优秀的`系统架构设计能力

　　4.熟悉hadoop/hbase/flink/spark streaming等开源大数据技术，在开源社区活跃者优先

　　5.熟悉elasticsearch/druid等olap开源技术优先

　　6.具备实际的大数据业务开发经验以及良好的项目沟通和协调能力

　　7.具备实时流计算数据开发经验、全栈开发经验优先

【大数据研发工程师岗位职责】相关文章：