大数据岗位职责 大数据岗位工作内容描述 (10篇）

大数据岗位职责是指从事大数据相关工作的人员，承担的工作职责和任务。具体来说，大数据岗位可能包括数据采集、数据预处理、数据建模、数据分析、数据可视化等职责。以下是有关于大数据岗位职责的有关内容，欢迎大家阅读！

大数据岗位职责1

职责：

1、规划及建设大数据平台;

2、负责大数据存储系统、分布式计算系统、挖掘算法等设计、研发以及维护、优化工作;

3、负责分析、挖掘、对抗各种产品安全层面的恶意行为;

4、参与项目的系统设计和核心代码开发，指导和培训其他工程师;

5、整理和提交技术文档，负责核心功能模块的代码编写和测试工作。

岗位要求：

1、计算机、统计学等相关专业本科及以上学历，具有深厚的数学、统计学和计算机相关知识，精通数据仓库和数据挖掘的相关技术，3年以上大数据开发相关经验;

2、具有非常扎实的Java基础，熟悉Shell、Python、R、Scala等一种以上语言;

3、算法基础扎实，熟悉常见的数据结构，了解分布式算法和分布式系统的技术原理;

4、精通MapReduce设计方法或Spark计算框架、对NoSQL，Hadoop、Hbase、Spark、Hive等主流云计算，大数据相关软件有充分的了解，并且有实践经验，能解决应用中的复杂问题;

5、熟悉大数据处理相关技术，包括但不限于Hadoop、Hive、Hbase、Impala、Spark，Kafaka、Flume、Sqoop、Storm、Redis等;

6、研读过Hadoop、Hbase、Hive源代码者，能够在特定业务中进行定制改造者优先;

7、具有海量数据处理、数据挖掘、数据分析相关项目的工作经验者优先。

大数据岗位职责2

职责：

1、参与大数据架构的规划设计，参与业务建模及数据化运营平台的搭建、运维，对业务流程与大数据的结合提出建议和解决方案;

2、完成基于大数据平台的业务项目的开发、实施和维护工作;

3、负责解决大数据平台建设过程中的技术难点和性能调优工作;

4、参与数据仓库设计，根据业务需求实现高效率高灵活性的查询，数据分析，数据挖掘;

5、负责高吞吐高可用数据实时和离线采集，高并发的大数据业务架构设计

6、负责研发技术发展方向，新技术领域的探索，引入并验证数据平台领域新技术，提供系统效能

7、对大数据技术及开源框架充满热情，具有钻研精神，能自我学习。

任职资格：

1、具有5年Java开发经验，熟悉Spring生态，掌握Hibernate、Mybatis任意一种ORM框架，掌握Oracle、Mysql数据库。

2、具有2年以上的大数据开发经验，熟悉大数据、数据仓库，分布式架构技术理论，具有大数据整体系统架构设计和实战经验，熟悉CDH、HDP、TDH至少一款大数据产品，有从无到有建设大数据平台经验者优先;

3、熟悉大数据组件的开发、搭建、维护以及性能优化;

4、较强的开发能力，必须熟练使用相关开发语言(Java/Python/Scala/Shell等)，熟悉大数据生态、关系数据库和NOSQL数据库、Linux等相关知识，能够独立完成并指导初级开发人员完成大数据相关的技术实现和调优;

5、熟悉Hadoop、Hbase、Hdfs、MapReduce、Yarn、Zookeeper、Hive、Impala、Spark、Flink、Kafka、Flume、Kylin、Phoenix等组件或技术，能阅读源码跟踪问题。

6、熟练掌握Spark、flink任意一种计算框架，掌握MapReduce计算框架原理，并有实际项目开发经验。

7、熟练掌握HDFS、HBase、Kafka、Redis、Hive、Sqoop、Shell等技术和组件，熟练应用开发，必须熟悉复杂数据查询性能调优，包括实时查询和离线批处理查询，服务器和生态组件的参数优化。

8、精通高级算法并有与业务结合落地优先;

9、扎实的独立分析问题、解决问题的能力，具备良好的需求理解能力、沟通协调能力和团队合作精神;有很强的数据设计抽象能力，善于从复杂的数据问题中找到关键路径，并且擅于跟业务团队就业务问题进行良好的沟通，能推动业务的指标化、量化;

10、有较好的学习能力、团队协作精神，认真细心，有强烈的责任心，爱岗敬业，有较高抗压能力，有较好的工作稳定性。

大数据岗位职责3

职责：

1.结合项目或产品涉及的具体业务场景，对数据进行清洗、计算与加工;

2.思路清晰，可快速响应数据处理的需求，评估并给出合理的解决方案，并采用合理的方式处理需求;

3.积极主动，能够与团队成员进行有效沟通，并完成数据处理结果的核对与对接;

4.完成上级交办的工作或任务。

岗位要求

1.计算机相关专业大专以上学历;

2.2年以上大数据产品或项目开发经验，精通Hadoop生态圈，熟练使用Spark，HBase、Hive、Kafka、Redis等;

3.精通SQL，熟练使用HSQL实现复杂数据处理逻辑，并具备数据处理调优的能力;

4.熟悉Linux开发环境，熟悉Linux的shell命令。

5.具有良好的逻辑思维能力和严谨的程序开发思想，具备独立问题排查与处理的能力;

6.良好的团队精神和合作意识，强烈的责任心，对工作有激情，良好的沟通能力，能吃苦耐劳;

7.有大数据项目或产品背景者优先;

8.有使用SparkSQL进行数据处理，并具有SparkSQL优化经验者优先。

9.有Python或者Shell脚本开发经验优先

大数据岗位职责4

职责：

1、负责异构数据系统和大数据平台的集成与融合;

2、负责数据挖掘算法的设计及对海量数据进行挖掘分析;

3、负责分布式数据仓库平台、海量数据批处理平台、实时数据处理平台等系统开发;

4、参与海量数据处理，业务数据体系的设计、数据统计、分析及数据建模;

5、参与数据平台各系统的性能分析与系统优化，不断提高系统运行效率;

6、完成领导交办的其他任务。

任职资格：

1、计算机及其相关专业，大专及以上学历。两年以上大数据应用经验;

2、具备实时处理框架的设计和开发能力，熟练掌握Storm、Sparkstreaming等大数据实时处理框架中的一种;

3、熟悉Spark、R、Hadoop、Hbase、Hive、ElasticSearch/Solr等相关技术;

4、熟悉Scala、熟悉Linux开发环境，能进行shell脚本的编写;

5、具有较强的逻辑分析能力，高度的责任心及团队合作精神;

6、具有实际大数据项目的成功经验者优先考虑。

大数据岗位职责5

职责：

1、参与南方电网软件产品(项目)前/后台服务开发，要求高性能、高可用、高并发;

2、独立完成产品模块(项目)核心代码开发、业务代码开发、系统性能调优等工作;

3、根据分配任务制定开发计划并按时完成相应模块的设计、开发和单元测试;

4、参与产品(项目)相关系统需求分析以及撰写相关系统设计文档;

要求：

1.五年左右大数据研发岗位工作经验

2、丰富大数据开发经验：熟悉企业大数据常用技术，熟悉Spark、Flume、Hbase、Hadoop、Kafka，ES技术;

3、具有大型应用系统开发经验，具有分布式、高并发、高性能等架构经验，具有一定团队管理经验者优先;

4、了解J2EE技术平台及主流框架，具有SpingMVC、SpringBoot、Springcloud、Mybatis、Redis等框架开发经验;

5、了解HTML5,CSS3,JavaScript,Ajax,jQuery等Web前端技术，熟悉jQuery、Bootstrap、AngularJS，VUE等主流前端JS框架中的一种;

大数据岗位职责6

职责：

1.有独立工作能力，工作踏实认真，以及较强的团队协作精神。

2.负责日志大数据平台的搭建和规划;

3.在总体架构设计下，完成日志大数据产品的设计、搭建、维护和调优，技术文档的编写与维护;

4.参与业务日志的大数据分析;

5.及时反馈开发中遇到的难点问题，沟通并寻求解决方案，按阶段有计划地完成开发任务

任职资格:

1、计算机等相关专业本科以上学历，2年以上开发经验;

2、熟悉linux操作系统，熟悉shell脚本语言，精通Java，有较强的开发能力;

2、熟练使用SQL，熟悉Mysql、MongoDB、Hive等数据库技术的基本操作及原理;

3、熟悉Hadoop/Spark生态系统组件的使用，至少有1年的Spark(Core/Streaming/SQL)开发经验;

4、熟悉Elastic产品线(如Elasticsearch、Kafka、Kibana、Logstash)的使用方法，了解常见优化方案，熟悉Elasticsearch部署、监控及性能调优;

5、熟悉数据挖掘、机器学习、网络数据分析等技术优先;

大数据岗位职责7

职责:

1、负责大数据平台的技术和产品的设计、开发、优化和维护;

2、负责大数据平台设计文档编写，线上产品的维护;

3、负责系统性能优化，解决各类潜在系统技术风险，保证系统的安全、稳定、快速运行;

4、负责整个产品平台的搭建、多维数据库建设及管控流程设计;

5、参与指标设计，数据建模，负责将数据模型在系统中实现;

6、负责数据抽取、数据交换、实时计算等框架研究及相关产品的研发;

7、负责追踪整体产品过程及质量把控。

任职要求：

1、专业技能：精通Hadoop生态圈中的一项或几项技术，深入了解Hadoop及相关组件的部署及调优;设计或开发过大容量，高性能，高可用，易扩展的分布式系统;熟悉实时计算/流式计算系统，至少熟悉一项Nosql技术;具有扎实java功底及开发能力;对hadoop，hive，hbase，spark等相关源码有一定了解;

2、学历背景：计算机相关专业本科及以上学历;

3、工作经验：3年以上JAVA开发经验及1年以上大数据研发经验

4、能力素质：具有出色的抽象设计能力，思路清晰，善于思考，良好的团队合作能力、沟通能力、较好的自学能力，具有敬岗爱业的精神。

5、有团队管理经验者优先。

大数据岗位职责8

职位描述：

职责描述：

基于flink开源大数据计算平台，在阿里集团整体业务场景下，

1.研发实时流计算数据研发平台，支持包括核心电商、云计算、大文娱、创新业务在内的等各个综合业务板块务；

2.研发实时olap（elasticsearch，druid）赋能业务

3.研发实时智能化（算法加工程）赋能业务

任职要求：

1.具备扎实的计算机理论基础，对数据结构及算法有较强的功底

2.精通java语言编程，具备优秀的系统debug/profiling能力和经验

3.熟悉常见的面向对象设计模式，具备优秀的系统架构设计能力

4.熟悉hadoop/hbase/flink/sparkstreaming等开源大数据技术，在开源社区活跃者优先

5.熟悉elasticsearch/druid等olap开源技术优先

6.具备实际的大数据业务开发经验以及良好的项目沟通和协调能力

7.具备实时流计算数据开发经验、全栈开发经验优先

大数据岗位职责9

职位描述：

职责描述：

1、负责大数据工作坊部门管理工作，组建、管理和带领团队承担公司大数据技术研发相关工作；

2、负责牵头研究制定跨域多维平台城市级大数据技术体系规划、数据标准制定及建模等；制定大数据技术路线；

3、负责牵头研究制定大横琴科技企业级大数据技术体系规划、数据标准制定及建模等；

4、参与跨域多维城市大数据云平台项目，全面负责大数据平台系统搭建、关键技术选型及落地实施等工作；

5、负责数据建模相关的关键算法研究，及核心代码实现；

6、负责城市及企业数据资产建设，包括采集、清洗、管理、对外共享服务；

7、负责数据资产运营，挖掘数据资产价值，对外提供数据服务；

8、负责大数据前沿技术的追踪及研究，跟踪行业平台产品和相关解决方案。

任职要求：

1、教育背景：数学/统计学/计算机相关专业硕士研究生以上学历优先；

2、工作经验：5年以上大数据/人工智能相关工作经验，有10人以上团队管理经验，具有2个以上大规模数据平台落地实施经验者优先；

3、知识技能：

（1）对业务数据和业务敏感，有紧密跟踪业务运营和发展的数据运营经验，比如bi、数据分析和挖掘；在用户行为日志采集、海量数据处理、数据建模、业务理解方面有丰富经验；

（2）对业务数据模型、数据仓库、数据分析、数据挖掘等整个大数据系统的架构有清晰的思路和落地执行的方案，对数据服务、数据产品的模式有清晰的理解，并能带领团队实施；

（3）至少熟悉一种编程语言，如：java、python、r、shell、sql等；熟悉当前主流的开源数据平台和工具以及数据云服务，如：hadoop、hbase、spark等；并具有hand-on能力；

（4）具备非常强的学习能力、较好的逻辑思维能力，较强的抽象、概括、总结能力；较好的沟通交流能力，善于主动思考和行动，乐于解决具有挑战性的问题；

大数据岗位职责10

大数据技术经理岗位职责

大数据技术经理职位描述:

1、主要负责产品和项目的开发管理工作，带领团队保质保量完成开发任务;

2、参与产品需求分析、架构设计、技术选型等工作，参与技术框架构建;

3、负责项目开发进程管理，核心代码编写;

4、负责制定相关技术解决方案，解决开发中的技术问题;

5、负责对外的产品技术支持

任职要求:

1、有2-3年的技术管理经验，参与过企业级产品研发过程;

2、精通java、熟悉springmvc开发架构

3、精通hadoop生态圈中常用技术，如hbase、hive、zookeeper、storm、spark等，有华为fi、腾讯tbds、cdh或hdp实际应用经验;

4、精通linux平台，熟悉shell、python其一或多种;

5、熟悉系统部署、开发、测试、维护过程与方法;

6、能够及时地跟进项目进度、管理项目风险，及时发现并解决项目问题，推动项目团队朝目标前进;

7、综合素质高，具有良好的执行力和责任心，有较强的组织能力和沟通能力;

8、具有pmp证书优先。

职位描述:

1、主要负责产品和项目的开发管理工作，带领团队保质保量完成开发任务;

2、参与产品需求分析、架构设计、技术选型等工作，参与技术框架构建;

3、负责项目开发进程管理，核心代码编写;

4、负责制定相关技术解决方案，解决开发中的技术问题;

5、负责对外的产品技术支持

任职要求:

1、有2-3年的技术管理经验，参与过企业级产品研发过程;

2、精通java、熟悉springmvc开发架构

3、精通hadoop生态圈中常用技术，如hbase、hive、zookeeper、storm、spark等，有华为fi、腾讯tbds、cdh或hdp实际应用经验;

4、精通linux平台，熟悉shell、python其一或多种;

5、熟悉系统部署、开发、测试、维护过程与方法;

6、能够及时地跟进项目进度、管理项目风险，及时发现并解决项目问题，推动项目团队朝目标前进;

7、综合素质高，具有良好的执行力和责任心，有较强的组织能力和沟通能力;

8、具有pmp证书优先。