大数据架构师岗位职责(15篇)
在日常的学习、工作、生活中，肯定对各类范文都很熟悉吧。那么我们该如何写一篇较为完美的范文呢？以下是小编为大家收集的优秀范文，欢迎大家分享阅读。
大数据架构师岗位职责篇一
1、负责大数据基础平台的整体规划和架构设计，参与需求分析、技术决策以及详细设计;
2、为现有大数据集群hadoop、hive平台提供性能调优、架构优化重组，解决系统中的关键问题和技术难题;
3、把握基础业务复杂系统的设计，确保系统的架构质量，编写核心部分代码;
4、持续挑战新的技术方向，攻克大数据量，高并发，稳定性等各种技术难点。
任职资格:
1、计算机或相关专业本科及以上学历;
2、5年以上hadoop的应用开发经验，5年以上数据仓库开发实践经验，至少一个企业级数据仓库项目开发经验或者大数据处理项目经验;
3、良好的编程开发能力，精通php及其他开发语言;
4、熟悉mysql等数据库经验，具备优秀的sql编写、调优能力;
5、熟练掌握linux常规命令与工具，精通shell, perl, python等脚本语言至少一种;
6、软件基础理论知识扎实，具有良好的数据结构、算法功底;
7、对新技术敏感，学习能力强，乐于接受挑战，具有良好的团队合作精神;
大数据架构师岗位职责篇二
职责：
1、负责企业大数据平台的基础建设、管理及制定拓展规划;
2、负责大数据平台相关自动化服务工具的设计、开发;
3、参与hadoop、hbase、spark等核心平台组件的开发、优化;
4、对平台特殊场景化的数据应用制定相关实践方案;
5、大数据团队的搭建。
任职资格:
1、统招本科以上学历，计算机等相关专业，5年以上工作经验;
2、具有hadoop等大规模集群管理经验、海量(pb)数据处理经验;
3、精通hadoop、hive、hbase等离线平台相关组件的原理机制;
4、了解或熟悉storm/spark/redis/kafka/mongodb等分布式系统;
5、熟悉高并发、分布式开发等相关知识，具有后端服务优化相关经验;
6、熟悉爬虫常用框架以及反爬技术;
7、具有良好的沟通能力、分析问题与攻关问题的能力;
8、有责任心，工作积极，对新领域新技术有热情。
大数据架构师岗位职责篇三
职责：
负责大数据平台架构的规划和设计，主导系统的架构设计和核心模块开发，确保项目质量和关键性能指标达成;
负责大数据平台技术框架的选型与技术难点攻关,指导开发大数据平台的开发，保证大数据产品的上线运行;
负责深入理解业务需求，对业务建模，设计系统架构，满足业务需求;
负责协助策略和算法工作,保障数据挖掘建模和工程化;
负责根据业务需求整合优化数据架构，保证产品的可靠性、稳定性;
负责指导开发人员完成数据模型规划建设、分析模型构建及分析呈现;
负责研发技术发展方向，新技术领域的探索，将新技术应用到公司大数据平台，提升公司效能
任职要求：
本科及以上学历，拥有5年以上大数据平台产品或分布式系统设计经验,6年以上的开发经验;
精通hadoop，熟悉大数据生态技术，如storm、spark、scala、flume、kafka、zookeeper、yarn、sqoop、cdh、solr 、kylin、impala、hive、hbase、kerberos、sentry等，有大规模集群架构、开发及运维经验;
熟练掌握java/scala语言,实现面向对象开发思想ooa,ood,oop;
熟悉linux操作系统,熟练掌握脚本言语shell/perl/python等编码语言;
熟练掌握数据仓库设计，开发工作。能够根据业务设计并开发数据仓。
具备源码级问题解决和集群优化改造能力者优先;
能快速的学习新的开源框架和知识体系，并应用到现有架构体系中;
逻辑清晰，快速的学习能力，良好的沟通能力、团队协调能力。
具备良好的团队合作精神，较强的沟通交流能力，具备良好的技术领导能力;
具备良好的文档撰写能力和技术团队管理能力
大数据架构师岗位职责篇四
职责：
1、数据分析软件平台架构搭建
2、负责深度学习核心框架或高性能后台服务系统的架构设计工作，包括系统总体规划、架构设计、系统分析、软件实现、性能优化;
3、指导开发人员开发，并解决系统出现的问题，理解物业需求;
4、制定开发计划和控制开发进度，负责指导研发团队开展设计工作;
任职要求：
1、硕士以上，计算机或先关专业;
2、5年左右软件开发经验，含3年以上系统分析、设计经验，有大型软件项目大型软件项目;有中大型互联网企业数据库架构设计及管理经验，
3、 具备良好的组件级建模能力，熟悉http、tcp等协议
4、熟练使用uml进行软件架构设计，至少精通ea，rational， visio等一种设计工具.
5、精通至少一种编程语言，熟悉 linux 相关技术，能独立在上面进行开发、测试和部署
6、深入理解数据库、数据仓库、大数据、分布式体系架构和关键技术
大数据架构师岗位职责篇五
职责：
1. 负责大数据基础平台、海量数据存储/处理分布式平台、数据分析系统架构设计和研发;
2. 负责实时计算平台基础架构设计、部署、监控、优化升级;
3. 制定项目/数据仓库设计及实现规范，指导设计研发和部署;
4. 协助策略和算法团队工作，保障数据挖掘建模和工程化;
5. 深入研究大数据相关技术和产品，跟进业界先进技术;
任职要求：
1. 全日制本科及以上学历，5年以上软件和分布式系统研发经验，3年以上大数据系统架构经验;
2. 精通hadoop/hbase/spark/storm/redis技术及其生态圈;
3. 具备良好的系统分析能力、故障诊断能力;
4 有大数据策略、算法、可视化经验优先。
大数据架构师岗位职责篇六
职责：
1.负责公司大数据底层框架的整体架构设计，结合公司实际业务情况进行技术选型及大数据战略规划;
2.负责统一数据平台项目的整体评估、设计、架构及关键模块的开发，不断提升系统的稳定性和效率;
3.负责架构优化及系统关键模块的设计开发，协助团队解决开发过程中的技术难题;
4.建立良好的公司内外的业界技术影响力;有效辅导团队，提升数据研发能力;
任职要求：
1.从事大数据项目相关开发和设计2年以上经验;有作为技术负责人系统化解决问题的成功案例;有海量数据实践经验优先;
2.拥有一定的算法和数据结构基础;有很强的数据设计抽象能力，善于从复杂的数据问题中找到关键路径;
3.熟悉目前正在发展的大数据分布式平台前沿技术的应用;包括但不仅仅限于：hadoop、storm、spark、等;
4. 良好的逻辑思维能力，良好的业务解读能力，懂电力或通信业务优先;
5.具有钻研精神，乐于接受挑战;
大数据架构师岗位职责篇七
职责：
1、负责大数据平台的技术选型，基于spark、hadoop大数据平台建设和开发;
2、完成包括数据模型设计、数据采集、数据存储等方面的大数据系统架构的设计和数据层架构设计;
3、构建数据中台，为多种行业应用提供主数据(画像标签/关系图谱)、数据模型、人工智能业务算法及数据服务。
4、对海量数据处理的业务需求进行评估和方案设计、拆分任务并指导工程师完成开发;
5、带领大数据技术团队提供并实现大数据平台上各项数据分析和数据可视化的架构设计，支撑解决方案实施。
任职要求：
1、本科及以上学历，具有5年及以上大数据架构设计和开发经验;2年及以上带领团队经验;沟通能力强。在大型互联网企业从事大数据架构设计者优先考虑;有分布式大型商业软件系统设计经验、主导过大型商业软件的架构设计并取得过市场商业成功者优先考虑;
2、熟悉整个大数据的完整处理流程，包括数据的采集、清洗、预处理、存储、分析挖据、机器学习和数据可视化;
3、精通oracle/mysql/postgresql/greenplum/mongodb等其中至少一种主流数据库的使用，并能进行性能调优;
4、具备优秀的团队意识和沟通能力，学习能力和主动性强，具有钻研精神，充满激情，乐于接受挑战。
大数据架构师岗位职责篇八
职责：
1、负责规划科技大数据平台及科技数据入库自动化的方案设计;
2、负责大数据平台的开发和维护，以及对外服务接口的开发;
3、负责大数据平台的优化和改进工作。
任职要求
1、计算机相关专业本科及以上学历，5年以上开发经验，其中3年以上为互联网、大数据相关的开发经验;
2、熟知hadoop生态圈体系，精通hadoop/spark/storm/kafka中的一项或几项，深刻理解mapreduce的运行原理和机制，有mpi经验者尚佳;
3、熟悉elasticsearch、redis、hbased等相关数据库的构建和操作，尤其是数据库集群的构建和操作，熟悉neo4j者尚佳;
4、具有机器学习相关项目经验者优先。
大数据架构师岗位职责篇九
职责：
1)负责大数据平台系统架构设计、核心开发工作(hadoop&spark技术方向)，基于业务场景设计最优的系统解决方案。
2)构架支持大数量级的数据的大数据平台系统，及相关监控，拓展系统设计及实现。
3)利用hadoop、spark等大数据技术对海量数据进行处理，支持bi和数据科学(建模)的应用实现。
4)对现有系统的进行架构深入分析及系统优化，进一步提升系统的性能及数据处理能力。
任职资格
1)统招本科或以上学历，计算机相关专业， 5年以上软件开发经验、3年以上大数据项目经验。
2)具备较丰富的大数据平台相关构建，维护及调优经验，有大数据量级下的大数据集市相关经验。
3)具备较丰富的基于hadoop或hive或spark等大数据处理项目经验，具备一定的数据挖掘经验。
4) 具有阿里云的emr(emapreduce)的经验者优先考虑。
5)具有良好的业务理解、沟通和协作能力，具有较强的学习和总结能力。
6)优秀的团队合作精神、诚实、勤奋、严谨，敢于接受挑战。
7)机器学习技术、数据挖掘经验丰富者优先考虑。
大数据架构师岗位职责篇十
职责：
1.负责整个大数据平台架构的设计和构建;
2.负责构建大数据平台的数据交换、任务调度等通用平台;
3.制定开发、测试、实施、维护的标准和规范，指导和培训工程师，不断提升团队能力。
4.参与系统需求分析、架构设计、技术选型、应用设计与开发以及测试与部署，负责编写核心部分代码。
5.持续挑战新的技术方向，攻克大数据量、高并发、高可用、可扩展等技术难点。
任职要求：
1.3年以上大数据架构经验，丰富的数据仓库、数据挖掘、机器学习项目经验
2.大规模数据处理的架构和设计实战经验
3.精通spark、mr，熟练hdfs、yarn、hbase、hive、mongodb，熟悉kafka、redis、storm、mahout、flume、elasticsearch、graphdb(neo4j或其他)等，并具有丰富的大型数据平台工程经验
4.深刻理解大数据处理(流计算，分布式计算，分布式文件系统，分布式存储等)相关技术和实现方法
5.熟悉主数据、元数据、数据质量等企业数据管理相关的体系和方法，熟练linux/unix平台上的开发环境
6.本科或以上学历，计算机软件或相关专业，丰富的java开发经验和互联网背景优先。
7.具有比较强的问题分析和处理能力，有比较优秀的动手能力，热衷技术，精益求精
大数据架构师岗位职责篇十一
职责
1、负责公司大数据平台的整体架构设计，包含数据收集、数据存储、数据挖掘、数据输出;
2、负责规划从数据源到数据应用的整体流程，并参与用户产品和数据产品的决策;
3、负责海量数据分析、用户行为分析，构建用户数据模型;
4、负责解决核心技术问题，对技术方案进行决策;
5、技术团队管理。
6、熟悉手机ios、安卓系统app开发
任职资格
1、计算机相关专业毕业，本科以上学历;
2、5年以上相关工作经验，具备软件产品架构设计经验，熟练掌握高性能、高扩展性架构设计方法;
3、熟练掌握java或c++任意一门语言、熟悉linux操作系统;
4、熟悉hadoop/mr/hbase/mahout/spark等大数据技术，并能够基于上述项目开发大数据相关应用;
5、熟悉基本数据挖掘方法和技术;
6、强烈的敬业精神，良好的沟通与协调能力，能有效组织协调团队完成各类开发工作;
7、热爱技术，相信数据的价值，对大数据有深刻的理解。
大数据架构师岗位职责篇十二
职责：
1、负责规划大数据平台及应用产品的需求和技术方案设计;
2、负责数据对接和对外服务设计、开发和维护，并能保证质量和性能;
3、负责基于大数据平台的应用设计、开发和维护;
4、能从系统全局和各子系统的角度思考可能存在的问题，并提出改进方案建议;
任职要求：
1、大学本科6年以上工作经验，计算机相关专业。
2、至少4年以上的java开发经验，3年以上大数据应用系统的开发和设计经验。
3、熟悉hadoop生态圈技术体系， 对离线计算、内存计算和流式计算均有深刻理解， 如hadoop、storm、spark三个中的任意二个， 能进行平台和组件优化。
4、精通hive、hbase仓库设计，深刻理解mr运行原理和机制，能进行以提供高任务执行效率的优化。
5、精通java开发，熟悉jvm调优， 对gc有深刻理解。
6、熟悉linux、shell、kafka、oracle、mysql、redis等相关技术， 能进行hbase可靠性诊断和维护。
7、快速研究和学习技术能力。
大数据架构师岗位职责篇十三
职责：
1、负责公司的大数据平台的数仓架构、系统架构设计;
2、负责带领团队完成舆情分析相关的挖掘方案设计;
3、负责大数据研发组团队管理;
4、负责带领团队完成舆情平台的方案文档撰写、迭代开发;
5、负责研发规范制定，研究行业前沿技术;
6、参与产品规划及设计讨论。
任职要求：
1、本科五年工作经验及以上，有至少五年的大数据技术实践经验，有nlp或ai相关经验;
2、有很强的架构设计能力和良好的表达能力;
3、有一定的项目管理及团队管理能力;
4、精通hadoop、spark生态圈中的常用组件原理及应用;
6、理解媒体业务，精通数据仓库的规划和设计;
5、精通掌握java或python编程，有性能调优能力;
4、熟悉nlp算法原理及应用;
6、对新生事物或者新技术有浓厚兴趣，学习能力强。
大数据架构师岗位职责篇十四
职责：
1. 深刻理解政府行业业务模式，构建政府行业的数据模型，制定公司大数据技术发展路线;
2. 对接业务研究和技术部门，主动搜集和转化需求，组织数据中心业务开发，进行数据相关产品需求分析和设计;
3. 搭建数据仓库，研发数据库管理系统，搜集、提取、处理业务积累的海量数据，开展数据分析和挖掘;
4. 根据公司战略和发展需要，规划数据中心重点工作和任务;落实部门人员、事务管理，开展跨部门、跨地区协作，协助对外交流与合作。
职位要求：
1. 5年以上相关工作经验，有团队管理和项目管理经验者优先;
2.了解政府运作机制，掌握财政行业知识，有电子政务行业经验者优先;
3. 熟练掌握使用java或python,精通数据库查询语言如sql，oracle等,在机器学习模型和算法方向有应用经验者优先;
4. 具备数据中心产品策划整体思维，有大数据处理、分析、挖掘经验者优先;
5. 逻辑思维严密，具备业务抽象、分解和标准化的能力，口头和书面表达优秀;
6. 有较强的大局意识和良好的团队合作意识，富有领导力，具备优秀的人际交往和沟通能力。
大数据架构师岗位职责篇十五
职责：
1.参与公司数据平台系统规划和架构工作，主导系统的架构设计和项目实施，确保项目质量和关键性能指标达成;
2.统筹和推进制造工厂内部数据系统的构建，搭建不同来源数据之间的逻辑关系，能够为公司运营诊断、运营效率提升提供数据支持;
3.负责数据系统需求对接、各信息化系统数据对接、软件供应商管理工作
5.根据现状制定总体的数据治理方案及数据体系建立，包括数据采集、接入、分类、开发标准和规范，制定全链路数据治理方案;深入挖掘公司数据业务，超强的数据业务感知力，挖掘数据价值，推动数据变现场景的落地，为决策及业务赋能;
6.定义不同的数据应用场景，推动公司的数据可视化工作，提升公司数据分析效率和数据价值转化。
任职要求：
1.本科以上学历，8年以上软件行业从业经验，5年以上大数据架构设计经验，熟悉bi平台、大数据系统相关技术架构及技术标准;
2.熟悉数据仓库、熟悉数据集市，了解数据挖掘、数据抽取、数据清洗、数据建模相关技术;
3.熟悉大数据相关技术：hadoop、hive、hbase、storm、flink、spark、kafka、rabbitmq;
4.熟悉制造企业信息化系统及相关数据库技术;
5.具备大数据平台、计算存储平台、可视化开发平台经验，具有制造企业大数据系统项目开发或实施经验优先;
6.对数据敏感，具备优秀的业务需求分析和报告展示能力，具备制造企业数据分析和数据洞察、大数据系统的架构设计能力，了解主流的报表工具或新兴的前端报表工具;
7.有较强的沟通和组织协调能力，具备结果导向思维，有相关项目管理经验优先。