作文录,一手好文,受用一生

大数据架构师岗位的工作职责

作者:苏景辰2025-02-24 09:57:01

导读:大数据架构师岗位的工作职责 篇1 职责: 1. 规划设计大数据平台整体架构,规划各种组件,并且指导技术团队完成相关系统验证、安装、部署、配置; 2. 负责制定大数据平台技术规范和... 如果觉得还不错,就继续查看以下内容吧!

此文《大数据架构师岗位的工作职责(推荐10篇)》由作文录「Zwlu.Com」小编推荐,供大家学习参考!

  大数据架构师岗位的工作职责 篇1

  职责:

  1. 规划设计大数据平台整体架构,规划各种组件,并且指导技术团队完成相关系统验证、安装、部署、配置;

  2. 负责制定大数据平台技术规范和接口规范,指导研发团队按照规范进行系统开发;

  3. 配合商务人员完成售前技术支持工作;

  4. 完成其他与数据应用有关的技术工作;

  任职要求:

  1. 计算机相关专业本科学历,5年以上工作经验;

  2. 对大数据技术栈有非常深刻的了解;具备架构设计的实际经验;

  3. 对信息安全架构设计及实施有一定的经验;

  4. 熟悉Linux、Windows等操作系统的安装配置;

  5. 熟悉互联网应用的安装配置;熟悉常见大数据技术栈组件的安装配置;熟悉Visio等绘图工具的使用;

  6. 有卫生信息化建设经验者优先;有容器安装部署经验者优先。

  大数据架构师岗位的工作职责 篇2

  职责:

  1、负责面向政府信领域的企业(不限于)大数据平台、大数据应用等系统的架构设计、技术规划、技术选型

  2、跟进业界大数据技术发展动态,匹配行业应用诉求,制定大数据策略,提前识别关键技术并完成技术验证;

  3、支撑售前完成项目解决方案技术架构的设计及重要客户的交流;

  4、负责指导研发完成大数据产品的开发

  5、带领团队进行产品核心技术的创新和积累

  岗位要求:

  1、熟悉BI和大数据领域的解决方案,具备该领域全面的技术积累,包括报表平台,OLAP引擎和DB,ETL,数据仓库建模和设计,海量分布式数据处理分析架构;

  2、在大数据处理和分析领域具有3年或者以上的技术规划、架构设计经验,并有成功的项目实践;

  3、4年以上Hadoop实战经验,熟悉Hadoop底层文件系统及分布式计算框架,具备传统数据仓库、MPP、Hadoop等混搭平台架构的设计能力和数据建模能力,对大规模数据并行计算、传输、处理等有丰富的经验;

  4、有实际应用storm、spark、flume、kafka等项目经验优先;

  5、卓越的技术领导力,善于沟通、发现和解决产品需求阶段、开发阶段和测试阶段的问题,并能提供合理解决方案,有大中型互联网企业工作背景优先。

  大数据架构师岗位的工作职责 篇3

  职责:

  1.负责整个大数据平台架构的设计和构建;

  2.负责构建大数据平台的数据交换、任务调度等通用平台;

  3.制定开发、测试、实施、维护的标准和规范,指导和培训工程师,不断提升团队能力。

  4.参与系统需求分析、架构设计、技术选型、应用设计与开发以及测试与部署,负责编写核心部分代码。

  5.持续挑战新的技术方向,攻克大数据量、高并发、高可用、可扩展等技术难点。

  任职要求:

  1.3年以上大数据架构经验,丰富的数据仓库、数据挖掘、机器学习项目经验

  2.大规模数据处理的架构和设计实战经验

  3.精通Spark、MR,熟练HDFS、Yarn、Hbase、Hive、MongoDB,熟悉Kafka、Redis、Storm、Mahout、Flume、ElasticSearch、GraphDB(NEO4J或其他)等,并具有丰富的大型数据平台工程经验

  4.深刻理解大数据处理(流计算,分布式计算,分布式文件系统,分布式存储等)相关技术和实现方法

  5.熟悉主数据、元数据、数据质量等企业数据管理相关的体系和方法,熟练Linux/Unix平台上的开发环境

  6.本科或以上学历,计算机软件或相关专业,丰富的java开发经验和互联网背景优先。

  7.具有比较强的问题分析和处理能力,有比较优秀的动手能力,热衷技术,精益求精

  大数据架构师岗位的工作职责 篇4

  1.负责大数据基础和应用平台的整体规划和架构设计,参与需求分析,架构设计,详细设计以及技术选型决策

  2.参与数据挖掘和建模相关核心算法的代码实现

  3.负责大数据算法平台的技术把关,性能调优,控制架构质量,解决项目技术难题;对研发项目和任务需求进行评估和方案设计、拆分任务并指导工程师完成开发

  4.带领团队提供并实现大数据算法平台上各项数据接入、数据挖掘分析及数据可视化的架构设计与能力,支持解决方案实施

  5.负责数据库设计、应用架构设计、核心技术选型等工作

  6.协调解决开发中的技术问题、设计和监控运营指标,保障系统稳定运行

  7.培养,指导有能力的员工,指导工程师进行技术验证实现,核心技术攻关,解决开发过程中的技术难题

  大数据架构师岗位的工作职责 篇5

  职责:

  1.能够带领技术人员基于hadoop平台进行海量数据应用系统开发;

  2.负责结构化和非结构化数据的解析和清洗,海量数据查询和报表展现;

  3.负责超大规模数据平台的搭建、维护和优化;

  4.负责大数据采集、存储框架研究,参与在线或离线数据存储模型设计;

  5.负责大数据平台新技术的开发使用和性能优化,测试。

  任职资格:

  1.计算机相关专业本科及以上学历;

  2. 熟悉hadoop相关各种开源项目,比如HDFS/Hive/Hbase等有实际应用。(5年以上开发经验者优先);

  3.两年以上熟练编写mapreduce代码经验,有三年以上网络日志分析、ETL经验。熟悉日志分析框架chukwa,flume,scribe者优先;

  4.两年以上海量数据存储的安装部署、优化、二次开发经验,对大规模数据存储、传输、处理等有丰富的经验;

  5.在数据挖掘、数据密集型处理、分布式计算、网格计算领域有深入理论基础;

  6.具有较强的文档撰写能力,较强的团队精神和合作精神,对工作有热情,能承受压力。

  大数据架构师岗位的工作职责 篇6

  职责:

  1、数据分析软件平台架构搭建

  2、负责深度学习核心框架或高性能后台服务系统的架构设计工作,包括系统总体规划、架构设计、系统分析、软件实现、性能优化;

  3、指导开发人员开发,并解决系统出现的问题,理解物业需求;

  4、制定开发计划和控制开发进度,负责指导研发团队开展设计工作;

  任职要求:

  1、硕士以上,计算机或先关专业;

  2、5年左右软件开发经验,含3年以上系统分析、设计经验,有大型软件项目大型软件项目;有中大型互联网企业数据库架构设计及管理经验,

  3、 具备良好的组件级建模能力,熟悉HTTP、TCP等协议

  4、熟练使用UML进行软件架构设计,至少精通EA,RATIONAL, VISIO等一种设计工具.

  5、精通至少一种编程语言,熟悉 Linux 相关技术,能独立在上面进行开发、测试和部署

  6、深入理解数据库、数据仓库、大数据、分布式体系架构和关键技术

  大数据架构师岗位的工作职责 篇7

  职责:

  1、负责大数据平台架构的规划与设计;

  2、负责大数据平台技术框架的选型与技术难点攻关;

  3、参与企业级大数据产品和应用规划;

  4、研究跟进大数据架构领域新技术并分享;

  5、大数据处理和分析应用平台的设计指导。

  任职资格:

  1、 具备深厚的分布式系统或数据库系统的理论基础,熟悉分布式计算系统的工作机制,具有分布式文件系统、分布式数据库系统、集群存储系统等架构设计经验;

  2、熟悉BI平台架构及相关项目标准,大数据解决方案包括Hadoop、Spark、Storm、机器学习等大数据平台解决方案;

  3、熟悉MySql/Postgresql/Oracle/MongoDB/Redis等主流数据数据库;

  4、 精通Linux/Unix环境,精通J java、scala、python、R中的一种或多种语言;

  5、 具备优秀的团队意识和沟通能力,学习能力和主动性强,具有钻研精神,充满激情,乐于接受挑战;

  6、大专及以上学历,3年及以上工作经验。

  大数据架构师岗位的工作职责 篇8

  职责:

  1.负责数据仓库建设,基于数据驱动构建企业级数据模型,根据架构设计进行各层数据模型开发。

  2.面向PB级别超大规模数据处理和查询需求,设计适合业务变化的合理的多维数据分析系统架构,满足多样性需求。

  3.构建设计良好的数据流、调度系统、查询引擎、监控系统,保证系统稳定高效运行,以实现数据的最大价值。

  4.指导团队成员开展数据仓库建设。

  5.参与重点项目的评审,参与企业数据管理体系建设。

  任职要求:

  1.统招本科及以上学历。

  2.从事数据仓库领域至少5年以上,熟悉数据仓库模型设计与ETL开发经验 ,掌握Kimball的维度建模设计方法,具备海量数据加工处理(ETL)相关经验 。

  3.具有一定数据模型和数据架构基础,熟悉hadoop\hive和常用数据库。

  4. 精通SQL,有一定的SQL性能调优经验,熟悉hive sql的开发。

  5.具有管理团队开发经验,具备良好的组织能力、协调能力及项目管理能力。

  6.具有较好的文字功底及语言表达能力,能够快速、准确地理解需求。

  7.具有专研、快速学习和创新精神,具备独立分析问题和解决问题的能力。

  8.具有责任心,时间观念强,工作独立性强,有良好的团队合作精神。

  9.全日制普通本科毕业。

  大数据架构师岗位的工作职责 篇9

  职责:

  1.负责企业数据中心建设,设计数据逻辑模型和物理模型,并完成相关开发

  2.梳理公司各业务线常用的指标和维度,统一指标定义口径

  3.根据数据应用开发和数据分析需求,设计数据仓库信息层模型,提高数据开发的效率

  4.负责数据模型的运营和优化,及时响应业务逻辑变更,保证模型的数据质量和稳定性

  5.负责公司数据标签体系的建设,并推动标签体系在实际业务场景中落地

  岗位要求:

  1.5年以上DW/BI数据架构设计、模型设计和性能调优等相关经验

  2.有较强的数据分析能力,精通数据仓库架构,熟悉Erwin或PowerDesigner建模工具

  3.精通一种主流关系数据库(如mysql等),熟悉Hive开发

  4.有电商业务经验,元数据管理,数据质量管理或标签体系搭建经验者优先

  5.优秀的协调沟通与团队协作能力,极强的责任心,能承受一定的工作压力,认同企业文化和团队价值

  大数据架构师岗位的工作职责 篇10

  职责

  1、负责企业级大数据平台、数据云服务的设计与开发;

  2、基于大数据生态圈,支持智慧交通等大数据场景应用实现;

  3、负责公司大数据产品的设计、封装与落地;

  4、负责学习大数据相关算法研究、实现与应用

  任职要求

  1、统招本科及以上学历;2年以上智慧城市建设或交通行业信息化相关工作经验,3年以上大数据架构设计、开发经验;

  2、精通大数据生态圈的技术,包括但不限于MapReduce、Spark、Hadoop、Kafka、Mongodb、Redis、Flume、Storm、Hbase、Hive,具备源码级问题解决和集群优化改造能力;

  3、熟悉常用编程语言,包括Java、Python、Scala等;

  4、具有很强的技术研发和创新能力,能有效把握技术发展方向,有较强的执行能力、学习能力、沟通能力、适应能力,责任心强;

结尾:非常感谢大家阅读《大数据架构师岗位的工作职责(推荐10篇)》,更多精彩内容等着大家,欢迎持续关注作文录「Zwlu.Com」,一起成长!

编辑特别推荐:关于电大毕业生自我鉴定范文毕业生登记表的自我鉴定500字大学三年毕业生自我鉴定范文大学大三毕业生自我鉴定法学毕业生自我鉴定, 欢迎阅读,共同成长!