六三科技网
您的当前位置:首页大数据架构师岗位的工作职责(3篇)

大数据架构师岗位的工作职责(3篇)

来源:六三科技网

大数据架构师岗位的工作职责

  职责:

  1、负责大数据基础平台、海量数据存储处理分布式平台、数据分析系统架构设计和研发;

  2、负责实时计算平台基础架构设计、部署、监控、优化升级;

  3、制定项目数据仓库设计及实现规范,指导设计研发和部署;

  4、协助策略和算法团队工作,保障数据挖掘建模和工程化;

  5、深入研究大数据相关技术和产品,跟进业界先进技术。

  任职要求:

  1、3年以上大数据系统架构经验;

  2、精通Hadoop HBase Hive Spark Flink Kafka Redis技术及其生态圈;

  3、具备Java Scala Python等开发经验,熟悉数据挖掘和分析的策略与算法;

  4、精通数据抽取,海量数据传输,数据清洗的常用方法和工具。

  5、具备良好的系统分析能力、故障诊断能力;

  6、有大数据策略、算法、可视化经验优先;

  7、有在华为云存储产品和大数据产品的开发使用经验优先。

大数据架构师岗位的工作职责

  职责:

  1.负责数据仓库建设,基于数据驱动构建企业级数据模型,根据架构设计进行各层数据模型开发。

  2.面向PB级别超大规模数据处理和查询需求,设计适合业务变化的合理的数据分析系统架构,满足多样性需求。

  3.构建设计良好的数据流、调度系统、查询引擎、监控系统,保证系统稳定高效运行,以实现数据的最大价值。

  4.指导团队成员开展数据仓库建设。

  5.参与重点项目的评审,参与企业数据管理体系建设。

  任职要求:

  1.统招本科及以上学历。

  2.从事数据仓库领域至少5年以上,熟悉数据仓库模型设计与ETL开发经验 ,掌握Kimball的维度建模设计方法,具备海量数据加工处理(ETL)相关经验 。

  3.具有一定数据模型和数据架构基础,熟悉hadoop\hive和常用数据库。

  4. 精通SQL,有一定的SQL性能调优经验,熟悉hive sql的开发。

  5.具有管理团队开发经验,具备良好的组织能力、协调能力及项目管理能力。

  6.具有较好的文字功底及语言表达能力,能够快速、准确地理解需求。

  7.具有专研、快速学习和创新精神,具备分析问题和解决问题的能力。

  8.具有责任心,时间观念强,工作性强,有良好的团队合作精神。

  9.全日制普通本科毕业。

大数据架构师岗位的工作职责

  职责:

  负责公司大数据产品架构的设计与实现;

  配合大数据产品经理完成产品的快速研发与交付;

  负责大数据产品架构的持续优化设计;

  负责大数据产品核心组件设计;

  负责大数据相关数据架构规划、数据建模、数据库设计以及大数据产品研发工作;

  为应用开发团队提供技术支撑。

  任职要求:

  本科及以上学历,3年以上的大数据开发经验、

  2年以上大数据架构设计经验;

  丰富的JAVA研发经验,精通JAVA,熟悉Python Scala等编程语言;具备深厚的分布式系统或数据库系统的理论基础,熟悉分布式计算系统的工作机制,具有分布式文件系统、分布式数据库系统、集群存储系统等架构设计经验;

  熟悉整个大数据的完整处理流程(数据的采集、清洗、预处理、存储、分析挖掘、机器学习和数据可视化);

  精通各种大数据相关技术体系:Hadoop、Spark、Storm、ElasticSearch、Kafka;

  有数据挖掘、机器学习相关应用或研究背景;

  沟通能力较好,积极主动意识较强,责任心较强。

因篇幅问题不能全部显示,请点此查看更多更全内容