六三科技网
您的当前位置:首页大数据架构师岗位的工作职责(6篇)

大数据架构师岗位的工作职责(6篇)

来源:六三科技网

大数据架构师岗位的工作职责

  职责:

  1、负责spark, hadoop, flink等开发和优化。

  2、参与前期需求沟通和分析,以产品化开发的思维,完成需求分解和数据架构设计。

  3、与研发和数据科学家合作保证产品定义清晰,按时完成产品上线。

  4、能够洞察市场状况,与各部门合作转化为基于大数据挖掘的新策略或方案.

  5、主动创造和发掘新的基于大数据挖掘产品商业模式.

  任职要求:

  1、全日制本科及以上学历,计算机软件相关专业,5年以上开发经验,3年以上架构经验

  2、精通hadoop/MapReduce/Spark/Hbase/Flink/Hive/R/Mahout等分布式数据存储和分布式计算平台原理,流式计算开发,有开源二次开发经验者优先。

  3、精通大数据挖掘、机器学习.熟练掌握Java/Perl/Python至少一种编程语言。

  4、具有数据挖掘和分析、机器学习等项目实施相关经验者优先;

  5、良好的跨部门沟通合作能力,解决不同观点能力并取得结果。具备敏锐的互联网产品理解力,学习能力和逻辑思维能力强;

  6、较强的自我驱动力、推动和协调能力,强烈的责任心和团队合作精神;

大数据架构师岗位的工作职责

  职责:

  1、对业务需求深入分析,从而进行大数据平台核心应用的架构设计、开发和技术支持;

  2、规划业务应用系统和基础平台的技术架构,参与需求分析、建模、架构设计、技术决策以及详细设计;

  3、把握复杂系统的设计,确保系统的架构质量,编写核心部分代码;

  4、带领团队攻克例如大数据量、高并发、高稳定性等带来的各种挑战及技术难关;

  5、在大数据平台建设路线图指导下,进行架构实施和交付物投递,同时确保研发质量和方向的准确性;

  6、进行团队技术的培训和梯队建设岗位要求;

  任职条件:

  1、本科或以上学历,计算机相关专业,8年以上研发经验,3年以上大数据平台相关工作经验;

  2、精通Java开发技术,熟悉Shell、Scala语言和PYTHON优先;

  3、编程基础扎实,熟悉I/O、多线程、集群等基础框架和原理,熟悉分布式、缓存、消息等机制;

  4、熟悉常用设计模式,代码评审规则,单元测试,持续集成;

  5、熟悉AWS云服务或阿里云服务;

  6、熟悉容器技术原理、生态系统,熟悉Docker、Mesos、Kubernetes等容器系统、大规模容器资源调度系统、分布式应用生命周期。

大数据架构师岗位的工作职责

  职责

  1、负责企业级大数据平台、数据云服务的设计与开发;

  2、基于大数据生态圈,支持智慧交通等大数据场景应用实现;

  3、负责公司大数据产品的设计、封装与落地;

  4、负责学习大数据相关算法研究、实现与应用

  任职要求

  1、统招本科及以上学历;2年以上智慧城市建设或交通行业信息化相关工作经验,3年以上大数据架构设计、开发经验;

  2、精通大数据生态圈的技术,包括但不限于MapReduce、Spark、Hadoop、Kafka、Mongodb、Redis、Flume、Storm、Hbase、Hive,具备源码级问题解决和集群优化改造能力;

  3、熟悉常用编程语言,包括Java、Python、Scala等;

  4、具有很强的技术研发和创新能力,能有效把握技术发展方向,有较强的执行能力、学习能力、沟通能力、适应能力,责任心强;

大数据架构师岗位的工作职责

  职责:

  1、负责大数据平台技术框架的技术选型和搭建;

  2、负责核心技术问题公关,建设高可靠性,扩展性及高性能大数据/数据应用平台;

  3、负责规划数据挖掘的整体流程,负责大数据开发团队业务需求开发;

  4、与其他团队密切配合,寻求数据层面的业务价值,利用数据分析结论推动产品优化;

  5、研究和分享大数据架构领域新技术。

  任职要求:

  1、计算机相关专业全日制统招本科及以上;

  2、5年以上工作经验,至少3年以上大数据项目相关工作经验,能够设计大型大数据系统的架构和技术方案;

  3、精通Hadoop/Spark/Hbase/Hive等大数据技术,精通ETL技术;

  4、熟悉数据挖掘,了解典型大数据算法和策略;

  5、熟悉主流Java技术框架,精通关系型数据库及SQL语言,熟悉NoSQL/JSON/XML;

  6、有较强的学习能力和问题解决能力,逻辑严密、思路清晰;

  7、有数据仓库经验者优先,有金融行业项目经验者优先。

大数据架构师岗位的工作职责

  职责:

  1、负责规划科技大数据平台及科技数据入库自动化的方案设计;

  2、负责大数据平台的开发和维护,以及对外服务接口的开发;

  3、负责大数据平台的优化和改进工作。

  任职要求

  1、计算机相关专业本科及以上学历,5年以上开发经验,其中3年以上为互联网、大数据相关的开发经验;

  2、熟知Hadoop生态圈体系,精通Hadoop/Spark/Storm/Kafka中的一项或几项,深刻理解MapReduce的运行原理和机制,有MPI经验者尚佳;

  3、熟悉Elasticsearch、Redis、Hbased等相关数据库的构建和操作,尤其是数据库集群的构建和操作,熟悉Neo4j者尚佳;

  4、具有机器学习相关项目经验者优先。

大数据架构师岗位的工作职责

  职责:

  1、负责大数据项目技术架构评估与设计;

  2、负责关键功能的开发,技术难题的解决,以及输出代码的关键把控;

  3、负责对使用关键技术的预研和选型,完成PoC;

  4、指导工程师完成开发工作,并能分享技术经验。

  任职要求:

  1、3年以上相关工作经验,其中具有1年以上架构设计经验

  2、熟悉商业智能系统相关技术,如 ETL、数据仓库、OLAP开发;

  3、精通设计模式,熟悉面向服务架构(SOA)以及其它常用软件架构思想,有SOA方案设计、开发实施的实际经验,要具备实际的服务规划、服务粒度划分经验;并且要善于设计可重用组件和可定制化产品。

  4、相关技术栈:Java /Scala/Flume/Hive/Kafka/HBase/ Spark/Storm/Redis;

  5、有扎实的计算机基础,熟悉Java等编程语言;

因篇幅问题不能全部显示,请点此查看更多更全内容