六三科技网
您的当前位置:首页大数据架构师岗位的基本职责(3篇)

大数据架构师岗位的基本职责(3篇)

来源:六三科技网

大数据架构师岗位的基本职责

  职责:

  1)负责大数据平台系统架构设计、核心开发工作(Hadoop&Spark技术方向),基于业务场景设计最优的系统解决方案。

  2)构架支持大数量级的数据的大数据平台系统,及相关监控,拓展系统设计及实现。

  3)利用Hadoop、Spark等大数据技术对海量数据进行处理,支持BI和数据科学(建模)的应用实现。

  4)对现有系统的进行架构深入分析及系统优化,进一步提升系统的性能及数据处理能力。

  任职资格

  1)统招本科或以上学历,计算机相关专业, 5年以上软件开发经验、3年以上大数据项目经验。

  2)具备较丰富的大数据平台相关构建,维护及调优经验,有大数据量级下的大数据集市相关经验。

  3)具备较丰富的基于Hadoop或Hive或Spark等大数据处理项目经验,具备一定的数据挖掘经验。

  4) 具有阿里云的EMR(emapreduce)的经验者优先考虑。

  5)具有良好的业务理解、沟通和协作能力,具有较强的学习和总结能力。

  6)优秀的团队合作精神、诚实、勤奋、严谨,敢于接受挑战。

  7)机器学习技术、数据挖掘经验丰富者优先考虑。

大数据架构师岗位的基本职责

  1、负责大数据平台资源规划、权限控制、运维架构设计,为各产品业务提供稳定、高效、安全的运行环境;

  2、负责实时,离线数据分析处理及实时平台的建设和搭建

  3、熟悉 Flink 流式计算引擎的使用以及源码原理,并且有相关的流式处理平台的经验。

  4、Java基础扎实,熟练掌握垃圾回收,网络,多线程编程,了解 python 或 scala

  5、负责大数据平台技术架构、数据架构的分析与设计;

大数据架构师岗位的基本职责

  1、基于公司大数据基础和数据资产积累,负责大数据应用整体技术架构的设计、优化,建设大数据能力开放平台;负责大数据应用产品的架构设计、技术把控工作。

  2、负责制定大数据应用系统的数据安全管控体系和数据使用规范。

  3、作为大数据技术方案到产品实现的技术负责人,负责关键技术点攻坚工作,负责内部技术推广、培训及知识转移工作。

  4、负责大数据系统研发项目任务规划、整体进度、风险把控,有效协同团队成员并组织跨团队技术协作,保证项目质量与进度。

  5、负责提升产品技术团队的技术影响力,针对新人、普通开发人员进行有效辅导,帮助其快速成长。

因篇幅问题不能全部显示,请点此查看更多更全内容