您的当前位置:首页正文

大数据架构师的工作职责描述

2020-08-17 来源:星星旅游

  职责:

  1、负责大数据项目平台架构的评估、规划和设计

  2、开发大数据平台的核心模块代码,负责大数据平台的搭建,完成系统调试、集成与实施,保证大数据产品的上线运行

  3、根据业务需求整合优化数据架构,保证产品的可靠性、稳定性

  4、指导开发人员完成数据模型规划建设,分析模型构建及分析呈现

  5、深入研究大数据相关技术和产品,跟进业界先进技术;

  6、根据项目要求编写相关技术文档;

  7、负责大数据平台的架构评审,代码评审,上线评审;参与数据应用需求、设计、审核和评审;

  8、负责核心模块研发,负责大数据平台的搭建,完成系统调试、集成与实施;

  9. 负责关键功能的开发,技术难题的解决,以及输出代码的关键把控;

  10. 负责对使用关键技术的预研和选型,完成 PoC ;

  11. 指导工程师完成开发工作,并能分享技术经验。

  任职资格:

  1、精通Linux操作系统,熟练使用Java;

  2、3年以上大数据项目实战经验,两个项目的架构设计经验,熟悉Hadoop、Hbase、Storm、Spark、Pig等开源框架,并熟悉其工作原理;

  3、有Hadoop、Spark、Hbase平台性能调优经验;

  4、熟悉其它分布式存储相关技术,包括HDFS,Hive、Redis、Mongodb、 Flume、Kafaka、Sqoop、Zookeeper、ElasticSearch等;

  5、熟悉Java开发常用框架.如Spring、MyBatis等;

  6、熟悉关系型数据库如oracle及数据库编程。

  7、能够根据项目情况安排人力、分配任务,具有较强的团队管理能力。

  8、硕士以上学历,20xx年以上的工作经验。

因篇幅问题不能全部显示,请点此查看更多更全内容