大数据架构师工作的职责大数据架构师工作的职责1职责:1、负责大数据项目平台架构的评估、规划和设计2、开发大数据平台的核心模块代码,负责大数据平台的搭建,完成系统调试、集成与实施,保证大数据产品的上线运行3、根据业务需求整合优化数据架构,保证产品的可靠性、稳定性4、指导开发人员完成数据模型规划建设,分析模型构建及分析呈现5、深入研究大数据相关技术和产品,跟进业界先进技术;6、根据项目要求编写相关技术文档;7、负责大数据平台的架构评审,代码评审,上线评审;参与数据应用需求、设计、审核和评审;8、负责核心模块研发,负责大数据平台的搭建,完成系统调试、集成与实施;9
负责关键功能的开发,技术难题的解决,以及输出代码的关键把控;10
负责对使用关键技术的预研和选型,完成poc;11
指导工程师完成开发工作,并能分享技术经验
任职资格:1、精通linux操作系统,熟练使用java;2、3年以上大数据项目实战经验,两个项目的架构设计经验,熟悉hadoop、hbase、storm、spark、pig等开源框架,并熟悉其工作原理;3、有hadoop、spark、hbase平台性能调优经验;4、熟悉其它分布式存储相关技术,包括hdfs,hive、redis、mongodb、flume、kafaka、sqoop、zookeeper、elasticsearch等;5、熟悉java开发常用框架
如spring、mybatis等;6、熟悉关系型数据库如oracle及数据库编程
7、能够根据项目情况安排人力、分配任务,具有较强的团第1页共4页队管理能力
8、硕士以上学历,10年以上的工作经验
大数据架构师工作的职责2职责:1
负责设计企业级大数据平台的整体架构,从技术层面制定清晰的大数据产品与系统技术架构,并负责实现关键技术和产品
负责设计具有创新价值的大数据底层平台、大数据上层应用系统等,带领团队