基本资料 工作年限:4 年 工作状态:目前正在找工作 工作意向: 大数据研发工程师 、spark 工程师,Hadoop 工程师 薪 水:面议 个人技能 1 深刻理解 hdfs 分布式文件系统存储结构和高可用原理 2 熟练掌握 hadoop mapredu ce 计算框架编程,对 y arn 的资源调度,作业监控有一定认识 3 掌握 storm streaming 编程,对定时批量任务处理,分布式 rpc 有一定认识 4 深刻了解 Spark 底层运行机制, 4 熟练掌握 scala 编程,能运用 scala 进行 spark RDD,spark streaming 编程 5 熟悉 flu me,kafka 等日志收集,分发框架的使用,能够将他们和 storm,spark 进行整合 进行数据的实时处理 6 能够熟练运用 hiv e 数据仓库工具,对日志数据进行查询,统计等数据操作,并且有一定的数据优化经验 7 能将 hiv e 和 spark sql 进行整合,进行数据查询等相关操作 8 熟悉 hbase 数据库的使用,及其编程 9 熟悉 redis 内存数据库,能搭建 redis 高可用集群及其编程 10 熟悉 ELK 技术栈,了解 ElasticSearch,Logstash 的整合使用 11 掌握 Sqoop 数据迁移工具的使用,能熟练的将数据从不同的存储介质进行迁移 12 了解 linux 系统,熟悉常用的 linux 的 shell 命令,能在linux 系统下搭建开发环境 13 熟练掌握 Jav aSE,深刻理解面向对象设计思想,熟练使用 IO 流操作和集合框架,网络编程等 Jav aSE 主流技术
14 能使用反射、注解、动态代理等 Jav a 高级技术,对代码的封装抽取 及其性 能优化有点 一定的经验
15 熟悉 Stru ts,Spring,Hibern