姓名: 性别:男 学历:本科 工作年限:9 年
电话: E-mail:
工作性质:全职 目标职位:数据开发、数据仓库开发、数据分析 期望月薪:面议
毕业院校: 时间:
1. Spark:能部署 spark 集群,能进行 SparkCore、Spark SQL 和 Spark Streaming 开发。理解 Spark
内存管理。掌握 spark 任务提交和执行流程。擅长 Spark 调优。熟悉 sparkRDD 运行原理,掌握 RDD 算
子开发。
2. MapReduce:掌握了 MapReduce 运行原理机制,能对 MapReduce 框架开发及调优,能够搭建
Hadoop 集,部署过 CDH 搭建 Hadoop 集群;
3. 数据仓库:理解数据仓库设计原理,用 HQL 进行 PB、TB 级海量数据处理和开发,有 Hive 优化经验。
掌握 Hive 架构与原理、能搭建运维 Hive 架构及编写 HQL 代码;掌握 Hive SQL 数据类型、建表语法(内
外表)、动态静态分区、内置函数自定义函数、分桶、hive 视图索引、以及 Hive 优化等;
4. HBase:了解 HBase 数据模型和架构,能够部署 HBase 集群,掌握 hbase shell 常用命令;能设
HBase 表结构,实现存储和查询,有 HBase 优化经验;
5. HDFS:掌握 hdfs 存储模型(块、副本、偏移量等)、架构模型(namenode、DataNode、Secondary
NameNode、journalnode 等)、持久化、安全机制等。能搭建 HDFS1.0 和 2.X 集群以及自动化集群。
6. 对 flume 数据采集、Sqoop 数据迁移、kafka 分布式消息队列、zookeeper 分布式协调服务等大数
据相关组件熟悉;
7. 数据库:掌握 Oracle、Mysql 等主流数据库使用、开发、调优,sql 语句操作熟练,编写过复杂
SQL;
8. 算法:了解机器学习常用算法,参加京东大学主办的人工智能课程学习;
9. 语言:掌握 Shell 脚本、java、python 语言等;
1. 2018.9-至今 京东集团 数据开发工程师
2. 2015.6-2018.8北京盛世政通软件发展有限公司 大数据开发
3. 2010.7-2015.5 邯郸连邦软件发展有限公司 java 开发工程师兼运维