姓名： 简历本
性别： 女
年龄： 23岁
经验： 2年
手机： 131****2630
邮箱： 700106****@qq.com
意向： 软件工程师/软件研发工程
学历： 本科
| 教育背景 |
|
2011/09 - 2015/07
简历本财经大学
本科 - 计算机科学与技术
主修课程：尽量填写和应聘岗位相关的主修课程
成绩排名：成绩优异的话可在这里填写成绩排名及GPA信息 |
| 工作经历 |
|
2015/10 - 2017/08
简历本信息科技有限公司
大数据工程师
进行数据导入导出 sqoop，mr数据清洗，hive，spark分析统计，以及hadoop集群维护，日常数据维护等
|
| 项目经历 |
|
2016/03 - 2017/08
联通黑指纹系统
职责/工具
项目介绍
基于联通各地区短信数据进行分析和挖掘： 1.联通短信数据日常离线分析： 将短信从黑指纹库（黑指纹数据库为Mysql）导入到 hadoop集群中(使用Sqoop工具),使用Spark分析每日新 增垃圾短信特征，从而调整算法，和增加新特征，从而划分人工核优选级。 2.月度分析、年度分析、各地区分析（分钟实时）： 能过Saprk_rdd与Hadoop_mr分析每月、每年短信的变化，如指纹的月使用率，年使用率，各地区黑指纹通用率，垃圾短信的变种率等 我的职责 1.利用sqoop工具对mysql数据库的增量抽取到HDFS 2.利用hive整合把得到的有效数据进行导入导出 3.将数据映射到hive中进行归类、划分、合并、定性分析、对关键字的分 析任务等 4.在Hive中根据业务需求参与相关表设计 5.对HDFS、Hive等进行调优，HQL语句进行编写、调优 6.根据业务的要求使用spark进行分钟实时分析 7.将数据的分析结果备份到HDFS中和业务层的数据库中（mysql） 8.web端或者报表的的形式进行展示。 |
| 自我评价 |
|
熟悉hadoop生态圈一些开源组件flume、sqoop、zookeeper等，熟悉Java，Linux，熟悉关
系型数据库mysql、oracle，熟悉数据仓库hive，会写SQL语句，熟悉yarn工作原理及 mapreduce原理，了解hbase，spark，spark_rdd 性格开朗，为人细心，做事一丝不苟，能吃苦耐劳，工作脚踏实地，有较强的责任心， 具有团队合作精神，又具有较强的独立工作能力，思维活跃。 |
| 技能描述 |
|
熟练掌握Hadoop相关组件、HDFS/HBase/mapreduce/Hive/Spark
熟练使用sqoop导入导出和flume抽取数据 熟练sql的编写 熟悉Mysql，Oracle关系型数据库 熟悉java语言以及开发工具MyEclise 熟悉spark以及scala语言 |
