姓名:简小历
年龄:26岁
电话:159****6236
邮箱:300268****@qq.com
经验:4年
意向:大数据开发工程师
时间:2010-09 - 2013-06
学校:简历本科技学院 | 专业:计算机软件 | 学历:大专
工作时间:2016-03 - 2017-02
公司名称:简历本信息科技有限公司 | 所在部门: | 所在岗位:软件开发工程师
工作描述:
软件开发:
责任描述:
1、 参与项目的需求分析和项目构建。
2、 参与商品展示模块及搜索系统模块的开发及测试
3、 搜索系统服务接口的开发,及solrCloud的安装及配置
4、 使用Redis数据库做缓存
工作时间:2015-09 - 至今
公司名称:简历本信息互动有限公司 | 所在部门:数据部 | 所在岗位:大数据开发工程师
工作描述:
1参与公司大数据平台的搭建与配置。
2.根据业务需求对移动设备数据和社交数据进行多维度分析,得出用户行为与游戏运营的各项指标。
3.将分析处理后的数据落地到RDBMS中,接入业务使用,为公司产品部门和高层决策在广告领域的创新应用、商业效果改进等提供数据服务支持。
4.使用SparkSQL高效分析处理用户行为数据。
5.平台的日常维护与优化。
项目时间:2017-05 - 至今
项目名称:基站运营数据实时分析处理系统
项目描述:
项目介绍
使用技术:hdfs+spark+hive+mysql+sqoop+flume
项目描述:数据源通过ftp服务获取文件形式基站数据,利用flume对该文件目录进行实时采集,然后采用flume与sparkStreaming对接,sparkStreaming通过设置每个批处理的间隔时间,将流式计算分解成一系列批处理作业,实时的交给sparkStreaming清洗处理,获得实时的基站告警数据以及基站流量数据展示并存储到HDFS上,对保存在HDFS的数据利用hive建立外部分区表,通过定时任务执行,统计一天的基站告警信息;利用sqoop工具将结果存入MySQL,供前端展示。
我的职责
大数据工程师
参与需求分析,平台环境搭建 ,基站告警统计 ,基站流量监控。
项目时间:2015-11 - 至今
项目名称:鹿鸣呦呦即时通讯系统 | 项目工具:ubuntu
项目描述:
项目介绍
鹿鸣呦呦是一款定位于高端资源与人脉的对接平台,基于MQTT协议开发的,含聊天、商机、人脉与一体的即时通讯软件
我的职责
hadoop、spark、hbase、redis,服务器集群环境搭建维护,项目短信、隐私、商业圈功能性模块开发.flume日志信息收集处理。
本人热爱编程,并对从事计算机IT行业的工作拥有浓厚的兴趣
具有良好的团队合作能力,能有效的与队友沟通
具有强烈的责任心
本人接受适应的能力和自学的能力较强,能尽快的熟悉工作环境克服困难
本人性格外向随和,能接受一定强度的加班和出差
Web前端
sparkstreaming
spark-core
Oracle
Java
Hive
kafka
hbase
Hadoop
spark-sql
hdfs
MySQL
webservices