项目时间:2015-12到至今
项目名称:贵宾理财系统后期日常维护
项目描述:
项目介绍
中信贵宾理财系统是中信银行理财客户经理服务贵宾客户、开展营销工作的工作平台和辅助工具,同时,也是总、分、支行各层级贵宾理财业务相关管理人员的管理工具。该系统可以提供以下方面的支持:作为日常工作平台,协助一线业务人员完成客户信息管理、客户关系管理、理财顾问服务和日常工作安排;作为管理工具,协助各层贵宾理财业务管理部门对理财业务相关机构、人员、客户、产品和业绩进行管理。中信银行贵宾理财财富管理新加系统是在贵宾理财系统基础上新加的财富管理功能模块,对客户管理资产进行全方位跟踪与管理,分析客户资产动向,发崛潜在客户,保留有价值客户,同时提供客户更好的服务
我的职责
1,日常主要做系统数据抽取、加工;
2,用kattle从业务源系统中进行数据抽取、清洗、加载、转换工作;
项目时间:2016-08到至今
项目名称:洪雅不动产数据挖掘工作
项目描述:
项目介绍
1.协助不动产登记中心发证,发现问题以及听取前台工作人员反应问题
2.对数据出现的问题进行上报,和提出自己分析的户的问题原因
3.对问题提出解决方案,按照项目经理认同的解决方案进行对问题的处理
4.对洪雅之前入库的缺失数据进行补录
我的职责
1.对洪雅的数据进行整理,和协助不动产登记局的发证工作
2.对洪雅发证之后出现的问题,进行问题的找出、上报和提出解决方案
3.按照商讨后的解决方案对数据进行修改
项目时间:2016-09到至今
项目名称:移动数据分析平台
项目描述:
项目介绍
?开发环境:Windows + JDK1.7+Eclipse+linux+mysql
?软件架构: Spark1.3,hbase,kafka,flume,hdfs,zookeeper
?系统目标:
打造的一款数据分析产品,专注于移动应用领域,旨在为企业更好地了解用户行为习惯、及时掌握运营情况提供帮助,同时以数据作为支撑,为应用设计优化和实现精准营销提供依据。
?系统实现:
移动应用集成数据采集SDK后,数据采集SDK自动采集应用和设备的部分信息,发送到数据采集服务器。数据采集服务器使用flume进行数据采集,把数据采集到Kafka集群。
业务服务器生成的日志通过flume采集到kafka集群。
然后kafka集群的数据落地到hdfs上。
离线业务从hdfs集群中读取数据,在Spark集群中进行业务处理,指标计算。
离线计算有3个job:增量计算,聚合,批量计算。
增量计算是指每次计算数据指标时只包含数据新增的部分,然后将计算得出的增量结果累加到最终的结果中,我们通过给每个用户维护一个state数据结构来实现增量计算,state的初始状态为空,在进行增量计算时首先读取用户的state,然后借助state判断本次增量结果,然后将增量结果累加到最终结果,最后更新用户的state状态并对state做持久化保存。增量计算完的结果保存在Hbase中。
聚合:将新增数据和以往的数据聚合。
批量计算:批量修改算有的用户。
kibana报表展现
实时业务直接从kafka集群中读取数据,通过SparkStreaming进行实时计算,业务监控。
我的职责
项目代码编写
项目时间:2010-06到至今
项目名称:幼儿园管理管理系统(维护)
项目描述:
项目介绍
幼儿园接送软件是一套使用与幼儿园进行接送管理的软件,主要功能有,幼儿园在刷卡机上刷卡软件可以显示出家长学生信息并存储与数据库中,还包括刷卡发短信等功能。
我的职责
刷卡发短信模块,集成一款带拍照功能刷卡机,通过厂家提供的tcp/ip协议提取刷卡机里的刷卡记录和图片记录,导入学生,家长资料以及用户图片的功能。目前开始集成一款人脸识别的设备。