大数据开发工程师简历项目经验怎么写

简历本 08月06日 简历范文      项目经验怎么写

项目经验(案例一)

项目时间:2012-09 - 2013-07

项目名称:平安一卡通

项目描述:
项目介绍
此项目是使集体组织的日常生活出勤考察变得高效,公开,透明。解决由于内勤事物的冗杂,繁琐而带来的重要数据的遗失现象。
我的职责
本人参与了,计费审查统计模、物业公共设施财物的状况、来访人员管理等模块的业务分析及功能实现。

项目经验(案例二)

项目时间:2014-11 - 2015-10

项目名称:中国国际网博中心(https://wangbo.com/)

项目描述:
项目介绍
中国首家基于3D虚拟互动技术的商务应用平台,运用现代网络科技推动会展行业转型升级和创新发展,努力探索实体展与网络展互为支撑、线上展览与信息检索、电子商务紧密结合的全新展览模式,帮助企业宣传推广和企业间商务交流提供媒介。
我的职责
中文版的个人账户信息管理(部分)功能模块开发,英文版的数据库文档撰写、数据关联。依据文档近些编码及系统维护。

项目经验(案例三)

项目时间:2016-01 - 2016-06

项目名称:移动互联网内容规则库自优化系统

项目描述:
项目介绍
基于企业数据中心用户上网日志数据,通过URL过滤、规则库匹配、爬虫爬取、内容复原,文本数据挖掘等方法,实现内容分析配置管理可视化以及内容规则库的自优化等功能,利用爬虫技术并融合DPI复原技术,以及标签规则库的流程管理,对客户的手机上网行为、访问内容、访问应用进行深入识别,精细化支撑客户数据、业务数据的分析需求,并结合数据整合和数据建模、数据挖掘、数据清洗等手段,建设基于细分行业的大数据及用户深入洞察分析能力。
本项目包括:
1.URLCLASSIFIER URL分类模块,输入是采样的DPI URL ,使用用应用规则,栏目规则,搜索规 则,元数据规则,噪音规则,元数据等规则库,清洗为样本数据,供规则分析人员使用。
2.URLGENERATOR 爬虫URL 生成模块,可输入全量的DPI URL,使用用应用规则,元数据规则,噪音规则,元数据等规则库, 自动生成爬虫URL, 供爬虫使用。
3.URLFOCUS 重点应用的URL 提取模块,可输入全量的DPI URL,使用应用规则,栏目规则,搜索规则,元数据规则,噪音规则等规则库,清洗为重点应用的数据,供规则分析人员使用
4.SPIDER 读取爬虫URL,爬去相关页面,生成相关 URL索引文件和对应的页面文件,提供给PP使用。
5.PPPage Parser的简写,读取SPIDER或PR的URL索引文件和页面内容文件,使用页面规则库,生成内容元数据,导入相应的APP的元数据库。
6. CRMANAGER 内容规则库管理系统的用户操作可视化界面。
我的职责
本人在项目中参与系统架构和数据库表结构的设计,主要负责的模块:网页内容分析模块(PP)和爬虫复原URL生成模块(URLGenerator)。
网页内容分析模块(PP):网页内容分析,通过对网页内容提取规则,将提取的内容与内容元数据对应,建立内容元数据规则库。可以支持对网页/APP应用更新状态进行判断、对网页/APP应用编码进行识别 、对网页/APP应用标题进行获取、对网页/APP应用内容的获取 。
爬虫复原URL生成模块(URLGenerator):基于应用(APP)栏目动作规则库,内容规则库,内容元数据规则库和噪音库,从全量输入的DPI XDR中提取并基于规则生成供爬虫爬取的URL。

项目经验(案例四)

项目时间:2017-01 - 至今

项目名称:国寿指标计算新框架 | 项目工具:hadoop,hdfs,mapreduce,hbase,spark-streaming

项目描述:
项目介绍
该框架主要解决了以下几个问题:
1.集群中依赖的第三方Jar部署问题,使用了hadoop的分布式缓存技术,自动把依赖的jar包分发到各个node节点,并添加与classPath中
2.解决集群的安全认证问题,新框架兼容了hadoop集群的kebos认证
3.解决了不同项目组编程中的版本冲突,程序实现了计算逻辑的自动加载,每个人只需维护好自己的代码即可.
我的职责
参与新框架(基于MapReduce与hbase编程模型)方案的讨论与设计,部分架构代码的实现,按照新架构的思路去实现指标的计算,解决了以前架构中缺陷!

有用
本文内容来自互联网,如果侵犯了您的权益,请联系管理员立即删除(附上内容地址)

相关推荐

  • 大数据开发工程师简历模板下载word格式,求职意向:大数据开发工程师,工作经历:根据公司发展需要,为公司所做的项目提供技术支持,搭建数据分析平台,对数据进行简单清洗和处理,对项目所需的部分指标进行分析处理,解决项目中出现的部分问题,优化项目代码,减少运行时间。
    3486人使用
  • 大数据工程师简历模板,基本信息,姓名:简历本,求职意向:软件工程师/软件研发工程师/数据库开发工程师,工作经历:进行数据导入导出 sqoop,mr数据清洗,hive,spark分析统计,以及hadoop集群维护,日常数据维护等...
    237人使用
  • 数据通信工程师简历,基本信息,姓名:简历本,求职意向:网络信息安全工程师/数据通信工程师/通信技术工程师/网络工程师/电信网络工程师,工作经历:电信级的交换机, bras数据配置,熟悉华为,中兴,爱立信,思科的路由器,交换机数据设备,无线网络的优化,3/4G无线网络优化...
    0人使用
  • 数据通信工程师简历模板,求职意向:数据通信工程师,工作经历:在中粮可口可乐的这段时间里,主要参与一些根据地方不同,市场环境不同的所需要制定的一些特殊对待快消品的方案,一遍适应当地执行环境,和日常的制定督促可口可乐业代日常项目的跟进,参与和快消品行业的竞品对比和应对方式,处理广告公司和中粮可口可乐的活动促销活动的广告制作,根据销量执行公司下发的政策方案,参与节假日和学校影院的方案申请、活动执行。
    555人使用
  • 数据通信工程师个人简历,基本信息,姓名:简历本,求职意向:数据通信工程师,工作经历:客户业务维护,工程实施跟进,维护机房设备运行,日常故障处理...
    0人使用
  • 软件开发:责任描述:1、参与项目的需求分析和项目构建。2、参与商品展示模块及搜索系统模块的开发及测试3、搜索系统服务接口的开发,及solrCloud的安装及配置4、使用Redis数据库做缓存
    6740人阅读
  • 根据有关标的客户的信息数据,适用相应的模型对其进行风险识别并分级。同时根据技术的发展及相关监管部门政策的调整而研发相适应的风险识别模型,同时就新的模型与技术部沟通、推进、实现,与运营部沟通、协调并推向市场,与设计部协调、调整、重新设计网页、APP界面。
    1529人阅读
  • 1.参与过多个项目的开发,熟悉常见业务的处理。2. 学习能力强,对新技术有着强烈的好奇心,适应能力强,能很快融入到项目开发中去。3. 逻辑思维能力强,思路清晰,处理问题细心严谨。4. 有较强的团队意识,乐于与用户以及领导,同事沟通,以便于解决项目中遇到的问题。5. 喜欢大数据行业,并打算长期追随大数据行业的发展做下去。
    6039人阅读
  • 项目介绍我们的日志数据来源有2个,一个是IIS日志,一个是trace日志。IIS日志主要用于记录用户和搜索引擎对网站的访问行为。trace日志主要记录用户在网站上的操作行为。用户在网页上的每次点击操作都会生成一条日志记录。我的工作是利用spark对trace日志进行离线和实时分析。需求一:商品搜索分析这主要是分析用户用户搜索了哪些产品。对日志进行处理后取得相应字段后,按照vid访客ID和siteI
    4267人阅读
  • 负责产品的研发,系统性能调优,必要的技术支持1.中联税审项目 c++,Excel2.大信合并系统 VC++,Excel,Mongdb3.数据处理平台 myeclipse,Jdk,Hadoop2.x,hive,sqoop,zookeeper4.业务报表系统 myeclipse ,jdk, tomcat,jsp,servlet........
    5708人阅读