大数据开发工程师简历范文
基本信息
姓名:知页简历
年龄:32
电话:159****7747
邮箱:41****@qq.com
经验:6年
意向:大数据开发工程师
教育背景
时间:2011-09到2015-06
学校:知页简历科技大学 | 专业:金融学 | 学历:本科
工作经历
工作时间:2015-09到至今
公司名称:知页简历网络科技有限公司 | 所在部门:数据部 | 所在岗位:大数据开发工程师
工作描述:
1参与公司大数据平台的搭建与配置。
2.根据业务需求对移动设备数据和社交数据进行多维度分析,得出用户行为与游戏运营的各项指标。
3.将分析处理后的数据落地到RDBMS中,接入业务使用,为公司产品部门和高层决策在广告领域的创新应用、商业效果改进等提供数据服务支持。
4.使用SparkSQL高效分析处理用户行为数据。
5.平台的日常维护与优化。
工作时间:2017-02到至今
公司名称:知页简历信息互动有限公司 | 所在部门: | 所在岗位:大数据开发工程师
工作描述:
将政府公共中心的数据导入mysql数据库,将网上爬取的与企业相关的信息的数据导入MongoDB数据库,在mysql数据库服务器利用存储过程对数据进行初步提取、转换并加载到ODS层的表中使用kettle对ODS层的数据做进一步的ETL处理,如调度上一环节的存储过程、增量更新除基础表等几张表外的数据到EDW层、对企业基本信息等做缓慢渐变维(SCDs)处理。
在前端客服系统上用js作埋点处理,获取用户的行为数据。将这些数据导入我所在的大数据处理中心,用机器学习、数据挖掘工具对用户的行为进行挖掘分析,并将分析结果反馈给后台服务器进行利用。
项目经历
项目时间:2016-09到至今
项目名称:数据统计分析
项目描述:
项目介绍
该项目为网站数据统计分析项目,网站是实名注册可小额抵押汽车、小额理财的一个平台。本项目通过对该平台用户海量借贷数据的获取,统计网站日点击量、注册用户数、各年龄层比率、放款次数金额、单笔募集时间等来分析网站运营情况,根据借贷人群、金额和来源情况的分析结果适度调整营销策略,促进网站长远的发展。
我的职责
1.搭建项目集群环境
2.Hive表的结构设计,如贴源表、明细表
3.分析处理每月贷款金额、每月注册用户数、各年龄层比率、用户地域分布排名、黑名单离线指标,实时统计单笔款项募集时间、实时点击量、实时成交额。
4.问题处理以及Spark和hive相关优化
【免责声明】本站部分文章来自网络收集,仅供个人研究、交流学习使用,不涉及商业盈利目的。如侵犯了你的权益,请联系QQ:202543917进行删除。