职业经历
工作经历
2017年05月 — 3000年01月
技术,数据,数据开发工程师
工作职责:(Hadoop、hive、flink、kafka、mysql、scala),与数据打交道,让数据更大更准更快 1.中移互联网公司的数据资产管理主要牵头人,制定数据全生命周期管理办法,运营大数据分析门户。 2.互联网数据中台服务支撑,完成大数据存储、查询方案设计与优化,输出相关接口规范。 3.打通互联网与集团公司的跨集群大数据服务,基于集团全网数据设计并开发离线数据仓库。 4. 移动认证SDK数据采集回传、统一互联项目实时计算引擎架构搭建以及实时数仓设计、开发。 5. 日常支撑业务完成业务用户画像分析。 工作业绩: 1.终端TAC8码校验 、三要素校验 、集团IOP营销活动数据查询等重要API接口设计开发。 2.DMP平台标签数据查询优化,保证10亿行级别数据量查询时延在40ms以内。 3.基于Ngnix + Apache Flume + Kafka + Flink + Clickhouse + Superset搭建轻量级的接口指标实时监控系统,监控时延总体控制在7s以内,向业务提供高可用的API服务。 4.完成集团BO域数据离线数仓搭建,创建DWD层维度模型14个,主题表21张,覆盖全网10亿用户100TB级以上的数据。 5.打通集团与互联网公司两地集群的数据互通,搭建集团全网数据建模环境,突破集专公司数据孤岛现象,数据使用效能提升100% 6.使用FLume+kafka+Flink 、spark + hive +hbase完成统一互联实时计算引擎搭建以及实时数仓架构设计,并完成实时数仓ODS、DWD、DWM层代码开发。
教育经历
通信工程
2011年09月 — 2015年07月
项目经历
2019年10月 — 2021年10月
项目内容: 该项目主要实现目标是探索集团大数据中台能力,借助集团全网用户 B 、O域信息搭建离线数仓,完成用户画像分析,支撑内部业精准营销 、画像分析以及支撑省公司安全风控。 项目职责: 1.数据源抽取、建模环境搭建。 2.数据仓库开发,使用hive工具完成维度数据建模,并做好日常数据更新与维护巡检。 3.开发数据上传、下载接口 ,打通互联网与集团的数据传输通道。 4.对接业务需求,完成业务标签需求开发以及业务用户画像分析。 项目业绩: 1.每月定期抽取集团 BO域接口表 35张,通过python + shell的方式实现全自动更新、自检。 2.设计、建设并维护数据资产表 84 张(维度模型超过15个,主题宽表8张),覆盖用户 10 亿,总存储量接近250TB 3.顺利支撑公司5G消息安全管控 、5Gchatbot 自动画像分析报表 、断卡行动三个重要项目开展,其中5G消息安全拦 截不良消息率达10%。 4.开发网盘偏好标签,支撑移动认证+和彩云精准营销活动,弹窗点击率20%(提升5倍)
TA 的技能服务
该人才共 1 项技能服务,可在 技能服务 中搜索「lijiejin」查看。