chan

chan

数仓、数据中台搭建及开发运维

发送消息
0 · 0条评价 回复率 50% 4年经验 ¥50/时
DBA 运维 其他
技术 更多

职业经历

1、7年多大数据领域实战工作项目经验,熟悉业务与技术框架,参与规划数据仓etl、数据建模等 2、独立完成多个项目数仓开发运维 3、掌握hadoop、seatunnel、kafka、flink、linux、starrocks、mysql等各项大数据技能 4、掌握平台运维,问题定位排查处理 5、数据查询优化,方案设定等

工作经历

高级大数据工程师 · ****

2017年07月 — 3000年01月

技术,技术项目管理,需求分析工程师

1、需求调研,业务、技术调研 2、项目技术支撑,数据治理、 数据加工及数据模型设计,性能优化、故障处理及指导开发运维工作等 3、负责技术方案制定及实施,系统应急演练、 数据备份方案编写及实施,售前方案支持等 4、负责数据开发,数据etl、数据建模、 分层、 数据流程设计, 任务调度设计等等 5、负责大数据平台搭建升级运维集群扩容、 平台故障排查及应急处理等、数据仓库架构选型设计及开发 6、负责项目大数据部分技术支撑,系统查询优化,大屏可视化指标开发 工作业绩:完成大数据平台、数据仓库0-1实施落地,为收费项目查询提高2倍以上效率,完成平台数据迁移,搭建开源技术架构节约大量成本。完成厅级数据治理建设,实现厅内十多个处室系统数据共享, 解决数据质量问题及数据封闭现象;

教育经历

广西大学

软件工程

2013年09月 — 2017年07月

项目经历

公共服务大数据治理与应用平台

2021年02月 — 2023年10月

该项目为市数据中台项目。在统一政务网络和政务云平台的基础上,构建政务数据资源体系,实现向上连接自治区、国家数据共享交换平台,向下接入县区,横向打通市直各部门,以便民惠企应用为切入点,强化数据治理,建立数据供需调度机制。系统基于云平台搭建,底层使用kettle作为etl工具,采用高斯mpp数据库,hive和spark做数据开发及分析搭建市级数据仓库,构建数据中台实现数据共享交换

高速公路取消省界站大数据稽查系统

2019年10月 — 2021年08月

该项目为全国高速公路取消省界站收费项目,主要对省各地区高速收费站进行全面整改,增加ETC功能,由于数据量庞大当前系统无法支撑大数据的查询,针对近5年及最新数据迁入大数据平台及MPP数据库,采用T+1的形式将原始数据接入大数据平台,并对数据进行清洗过滤,数据开发,将最终数据存入数据仓库及业务数据库,提高业务人员查询的效率以及数据的可视化展示,提高利用价值

TA 的技能服务

该人才共 1 项技能服务,可在 技能服务 中搜索「chan」查看。