apophis

2021年01月 — 3000年01月

技术,数据,数据开发工程师

参与并主导完成 TB 级实时出行服务框架的搭建，基于车辆 TBOX 数据和 GPS 数据，构建实时出行服务框架，完成数据合流、异常处理、原子能力建设、事件分析等工作，支持近 40 万辆车日常实时出行服务。日巅峰处理数据量达 5.11GB/分钟， 日总处理数据条数 38亿条，7.18TB，解决原有框架下存在的数据反压和服务延迟的问题。

2020年04月 — 2020年12月

技术,数据,ETL工程师

参与负责实时数仓体系的实时 etl 功能。实现实时 etl 快速开发，通过外部 sql 文件方式，自动将数据格式化输出到 mysql/kafka/phoenix 等数据存储组件，承担 80%的 etl 功能开发。其中，实现 phoenix 等版本尚未支持的 connector 功能。

2018年06月 — 2020年03月

技术,数据,数据仓库工程师

主导重构离线数据仓库体系建设。基于 json 映射机制创建外部表，利用 ONE-DATA 理念对数仓分层设计(ODS，DWD，DWS，ADS)，并实现数据采集入库配置化；开发任务异常监控功能，监控范围包含数据采集，数据计算等过程；日常 sql 报表开发。