职业经历
工作经历
2021年06月 — 2023年06月
技术,高端职位,架构师
数字化转型，CDP，数据中台,专注于 CDP ，从采集企业各方面业务数据开始，进行数据清洗、转化、搭建数据仓库，进行数据标签化、用户群体化、基于不同属性的人群进行不同的营销策划。利用自动化营销手段，拉新新客、激活潜客，维护回头客。帮助企业深入了解客户及与客户互动。CDP 允许企业建立客户全生命周期档案，并通过这些信息来实现个性化服务。同时，CDP 产品严格保护数据安全和隐私，确保企业数据符合合规标准。CDP 产品在汽车行业多家客户多年实践经验的总结，是汽车行业数字化转型的全新解决方案，能够为企业提供更清晰的业务价值视角，提高商业价值和运营效率，为企业长远发展提供有力支持。
2013年06月 — 2015年08月
技术,高端职位,技术经理
标签： 实时数据、DSP、RTB 、回头客、多维分析报表、 1、建设 DSP 业务线的“数据监控分析平台 Dmap”，对数据的实时性和准确性负责，将 DSP 数十亿数据进行多维度多指标统计（20＋维度 60+指标），提供分钟粒度的分析报表，从上到下全方位对广告投放效果报表展现，对整体投放过程有清晰的体现。 2、为 RTB 提供实时的用户模型数据，采集投放、曝光、点击、到站行为等日志到统一的收集服务器，根据特定模型算法计算用户价值，对 RTB 实时竞价出价提供数据支撑。
2015年09月 — 2021年06月
技术,后端开发,Java
1、手游项目接入移动端广告，SSP、ADX 、数据分析。 使用 ELK 采集应用日志数据，根据分层理论搭建数据仓库（ODS/DW/ADS），使用 Spark/Yarn/HDFS 进行数据分析计算，计算结果存储于 HBASE和 Mysql/Redis 中向平台提供数据展现。 2、 餐饮软件商户中心，基于 SpringBoot/springCloud 搭建微服务系统。 3、 支付平台流量变现数据分析，Hadoop/Hive/Spark/SuperSet 4、 其他小项目研发
教育经历
计算机科学与技术
2009年01月 — 2013年01月
项目经历
2015年09月 — 2021年05月
内容: 1、手游项目接入移动端广告,SSP、ADX 、数据分析。 使用 ELK 采集应用日志数据,根据分层理论搭建数据仓库(ODS/DW/ADS),使用 Spark/Yarn/HDFS 进行数据分析计算,计算结果存储于 HBASE和 Mysql/Redis 中向平台提供数据展现。 2、 餐饮软件商户中心,基于 SpringBoot/springCloud 搭建微服务系统。 3、 支付平台流量变现数据分析,Hadoop/Hive/Spark/SuperSet 4、 其他小项目研发 业绩: 1、负责手游项目移动广告接入数据分析、ADX。 2、 负责企业商户中心项目研发,使用 springboot 微服务/服务治理、springCloud 3、 基于微信公众号流量统计、数据变现产品内容研发。
2022年09月 — 2023年07月
内容: 1、着眼于系统架构,自研 CDP 项目包含数据采集,ID-Mapping 、OneID 、宽表数据计算、多对象管理、标签管理、分群计算、数据查询分析服务、分析洞察、MA 、统一监控等,标签管理可以通过多种自定义规则生成,达到客户对数据有整 体、直观的认识的目的。 2、对 CDP 项目整体有深入的认识,对 idMapping/OneID 计算/属性宽表及行为宽表存储计算进行优化,为保证交付质 量,对即席分析查询进行性能优化,重构分析洞察(即席数据可视化看板)查询性能,较前有着10倍+以上的提升,对多维自定义条件下的即席查询能够达到秒级响应。 3、带领团队完成数据开发平台研发,深入研究 Spark/Flink/Hive/Kafka/Mysql/Oracle 等技术实现,完成高度平台设计及实现。 4、 进行团队协作,从 CDP 数据中台向 MA 自动化营销提供实时数据及批量数据等。 业绩: 1、针对分析洞察模块进行优化,将数据展现部分与数据分析计算部分独立,模块设计灵活,使用模板方法模式优化多种类型查询分析代码,增强了代码的扩展性和规范性; 2、 优化即席分析查询性能,针对特定的数据制定不同的缓存策略,简化复杂的 SQL 逻辑,提升性能2-5倍不等。 3、 组建数据查询分析服务开发小组,完成数据服务的独立,主导技术升级方向并落地实施,将宽表从纵表存储升级为横表存储,分析洞察分析查询性能提升10倍以上,从10万用户数据基数提升至2000万用户数据基数查询。 4、 分析查找并修复解决项目交付过程中遗留的疑难问题。 5、完成数据开发平台多版本迭代开发。
2025年01月 — 2025年01月
内容: 1. 设计和实施DevOps流程,以提高软件开发和部署的效率。 2. 管理和优化持续集成/持续部署(CI/CD)管道,减少部署时间并提高代码质量。 3. 与开发团队合作,自动化测试和部署流程,以减少人为错误。 4. 监控和维护基础设施,确保系统的高可用性和性能。 5. 领导跨部门沟通,确保开发、测试和运维团队之间的顺畅协作。 业绩: · 成功实施了自动化测试框架,将测试覆盖率从40%提高到90%,减少了软件缺陷率。 · 优化CI/CD流程,将部署时间从2小时缩短至15分钟,提高了发布频率和市场响应速度。 · 引入容器化技术,提高了应用的可移植性和扩展性,支持了公司业务的快速增长。 · 通过自动化监控和报警系统,减少了系统宕机时间80%,提升了用户满意度。 · 领导并完成了基础设施迁移项目,将系统从传统数据中心迁移到云平台,降低了30%的运营成本。 2022.02-2023.02 · 与团队合作开发了一个内部工具,用于自动化部署和回滚流程,提高了团队的工作效率和部署的可靠性。 · 熟练掌握Docker、Kubernetes等容器技术。 · 精通Jenkins、GitLab CI等CI/CD工具。 · 掌握Python、Bash等脚本语言进行自动化任务开发。 · 熟悉敏捷开发和DevOps文化,具备良好的团队合作精神。
2021年11月 — 2022年08月
内容: 第一版针对车企项目需求,成功交付车企流批一体项目。在此基础上,自研扩展开发数据开发平台,完成从1.1至2.3四个版本的迭代开发。兼产品设计、项目管理、研发负责人,用户能够在该平台完成数据治理开发的任务建设。 主要功能有 web 代码编辑器(支持 FlinkSQL/hiveSQL/sparkSQL),DAG 流程编辑器,日志跟踪监控、多版本控制、多环境管理、数据源管理,调度任务管理、运行监控。支持 Flink/Spark/Hive/Shell 以及 Flinkjar, SparkJar 等不同类型的任务。 与数据中心的调度服务、元数据服务、用户中心等实现系统对接。 业绩: 1. 作为研发负责人,带领团队圆满完成车企流批一体项目的交付,获得客户以及领导的一致好评。 2. 作为技术负责人,带领团队完成数据开发平台的开发,系统设计灵活、兼容性及扩展性强。 3. 作为项目管理者,使用禅道工具进行项目管理,并总结经验教训,大大提升了团队配合和研发效率 4. 熟悉企业大数据治理的全流程、技术选型、数仓分层建模、流批一体数据计算等,主要面向数据的应用方向设计产品架构。
2013年10月 — 2015年08月
内容: 标签: 实时数据、DSP、RTB 、回头客、多维分析报表、 1、建设 DSP 业务线的“数据监控分析平台 Dmap,对数据的实时性和准确性负责,将 DSP 数十亿数据进行多维度多指标统计(20+维度 60+指标),提供分钟粒度的分析报表,从上到下全方位对广告投放效果报表展现,对整体投放过程有清晰的体现。 2、为 RTB 提供实时的用户模型数据,采集投放、曝光、点击、到站行为等日志到统一的收集服务器,根据特定模型算法计算用户价值,对 RTB 实时竞价出价提供数据支撑。 业绩: 1. 完成项目搭建,完成5个迭代的工发交付,项目对领导决策分析提供强有力的数据支撑。Dmap 上线后,优化师有针对性的调整后,投放效果提升近40%。 2. 实时回头客数据,在每天80亿广告请求下,完成数据的实时流转到达秒级,一些数据能够达到毫秒级,有力的支撑 RTB 竞价及投放。对单体用户进行投放监控,可分析每一个用户请求的 RTB 过程数据,每一次竞价更清析,算法评估过程中的参数有的放矢的调整。
TA 的技能服务
该人才共 2 项技能服务，可在 技能服务 中搜索「赵春雷」查看。