你好,我是Lynn Lee。

目前在腾讯广告从事数据工程,工作围绕广告用户行为数据、实时计算与数据质量展开。我喜欢把复杂链路拆成可以观察、可以验证、可以恢复的部分,再逐步把它做稳。

这份博客是我的工程笔记:写清楚设计的前提,记录方案的边界,也留下验证结论的方法。

我在做什么

广告数据与实时计算

参与广告实时数据平台升级,推进历史 Java / Flink 任务向标准化链路迁移。围绕升级对账、行为关联、实时去重、任务巡检与计算资源优化,持续改善数据链路的正确性和可维护性。

海外数据基础设施

参与基于 AWS 的海外广告用户行为数据系统建设,处理异构媒体接入、流批处理与协议映射。关注 S3、Iceberg、MSK 等组件之间的数据契约,以及配置化接入和变更的验证过程。

AI Agent 工程

探索智能运维与 Data Agent:让告警分析、证据检索、问题定位和数据查询形成可追踪的工作流。使用过 LangChain、AWS Bedrock 等工具,也在实践 SDD、TDD 与 Skill 化的开发流程。

经历

时间经历主要方向
2024.07—至今腾讯 · 腾讯广告 · 数据工程实时数据平台、海外行为数据链路、Agent 工程
2023.06—2023.08阿里云 · 大数据开发实习基于 Flink 的多源数据同步,云边端数据收集与分发
2021.09—2024.06武汉大学 · 硕士地图制图学与地理信息工程,时空大数据计算
2017.09—2021.06东南大学 · 本科地理信息科学

开源与研究

Glink ↗

参与基于 GeoMesa 与 Flink 的空间数据实时接入和查询工作,研究空间连接算子的性能优化。Glink 是面向 Apache Flink 的空间计算扩展。

TrajSpark ↗

在校企合作项目中参与电信轨迹大数据的分布式处理与挖掘,涉及分区索引、聚类、地图匹配与轨迹纠偏。

学生阶段也参加过数学建模竞赛,获得全国大学生数学建模竞赛一等奖与 MCM/ICM Finalist。建模经历让我习惯先明确假设和评价方法,再选择实现。

我的做事方式

  • 先定义“对”。 把输入、输出、数据口径与失败语义说清楚。
  • 用证据做判断。 对账、回放、压测、执行计划,比“感觉应该没问题”更可靠。
  • 让改动可恢复。 小步上线,保留追踪信息和回滚路径。
  • 把重复工作写进工具。 让脚本、流程和 Agent 承接可验证的重复劳动。

关于本站

这里按广告系统、Flink、MySQL、Java 和 AI Agent 五条主线整理技术笔记。文章中的业务案例采用通用或合成场景,参考资料列在文末,不代表任职公司的官方技术说明。

网站默认展示英文,可通过语言切换阅读对应中文版。早期文章保留原始发布日期;新整理的专题按实际整理日期标记。版本敏感的结论会在正文说明适用范围。

公开交流入口:GitHub · lynnlee1229 。