大数据平台开发工程师简历范文

• 负责实时数仓平台建设，基于Flink+Kafka支撑日均80亿条数据处理，端到端延迟从分钟级降至10秒内。
• 主导数据湖Iceberg落地，统一离线与实时存储，存储成本下降28%，查询效率提升约40%。
• 建立平台监控与资源治理体系，任务失败率由3.5%降至0.8%，保障核心报表稳定产出。

• 参与离线数仓分层建模，使用Spark+Hive完成20余个业务域数据接入，支撑日活百万级产品的分析需求。
• 优化Spark任务参数与分区策略，核心作业运行时长缩短35%，集群资源占用降低约20%。

• 设计Flink实时链路与Iceberg分层存储方案，支撑实时大屏与风控场景，数据时效由T+1提升至秒级。
• 通过状态后端调优与反压治理，峰值吞吐提升50%，作业稳定性显著增强。

• 主导Hive到Iceberg的平滑迁移，制定双写与校验方案，实现零业务中断切换。
• 迁移后小文件问题减少70%，即席查询平均耗时下降约45%。

主修数据结构、数据库系统、分布式计算，毕业设计为基于Hadoop的日志分析平台。