ETL开发运维工程师简历范文

• 负责企业级数据仓库ETL开发，基于Kettle与DataX建设200+条同步链路，日均处理数据量提升至8TB。
• 重构调度架构并引入Airflow集中管理，任务失败率由5%降至1.2%，平均故障恢复时间缩短30%。
• 搭建数据质量监控与告警体系，覆盖核心指标120项，保障对账准确率达到99.9%。

• 参与电商订单数据仓库建设，使用Hive与Spark完成ODS到DWD层加工，支撑日活分析报表准时产出。
• 优化SQL与分区策略，核心任务运行时长由4小时压缩至2.5小时，集群资源消耗降低25%。

• 基于Flink CDC与Kafka搭建订单、库存实时同步链路，端到端延迟控制在3秒内，支撑实时看板业务。
• 设计断点续传与幂等写入机制，数据重复率下降至0.01%以下，上线后未发生重大数据事故。

• 梳理慢任务TOP50并优化执行计划与文件压缩格式，整体批处理窗口缩短35%，保障每日8点前报表可用。
• 推动调度依赖标准化，减少无效重跑约200次/月，节约计算资源成本约15%。

主修数据库系统、数据仓库与大数据技术，获校级优秀毕业生。