Hive性能优化工程师简历范文全文
熊帅帅
Hive性能优化工程师
教育背景
浙江大学
985211双一流
计算机科学与技术 本科
杭州2015年9月 - 2019年6月
主修数据库系统、分布式计算与数据仓库,毕业设计方向为大数据查询优化。
专业技能
Hive SQL调优
执行计划分析
数据倾斜治理
Tez/Spark引擎
JVM与资源调优
Hadoop生态
荣誉奖项
公司年度技术之星
校级优秀毕业生
课外活动
浙大数据技术协会
技术部/技术负责人
杭州2017年9月 - 2019年5月
- 组织大数据技术分享与Hadoop实践工作坊,累计参与学生超200人。
自我评价
5年大数据平台开发与Hive性能优化经验,主导PB级数仓SQL调优与执行计划优化,擅长数据倾斜治理、存储格式与执行引擎参数调优。熟悉Hive底层架构与Tez/Spark执行引擎,具备JVM与资源调度调优能力。累计支撑日均百万级任务稳定运行,核心链路耗时平均下降50%以上。
工作经历
杭州数澜科技有限公司
杭州
大数据平台企业数据服务
大数据平台工程师
2021年3月 - 至今
Hive调优数据仓库
- 负责集团Hive数仓性能治理,通过分区裁剪与存储格式改造,核心报表任务耗时下降55%。
- 主导数据倾斜专项优化,重写十余个热点SQL并调整join策略,日均任务失败率由3%降至0.4%。
- 搭建慢查询监控与调优规范,推动20余个业务团队接入,集群资源利用率提升约30%。
上海云瀚信息技术有限公司
上海
互联网数据服务
数据开发工程师
2019年7月 - 2021年2月
HiveETL开发
- 参与PB级用户行为数仓建设,负责Hive表设计与ETL开发,支撑日均百亿级日志加工。
- 优化Tez执行引擎参数与并行度配置,批处理链路整体耗时缩短约40%。
项目经验
集团Hive数仓性能治理专项
2022年4月 - 2023年12月
性能优化负责人
- 针对慢查询TOP50任务逐条分析执行计划,结合分区裁剪与文件合并,平均耗时下降52%。
- 引入小文件合并与压缩策略,NameNode元数据压力下降约35%,任务稳定性显著提升。
工作成果
集群成本优化
通过资源队列与参数治理,年度集群计算成本节省约120万元。
稳定性提升
建立慢查询与倾斜预警机制,核心链路SLA由99.5%提升至99.95%。
知识沉淀
输出Hive调优手册与案例库20余篇,成为团队新人培训标准材料。
证书与认证
阿里云大数据工程师认证(ACP) - 阿里云
2023年8月
覆盖大数据计算与数仓建模能力。
数据库系统工程师(软考中级) - 工业和信息化部
2022年5月
覆盖数据库设计与优化能力。
其他信息
到岗时间:
离职状态,一周内可到岗,可接受短期出差。
技术作品:
GitHub维护Hive调优脚本与执行计划分析工具。
更多Hive简历范文
同一职位,不同的版式和写法。点开任意一份即可查看大图。
就从这份范文开始
免费复制到你的账户里,每一句话、每个板块和颜色都能改,改好即可下载投递。