跳到正文
熊猫简历

登录 / 注册

微信扫码、手机号或邮箱验证码登录,新用户自动注册。

Python数据采集简历范文

  • 双栏
  • A4
  • 网申友好
上传我的简历

Python数据采集简历范文全文

熊帅帅

Python数据采集工程师
138 0013 8000
杭州
男
离职-随时到岗
意向城市:杭州
期望薪资:15-20K
教育背景
武汉理工大学
211双一流
计算机科学与技术 本科
武汉2017年9月 - 2021年6月

相关课程:数据结构、数据库系统、计算机网络。

专业技能
Python
Scrapy
Playwright
MySQL
Redis
Linux
荣誉奖项
校级一等奖学金
志愿服务经历
Python技术分享志愿者
开源技术社区
线上2023年3月 - 至今
  • 为社区开发者讲解爬虫合规与反爬应对,累计授课6场。
自我评价

4年Python数据采集与数据工程经验,熟悉Scrapy、Requests、Playwright等采集框架,擅长应对JS渲染、验证码与IP封禁等反爬场景。主导过日均千万级数据量的采集系统建设,具备分布式调度、数据清洗入库与质量监控的完整落地能力。

工作经历
杭州数聚网络科技有限公司
杭州
互联网数据服务
Python数据采集工程师
2023年4月 - 至今
Scrapy反爬策略
  • 负责电商与资讯类站点采集系统开发,日均稳定采集数据超800万条,任务成功率保持在99%以上。
  • 设计Redis分布式调度与代理池方案,将IP封禁导致的失败率从12%降至2%以内。
  • 搭建采集数据质量监控与告警机制,异常发现时效由小时级缩短至5分钟内。
武汉云图信息技术有限公司
武汉
软件外包企业服务
Python开发工程师
2021年7月 - 2023年3月
Python数据清洗
  • 使用Requests与Playwright完成多站点数据采集,累计交付30余个采集任务并按时上线。
  • 优化解析与入库流程,单任务处理耗时下降约40%,支撑业务方日常报表需求。
项目经验
多站点分布式采集平台
2024年3月 - 2024年12月
核心开发
  • 基于Scrapy-Redis搭建分布式采集集群,支持20个节点并行,日均采集量提升至千万级。
  • 引入Playwright处理JS渲染页面,配合验证码识别与请求指纹伪装,页面解析成功率提升至96%。
采集数据清洗与入库系统
2023年6月 - 2024年2月
负责人
  • 设计增量采集与去重策略,重复数据率由8%降至1%以下。
  • 建立字段校验与异常重试机制,数据入库准确率稳定在99.5%以上。
工作成果
采集效率提升

沉淀通用采集框架与代理池组件,新站点接入周期由3天缩短至半天。

合规采集落地

推动采集流程合规化改造,完成robots协议与频率控制规范落地。

证书与认证
数据库系统工程师(软考中级) - 工业和信息化部
2023年11月

证明数据库设计与管理能力。

大学英语六级(CET-6) - 教育部考试中心
2022年6月

证明英语综合应用能力。

语言能力
英语(CET-6)可阅读英文技术文档,CET-6
其他信息
作品集:

github.com/xiongshuaishuai,含采集框架与反爬实践代码。

到岗时间:

可接受出差,一周内到岗。

更多数据采集简历范文

同一职位,不同的版式和写法。点开任意一份即可查看大图。

查看全部 35 份数据采集简历范文

就从这份范文开始

免费复制到你的账户里,每一句话、每个板块和颜色都能改,改好即可下载投递。

上传我的简历