IT人力外包人才简历库

返回列表

爬虫开发工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:7次 发布时间:近期

技能标签

Python 网络请求 数据解析 自动化工具 反爬虫技术 数据库管理 正则表达式 IP代理 请求频率控制 爬虫框架 数据存储 文本处理 网络协议 系统优化 异常处理

专业技能

精通Python网络请求库(Requests)、数据解析工具(XPath、BeautifulSoup)及自动化工具(Selenium);具备反爬虫对抗经验,包括请求头构造、IP代理池搭建及请求频率控制策略;熟练使用MySQL数据库进行数据存储与管理;掌握正则表达式(re)进行文本匹配与处理

工作履历(脱敏处理)

作为技术实习生参与多个爬虫项目开发,负责数据采集模块设计与实现,优化反爬虫策略提升采集效率。主导搭建IP代理池系统,通过动态IP切换降低被封禁风险。开发自动化数据处理脚本,实现数据清洗与存储自动化。参与反爬虫技术研究,成功应对动态渲染页面、验证码识别等挑战。持续优化请求频率控制策略,使采集效率提升40%。具备良好的代码规范意识,能够独立完成模块开发与文档编写。

项目经验(脱敏处理)

1. 搭建分布式爬虫采集系统:设计基于Requests的分布式爬虫框架,通过多线程调度实现日均百万级数据采集,采用IP代理池技术降低被封禁风险,系统稳定运行周期达3个月。

2. 反爬虫技术优化项目:针对目标网站的动态渲染页面,开发基于Selenium的自动化采集方案,结合浏览器指纹模拟技术突破反爬机制,成功获取目标数据并完成数据清洗存储。

3. 数据采集系统维护:负责现有爬虫系统的日常维护与性能优化,通过引入请求频率控制算法,将服务器负载降低35%,同时保持数据采集效率。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接