IT人力外包人才简历库

返回列表

Python数据采集工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:4次 发布时间:近期

技能标签

Python 爬虫开发 requests BeautifulSoup 数据抓取 多线程 自动化脚本 网络请求 数据解析 文件下载 反爬虫 GUI开发 HTTP协议 异步编程 数据存储

专业技能

精通Python编程语言,熟练掌握requests、BeautifulSoup、Scrapy等网络请求与数据解析技术。熟悉多线程/异步编程实现高效数据采集,具备反爬虫策略制定与应对能力。擅长文件批量下载技术,可处理图片、音频、文档等多类型数据。熟悉Windows环境下的exe程序打包技术,具备基础GUI界面开发能力。熟悉网络协议与HTTP请求优化,能处理动态渲染页面的数据采集需求。

工作履历(脱敏处理)

在校期间持续参与多个数据采集项目,积累丰富的实战开发经验。独立完成音乐平台歌曲批量下载系统开发,实现单曲/歌单/榜单数据抓取与本地化存储。开发插画网站图片采集插件,支持标签筛选与多线程下载,日均处理图片数据超5000张。构建视频平台监控系统,实现视频评论点赞自动化操作,日均处理视频数据超200条。熟悉Linux环境部署与调试,具备基础的系统监控与日志分析能力。

项目经验(脱敏处理)

1. 某音乐平台数据采集系统:基于requests实现网页数据抓取,采用BeautifulSoup进行HTML解析,开发支持单曲/歌单/榜单的批量下载功能。针对反爬虫机制,实现请求头随机化与请求间隔控制,日均处理数据量达5000+。2. 插画网站图片采集插件:开发支持标签筛选与多线程下载的图片采集工具,采用异步IO提升下载效率,日均处理图片数据超3000张。3. 视频平台监控系统:构建视频评论点赞自动化脚本,实现视频数据实时监控与评论互动,日均处理视频数据200+。4. Pixiv图片采集工具:开发支持标签筛选与排行榜下载的图片采集程序,采用多线程并发下载技术,100M光纤环境下实现满速下载,程序可打包为独立exe文件运行。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接