IT人力外包人才简历库

返回列表

Python数据采集与分析工程师

驻场外包人员
工作年限:4年 意向城市:杭州 浏览:4次 发布时间:近期

技能标签

Python Scrapy Selenium Requests 数据清洗 数据可视化 MySQL SQL Server 线性回归 时间序列分析 分布式爬虫 反爬虫策略 数据库优化 特征工程 数据建模

专业技能

精通Python全栈开发,擅长网络爬虫技术,具备分布式爬虫架构设计能力。熟练掌握Scrapy、Selenium、Requests等爬虫框架,熟悉反爬虫机制应对方案。精通数据清洗与特征工程,擅长使用Pandas、NumPy进行数据处理。精通数据可视化技术,熟练使用Matplotlib、Tableau进行数据洞察。精通MySQL/SQL Server数据库性能优化,掌握索引优化、查询优化、分库分表等技术。熟悉机器学习算法,能运用线性回归、时间序列分析等模型进行数据建模。

工作履历(脱敏处理)

专注于数据采集与分析领域,主导设计并实施多个分布式数据采集系统,涵盖政府数据、电商数据、大宗商品价格等多源数据。优化数据处理流程,提升数据采集效率30%以上。设计并实现数据可视化解决方案,支持多维度数据洞察分析。主导数据库性能调优项目,通过索引优化和查询重构使系统响应速度提升40%。开发数据建模工具,建立线性回归模型预测市场趋势,支持业务决策制定。

项目经验(脱敏处理)

项目一:构建大宗商品价格监测系统,采用Scrapy框架实现多源数据采集,处理日均50万条数据记录。设计分布式爬虫架构应对反爬虫策略,通过代理IP池和请求头模拟技术突破网站限制。使用Pandas进行数据清洗和特征工程,建立时间序列分析模型预测价格波动趋势。通过Matplotlib可视化分析结果,为市场策略制定提供数据支持。项目二:开发政府数据采集平台,实现对100+政府网站的自动化数据抓取,日均处理数据量达200万条。设计数据分库分表方案优化数据库性能,通过索引优化和查询重写使数据查询效率提升60%。构建数据可视化看板,支持多维度数据交叉分析。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

4年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接