技能标签
专业技能
精通Python全栈开发，熟悉Django/Flask框架，具备分布式爬虫系统开发经验。熟练掌握Scrapy框架进行数据采集，熟悉MySQL/Redis/MongoDB数据库设计与优化。具备容器化部署能力，熟练使用Docker/Kubernetes进行微服务架构搭建。熟悉Linux系统运维及Shell脚本开发，掌握日志监控与异常处理机制。具备数据清洗、去重及分析能力，熟悉风控系统架构设计。
工作履历（脱敏处理）
主导第三方支付平台风险控制系统开发，设计分布式爬虫架构实现多平台数据采集，构建数据清洗与分析流水线。开发智能风控系统，实现商户行为模式识别与风险评分模型，有效提升风险识别准确率。搭建爬虫调度平台，采用Scrapy-Redis实现分布式爬虫任务分发，日均处理数据量达百万级。设计数据监控体系，通过Prometheus+Grafana实现爬虫任务实时监控与异常告警。主导技术架构升级，采用Docker容器化部署方案，提升系统扩展性与运维效率。
项目经验（脱敏处理）
1. 智能风控系统开发：设计分布式爬虫架构实现多平台数据采集，构建数据清洗与分析流水线。采用Scrapy-Redis实现分布式爬虫任务分发，日均处理数据量达百万级。开发风险评分模型，通过机器学习算法实现商户行为模式识别，有效提升风险识别准确率。2. 数据采集平台建设：主导搭建爬虫调度平台，实现任务自动分发与监控。设计数据去重算法，采用布隆过滤器提升数据处理效率。开发数据监控体系，通过Prometheus+Grafana实现爬虫任务实时监控与异常告警。3. 分布式爬虫系统开发：基于Scrapy框架构建分布式爬虫架构，实现多平台数据采集与分析。采用Kafka进行数据流处理，确保数据采集的实时性与稳定性。设计数据存储方案，采用MongoDB进行非结构化数据存储，提升数据查询效率。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
6年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求，欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接