技能标签
专业技能
精通Hadoop生态体系（HDFS/MapReduce/YARN）搭建与调优，熟练使用Spark进行分布式计算与流数据处理，掌握Hive数据仓库架构设计与SQL优化。精通Python编程语言，熟练运用Pandas、NumPy进行数据清洗与统计分析，具备Scrapy框架与Selenium工具的Web爬虫开发能力。熟悉Matlab科学计算与数据建模，掌握MySQL数据库设计与性能调优技术。
工作履历（脱敏处理）
专注于大数据平台搭建与数据分析工作，主导完成多源数据采集系统开发，采用Scrapy框架构建分布式爬虫架构，日均处理10万+条数据。基于Hadoop集群搭建数据仓库，通过Hive进行ETL处理，实现招聘市场数据的多维分析。运用Spark进行实时数据处理，构建职位需求预测模型，提升分析效率30%。使用Matlab完成数学建模竞赛项目，通过数据建模与算法优化获得省级奖项。持续优化MySQL数据库性能，通过索引优化与分库分表策略提升查询效率40%。
项目经验（脱敏处理）
1. 构建多源数据采集系统：基于Scrapy框架开发分布式爬虫，采用Selenium处理动态网页，日均采集房产数据5万+条，实现数据自动清洗与存储。2. 招聘市场分析平台开发：基于Hadoop搭建大数据分析平台，使用Spark进行分布式计算，通过Hive构建数据仓库，完成职位需求趋势分析与可视化呈现。3. 数学建模竞赛项目：运用Matlab进行数据建模与算法优化，通过回归分析与机器学习方法解决实际问题，获得省级竞赛奖项。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
1年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求，欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接