IT人力外包人才简历库

返回列表

大数据开发工程师

驻场外包人员
工作年限:2年 意向城市:杭州 浏览:5次 发布时间:近期

技能标签

Python开发 C++编程 Hadoop生态 Flask框架 MySQL数据库 HBase分布式数据库 Linux系统 网络分析 虚拟化技术 数据可视化 RESTful API Shell脚本 分布式计算 数据清洗 机器学习 Web开发 数据库优化

专业技能

精通C/C++编程语言,熟练掌握Python全栈开发技术栈(包括Django/Flask框架、RESTful API设计)。熟悉Hadoop生态体系(HDFS/HBase/MapReduce)分布式计算框架,具备Spark流处理经验。熟练使用MySQL/PostgreSQL关系型数据库及MongoDB非关系型数据库。精通Linux系统(Ubuntu/RedHat)运维及Shell脚本开发。熟悉网络协议分析(Wireshark)、虚拟化技术(VMware/Oracle VM)。掌握HTML/CSS/JavaScript前端开发能力,熟悉数据可视化工具(Matplotlib/Bokeh)。

工作履历(脱敏处理)

在2年的工作期间,主导并完成了多个大数据开发与Web应用开发项目。期间独立设计并开发了学生信息管理系统,实现学生信息管理、奖惩记录、院系管理、课程管理、选课管理等核心功能,采用PHP+MySQL架构并集成Flask框架进行数据可视化展示。参与开发基于MapReduce的KMeans聚类预测系统,通过Python实现数据预处理与模型训练,完成前端数据可视化展示。主导开发豆瓣Top250爬虫项目,使用urllib进行数据采集,re/bf4进行数据清洗,sqlite存储数据并通过Flask框架实现网页展示。同时完成某教育平台计算机书籍数据采集项目,通过爬虫技术获取书名、作者、简介等信息并存储至远程数据库。

项目经验(脱敏处理)

学生信息管理系统:基于PHP+MySQL开发,实现学生信息管理、奖惩记录、院系管理、课程管理、选课管理、考试成绩管理等功能。采用RBAC权限模型进行用户权限管理,通过SQL优化提升数据查询效率,实现数据统计报表生成与打印功能。项目采用MVC架构设计,通过缓存机制提升系统响应速度,支持多角色权限配置与异常处理机制。

豆瓣Top250爬虫系统:使用urllib实现数据采集,re/bf4进行数据清洗与去重,sqlite存储结构化数据。通过Flask框架开发Web展示端,采用ECharts实现数据可视化。项目实现动态页面数据抓取与反爬虫策略应对,完成数据清洗、存储、展示全流程开发,日均处理数据量达10万条。

教育平台数据采集系统:基于Python爬虫技术实现某教育平台计算机/网络分类书籍信息采集,包括书名、作者、简介、购买链接等字段。数据存储至远程MySQL数据库,采用多线程提高采集效率,通过数据校验机制确保数据完整性。项目实现自动化数据采集与存储,为后续数据分析提供基础数据支持。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

2年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接