技能标签
专业技能
精通Python爬虫技术(Scrapy框架,可抓取动态网页数据,支持反爬策略处理);熟悉前端开发(HTML/CSS/JavaScript)及后端接口设计(RESTful API);具备信息管理系统开发经验(采用MySQL数据库,支持增删改查操作,具备权限管理模块);掌握网络协议分析及请求模拟技术;熟悉数据清洗与结构化存储方案(MongoDB/MySQL)
工作履历(脱敏处理)
主要负责数据采集系统开发及信息管理平台建设。主导设计并实现基于Scrapy框架的爬虫系统,成功处理动态网页数据抓取及反爬策略,提升数据采集效率30%。开发信息管理系统,采用MySQL数据库实现增删改查功能,集成权限管理模块,支持多用户角色操作。参与模拟聊天项目开发,完成自然语言处理模块设计。独立完成12306抢票系统开发,实现多线程并发请求及验证码识别功能,保障票务实时监控。搭建租房信息采集平台,完成多平台房源数据抓取及结构化存储,日均处理数据量达5万条。
项目经验(脱敏处理)
1. 网页数据采集系统开发:采用Scrapy框架实现高效爬虫,处理动态渲染页面(Selenium/Playwright),解决反爬机制(IP代理/请求头伪装),日均采集数据量达10万条。2. 信息管理系统开发:基于Spring Boot框架设计系统架构,集成MySQL数据库实现用户权限管理及数据可视化报表,支持多角色操作。3. 模拟聊天项目:开发自然语言处理模块,实现对话流程管理及意图识别,支持多轮对话交互。4. 12306抢票系统:采用多线程并发请求技术,实现验证码识别(OCR技术)及票务实时监控,成功提升抢票成功率至85%。5. 租房信息采集平台:构建分布式爬虫架构,使用Python爬虫技术抓取多平台房源数据,实现数据清洗与结构化存储(MongoDB),日均处理数据量达5万条。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
1年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接