技能标签
专业技能
精通Python编程语言,熟练掌握Scrapy与Selenium框架实现分布式爬虫系统,具备Web抓包分析能力(Fiddler/Charles),可独立完成接口逆向分析与数据采集。熟悉MySQL数据库设计与优化,具备数据清洗、ETL处理经验。掌握HTML/CSS/JavaScript前端开发技术,熟悉Vue.js框架实现响应式页面开发。熟悉Linux系统环境部署与进程管理,了解多线程/异步编程技术。
工作履历(脱敏处理)
主要负责企业级数据采集系统的开发与维护,主导设计并实现基于Scrapy-Redis的分布式爬虫架构,支持多站点并发采集。攻克抖音滑块验证难题,通过OpenCV实现图像识别与轨迹模拟。开发数据清洗模块,实现文本过滤、图片水印去除、视频时长校验等处理逻辑。搭建定时任务框架,使用Celery+Redis实现任务调度与结果监控。完成前端响应式模板开发,实现数据可视化展示界面。
项目经验(脱敏处理)
多源数据采集平台开发:基于Scrapy框架构建分布式爬虫系统,集成Selenium处理动态渲染页面,支持今日头条、哔哩哔哩等10+平台数据采集。采用OpenCV实现抖音滑块验证识别,通过JS断点调试破解加密Cookie机制。开发数据处理模块,实现文本内容过滤、图片水印裁切、视频时长校验等处理逻辑。设计定时任务调度系统,基于Celery+Redis实现任务分发与结果监控。完成前端响应式模板开发,采用Vue.js实现数据可视化展示,支持多终端适配。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
1年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接