IT人力外包人才简历库

返回列表

Python数据采集与系统开发工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:3次 发布时间:近期

技能标签

Python 网络爬虫 Scrapy BeautifulSoup Selenium Django 数据库设计 RESTful API Redis 数据可视化 反爬虫策略 前后端联调 CRUD开发 UI交互设计 IP代理池

专业技能

精通Python网络爬虫技术,熟练使用requests、BeautifulSoup、Scrapy等框架进行网页数据抓取与解析,具备反爬虫策略应对经验。掌握后端开发能力,熟悉RESTful API设计与实现,具备用户认证与支付接口开发经验。精通信息管理系统开发,掌握数据库设计与优化,熟练使用SQLAlchemy进行数据持久化操作,实现增删改查等CRUD功能。熟悉前端开发技术,能够完成登录支付界面的UI交互设计与前后端联调。

工作履历(脱敏处理)

主要负责Python数据采集系统与信息管理平台开发工作,主导完成某小说网站数据采集项目,采用Scrapy框架实现多线程爬取,处理动态渲染页面使用Selenium,通过IP代理池和请求头随机化策略应对反爬虫机制。参与开发信息管理系统,完成用户权限管理、数据可视化报表生成功能,采用Redis缓存提升查询效率,系统支持并发访问量达1000+。独立完成登录支付界面开发,实现用户认证与支付接口对接,确保交易流程安全可靠。持续优化数据采集算法,提升数据处理效率30%以上。

项目经验(脱敏处理)

1. 网页数据采集系统:开发基于Scrapy框架的多线程爬虫,处理动态页面使用Selenium,通过IP代理池和请求头随机化策略应对反爬虫机制,成功采集某小说网站的作者、小说及评论数据,日均处理数据量达50万条。

2. 信息管理系统:基于Django框架开发信息管理系统,实现用户权限管理、数据可视化报表生成功能,采用Redis缓存提升查询效率,系统支持并发访问量达1000+。

3. 模拟聊天系统:开发基于WebSocket的实时聊天系统,实现消息推送、用户状态同步等核心功能,支持千人同时在线交互。

4. 12306抢票系统:开发基于Python的抢票工具,实现自动登录、车次查询、订单提交等功能,采用多线程技术提升抢票成功率。

5. 租房信息采集:开发租房平台数据采集系统,使用Scrapy框架实现房源信息抓取,通过模拟浏览器行为绕过反爬虫机制,日均采集房源数据2000条。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接