技能标签
专业技能
精通Python开发,熟悉Pyppeteer浏览器自动化框架、Selenium WebDriver、APScheduler定时任务调度器、Pandas数据处理库及MySQL数据库。擅长构建高并发爬虫系统,具备反爬策略设计能力,熟练使用XPath进行页面解析,具备网络请求优化及异常处理经验。熟悉ThinkPHP5框架开发,具备微信公众号接口开发能力。
工作履历(脱敏处理)
主导多个数据采集系统开发,采用Pyppeteer浏览器自动化框架实现高并发爬虫架构,通过asyncio异步请求提升吞吐量。设计超时重试机制保障数据完整性,运用XPath进行结构化数据解析。搭建定时任务调度系统实现多源数据采集,通过Pandas数据处理库优化数据清洗流程。开发微信投票系统,基于ThinkPHP5框架实现公众号接口对接,支持在线支付与二维码转账功能。
项目经验(脱敏处理)
1. 构建多源新闻资讯采集系统:采用Pyppeteer浏览器自动化框架实现高并发数据采集,通过APScheduler定时任务调度器管理采集周期,利用多线程技术降低服务器资源占用。设计反爬策略应对页面动态加载,通过XPath解析结构化数据,使用PyMySQL存储至MySQL数据库。2. 物流信息采集系统:基于Pyppeteer实现物流单号自动查询,构建网络请求超时重试机制保障数据完整性,运用Pandas数据处理库优化数据清洗流程。3. 微信投票系统:基于ThinkPHP5框架开发公众号接口,实现用户集赞排名功能,支持在线支付与二维码转账,完成微信浏览器专属交互设计。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
3年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接