IT人力外包人才简历库

返回列表

数据采集工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:5次 发布时间:近期

技能标签

Python爬虫开发 TypeScript解析 Scrapy框架 BeautifulSoup XPath解析 正则表达式 数据清洗 分布式爬虫 动态网页抓取 数据可视化 数据库应用 自动化采集系统 模板引擎解析 网络请求处理 数据建模

专业技能

精通Python爬虫开发(Scrapy/BeautifulSoup框架),擅长TypeScript解析与数据结构设计。掌握网页模板解析技术(XPath/正则表达式),具备自动化数据采集系统构建能力。熟悉分布式爬虫架构设计,能处理动态网页内容抓取(Selenium/Playwright)。具备数据清洗、存储及可视化分析能力,熟悉MySQL/Redis等数据库应用。

工作履历(脱敏处理)

作为数据采集工程师,主导自动化数据采集系统开发,采用Python爬虫技术实现日均百万级数据抓取,通过TypeScript解析技术完成数据结构设计。针对动态网页内容抓取难题,引入Selenium框架提升采集准确率。优化爬虫架构实现分布式部署,使数据采集效率提升300%。开发数据清洗模块,建立标准化数据处理流程,确保数据质量符合业务需求。

项目经验(脱敏处理)

数据采集系统开发:基于Python爬虫技术构建自动化数据采集平台,采用Scrapy框架实现高效数据抓取,结合TypeScript解析技术完成复杂数据结构提取。针对动态网页内容抓取难题,引入Selenium框架进行渲染处理,解决AJAX加载数据的采集问题。设计分布式爬虫架构,通过Redis队列实现任务分发,使系统并发处理能力提升至5000+请求/秒。开发数据清洗模块,建立标准化数据处理流程,确保采集数据符合业务系统对接要求。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接