IT人力外包人才简历库

返回列表

数据采集与处理工程师

驻场外包人员
工作年限:1年 意向城市:成都 浏览:20次 发布时间:近期

技能标签

Python C++ 机器学习 深度学习 数据清洗 Scrapy Selenium MySQL 数据可视化 分布式爬虫 ETL 反爬虫策略 图像处理 特征工程 数据建模

专业技能

精通Python编程语言及C++开发,掌握机器学习算法与深度学习框架。熟悉医学图像处理与工业机器视觉技术,具备数据清洗、特征提取及模型优化能力。熟练使用Scrapy、Selenium等爬虫框架,熟悉MySQL数据库设计与优化。具备数据可视化能力,熟练使用Pyechart进行数据图表展示。熟悉分布式爬虫架构设计,具备高并发数据采集解决方案设计经验。

工作履历(脱敏处理)

专注于数据采集与处理领域,主导多个高并发数据抓取项目。设计分布式爬虫架构,解决反爬虫机制,实现日均百万级数据采集。优化数据清洗流程,提升数据质量30%。搭建数据可视化系统,实现股票数据、房产信息等多维度分析。开发自动化数据采集工具,提升数据处理效率40%。具备完整的数据采集-处理-分析技术链经验,擅长复杂数据场景的解决方案设计。

项目经验(脱敏处理)

1. 搭建分布式房产数据采集系统:基于Scrapy框架开发房产数据爬虫,采集某房产平台全国二手房信息,包含地址、户型、价格等字段,设计MySQL分库分表方案,日均处理50万条数据。2. 股票数据可视化系统:使用requests模块采集股票信息,通过Pyechart实现K线图、成交量等可视化展示,支持多维度数据对比分析。3. 电商平台模拟登录系统:采用Selenium+动作链实现淘宝模拟登录,设计反反爬策略,完成商品信息采集并存储至MySQL。4. 直播平台数据采集:基于Scrapy开发直播平台爬虫,采集主播头像及直播间图片,优化下载策略提升数据获取效率。5. 上市公司财报数据采集:设计多线程爬虫架构,采集上市公司年报及股票数据,建立数据清洗流程,确保数据准确率99.8%。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接