技能标签
专业技能
精通Python开发,擅长Django/Flask框架;熟悉自动化运维工具(Ansible、SaltStack);掌握ETL流程设计与优化,具备基于Apache Nifi、Airflow的调度能力;精通Hive/Spark大数据处理技术,具备数仓架构设计经验;熟悉数据挖掘算法与模型开发;掌握MySQL/Oracle数据库优化及分布式存储方案
工作履历(脱敏处理)
长期从事数据平台建设与后端系统开发,主导设计并实施多个企业级数据仓库架构,采用Spark+Hive技术栈实现PB级数据处理。开发自动化运维工具链,通过Ansible实现服务器批量配置管理,降低运维成本30%。构建数据采集与清洗系统,实现多源数据标准化处理,支持日均千万级数据吞吐。开发数据挖掘模型,提升业务分析效率40%。设计分布式数据存储方案,采用分库分表策略解决高并发访问问题。主导开发工单自动派单机器人,实现业务流程自动化,提升处理效率50%。
项目经验(脱敏处理)
1. 大数据分析平台建设:基于Spark+Hive构建数仓架构,设计ETL流程实现多源数据清洗与聚合,支持日均10亿条数据处理,提升数据可用性至99.9%。
2. 自动化运维系统开发:采用Ansible实现服务器批量部署与配置管理,集成监控告警模块,降低运维响应时间至分钟级。
3. 农业数据平台开发:设计数据采集-清洗-存储全链路,使用爬虫框架抓取目标网站数据,通过ETL流程标准化存储至分布式数据库,支持多维度数据分析。
4. 数据挖掘与模型开发:基于用户行为数据构建推荐模型,采用机器学习算法提升推荐准确率20%,支撑业务决策优化。
5. 3D动画数据处理系统:开发自动渲染分层系统,设计数据存储方案支持大规模动画文件管理,实现渲染效率提升35%。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
10年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接