IT人力外包人才简历库

返回列表

大数据开发工程师

驻场外包人员
工作年限:5年 意向城市:北京 浏览:2次 发布时间:近期

技能标签

Hadoop Spark Flink SQL Python Tableau RESTful API 微服务架构 Kafka Linux系统调优 容器化部署

专业技能

精通Hadoop/Spark/Flink大数据处理框架,擅长分布式计算与流式数据处理;熟悉SQL/Python数据建模与分析,具备Tableau/Power BI可视化能力;精通RESTful API开发与微服务架构设计;掌握Kafka消息队列与数据管道构建;具备大数据平台搭建与运维经验,熟悉Linux系统调优与容器化部署。

工作履历(脱敏处理)

主导设计并实施企业级大数据分析平台,采用Hadoop+Spark架构实现PB级数据处理,通过优化MapReduce任务调度使处理效率提升30%。开发实时数据监控系统,基于Flink构建流式数据处理管道,实现分钟级数据更新。搭建可视化分析平台,集成Tableau与Power BI,支持多维度数据钻取分析。设计微服务架构的API网关,采用Spring Cloud实现服务解耦与弹性扩展。主导数据仓库建设,通过ETL工具完成多源数据整合,建立统一数据标准体系。

项目经验(脱敏处理)

1. 企业级大数据分析平台:设计分布式数据处理架构,采用Hadoop+Spark实现PB级数据处理,通过优化MapReduce任务调度使处理效率提升30%。解决数据倾斜问题,采用Salting技术实现负载均衡,系统日均处理能力达10TB。2. 实时数据监控系统:基于Flink构建流式数据处理管道,实现分钟级数据更新。设计滑动窗口计算机制,准确捕捉业务趋势变化,系统延迟控制在500ms以内。3. 可视化分析平台:集成Tableau与Power BI,开发自定义数据钻取模块,支持多维度数据联动分析。通过优化数据聚合算法,使图表渲染速度提升40%。4. 微服务架构升级:重构原有单体系统为微服务架构,采用Spring Cloud实现服务解耦与弹性扩展,系统可用性达到99.9%。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

5年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接