IT人力外包人才简历库

返回列表

大数据开发工程师

驻场外包人员
工作年限:5年 意向城市:杭州 浏览:3次 发布时间:近期

技能标签

Java SpringCloud MySQL Redis Kudu Trino Nginx Hadoop Kafka 数据挖掘 HLS协议 Canal Shiro MyBatisPlus 分布式架构 消息中间件

专业技能

精通JavaSE核心技术(IO、多线程、集合框架),掌握SSM框架及SpringCloud微服务架构,熟悉CAS单点登录机制与Cookie共享原理。具备Nginx服务器配置及反向代理能力,精通HLS协议视频流处理。熟悉Shiro权限框架与AOP切面编程,掌握MyBatisPlus ORM框架。精通MySQL数据库优化与Redis缓存应用,熟悉RocketMQ消息中间件。具备Kudu分布式存储系统搭建经验,掌握Trino查询引擎及Canal数据同步中间件,熟悉Hadoop生态(Hive、HBase、Kafka)技术栈。

工作履历(脱敏处理)

主导某科技公司中台管理系统开发,负责认证中心、授权中心等核心微服务模块开发,采用CAS单点登录与Shiro权限框架实现统一身份认证体系,通过Redis缓存优化系统响应速度。主导数据中台项目,搭建Kudu+Trino架构实现PB级数据存储与实时查询,设计Kafka+Canal数据同步方案保障数据一致性。开发短视频平台视频流处理系统,基于Nginx-vod模块实现HLS协议切片播放,通过FFmpeg优化视频转码效率,支撑百万级用户并发访问。

项目经验(脱敏处理)

项目一:中台管理系统开发

基于SpringCloud构建微服务架构,采用CAS单点登录与Shiro权限框架实现统一认证体系,设计分布式日志采集方案。通过Redis缓存优化系统响应速度,采用RocketMQ实现异步消息处理,使用ELK技术栈构建日志分析平台,支撑日均百万级请求处理。

项目二:数据中台建设

搭建Kudu分布式存储系统,设计Trino查询引擎实现多源数据统一分析。基于Kafka构建实时数据管道,通过Canal实现MySQL数据增量同步。开发数据挖掘分析模块,采用Hive进行数据建模,构建可视化BI看板支持业务决策。

项目三:短视频平台开发

基于Nginx-vod模块实现HLS协议视频流分片存储,设计FFmpeg转码方案优化视频处理性能。构建分布式文件存储系统,采用FTP+rsync实现多节点数据同步。开发短视频推荐算法模块,通过Redis缓存热点数据提升系统吞吐量。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

5年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接