IT人力外包人才简历库

精通Hadoop生态体系（HDFS分布式文件系统、MapReduce计算框架、YARN资源调度器），掌握HiveQL数据仓库开发及调优技术，熟悉MySQL关系型数据库及SQL优化策略。具备Linux系统运维能力，精通DataX数据同步工具及DACP数据调度平台。熟悉帆软报表工具及FTP传输协议，具备数据清洗、数据分层建模、ETL流程设计与优化能力。

主导数据中台重构项目，完成机构数据字段重构及业务指标数据沉淀。设计并实现STAGE、ODS、DWD、ST等数仓分层架构，通过拉链表技术解决历史快照问题，构建主题宽表支持数据分析。优化DataX数据同步流程，解决数据倾斜问题，提升ETL任务执行效率30%。制定分区策略及分桶方案，实现查询性能提升40%。完成客户管理程序替换项目，通过数据建模与逻辑整合，实现数据一致性提升并降低系统耦合度。

数据中台重构项目：1.构建分布式数据采集体系，通过DataX实现机构数据到Hive集群的高效同步；2.设计分层数仓架构（STAGE/ODS/DWD/ST），完成数据清洗、维度建模及宽表构建；3.优化调度流程，利用DACP平台实现任务自动化编排；4.解决数据倾斜问题，通过分桶采样提升开发效率；5.实施SQL查询优化策略，提升复杂报表生成速度。客户管理程序替换项目：1.建立数据关联模型，完成核心业务表逻辑整合；2.设计数据迁移方案，确保数据一致性；3.优化ETL流程，降低系统耦合度并提升数据处理效率。