ISSN 1009-5624 CN 10-2021/TQ    主管:中国乐凯集团有限公司    主办:北京乐凯科技有限公司

中国知网全文收录期刊
万方数据库收录期刊
RCCSE中文学术期刊
维普资讯网/超星域出版 全文收录
中国核心期刊(遴选)数据库收录期刊
首页 > 刊期 > 2026 > 6期 > 信息:技术与应用
面向大规模数据的分布式存储优化方法
仇 旭

摘要针对大规模数据环境下分布式存储系统负载不均冗余开销大及检索效率低等问题本文提出了融合极端梯度提升(XGBoost)负载预测与熵值分配的动态权重分片算法,设计基于有限域矩阵的自适应纠删码编码机制,构建融合单指令多数据流(SIMD)压缩倒排链与可导航小世界(NSW)图的混合索引结构,建立数据分布感知的协同优化策略。 实验结果表明,所提优化方法在存储均衡性、编码效率及检索性能方面均显著优于传统方案。

【关键字】分布式存储;大规模数据;动态分片;纠删码优化;混合索引;协同优化
【PDF】