ISSN 1009-5624 CN 10-2021/TQ    主管:中国乐凯集团有限公司    主办:北京乐凯科技有限公司

中国知网全文收录期刊
万方数据库收录期刊
RCCSE中文学术期刊
维普资讯网/超星域出版 全文收录
中国核心期刊(遴选)数据库收录期刊
首页 > 刊期 > 2025 > 1期 > 信息:技术与应用
Spark 大数据智能分析平台设计研究
赵艳花

【摘要】针对大数据分析活动易受到数据维度的影响,进而出现运行时间长、数据分析误差高等问题,提出Spark(计算引擎)大数据智能分析平台。通过局部约束的方式消减大数据维度,然后借助Spark 技术实现网络层的架构设计,使用数据分析编排器构建系统服务器,设计实验用于验证所提平台的实际效果。实验结果表明:该平台的运行效率在98%~99%,数据分析的误差均值能够控制在0???? 5%~0???? 8%,且加速度参数不小于9,证明所提平台具有实用性与科学性,可为相关人员或单位提供参考。

【关键字】Spark(计算引擎);大数据;智能分析平台
【PDF】