边缘计算与大数据融合的实时处理机制及优化研究

摘要

随着物联网、5G等技术的快速发展，大数据呈现爆发式增长态势，传统云计算架构在实时数据处理场景中
面临延迟过高、带宽消耗大等瓶颈。边缘计算凭借其靠近数据源头的分布式架构优势，为大数据实时处理提供了新
的解决方案。本文深入研究边缘计算与大数据融合的实时处理机制，首先分析两者融合的技术互补性与核心挑战；
其次设计“数据分层处理-任务动态调度-云端协同优化”三级实时处理机制，重点解决数据传输效率与计算资源
分配问题；最后从资源调度、数据预处理、安全防护三个维度提出优化策略，并通过实验验证机制的有效性。实验
结果表明，所提机制在处理延迟、吞吐量及资源利用率方面均优于传统云计算处理模式，为工业互联网、智能交通
等实时性要求较高的场景提供技术支撑。