大数据环境下的实时流数据处理技术

梅 迪1, 董 芮含2
1、中国电子科技集团有限公司第十五研究所
2、北京邮电大学

摘要


随着大数据技术的快速发展以及物联网设备的普及，实时流数据处理已成为支撑现代数据驱动型应用的核心技术。本文系统性地探讨了实时流数据处理的技术演进路径，分析了主流分布式流处理框架的架构特点，并深入研究了金融风控及工业物联网等典型应用场景中的技术实践，还分析新型硬件加速及智能化流处理等前沿发展方向，希望能够为相关领域的研究发展提供一定的研究帮助。

关键词


大数据环境；实时流数据；处理技术

全文:

PDF


参考


[1]陈娟.基于大数据的实时流数据处理与分析策略研究[C]//中国技术市场协会，中国高科技产业化研究会，中国国际科学技术合作协会，中国未来研究会企业家分会，发现杂志社.第二十三届中国科学家论坛论文集.上海财融聚信息科技有限公司，2024：8.

[2]吴昊.接触网数智化运维实时数据处理分析平台研究[J].电气化铁道，2022，33（S1）：28-31+35.

[3]吴丽贤，林钰杰，陈灏生，等.基于海量机器数据的实时流处理技术研究[J].微型电脑应用，2021，37（11）：185-187.

[4]邵云泽.基于VPX嵌入式系统的实时流数据处理技术研究[D].浙江大学，2021.

[5]赵明，廖诗荣，黄玲珠.基于深度学习技术的地震实时流数据自动处理辅助工具开发[J].地震地磁观测与研究，2020，41（02）：165-171.


Refbacks

  • 当前没有refback。