大数据处理框架现状分析

作者:陈诚; 石莉; 丁雪红; 刘非凡
来源:宜宾学院学报, 2019, 19(12): 39-46.
DOI:10.19504/j.cnki.issn1671-5365.20190619.001

摘要

目前主流的数据处理框架有:批处理框架、流式处理和多框架混合处理系统.批处理框架擅长处理数据量大的静态数据,流式处理框架适合实时数据的处理,而多框架混合处理系统可以兼顾两者.批处理框架较其他数据处理框架成熟,选择也固定,但流式处理框架和多框架混合处理系统的种类都较多,需要根据应用场景以及自身特点对比进行选择.随着时代的发展,最终大数据处理框架的发展趋势为多框架混合处理系统.

全文