大数据处理主要的三种场景为
大数据处理主要的三种场景包括:
1. 复杂的批量处理(Batch Data Processing):这种场景偏重点在于处理海量数据的能力,至于处理速度可忍受,通常的时间可能是在数十分钟到数小时。
2. 基于历史数据的交互式查询(Interactive Query):通常的时间在数十秒到数十分钟之间。
3. 基于实时数据流的数据处理(Streaming Data Processing):通常在数百毫秒到数秒之间。
需要注意,这三种场景的需求都有比较成熟的处理框架,例如Spark,它基于内存的迭代计算框架,适用于需要多次操作特定数据集的应用场合,数据量小但是计算密集度较大的场合,受益就相对较小。
如有侵权请及时联系我们处理,转载请注明出处来自
推荐文章
科技快看 广州壹创集信息科技有限公司 版权所有 粤ICP备2021122624号