首页 / 科技百科 / 正文

大数据处理主要的三种场景为 

大数据处理主要的三种场景包括:

1. 复杂的批量处理(Batch Data Processing):这种场景偏重点在于处理海量数据的能力,至于处理速度可忍受,通常的时间可能是在数十分钟到数小时。

2. 基于历史数据的交互式查询(Interactive Query):通常的时间在数十秒到数十分钟之间。

3. 基于实时数据流的数据处理(Streaming Data Processing):通常在数百毫秒到数秒之间。

需要注意,这三种场景的需求都有比较成熟的处理框架,例如Spark,它基于内存的迭代计算框架,适用于需要多次操作特定数据集的应用场合,数据量小但是计算密集度较大的场合,受益就相对较小。

如有侵权请及时联系我们处理,转载请注明出处来自