展开

flink和spark对比

发布于 2023-03-19 02:42:29     浏览 290

flink和spark对比

适用环境:

型号:联想AIO520C
系统:Windows10 专业版

问题解析:

【】

1、 1.技术理念不同:Spark的技术理念是使用微批来模拟流的计算,基于Micro-batch,数据流以时间为单位被切分为一个个批次,通过分布式数据集RDD进行批量处理,是一种伪实时。 2、 2.时间机制:SparkStreaming只支持处理时间,使用processingtime来实现eventtime相关的业务。使用processingtime模拟eventtime必然会产生一些误差,特别是在产生数据堆积的时候,误差则更明显,甚至导致计算结果不可用。

相关推荐

猜你可能喜欢

点击加载更多