您当前的位置: 首页 > 

191 DStream概述

杨林伟 发布时间:2019-08-14 16:36:03 ,浏览量:2

Discretized Stream是Spark Streaming的基础抽象,代表持续性的数据流和经过各种Spark原语操作后的结果数据流。在内部实现上,DStream是一系列连续的RDD来表示。每个RDD含有一段时间间隔内的数据,如下图: 在这里插入图片描述

对数据的操作也是按照RDD为单位来进行的 在这里插入图片描述 计算过程由Spark engine来完成 在这里插入图片描述

关注
打赏
1688896170
查看更多评论

杨林伟

暂无认证

  • 2浏览

    0关注

    3183博文

    0收益

  • 0浏览

    0点赞

    0打赏

    0留言

私信
关注
热门博文
立即登录/注册

微信扫码登录

0.0521s