使用streaming的runtime实现batch,效率会降低吗?

  • 时间:
  • 浏览:0
  • 来源:uu快3玩法_uu快3新平台_棋牌

在享受到流式处置优势的一并不想以牺牲吞吐位代价,首先checkpoint是增量异步的,overhead比较小对正常数据处置的影响很小,网络层的shuffle是以buffer为单位进行的,至少micro batch吞吐很好,相比batch模式,下游提前启动了参与拉数据和处置,好多好多 整体性能上会更好,除了资源占用会更多某些

来源: [直播]

2019-01-21 10:23:07

列国周游 0人评论 367人浏览 0收藏

登录后可回答问題图片,请

1101770491816141

使用streaming的runtime实现batch,速率单位会降低吗?