首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
华为云
V2EX  ›  Spark

Spark/Scala 的细节讨论:在 map task 里的 map 会得到如何的处理?

  •  
  •   alexapollo · 2016-09-14 22:26:15 +08:00 · 1150 次点击
    这是一个创建于 793 天前的主题,其中的信息可能已经有所发展或是发生改变。

    按观察看,是都不会生成新的 map task 的,纯粹的本地执行,但哪儿有对应的说明呢?

    1 回复  |  直到 2016-09-14 22:36:27 +08:00
        1
    alexapollo   2016-09-14 22:36:27 +08:00
    按理说是 RDD 实现是特殊的,其他实现都是本地化的,但没有看到有写的很清楚的文章
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   2013 人在线   最高记录 3821   ·  
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.1 · 17ms · UTC 04:36 · PVG 12:36 · LAX 20:36 · JFK 23:36
    ♥ Do have faith in what you're doing.
    沪ICP备16043287号-1