首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  Spark

spark 源码研究

  •  
  •   rootzeal · 116 天前用 Android 发布 · 503 次点击
    这是一个创建于 116 天前的主题,其中的信息可能已经有所发展或是发生改变。
    我建了个公众号专门研究 spark 源码的 欢迎大家关注 大家可以试读一下 https://mp.weixin.qq.com/s/rjrpRZWj2pyscPHOMF1QCQ
    3 回复  |  直到 2019-01-28 20:25:12 +08:00
        1
    liprais   116 天前 via iPhone
    只讨论 query rewrite 就够写半本书了
    光 predicate pushdown 什么时候能推什么时候不能推,推了之后会不会适用别的优化就够喝一壶了
    还有 wholestage codegen 和
        2
    liprais   116 天前 via iPhone
    @liprais 按错了,接楼上
    wholestage codegen 和 vector execution 也可以顺带的讲一下的
    标题过于真实,建议改成了解 spark sql
        3
    rootzeal   116 天前 via Android
    @liprais 有道理 慢慢来 一步步深入 标题是夸张了点
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   797 人在线   最高记录 5043   ·  
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.3 · 19ms · UTC 20:48 · PVG 04:48 · LAX 13:48 · JFK 16:48
    ♥ Do have faith in what you're doing.
    沪ICP备16043287号-1