作为一个比较新的系统,调试Spark工作流的工具仍不成熟。此外,简单的Spark接口屏蔽了众多复杂性,但为了调试问题这可能是必须要理解的。本文回顾了几种常见的Spark job失败的情况,并阐述了底层系统接口来帮助理解其根本原因。
还在为Spark job失败而烦恼吗?赶紧看过来,认真学习一下吧。 阅读原文 »

5 收藏


直接登录

推荐关注