在 EMR 上运行 Spark 程序的流程:添加 Spark 步骤

当 Spark 报错时,AWS EMR 页面 -> Steps 中的 View logs 中并没有程序运行的错误日志,没有错误日志很难知道Spark 程序为什么运行失败了。

查看Spark logs:

知道了如何查看错误日志,解决运行Spark程序 或者 环境的问题就很简单了。