同じ問題に遭遇しましたが、最も簡単な修正は $SPARK_HOME
を設定することです /usr/local/Cellar/apache-spark/<your_spark_version>/libexec/
まで
ソースから直接ビルドすることもできます。手順はこちらにあります。
基本的にはそうするだけです
git clone https://github.com/apache/spark/`
cd spark
git checkout origin/branch-X.Y
build/mvn -Pyarn -Phadoop-2.4 -Dhadoop.version=2.4.0 -DskipTests clean package
$SPARK_HOME
を設定する必要があります spark ソース コードの最上位ディレクトリに移動します。
プロジェクト ページのチケットが役立ちました:
unset SPARK_HOME && spark-submit
https://github.com/Homebrew/homebrew/issues/48898#issuecomment-180633967