2017年7月21日金曜日

pyenv 下のPythonを使って PySpark

conf/spark-defaults.conf に、
spark.pyspark.python   /home/XXX/.pyenv/versions/anaconda2-4.4.0/bin/python
みたいに直接書くとうまくいく。

0 件のコメント: