擅长:python、mysql、java
<p>我的iphython笔记本(IPython 3.2.1)在Linux(ubuntu)上也有同样的问题。</p>
<p>我的例子中缺少的是在$PYSPARK_SUBMIT_ARGS环境中设置主URL,如下所示(假设您使用bash):</p>
<pre><code>export PYSPARK_SUBMIT_ARGS="--master spark://<host>:<port>"
</code></pre>
<p>例如</p>
<pre><code>export PYSPARK_SUBMIT_ARGS="--master spark://192.168.2.40:7077"
</code></pre>
<p>你可以把它放到你的.bashrc文件中。在spark master的日志中获得正确的URL(使用/sbin/start_master.sh启动master时会报告此日志的位置)。</p>