1回答
我正在尝试在pyspark (在Ubuntu中)中运行graphframes，并遵循以下步骤： 我编辑了mu .profile文件，如下所示： SPARK_PATH=/home/spark/sparkit includes user's private bin directories$SPARK_PATH/bin/pyspark--master local[2]
exp
浏览 28提问于2019-10-04得票数 0
我正在尝试创建一个SparkContext，并收到以下错误master_url="spark:/当我在pyspark shell中的远程服务器上运行相同的代码时，它可以正常工作。
浏览 1提问于2017-10-23得票数 1
2回答
将PySpark与木星笔记本集成
、、、、
我遵循这个安装朱庇特笔记本，PySpark，并整合两者。我打开了kernel.json/shell.py",
"PYSPARK_SUBMIT_ARGS": &q
浏览 5提问于2016-08-25得票数 2
回答已采纳
我有anaconda python完美地运行Jupyter，我有Hadoop，yarn和spark在windows10 cmd上完美运行。我在windows系统中更改了很多变量，但现在一切正常。在运行PySpark时，它可以正常工作
但是当我在cmd上运行PySpark时，我想启动Jupyter notebook，但是不能
浏览 12提问于2020-03-05得票数 0
我已经在我的机器上安装了Anaconda(Python2.7版本)，并用"PYSPARK_DRIVER_PYTHON=jupyter“和PYSPARK_DRIVER_PYTHON_OPTS=" notebook”启动了jupyter笔记本，我正在连接到jupyter notebook，但也无法运行“打印”命令。我已经安装了pyspark并在我的windows机器(独立模式)的命令提示符中运行，它的工作fine.....but我需要在jupyter n
浏览 1提问于2017-04-04得票数 1
我试图通过在控制台输入PySpark来启动浏览器中的pyspark notebook，但是我得到了以下错误：python: can't open file '
浏览 1提问于2017-02-21得票数 0
我是Pyspark的新手。我在ubuntu上安装了"bash Anaconda2-4.0.0-Linux-x86_64.sh“。还安装了pyspark。在终端中一切工作正常。我想在jupyter上工作。In [3]: wanderer@wanderer-VirtualBox:~$ jupyter --version4.1.2
我尝试集成
浏览 0提问于2016-04-24得票数 3
4回答
(pyspark)+ java(1.8) + anaconda (Python2.7) 2-编辑.bachrc (添加2行)： export PYSPARK_DRIVER_PYTHON=jupyterexport PYSPARK_DRIVER_PYTHON_OPTS="notebook" 3-lanch Pyspark：$sudo Pyspark它工作得很好 4-lanch jupyter：$sudojupyther notebook它工作正常 当我
浏览 120提问于2017-11-10得票数 3
回答已采纳
from pyspark.sql.functions import pandas_udf
ImportError跟踪(最近一次调用) in () ->1来自pyspark.sql.functions
浏览 1提问于2018-03-22得票数 3
org.mongodb.spark:mongo-spark-connector_2.11:2.4.0 \
/Users/crump/main.py 我现在得到以下错误： Error executing Jupyter
浏览 30提问于2019-02-21得票数 1
我有一些pyspark内核jupyter笔记本已经工作了几个月，但最近不再工作了。pyspark内核本身正在工作:它给出了蓝色消息：。。我们可以看到内核是可用的但是我在jupyter日志中注意到了这一点：
IPKernelApp警告:在处理PYTHONSTARTUP文件/shared/spark/python/pyspark那么，jupyter pyspark内核可能会发生什么呢
浏览 0提问于2018-11-17得票数 0
回答已采纳
我已经在ubuntu上安装了Apache Spark，路径为/home/mymachine/spark-2.1.0-bin-hadoop2.7，所以我必须进入python目录，位于这个目录下，才能使用spark，或者我可以在python目录之外使用它，通过一个名为findspark的库来帮助，但是似乎我必须总是像这样初始化这个库：findspark.init("/home/mymachine/spark-2.1.0-bin-hadoop2.7")在，它提到需
浏览 5提问于2017-09-23得票数 0
我需要在Jupyter notebook上运行pyspark。(我使用Windows 10) 我在Anaconda Prompt中尝试了一下： pip install sparkSET PYSPARK_DRIVER_PYTHON=jupyterpyspark 并返回此错误： Traceback (most recent call last
浏览 36提问于2020-09-05得票数 0
回答已采纳
count / NUM_SAMPLES 1129 1120
1121 def count(self)
浏览 4提问于2020-02-26得票数 0
/bin:$PATHexport PYTHONPATH=$SPARK_HOME/python:$PYTHONPATH
export PYSPARK_DRIVER_PYTHON_OPTS='notebook' pyspark当我输入火花放电时python3:
浏览 0提问于2020-02-03得票数 2
spark-submit \examples/src/main/python/pi.py \但是，我得到了这个错误hadoop2.7/examples/src/main/python/pi.py' is not a Jupyter<
浏览 1提问于2016-09-03得票数 0
这样做的目的是为了实现以下目标其中kernel-options将被转发到pyspark我们需要它来运行不同的jupyter服务器--一个用于pyspark内核，另一个用于同一台机器上的spark (in scala)内核。这是一个要求，因为单个jupyter服务器不支持同时运行的pyspark和(scala) spark内核。
浏览 26提问于2017-01-17得票数 2
回答已采纳
我想在PySpark上使用GraphFrames (目前在Google Dataproc上使用Spark v2.3.3 )。
浏览 40提问于2019-09-24得票数 4
回答已采纳
我尝试使用Jupyter Lab选项(内联)运行pyspark，如下所示。PYSPARK_DRIVER_PYTHON="jupyter" PYSPARK_DRIVER_PYTHON_OPTS="notebook --NotebookApp.notebook_dir='/' --NotebookApp.port=4444" $SPARK_HOME/bin/pyspark
这种方法的灵感来自于。
浏览 22提问于2019-11-06得票数 1
我已经按照说明集成了pyspark和jupyter，但完成之后，我只能在命令提示符下运行pyspark。基本上，当我在命令中使用ipython时，它是工作的，但当我更改为jupyter时，它会说 set PYSPARK_DRIVER_PYTHON=ipython
set PYSPARK
浏览 8提问于2016-08-23得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
