所以，下面是我如何构建环境的： 1. ubuntu in virtual machine3. install pyspark using pip=jupyter
export PYSPARK_DRIVER_PYTHON_OPTS='notebook' 然后我就可以在jupyter中使用pyspark了。这里是发现spark的第一行：
浏览 23提问于2019-02-08得票数 0
回答已采纳
1回答
我正在使用jupyter notebook构建一个pyspark应用程序，到目前为止我在独立模式下使用它。 现在，我部署了3个带spark的虚拟机，我想在集群中启动Pyspark。下面是我在独立模式下启动它的代码： ? 知道我使用的是spark 3.1.2 hadoop 3.2 我一直在寻找方法，但我没有得到
浏览 37提问于2021-10-01得票数 0
我在jupyter/pyspark-notebook.的Ubuntu15.10中使用Docker容器我需要安装folium和它的所有依赖项，并在容器中运行Pyspark脚本。jovyan/work jupyter/pyspark-notebook
然后，我在没有任何问题的情况下执行代码示例。(ran
浏览 5提问于2016-05-10得票数 19
回答已采纳
我正在尝试将pyspark代码从jupyter笔记本迁移到python脚本。但是，我在每个shell中都有相同的No module named 'pyspark'。SPARK_HOME返回空字符串
文件"/export/home&#
浏览 1提问于2018-10-30得票数 0
我已经在Ubuntu14.04上的ipython笔记本中成功地使用了pyspark和Python2.7，为spark创建了一个特殊的配置文件，并通过调用$ipython notebook --profile许多网站上都给出了创建spark配置文件的机制，但我使用的是中给出的机制。Ubuntu16.04虚拟机，我想让他们在ipyt
浏览 1提问于2016-06-25得票数 0
我已经在我的机器上安装了Anaconda(Python2.7版本)，并用"PYSPARK_DRIVER_PYTHON=jupyter“和PYSPARK_DRIVER_PYTHON_OPTS=" notebook”启动了jupyter笔记本，我正在连接到jupyter notebook，但也无法运行“打印”命令。当我运行该命令时，它将转到下一行，但没有显示输出，打印也没有以颜色突出显示。我已经安装了pyspark并在
浏览 1提问于2017-04-04得票数 1
我在一台以Windows10作为主机操作系统的机器上，我有一台使用virtualbox安装的Ubuntu16.04虚拟机。我还在Windows上运行SQL server，并在我的虚拟机(Ubuntu)上安装了spark-2.1.1-bin-hadoop2.7。在我的windows机器上，我可以使用pandas使用以下代码从服务器读取表：
impo
浏览 0提问于2017-09-12得票数 1
我正在本地计算机上运行ipython notebook，并希望创建到远程Spark服务器i.p的连接。然后从remote server上存在的hdfs文件夹中读取数据。如何从本地ipython notebook创建到Spark服务器的远程连接
浏览 3提问于2015-11-24得票数 6
2回答
将PySpark与木星笔记本集成
、、、、
我遵循这个安装朱庇特笔记本，PySpark，并整合两者。我打开了kernel.json/shell.py",
"PYSPARK_SUBMIT_ARGS&
浏览 5提问于2016-08-25得票数 2
回答已采纳
我尝试使用Jupyter Lab选项(内联)运行pyspark，如下所示。PYSPARK_DRIVER_PYTHON="jupyter" PYSPARK_DRIVER_PYTHON_OPTS="notebook --NotebookApp.notebook_dir='/' --NotebookApp.port=4444" $SPARK_HOME/bin/pyspark
这种方法<e
浏览 22提问于2019-11-06得票数 1
我是Pyspark的新手。我在ubuntu上安装了"bash Anaconda2-4.0.0-Linux-x86_64.sh“。还安装了pyspark。在终端中一切工作正常。当我在我的ubuntu终端中创建配置文件时，如下所示：[ProfileC
浏览 0提问于2016-04-24得票数 3
我的操作系统是Ubuntu16，我的目标是在Jupyter Notebook中运行import pyspark，而不必从我安装Spark的目录中启动Jupyter Notebook (通过控制台)。我用findspark试过了，就像这样findspark.init("directory_where_I_installed_spark_to")
import <e
浏览 11提问于2017-08-14得票数 0
回答已采纳
我非常羡慕jupyter笔记本中的DataBricks自动补全功能，但是我不能让它在我的本地安装上工作。我找到了适用于python，但不适用于pyspark或spark- IPCompleter.greedy=True (Scala) %config shell的文档。有没有人知道怎么做？顺便说一下:我在ubuntu 16.04 64位上使用Spark 2.0.0 & Spark 2.11。
浏览 3提问于2016-09-22得票数 1
我试图通过在控制台输入PySpark来启动浏览器中的pyspark notebook，但是我得到了以下错误：python: can't open file '
浏览 1提问于2017-02-21得票数 0
我已经在Windows10版本10.0.19041 Build 19041中安装了Docker Toolbox for Windows v18.09，并且正在尝试运行docker容器以使用Pysparkjupyter/pyspark-notebook
从映射到容器工作目录的C:/Users/prith/pydev目录。// is斜杠是必需的，因为我使用的是W
浏览 2提问于2020-08-31得票数 0
我已经按照说明集成了pyspark和jupyter，但完成之后，我只能在命令提示符下运行pyspark。基本上，当我在命令中使用ipython时，它是工作的，但当我更改为jupyter时，它会说 set <em
浏览 8提问于2016-08-23得票数 1
回答已采纳
是否可以将Jupyter Lab转换/添加到现有虚拟机。此VM在计算->计算引擎-> VM实例下创建。当我转到AI Platforms -> Notebook时，我没有看到这个实例，所以我假设它没有设置为使用Jupyter Lab。但是，这个VM上的设置应该足以运行Jupyter Lab，所以我希望添加这个功能。谢谢。
浏览 0提问于2020-05-18得票数 0
为什么pandas_profiling.ProfileReport(dataframe)不能在google colab中工作？
返回类型错误。
浏览 4提问于2020-06-18得票数 5
6回答
朱庇特电火花:无模块名为火星雨
、、、、
谷歌确实有很多解决这个问题的方法，但不幸的是，即使在尝试了所有的可能性之后，我也无法让它发挥作用，所以请耐心等待，看看是否有什么东西能打动你。接下来，我尝试将其配置为与Spark一起工作，为此，我使用Apache安装了spark解释器。现在，当我尝试在笔记本中运行任何RDD操作时，会引发以下错误 /usr/bin/python: No module named pyspark<
浏览 3提问于2017-02-03得票数 9
回答已采纳
我已经在Anaconda下安装了，当我尝试运行pyspark (从使用PySpark启动笔记本的部分)时，我会收到以下错误：
$ pyspark (最近一次调用)：File"/opt/cloudera/parcels/Anaconda/bin/jupyter"，第4行，从jupyter_core.command导入主ImportErro
浏览 4提问于2017-02-21得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
