我在我的OS上预先安装了Spark和Hadoop，并将PySpark与Jupyter Notebook集成在一起。基本上我在Jupyter Notebook弹出的终端中输入"pyspark“。server.pyjupyter: '/Users/XXX/some_path/server.py' is not a Jupyter command
看来Jupyter<e
浏览 13提问于2017-02-16得票数 0
回答已采纳
我正在尝试遵循Apache Spark文档站点上的示例：--master spark://207.184.161.138:7077 \1000jupyter: '/Users/MyName
浏览 1提问于2016-09-03得票数 0
1回答
我已经在ubuntu服务器16.04上安装了python 3.5.2上的jupyter笔记本，我还安装了apache来运行jupyter的火花作业。我跑：jupyter toree install --spark_home=/home/arik/spark-2.0.1-bin-hadoop2.7/ # My该软件包目前正处于重新许可()的范围内.创建内核Scala，删除/usr/local/sha
浏览 4提问于2016-11-27得票数 2
3回答
我正在尝试使用jupyter notebook中的spark deep learning library()。当我尝试在jupyter notebook中“导入sparkdl”时，我得到了错误“找不到模块”。当我在cli中运行以下命令时我可以在spark shell如何在jupyter <e
浏览 0提问于2019-03-27得票数 2
我只是想更多地了解Spark。所以我想问这个问题。我连接了一个运行Pyspark的Jupyter笔记本。所以，现在当我在笔记本中进行任何编码时，比如读取数据并将数据转换为Spark DataFrame，我想检查一下：
1)。其中所有数据集都分布在本地机器上。使用没有spark的Jupyter notebook运行代码和计算与使用Pyspark运行Jupyter notebo
浏览 0提问于2016-08-13得票数 0
请注意，我是在Apache Spark上使用Notebook。我可以上传这作为一个应用程序代码一旦开发完成。self.version_string() 418 def __repr__(self):
458
/usr/local
浏览 0提问于2016-06-03得票数 0
我得到了这个错误：在终端中运行以下命令时：jupyter/pyspark-notebook \
/usr/local/spark
浏览 0提问于2018-12-28得票数 0
我已经在ubuntu上安装了Apache Spark，路径为/home/mymachine/spark-2.1.0-bin-hadoop2.7，所以我必须进入python目录，位于这个目录下，才能使用sparkpython目录之外使用它，通过一个名为findspark的库来帮助，但是似乎我必须总是像这样初始化这个库：findspark.init("/home/mymachine/spark在，它提到需要在.bash_p
浏览 5提问于2017-09-23得票数 0
我安装了findspark，然后在我的Jupyter Notebook中启动了pyspark。
浏览 0提问于2018-04-03得票数 4
回答已采纳
我已经在我的机器上安装了Anaconda(Python2.7版本)，并用"PYSPARK_DRIVER_PYTHON=jupyter“和PYSPARK_DRIVER_PYTHON_OPTS=" notebook”启动了jupyter笔记本，我正在连接到jupyter notebook，但也无法运行“打印”命令。我已经安装了pyspark并在我的windows机器(独立模式)的命令提示符中运行，它的工作fine.....but我需要在jupyter notebo
浏览 1提问于2017-04-04得票数 1
我正在本地计算机上运行ipython notebook，并希望创建到远程Spark服务器i.p的连接。然后从remote server上存在的hdfs文件夹中读取数据。如何从本地ipython notebook创建到Spark服务器的远程连接
浏览 3提问于2015-11-24得票数 6
当我在控制台中运行命令pyspark时，我正在尝试启动jupyter笔记本。当我现在输入它时，它只会在控制台中启动一个交互式的shell。但是，这对于键入长行代码并不方便。有没有办法把jupyter笔记本和pyspark shell连接起来？谢谢。
浏览 0提问于2018-02-22得票数 4
我正在用一个脚本启动一个pyspark jupyter笔记本：ipaddres=...{#Spark path (based on your computer)
SPARK_PATH=/home/.../software/spark-2.3.1-b
浏览 0提问于2018-12-13得票数 0
4回答
我正在尝试将这个tuto应用到我的ubuntu中，这就是我所做的： 1-安装spark 2.2....(pyspark)+ java(1.8) + anaconda (Python2.7) 2-编辑.bachrc (添加2行)： export PYSPARK_DRIVER_PYTHON=jupyterexport PYSPARK_DRIVER_PYTHON_OPTS="notebook" 3-lanch Pyspark：$sudo Pyspark它工作得很好 4-lanch jupyter：$sudoj
浏览 120提问于2017-11-10得票数 3
回答已采纳
这样做的目的是为了实现以下目标其中kernel-options将被转发到pyspark或spark内核。我们需要它来运行不同的jupyter服务器--一个用于pyspark内核，另一个用于同一台机器上的spark (in scala)内核。这是一个要求，因为单个jupyter服务器不支持同时运行的pyspark和(scala) spark</e
浏览 26提问于2017-01-17得票数 2
回答已采纳
我更喜欢使用ipython增强型REPL而不是python，因此我在pyspark命令行中这样指定： PYSPARK_DRIVER_PYTHON=ipython MASTER="local[*]" $SPARK_HOME/bin/pyspark结果
浏览 0提问于2018-07-21得票数 1
回答已采纳
我已经在docker的正确端口设置了jupyter笔记本，每次我需要将数据上传到笔记本并进行分析时，有没有什么我可以将我的jupyter文件位置设置为特定的文件，记住我使用的是docker。
浏览 1提问于2020-06-05得票数 0
我正在尝试使用Spark 1.6.1在我的AWS EMR Spark集群上运行Ipython。这是一个很好的，但似乎只适用于spark 1.3.1。有谁有什么想法吗？
浏览 0提问于2016-05-31得票数 1
我想在jupyter上工作。-1.5.2-bin-hadoop2.6/16/04/24 15:27:42 IN
浏览 0提问于2016-04-24得票数 3
我已经使用scala为Kafka中的自定义生产者写了一个小代码，它给出了下面的错误。我已经附加在代码部分的代码。我附上了一些代码作为参考。Message: <console>:61: error: not found: type KafkaProducer ^val
浏览 1提问于2019-03-28得票数 0
云服务器
ICP备案
对象存储
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号