我正在从事一个使用pyspark的项目，并希望设置自动化测试。下面是我的.gitlab-ci.yml文件的样子： image: "myimage:latest"
- Tests
stage: Tests------------------------------- Captured stderr ------------------------
浏览 41提问于2019-08-27得票数 3
回答已采纳
它对我来说工作得很好，但由于某些原因，我想使用本地SparkSession，所以只要运行一个SparkSeesion.builder.getOrCreate()，它就会使用databricks集群，而不是我笔记本电脑中的本地会话，请不要创建新的virtualenv，
谢谢
浏览 27提问于2021-03-02得票数 1
我目前正在尝试创建一个..gitlab ci.yml文件，其中将自动生成Android项目。我的GIT中的文件结构如下所示：.gitlab-ci.yml我的..gitlab ci.yml看起来是这样的： - apt-get update -y &&
浏览 16提问于2021-03-15得票数 0
回答已采纳
按照本教程，我在我的EC2实例上安装了Spark：
“另一个SparkContext正在建设中”[ec2-user@ip-10-0-0-153 ~]$ pyspark[GCC 4.8.3 20140911 (Red Hat 4.8.3java.lang.Thread.run(Thread.java:748)
Traceback (most recent call la
浏览 12提问于2017-08-22得票数 6
回答已采纳
我想把我的CI/CD移到Conducto上。这将涉及构建c++代码，对python和c++代码进行静态分析，以及运行对python和c++代码的测试。虽然我知道我可以使用来自dockerhub的预定义映像，但我相信我的设置会更复杂，因为我需要安装python和c++的依赖项。
浏览 0提问于2020-04-22得票数 2
回答已采纳
背景它配置了最小的.travis.yml。language: clojure- openjdk8- oraclejdk8Travis CI
OpenJDK8、OracleJDK 8和OracleJDK 9的构建成功。这似乎是一些与证书相关的问题。我已经包含了下面的一些日志。这是Travis CI或我的configurations?How<e
浏览 34提问于2018-06-06得票数 6
回答已采纳
1回答
我对gitlab-ci的多人跑有问题。我的设置有几个阶段。让我们假装建造，测试。构建工作很好，但是当涉及到测试阶段时，由于一些基础结构问题，工作失败了。然后，我修复了失败的原因，并且只想重复最后一步，假设阶段之间的缓存是活动的。但由于缓存为空，它再次失败。- mkdir -p bld - touch build_here
stage: test
浏览 0提问于2018-04-20得票数 1
1回答
但是，我们无法找到一种工具/方法来进行自动化测试，这涉及到制造一个电话、保持/取消、挂断等等，即非常基本的电话呼叫操作和一些事后处理。例如，编写一些测试脚本来单击“电话呼叫”按钮并不困难，但我如何确保它实际上是打电话的；如何确保按住/取消按钮、挂断按钮等实际工作？如果没有测试自动化这些关键功能，CI/CD过程也不会显示出很大的价值。到目前为止，CI/CD</e
浏览 0提问于2022-05-17得票数 0
回答已采纳
我已经花了几个小时在这个脚本上，它可以自动重建和更新我在openshift上的程序。我的脚本如下：#!fi #!/bin/bashecho $$ > abot.pidPATH=$fi echo $
浏览 3提问于2016-10-15得票数 1
2回答
我想在我自己的机器(Ubuntu 12.04 LTS)上安装Storm，并按照配置错误：
'configure: error: the JAVA_HOME environment variable must be set to your JDK location我已经使用以下命令设置
浏览 5提问于2014-03-06得票数 0
我正试图在windows本地机器上对我的pyspark代码运行一个测试。Pytest在我的测试代码中创建SparkSession的地方卡住了。最后，测试将作为CI/CD的一部分执行，我还需要在构建机器上配置Spark吗？我有一个相关的，但看起来问题不是与Visual studio代码有关，而是pytest (当我从命令行运行pytest时也有同样的问题)
下面是我
浏览 2提问于2021-09-16得票数 0
我正在设置，在安装了所有的先决条件之后，我将运行非常基本的代码示例来测试它。/jessica/Downloads/geo_pyspark/geo_pyspark/register/geo_registrator.py", line 27, in registerTypeError: 'JavaPackage' object is not callable
我使用的
浏览 6提问于2019-10-29得票数 9
回答已采纳
当我试图在命令提示符中启动“pyspark”时，仍然会收到以下错误：和
卷曲-k -L -o winutils.exe
相应地设置我的环境变量C：\opt\spark\spark 2.3.1-bin-hadoop2.7 setx HADOOP_HOME C：\opt\spark
浏览 2提问于2018-07-15得票数 5
回答已采纳
11回答
火花错误-不支持的类文件主版本
、、、、
我正试着在我的Mac上安装火花。我使用了国产软件安装了spark 2.4.0和Scala。我已经在我的anaconda环境中安装了PySpark，并且正在使用PyCharm进行开发。我已经导出到我的bash个人资料：export SPARK_HOME我怀疑这是因为阅读回溯的java版本。我真的很希望有人帮我
浏览 0提问于2018-12-02得票数 105
回答已采纳
我正在使用最新版本的钻在windows机器上的嵌入式模式。但是，在发送任何查询时，我总是会遇到“没有当前连接”的错误。另外，web服务器localhost:8047也不能工作。这是我试着开始练习时所看到的。我已经在两台不同的windows机器上尝试过Java 8和9，并得到了相同的错误。我仔细研究了这件事，但到目前为止找不到任何解决办法。
有什么解决办法吗？
浏览 2提问于2018-01-30得票数 1
回答已采纳
我在GitLab上有一个工作管道，在我添加了涉及REDIS的测试之后，它就开始失败了。我已经申请了(?)什么是写的，但仍然是红色的没有被我的测试发现。这是我的gitlab-cy.yml文件：pep8: services: - redis:latest POSTGRES_DB: ci
浏览 1提问于2019-03-28得票数 1
回答已采纳
我一直在做一个带有PostgreSQL数据库和ReactJS前端的.NET Core Web API项目。我的问题是，与按原样部署相比，部署容器会带来什么好处吗？
浏览 17提问于2017-06-28得票数 0
回答已采纳
7回答
我正在尝试使用以下命令在Cygwin中设置我的JAVA_HOME：但是当我执行cd $JAVA_HOME时，我会得到这样的错误：-bash: cd: /cygdrive/
浏览 0提问于2013-01-29得票数 10
1回答
我正试图在DigitalOcean中设置一个星火集群，并在那里创建了一个主节点和两个从节点；即使仍然有未使用的执行器和大量内存可用，我也无法从pyspark方法setMaster()连接到主节点。我遇到的错误是:初始作业没有接受任何资源；请检查集群UI，以确保员工已注册并拥有足够的资源。我在master中的smashenv.sh文件如下所示：e
浏览 2提问于2019-03-02得票数 0
回答已采纳
我使用gitlab和它的ci/cd系统来构建、测试和部署我的代码。我已经对其进行了设置，以便我的构建和测试位于不同的容器中： image: docker:latest
- docker build --no-cache -t $CI_REGISTRY_IMAGE:$CI_PIPELINE_ID:latest
浏览 16提问于2020-09-11得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
