1.0 ||football |2.0 |我想将上面的数据帧写入一个csv文件，其中的文件名将使用当前时间戳创建。/src/main/resources-"+LocalDateTime.now()+".csv")
但是这段代码不能正常工作。给出了
浏览 29提问于2021-03-02得票数 2
回答已采纳
我有个csv文件。它有许多列，其中两列是月和年。月份为1.12，而2013年.(例如)。我需要创建一个mm/yyyy格式的时间戳，作为一个新列，比如“时间戳”。我试过下面的片段，但失败了。scala> val df = spark.read.format("csv").option("header",
"true").load(&qu
浏览 2提问于2016-09-29得票数 0
回答已采纳
当我试图将DataFrame保存为CSV到S3时，将使用Scala生成的名称创建该文件。例如-使用名为fileName.csv的<em
浏览 5提问于2022-01-11得票数 1
回答已采纳
1回答
我正在尝试解析具有自定义时间戳格式的CSV文件，但我不知道Spark使用哪种日期时间模式格式。我的CSV看起来像这样： Timestamp, Name, Value02/07/2019 14:55:45.343")
csvDataFrame.printSchema() 但是无论我使用
浏览 39提问于2019-05-10得票数 1
回答已采纳
1回答
我正在尝试创建一个批处理脚本来重命名下载的文件。下载后，这些文件具有类似的名称，其中包括时间戳。名称中的时间戳与“上次修改”时间戳的值不同(通常只有几秒钟)。例如：Export_2013_11_06_15_13_41.csv
Export_2013_11_06_15_13_51.<e
浏览 2提问于2013-11-06得票数 1
回答已采纳
我目前正在使用hql将数据从配置单元表卸载到文本文件中。因为它花费了太多的时间。我想去spark或pyspark.I。我是spark/ please的新手。你能帮我解决这个问题吗?我正在使用下面的查询来卸载 beeline --outputformat=dsv --silent=true - e 'select * from <tablename>' > /dir/samplefile.txt
浏览 11提问于2019-10-04得票数 0
我有一个包含日期时间列的csv文件："2011-05-02T04:52:09+00:00“。我使用scala，文件被加载到spark DataFrame中，我可以使用jodas时间来解析日期：import sqlContext.implicits._
val df = new SQLContext(sc).load("com
浏览 0提问于2015-04-28得票数 3
回答已采纳
1回答
我有一个数据集，在主文件夹中包含多个文件夹，每个文件夹包含多个CSV文件。每个CSV文件都有三列，名为X、Y和Z。我想创建一个dataframe，以便前三列是三列X，Y，Z。我还想要另外两列，例如第四列包含读取CSV文件的文件夹的名称。第五列包含CSV文件的名称。如何在<em
浏览 5提问于2020-04-15得票数 5
回答已采纳
1回答
我们从spark写入文件，从Athena/Hive读取文件。在使用hive时，我们遇到了时间戳问题。scala> val someDF = Seq((8, "2018-06-06 11:42:43")).toDF("number", "word")
someDF: org.apache.spark.sql.DataFrame"\u0001").save("s3:&#
浏览 0提问于2018-06-06得票数 3
我最近在Scala工作。我学到了一点Scala。这是检查的正确方式吗？
浏览 1提问于2017-02-21得票数 0
我有一个Dataframe，我从一个CSV文件中读取了许多列，如:时间戳、步骤、心碎等。但是我能理解如何使用函数和。当我写以下内容时：val sumSteps = df.sum("steps") 我是否错误地使用函数和
浏览 8提问于2016-05-04得票数 43
回答已采纳
2回答
我正在尝试为我的pandas文件添加一个新的值。我的pandas文件是我使用以下代码读取的.CSV文件：import numpy as np
df = pd.read_csv('coordinatesCSV.csv我希望这个时间戳是我使用以下代码生成<e
浏览 0提问于2017-03-10得票数 0
我正在试着读取一个csv文件，其中有时间戳，直到纳米秒。文件TestTimestamp.csv的示例内容 /** * 101,2019-")
我得到的输出是完全错误的日期时
浏览 9提问于2019-10-25得票数 2
回答已采纳
我正在尝试将以下文件读入Scala 2059652,4,2005-09-05 1759415,4,2005-04-22我想使用以下模式的DataFrame/DataSet结束：
case class Rating(user: Integer, item: Integer, rating: Integer, timestamp: Timesta
浏览 2提问于2017-06-27得票数 0
回答已采纳
我有一个..csv文件，里面有很多数据。它是每10分钟收集一次的数据，所以时间戳(列名为“时间戳”)是这样的格式: DD/MM/YYYY :mm。我想为每天使用python中的熊猫创建/编写一个新的csv文件。这段代码每10分钟创建一个新的csv
浏览 2提问于2019-10-18得票数 1
回答已采纳
我在服务器上有相同名称的csv文件，并附加了时间戳。我想一次复制一个文件，将时间戳删除到另一个位置。例如，服务器上的文件位于以下位置: MyFile_20140226.csv MyFile_20140227.csv MyFile_20140228.csv
我需要一次复制一个文件，将文件名为MyFile.
浏览 3提问于2014-02-28得票数 0
1回答
我使用的是PySpark版本3.0.1。我正在将csv文件读取为具有2个日期列的PySpark数据帧。但是，当我尝试打印模式时，两列都被填充为字符串类型。 ? ? 上面附加的屏幕截图是Dataframe和Dataframe模式。 如何使用pyspark将date列中的行值转换为时间戳格式？我已经尝试了很多东西，但所有的代码都需要当前的格式，但如何转换
浏览 16提问于2020-12-30得票数 2
我有一个BAT脚本，它用SQL存储过程中的数据创建一个文件。我想做的是用日期/时间戳重命名该文件，但尚未在google搜索中找到可行的解决方案。
举例说明。当前文件名Pcnt.txt将其更改为PcntYYYYMMDDHHMM.csv，我能够得到格式更改为csv，但文件只是重命名为Pcnt.csv，并需要添加一些代码，这将插入日期
浏览 0提问于2013-11-07得票数 1
回答已采纳
3回答
我有一个Azure数据湖gen1和一个Azure数据湖gen2 (Blob /层次结构)，我正在尝试创建一个Databricks笔记本(Scala)，它读取2个文件并将一个新文件写回Data。在Gen1和Gen2中，我都遇到了相同的问题，我指定的输出csv的文件名被保存为一个目录，在该目录中它正在编写4个文件“提交、启动、_SUCCESS和part-00000-tid-为了我的
浏览 0提问于2019-05-05得票数 0
我有一个目录，其中包含以下格式的文件。这些文件位于一个名为/incoming/external/data的diretory中ABC_20100807.csvABC_20100809.csvABC_20100811.csv
ABC_20100812.csv<
浏览 1提问于2014-02-27得票数 0
回答已采纳
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
