我有4个CSV文件与不同的列。有些CSV也有相同的列名。csv的详细内容如下：
capstone_customers.csv: [customer_id, customer_type, repeat_customer]
capstone_invoices.csv: [invoice_id,product_id, customer_id, days_until_shipped, product_line, total]
capstone_recent_customers.csv: [customer_id, customer_type]
capstone_recent_invoices
浏览 1提问于2022-10-12得票数 0
回答已采纳
1回答
我试图读取csv文件，并将它们连接起来，并将它们作为一个csv文件输出。我一直在犯这个错误：
TypeError:不能连接类型为'< class‘pandas.io.parsers.TextFileReader’>的对象；只有Series和DataFrame objs是有效的；
我不知道怎么解决它。我是一个初学者，所以我会感谢任何帮助！谢谢!下面是我写的代码：
csv.field_size_limit(sys.maxsize)
df1 = pd.read_csv('file1.csv', chunksize=20000)
df2 = pd.read_cs
浏览 2提问于2020-02-01得票数 0
当我试着这个
filePath1='/tmp/cs/data_train/cs_subsprofile.csv'
fd_subsprofile=spark.read.format("csv").schema(schema_f_d_subs_profile).load(filePath1)
或
fd_subsprofile = spark.read.csv('/tmp/cs/data_train/cs_subsprofile.csv', header = True)
它是成功的，但是当我尝试
data = pd.read_csv('/tmp
浏览 1提问于2021-09-23得票数 0
回答已采纳
我正试图解析一个csv文件，其中包含印度城市的密码。我想要文件中的特定行。
当我尝试这个时，它的作用就像魅力：
pinfile = open('pincodes.csv', 'r')
csv_file = csv.reader(pinfile)
for i, row in enumerate(csv_file):
if i == 67208:
x = " ".join(row)
print(x)
pinfile.close()
结果：
Padlya B.O . 451220 B.O .交付Khand
浏览 0提问于2017-10-28得票数 1
回答已采纳
1回答
因此，我有一个csv文件，我想要导入到数据库，但它只导入第一行。我不知道它为什么不导入我的csv文件中的所有数据。也许是因为断线？
我的CSV文件示例：
"Tiago“<20>,20,11，sip/11,20，w,2016-03-01 14:33:06,2016-03-01 14:33:09,2016-03-01 14:33:51,45”克劳迪奥“<10>,10,11，sip/11 20，w，2016-01 14:35:35:05,2016-03-01 14:35:07,2016-03-01 14:35:48,43 "Hortencio”<11&g
浏览 1提问于2016-10-26得票数 1
回答已采纳
因此，我的任务是创建一个函数，该函数返回子字符串在给定字符串中出现的次数，以及该子字符串每次出现时的索引。
但是当我运行我的代码时，我得到了一个“关闭文件的I/O操作”错误。有人知道怎么解决这个问题吗？
# 1. Import the text.csv file
import csv
with open('text.csv') as csv_file:
csv_reader = csv.reader(csv_file, delimiter=',')
# 2. Complete function counter. The function should
浏览 0提问于2018-11-27得票数 0
fs的createReadStream和stream的Readable有什么区别吗 test.csv name,color
audi,green
bmw,red
mercedes,silver fs.createReadStream import { createReadStream } from 'fs'
import parser from 'csv-parser'
;(async () => {
createReadStream('test.csv')
.pipe(parser())
.on('data
浏览 40提问于2021-03-26得票数 1
回答已采纳
我正在尝试将一个大的CSV文件拆分为两个文件。我正在使用下面的代码 import pandas as pd
#csv file name to be read in
in_csv = 'Master_file.csv'
#get the number of lines of the csv file to be read
number_lines = sum(1 for row in (open(in_csv)))
#size of rows of data to write to the csv,
#you can change the row size accor
浏览 23提问于2021-10-14得票数 0
我正在与csv模块做斗争。我有一个示例CSV文件，它有5000行(每行包含7个值0或1)和标题。我希望在读模式下迭代文件，并在写入模式下使用新列值(prediction)追加文件，但是迭代在第478行之后停止(如示例代码中的那样)：
import csv
import random
def input_to_csv():
prediction = [round(random.uniform(0, 1), 0) for _ in range(1, 5000)]
combined_set = list(map(str, prediction))
export_co
浏览 0提问于2019-04-24得票数 0
回答已采纳
在从3.6.3更新到4.1.1之后，我运行的每周脚本都崩溃了。具体来说，它会触发一个错误：
In file.remove("temp.csv") :
cannot remove file 'temp.csv', reason 'Permission denied'
要手动删除temp.csv，我从windows获得一个rsession.exe错误使用的文件。如果我在Rstudio中重新启动R，那么file.remove()和手动删除工作。
首先，我可能使用了一个糟糕的策略，但是导致错误的代码是这样的：
write_csv(VPTS,
浏览 4提问于2021-09-22得票数 1
回答已采纳
1回答
这是一个奇怪的问题，我有一个读取csv文件的方法，所以我为它创建了一个单元测试，就像这样简单： def test_csv(self):
with open(self.csv_file_path, 'rb') as csv_file:
response = csv_parser_method(csv_file)
assert response here 因此，如果我在那里添加一个pdb断点并检查self.csv_file_path文件的内容，那么它是空的 (Pdb) import csv
(Pdb) reader = csv.reader
浏览 17提问于2019-03-13得票数 1
回答已采纳
我的问题是，如果.csv文件足够大，那么map/zipmap步骤(如下所示)是否存在消耗太多内存的风险？
我有一个从clojure-csv返回的序列序列。为了清楚起见，特意将以下步骤分开。换句话说，我将在生产代码中组合其中的一些。
; Process the .csv file
(defn fetch-csv-data
"This function accepts a csv file name, and returns parsed csv data,
or returns nil if file is not present."
[csv-fil
浏览 0提问于2012-08-10得票数 2
回答已采纳
[sagar@BL-53 RcTools]$ irb
1.9.3p0 :001 > require 'csv'
=> true
1.9.3p0 :002 > master = CSV.read("./public/jobs/in/Appexchange_Applications_Companies_487.csv")
ArgumentError: invalid byte sequence in UTF-8
from /home/sagar/.rvm/rubies/ruby-1.9.3-p0/lib/ruby/1.9.1/cs
浏览 0提问于2012-08-14得票数 2
2回答
我有两个文件: src.csv和dst.csv。下面的代码从src.csv读取第二行并将其附加到dst.csv。问题是dst.csv中的输出包含在双引号("")中。
预期结果：
10, 5, 5, 10, 1
输出：
"10, 5, 5, 10, 1"
我尝试在quoting=csv.QUOTE_NONE, escapechar=' '中使用csv.writer，它确实删除了引号，尽管输出在每个csv值之后都包含一个空格。
这是我的代码：
import csv
with open('src.csv', 'r')
浏览 6提问于2016-10-05得票数 2
回答已采纳
我正在使用pandas的read_csv函数直接从url获取数据。以下是代码
import pandas as pd
mosa_df = pd.read_csv("https://api.coronavirus.data.gov.uk/v2/data?areaType=msoa&metric=newCasesBySpecimenDateRollingSum&format=csv")
print(mosa_df.shape)
输出：(72019，11)
但是，如果您手动下载相同的csv，则会有210601条记录。pandas read_csv中的行数有限制吗？如果
浏览 0提问于2021-04-24得票数 1
我需要合并两个CSV文件：datasorted1.csv和datasorted2.csv，但是我的头总是被排序。
head -n 1 datasorted1.csv datasorted2.csv > resultado.csv && tail -n +2 datasorted1.csv datasorted2.csv | sort -t "|" -k 1 >> resultado.csv
样本数据：
Name|Email|Country|Company|Phone
Brent Trujillo|tempus@mauris.org|Burkin
浏览 0提问于2014-11-30得票数 2
回答已采纳
1回答
考虑两个csv文件；
包含180行的A.csv
包含1400行的B.csv。
为什么下面的代码只在B.csv的第一次迭代时打印A.csv行？
with open('A.csv', 'rU') as a_data, open('B.csv', 'rU') as b_data:
a_rows = csv.reader(a_data, delimiter=',', quotechar='"')
b_rows = csv.reader(b_data,
浏览 0提问于2015-01-24得票数 0
回答已采纳
1回答
我确实有这样一个csv文件
其中包括重复的名字。关键是我只对速度和地位感兴趣。
所以我违抗以下几点：
used_columns=['time.2','speed','time.4','status']
df =pd.read_csv(path,usecols=used_columns)
棘手的部分是，如果其中一个列丢失了，那么它将无法找到其中的一个列(我有很多csv文件，它们可能不同)。
一种选择是读取整个csv并保存列名并在'speed', 'status'之前使用，但我试图避免读取整个csv
浏览 6提问于2022-07-08得票数 1
回答已采纳
我试图从一个特定的文件夹中读取CSV文件，并将相同的内容写入到本地pc上不同位置的其他CSV文件中，以供学习。我可以读取文件并在控制台上显示内容。但是，如果我想将它写入指定输出目录下的另一个CSV文件，则会得到一个名为"_spark_metadata“的文件夹，其中不包含任何内容。
我在这里一步一步地粘贴整个代码：
创建火花会议：
spark = SparkSession \
.builder \
.appName('csv01') \
.master('local[*]') \
.getOrCreate();
spark.conf.set("
浏览 3提问于2018-06-09得票数 0
回答已采纳
2回答
我正在尝试读取csv文件中的句子，将它们转换为小写，并保存在其他csv文件中。
import csv
import pprint
with open('dataset_elec_4000.csv') as f:
with open('output.csv', 'w') as ff:
data = f.read()
data = data.lower
writer = csv.writer(ff)
writer.writerow(data)
但我得到了错误"_csv.
浏览 6提问于2021-12-22得票数 -1
3回答
我有一个csv文件example.csv类似-
name | hits
---------------
A | 34
B | 30
C | 25
D | 20
使用Python中的hits > 20？，如何只读取pandas中的行寻找类似于-
my_df = pd.read_csv('example.csv', where col('hits') > 20)
浏览 0提问于2019-03-21得票数 6
回答已采纳
在databricks中，我需要加载几个CSV文件。我想用文件路径向我的表中添加一个列，但是我似乎找不到这个选项
我的数据是用
FileStore/subfolders/DATE01/filenameA.csv
FileStore/subfolders/DATE01/filenameB.csv
FileStore/subfolders/DATE02/filenameA.csv
FileStore/subfolders/DATE02/filenameB.csv
我在databricks中使用这个SQL函数，因为它可以循环遍历所有日期，并将所有filenameA添加到clevertablename
浏览 3提问于2022-08-25得票数 0
回答已采纳
当我读取包含泰国字符和熊猫read_csv中的英文字符的CSV文件时，我无法正确地拆分列。
import pandas as pd
df=pd.read_csv("test.csv",delimeter=";")
浏览 5提问于2020-01-26得票数 2
csv文件位于S3桶中，我使用camel aws来使用csv文件。但是，当csv文件被加载到本地时？字符被伪装成第一列。
例如，原始文件名、姓氏brian、xi。
在加载到本地后?名，姓氏brian，xi。
我已经做过这个链接的研究：，然而，它似乎不适用于骆驼。
如何从s3中读取csv文件，使用aws-s3从s3桶(如“Exchanges3File= consumer.receive( s3Endpoint )”)中使用csv文件，其中s3Endpoint=s3
浏览 3提问于2019-11-13得票数 0
1回答
用熊猫读取大型CSV文件
、、、、
我必须从CAN读取和分析一个日志文件，该文件采用CSV格式。它有161180行，我只用分号分隔566列。这是我的密码。
import csv
import dtale
import pandas as pd
path = 'C:\Thesis\Log_Files\InputOutput\Input\Test_Log.csv'
raw_data = pd.read_csv(path,engine="python",chunksize = 1000000, sep=";")
df = pd.DataFrame(raw_data)
#df
dtale.
浏览 7提问于2022-11-15得票数 0
1回答
我正在尝试打开一个下载的csv文件，但我最终还是这样做了，并将其打印出来，以确保我做得正确。但是，当我尝试检查列表中的一个值或多个字符时，我的sequence_counter总是返回零。如有任何帮助我们将不胜感激！ import csv
from sys import argv
#Error Checking
n = len(argv)
sequence_counter = 0
if n != 3:
print("Error")
#Read user command & choose file
else:
with open(argv[1],
浏览 15提问于2020-05-04得票数 0
2回答
在下面的代码中，我合并了从变量file_date中包含的某个日期开始的所有csv文件。代码对于小的和中等大小的csv文件工作得很好，但是对于非常大的csv文件就会崩溃。
path = '/Users/Documents/'+file_date+'*'+'-details.csv'+'*'
allFiles = glob.glob(path)
frame = pd.DataFrame()
list_ = []
for file_ in allFiles:
frame = pd.read
浏览 0提问于2018-09-27得票数 0
当我偶然发现这个问题时，我正在做一些基本的CSV文件操作，现在我知道如何避免它，但我只是想更好地了解发生了什么。每当我想要迭代csv.reader对象时，我都可以很容易地做到。但是，每当我试图通过另一个变量将对象转换为列表时，它就会阻止迭代csv.reader对象的迭代循环开始。
def checkPlayer(discordName, playerName):
with open ('PLAYERS.csv', 'r') as fil:
r = csv.reader(fil)
l = list(r)
li
浏览 17提问于2019-07-14得票数 1
回答已采纳
我正在尝试上传.csv文件到SQL数据库，当我试图通过分配文件路径到一个变量读取.csv文件时，我的程序运行正常，但当我从文件上传控件检索相同的路径时，我得到了找不到文件的异常。有没有人可以指导我如何摆脱这个错误。提前谢谢。
using System;
using System.Collections.Generic;
using System.Linq;
using System.Web;
using System.Web.UI;
using System.Web.UI.WebControls;
using System.Data;
using Microsoft.VisualBasic.F
浏览 3提问于2014-02-17得票数 0
2回答
我可以使用Python的CSV库或类似的技术内联修改CSV文件吗？
当前，我正在处理一个文件并更新第一列(名称字段)以更改格式。我的代码的简化版本如下所示：
with open('tmpEmployeeDatabase-out.csv', 'w') as csvOutput:
writer = csv.writer(csvOutput, delimiter=',', quotechar='"')
with open('tmpEmployeeDatabase.csv', 'r'
浏览 2提问于2013-04-16得票数 24
回答已采纳
1回答
“一起”是一个程序，用来查看"csv“文件中的节假日，允许某人选择一个标记为数字的按钮，然后写到随机选择的假期文件。这不管用。有什么帮助吗？具体来说，当我启用choose.php设置时，“ini_set”不起作用，也没有收到任何错误。
HTML文件：
<html>
<head>
<script src="https://ajax.googleapis.com/ajax/libs/jquery/3.3.1/jquery.min.js"></script>
<script>
function start(){
浏览 0提问于2018-07-25得票数 0
回答已采纳
有关火花的小问题，以及如何从http响应的结果中阅读。
众所周知，星火库可以作为数据库的数据源，如CSV等。
sparkSession.read().format("csv").load("path/to/people.csv");
sparkSession.read().format("org.apache.spark.sql.cassandra").options(properties).load()
请问如何直接从http呼叫的结果中读出？
而不必将数据转储回另一个中间csv /中间数据库表中。
例如，csv和数据库将包含数百万行，一旦读
浏览 8提问于2021-09-10得票数 2
回答已采纳
在中，如何为read_csv中的所有列指定单个dtype
根据，read_csv的dtypes参数可以是{'column_name': dtype}形式的映射(dict)，也可以是针对每列的dtype列表。但是，尚不清楚如何指定“我希望所有列都是单个dtype”。
例如，如果希望所有列都是Utf-8，并且知道列的总数，则可以这样做：
pl.read_csv('sample.csv', dtypes=[pl.Utf8]*number_of_columns)
但是，如果您不知道列的总数，这是行不通的。在潘达斯，你可以这样做：
pd.read_csv('sam
浏览 22提问于2022-02-14得票数 5
回答已采纳
我正在尝试创建一个windows服务，用于检测文件夹中是否有新的CSV文件，并解析这些文件。CsvHelper似乎无法读取CSV文件。我试图填充的所有参数都是空的。
密码有什么问题吗？GetField方法不返回任何值，如果我打印，参数都是空的。
路径是正确的，csv文件路径也是正确的。
public class CSVBatch
{
public string MaterialID { get; set; }
public string MaterialName { get; set; }
public string Location { get; set; }
浏览 3提问于2022-10-12得票数 0
回答已采纳
1回答
我可能试图在这里重新发明轮子，但是numpy有一个fromfile()函数，可以读取--我想-- CSV文件。
它看起来非常快，甚至与Pandas read_csv()相比，但我不清楚它是如何工作的。
下面是一些测试代码：
import pandas as pd
import numpy as np
# Create the file here, two columns, one million rows of random numbers.
filename = 'my_file.csv'
df = pd.DataFrame({'a':np.random.
浏览 1提问于2019-03-06得票数 1
回答已采纳
因此，我在一个.csv文件中阅读，所有的工作都是我想要的一件事。数据的标题有空格，稍后我希望这些空格用于向用户显示数据。但是，当csv文件通过可读的方式读取时，这些空格就会被删除(因为它们被用作变量名)。同样，这本身没有问题，但我仍然需要未经修改的字符串。
另外两份说明：
如果这样做更容易，我很高兴字符串与主表分开存储。
我正在读取的实际.csv文件相当大(大约200万个数据点)，因此从计算成本方面看，读取该文件越少越好
用代码读取示例：
File = 'example.csv';
Import_Options = detectImportOptions( Fi
浏览 0提问于2018-12-12得票数 1
回答已采纳
错误：‘NoneType’对象没有属性'to_csv‘
代码：
import tabula
df = tabula.read_pdf(r"C:\Users\admin\Desktop\Project_1\img1.pdf", encoding='utf-8')
df.to_csv(r"C:\Users\admin\Desktop\Project_1\otuput.csv", index=False)
浏览 1提问于2019-06-26得票数 1
回答已采纳
是否有人知道是否可以使用相同的代码将csv或拼花文件读入火花中。
这里我的用例是，在生产中，我将使用大型拼板文件，但是对于单元测试，我想使用CSV。我使用的代码如下：
spark.read().schema(schema).load(path);
这在CSV情况下失败，但有以下例外：
file.csv is not a Parquet file. expected magic number at tail [80, 65, 82, 49] but found [78, 9, 78, 10]
我怀疑这会引发对地板的默认设置，这是行不通的，但我想先检查一下。
浏览 5提问于2020-08-09得票数 2
回答已采纳
1回答
我是perl的新手，我正在尝试用perl读写csv文件。但是没人能帮我解决问题所在。使用'<‘我可以毫无问题地阅读，但我不会写字。
use strict;
use warnings;
use Text::CSV_XS;
my $file = 'file.csv';
my $csv = Text::CSV_XS->new();
open (InCSV, '+>>', $file) or die $!;
while (<InCSV>) {
if ($csv->parse($_)) {
浏览 1提问于2011-01-12得票数 0
回答已采纳
我使用csv DictReader读取csv文件并使用它执行dict操作。奇怪的是，在每次操作之前，我需要重新读取csv文件。为什么是这种情况？
import csv
readin = open("minimal.csv", "r")
dict = csv.DictReader(readin, delimiter=",", quotechar="\"")
for rows in dict:
print rows
产出：
{'Title1': 'One', 'Title2'
浏览 4提问于2014-10-28得票数 0
回答已采纳
sudo -u hdfs hadoop fs -copyFromLocal input.csv input.csv
copyFromLocal: `input.csv': No such file or directory
有没有人能告诉我为什么会出现这种错误？我给了input.csv文件的所有权限，我甚至把所有者改成了hdfs。我是Hadoop和Hbase的新手。
浏览 1提问于2012-12-10得票数 3
2回答
我试图使用apache_beam.dataframe.io.read_csv函数读取在线源代码，但没有成功。如果文件托管在google存储'gs://bucket/source.csv'上，但无法从'https://github.com/../source.csv'获取文件，一切都能正常工作。
from apache_beam.dataframe.io import read_csv
url = 'https://github.com/datablist/sample-csv-files/raw/main/files/people/people-10
浏览 14提问于2022-11-15得票数 0
回答已采纳
我知道我可以使用spark.read.csv()或spark.read.json()将CSV文件或JSON文件作为一个DataFrame加载，但是如果我的源文件实际上是不同格式的，例如，我的一些原始数据在CSV文件中，而另一些在JSON文件中呢？我是否可以创建一个包含来自CSV和JSON文件的数据的DataFrame？也许我应该分别加载它们并在DataFrames上使用JOIN操作，或者我应该首先将所有JSON数据转换成CSV并使用单个spark.read.csv()加载它们，但是我想听听您的建议，因为我对Spark还是新手。
浏览 0提问于2021-08-14得票数 0
回答已采纳
import csv
with open('test.csv','rb') as file:
rows = csv.reader(file,
delimiter = ',',
quotechar = '"')
data = [data for data in rows]
这是用写的。我无法评论，但我真的很困惑。“rb”是什么意思？
浏览 4提问于2016-06-09得票数 10
回答已采纳
1回答
我试图使用以下简单的C++代码将CSV-文件转换为TXT-文件：
std::ofstream txtFile(strFileName, std::ofstream::out | std::ofstream::app);
std::string strLine;
std::ifstream csvFile(strCSVDir);
while (std::getline(csvFile, strLine))
{
std::string subString;
std::stringstream s(strLine);
while (std::getline(s, subS
浏览 0提问于2019-08-19得票数 0
我正在调用一个API，它将产生一个可能包含多个CSV文件的zip文件： import zipfile
from io import BytesIO
api_url = res.json()['export_url']
new_res = requests.get(api_url, auth=(user, pass))
filebytes = BytesIO(new_res.content)
myzipfile = zipfile.ZipFile(filebytes)
a = myzipfile.extractall
for name in myzipfile.namelis
浏览 29提问于2020-12-07得票数 0
回答已采纳
2回答
我编写这段python代码是为了测试。它背后的思想是读取csv文件的行，将数据分配给变量，并使用线程打印这些变量。然而，我希望该函数能够为每个线程逐行读取csv文件，但我不知道如何做到这一点……
csv文件如下所示：
name lastname
1 John B.
2 Alex G.
3 Myriam R.
4 Paul V.
5 Julia L.
6 Margot M.
代码如下：
import csv
import threading
class main():
浏览 0提问于2021-04-26得票数 0
3回答
我有两个csv文件，格式如下：
BigFile.csv:
11111,,101010
22222,xxxxxx,202020
33333,yyyyyy,303030
44444,,404040
LittleFile.csv:
xxxxxx
yyyyyy
wwwwww
zzzzzz
我需要创建一个新的.csv文件，其中包含第二列中包含LittleFile.csv值的每个BigFile.csv行，如下所示：
NewFile.csv
22222,xxxxxx,202020
33333,yyyyyy,303030
浏览 6提问于2015-11-25得票数 1
回答已采纳
我无法将在所有阶段(解析阶段、业务错误、数据库错误、无效数据错误)中注册的错误存储在csv文件中 原因:无法检索csv输入行，因为错误方法只有exception作为参数，而没有实际的csv行数据。(例如:解析异常本身具有inputString方法()，而错误处理阶段的其余部分没有输入) 如何在spring批处理作业的所有阶段获得输入行或正在处理的行？？ 我需要创建具有以下csv行列+行号+错误消息+原因的错误CSV
浏览 15提问于2021-08-21得票数 0
回答已采纳
1回答
可能重复：
我有一个简单的csv文件。看上去像这样
X y 1 2 1 3 2 1 2 3
我在MS中创建了它，并保存为csv等。
我使用以下命令来阅读它
ttest<--read.csv("ttest.csv"，header = TRUE)
生成的数据如下所示
X y -1 -2 -1 -3 -2 -1 -2 -3
我在文本编辑器中打开了原来的csv文件，它看起来应该
浏览 4提问于2013-01-18得票数 2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
