腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
2
回答
使用
python
将
csv
拆
分成
小
csv
、
、
、
我有一个
csv
(大约750MB大小)。我必须将它
分成
小
的
csv
,每个大小不超过30Mb。其他文件中不能有另一半)如果C2本身的一个值大于30Mb,则将与该c2关联的数据打印到文件中max_size = 30 * 1000000unique_ac_id = pd.unique(df.C2) df_arr
浏览 13
提问于2018-08-16
得票数 1
回答已采纳
1
回答
Snakemake:
将
所有通配符传递给单个shell命令
"file_{name}.
csv
" "
python
process.py {wildcards.name}"rule all:input:调用all规则,Snakemake
将
看到conversion可以生成请求的文件file_
浏览 4
提问于2022-03-16
得票数 1
3
回答
Python
-创建一个集合列表或集合集合?
我需要帮助我正在旁听的一堂课的家庭作业。这个练习是在关联规则挖掘中进行的,我非常纠结于组织数据的其中一个步骤。rawText = fruit, yogurt, coffee如何将此数据放入如下所示的集合中(这是一个集合列表吗?): {‘fr
浏览 5
提问于2018-09-05
得票数 3
1
回答
函数
将
DF拆分为多个DFs,并对每个DFs执行所有操作。
、
、
、
我已经构建了一个
python
脚本来对这些数据运行大量的清理和数学操作,包括枢轴表。我想将这个DF分割成3个不同的DFs,然后根据列值
将
这3个DFs再拆
分成
6个DFs,并对18个结果DFs中的每个DFs运行操作。最后,我想输出18个单独的excel文件。我真的不想
使用
嵌入的循环,因为在现实中有大约100行的操作正在进行,我不希望所有的事情都缩进等等。.=猪/约翰,猪/迈克,猪/瑞克,马/约翰等.
浏览 2
提问于2020-08-07
得票数 3
回答已采纳
1
回答
如何在生成器函数的定义中运行带有‘’分隔符‘’的"pandas.read_
csv
“?
、
、
CSV
文件很大(几GB),所以我想要一步一步地对行进行切片,并
使用
pivot修改每个切片的DataFrames,然后组合DataFrames。我
使用
了一个生成器函数来按行划分数据,但我无法
使用
pandas.read_
csv
中的'delimeter'参数,如下所示。import pandas as pd for x in range(0,366130,11): yield pd.read_
csv
(filename,2 #
浏览 22
提问于2019-05-18
得票数 1
2
回答
在
Python
中读取
csv
时分隔符不起作用
、
、
下面是我调用
csv
时的代码。df = pd.read_
csv
(file,'rb', delimiter ='\t', engine='
python
')$GPRMC,160330.40,A,1341.因此,我根据($PUBX,00)中的字段数尝试
使用
columns函数。(file, 'rb', header = None, na_filter = False, engine = '
python
'
浏览 4
提问于2017-05-31
得票数 0
2
回答
使用
大型
csv
文件。如何
使用
python
在MySQL数据库中插入
csv
数据?
、
、
、
、
我感兴趣的是如何插入例如10 GB的.
csv
文件到MySQL数据库。我
使用
pandas和pyspark来读取
csv
文件,然后添加
csv
头到列表中(如果
csv
文件没有头,我
使用
spark添加它)。id INT NOT NULL AUTO_INCREMENT," + column_names + ", PRIMARY KEY (id))") 然后,我将不带标题行的整行添加到列表中,然后再次解析以
将
'所以我在编辑列表 query = &
浏览 20
提问于2021-07-11
得票数 0
1
回答
有效地
将
大量对象与
csv
标头映射进行匹配
、
、
、
、
我正在处理大量的数据对象,我需要能够将它们转换为基于
csv
头映射的文本文件。标题映射基本上是需要按特定顺序打印的字段列表,例如,如果标题映射是: ID、名称、位置等,则所有对象的这三个字段需要写入
csv
文件。目前,我
使用
的代码遍历整个对象列表,并在所有
CSV
值的映射上
使用
switch语句来打印必填字段。break; ....AFAIK,C#将为字符串切换语句
使用
字典
浏览 0
提问于2014-05-06
得票数 2
2
回答
拆分
csv
文件的列
、
、
作为
Python
的初学者,我试图实现的目标听起来很简单,但我无法让
python
按我的要求工作。bicycleFFF train, tram, plane, helicopter fOpen1=open('C:\data.
浏览 5
提问于2015-09-28
得票数 0
回答已采纳
1
回答
为什么Glue Databrew作业在
将
输出转储到S3时会编写空的
CSV
文件?
、
当我的工作输出保存在S3中时,它似乎将它们
分成
几个非常
小
的
CSV
文件,但其中一些文件是0。
浏览 1
提问于2021-05-11
得票数 2
2
回答
分割一个大
CSV
文件并转换成多个Parquet文件-安全?
、
、
我了解到,当涉及到大小和查询速度时,拼板文件格式存储了一堆元数据,并
使用
各种压缩来高效地存储数据。table = pyarrow.
csv
.read_
csv
(fileName) pyarrow.parquet.wr
浏览 23
提问于2022-11-29
得票数 0
回答已采纳
1
回答
Bottle.py -拆分字符串数组
我有一个
小
的web演示,
将
数据从一个
CSV
文件中拉入,我想在网页上显示。我计划
使用
Bottle.py,但我不能将字符串拆
分成
数组。
CSV
文件中将有多行,我将以拆分的方式读取这些行,然后创建一个表。debug, template, get, redirect, request, response, static_file, route, os, sys LOG_FILENAME = "data.
csv
浏览 0
提问于2017-05-22
得票数 0
1
回答
生成cosine_similarities的库linear_kernel中出现内存错误
、
、
我有一个数据集,其中包含8列,每列有1482531行,我尝试通过以下方式进行基于内容的编辑系统from sklearn.model_selection import train_test_split dataset = pd.read_
csv
浏览 2
提问于2018-02-04
得票数 3
9
回答
如何在
Python
中拆分大文件
csv
文件(7 7GB
、
、
我有一个7 7GB的
csv
文件,我想把它
分成
更小的块,这样在笔记本上用
Python
语言进行分析时,它的可读性和速度更快。我想从它中获取一个
小
的设置,可能是250MB,那么我该怎么做呢?
浏览 3
提问于2013-11-18
得票数 24
1
回答
在
python
中的dataframe中添加
csv
文件中的列
、
我已经
使用
编写器在
python
中创建了一个
csv
文件。我
将
这个
csv
文件称为“数据”,它由一列40行组成。然后,我在一个新的
python
脚本中导入这个
csv
文件,并创建一个dataframe。但是,在我的新数据框架中,我希望
将
这40个数据点
分成
4列,每列10行。到目前为止,我尝试了以下几点: data=pandas.read_
csv
("location/data.
csv
&
浏览 1
提问于2017-12-01
得票数 1
回答已采纳
1
回答
python
:根据日期
将
csv
拆
分成
多个
csv
、
、
、
我正在努力从一个基于date的
csv
文件创建多个
csv
。我需要的是从这个master.
csv
创建多个
csv
,就像: 包含来自master.
csv
with date列2020-01-04的所有列数据的2020-01-04.
csv
然后
使用
来自master.
csv
with date列2020-01-05中的所有数据进行2020-01-05.
csv
,依此类推。我尝试过的: df = pd.read_
csv
('p
浏览 19
提问于2020-10-12
得票数 0
1
回答
Python
:根据特定列划分数据集
、
、
、
目前,我正在尝试构建一个分类模型,为此我将
使用
数据集进行培训和测试。它是从TIMIT数据库中提取出来的,包含五种不同音素类别的数字化频率。我的问题是,考虑到演讲者列,是否有可能将这个数据集
分成
50:50的培训和测试数据?我的方法是
使用
NumPy从原始数据集中提取所有发言者,并
使用
train_test_split的stratify参数。我
将
非常感谢任何帮助解决这一问题!
浏览 2
提问于2018-12-05
得票数 1
回答已采纳
2
回答
如何从
csv
文件中随机抽取样本
我有一个包含10行的
csv
文件:text0,class0...我正在对文本进行分类,然后将其与
csv
文件中标记的正确类进行比较并将其与
csv
文件中的正确类进行比较:choice 2...准确率将计算为66.6%,
使用
: #if predicted_class= correct_class: #accuracy=number_correct
浏览 4
提问于2018-08-23
得票数 3
2
回答
正在尝试分隔snort日志(.
csv
)中的日期和时间
、
、
我已经
将
Snort设置为直接
使用
所需信息
将
警报输出到excel.
csv
中。 我正在
使用
Python
将
excel.
csv
中的值输入到数据库中。我希望
将
日期和时间
分成
两个单独的列,以便轻松地将其输入到我的SQL数据库中。 我尝试
将
日期时间(当前格式为月/日-小时:分钟:SEC.MILIIS)分为日期(DD/MM)和时间(小时:分钟:秒)。import datetime #impor
浏览 45
提问于2021-04-24
得票数 0
3
回答
使用
Python
在最后一列中获取一个字符串
、
、
我需要从
CSV
文件中得到一个字符串,我知道我可以
使用
Python
,但是我已经找了好几个小时了,但还是无法得到它。
CSV
看起来是这样的: 01-02-2013 09:04:
浏览 6
提问于2014-02-14
得票数 1
回答已采纳
点击加载更多
相关
资讯
使用python 打开并读取 csv 文件
用 Python 将数据写到 CSV 文件
使用Python处理.CSV格式文件的内容
如何使用python的csv模块提取一列数据
python教程:将一个列表切分成多个小列表
热门
标签
更多标签
云服务器
ICP备案
对象存储
云点播
实时音视频
活动推荐
运营活动
广告
关闭
领券