我已经将CSV文件("test03.txt")转换为TFRecords格式的文件("test03.tfrecords")，但是当我读入TFRecords文件并尝试使用tf.train.shuffle_batch时，我得到了错误消息
RandomShuffleQueue '_2_shuffle_batch_1/random_shuffle_queue' is closed and has insufficientelements (req
浏览 8提问于2017-07-23得票数 1
我希望使用多个进程(not threads)进行一些预处理，并将结果排队到一个tf.RandomShuffleQueue中，该tf.RandomShuffleQueue可供我的主图用于培训。我的实际问题
我已经将我的数据集转换为TFRecords，拆分为256个碎片。我希望使用multiprocessing启动20个进程，并让每个进程具有一系列的碎片。每个过程都应该读取图像，然后对它们进行增强，并将它们推入一个tf.RandomShuffleQueue中，从该tf.RandomShuffleQue
浏览 4提问于2017-05-10得票数 5
回答已采纳
在那些日子里，当我运行代码来读取"tfrecords“数据时，就会发现这个错误。问题是如何找到‘71680值的张量’或‘形状有8960'？(0)超出范围: RandomShuffleQueue‘_2_shuffle_批/随机_shuffle_queue’已关闭，且元素不足(请求4，当前大小为0)，超出范围: RandomShuffleQueue‘2_shuffle_B批/random_shuffle_queue’关闭且元素不足(请
浏览 0提问于2019-08-07得票数 1
我创建了一个数据集，并将其转换为TFRecords文件。image_raw': _bytes_feature(imageRaw.tostring())}))OutOfRangeError (see above for traceback): RandomShuffleQueue '_0_shuffle_batchra
浏览 3提问于2017-12-12得票数 0
回答已采纳
1回答
我正在创建tfrecords文件，并从tfrecords读取数据。tfrecords有两个特性，vehicleid和length。创建tfrecords：example = tf.train.Exampletf.train.Int64List(value=[length]))
writer.write(exam
浏览 1提问于2017-09-02得票数 1
我想从TFRecords文件中传递我的RNN 10个顺序示例(视频帧)。当我第一次开始读取该文件时，我需要获取10个示例，并使用它创建一个序列示例，然后将其推送到队列中，供RNN在准备就绪时使用。但是，现在我有了10帧，下次从TFRecords文件中读取时，我只需要举一个例子，只需将其他9帧移到上面即可。但是，当我到达第一个TFRecords文件的末尾时，我需要重新启动第二个TFRecords文件上的进程。我的理解是
浏览 4提问于2017-02-19得票数 1
回答已采纳
我正在使用中的代码构建ImageNet数据的TFRecords版本在读取TFRecords文件时，需要调用tf.parse_single_example op和tf.image.decode_jpeg如果没有问题，则在读取TFRec
浏览 5提问于2018-01-29得票数 0
我使用两个FIFOQueue读取数据(输入文件和标签文件)，并且工作正常。但是当使用RandomShuffleQueue时，输入文件和标签文件似乎无法对齐。, 1, 2, 3, 4, 0, 1, 2, 3, 4], dtype=int32), 但对RandomShuffleQueue来说
input_queue = tf.RandomShuffleQueue(capacity=50, min_aft
浏览 6提问于2018-05-28得票数 0
回答已采纳
我只想从我用TFRecords创建的文件中加载一个映像，目录结构为：| ├── chef| ├── ...
|现在我想从TFRecords文件中读取第一个图像，这个文件应该是train/chef/data0.png。我该怎么做？当所有图像都存储在同一个TFRecords文件中时，如何在测试时从自定义数据集读取单个特定的图像？
浏览 2提问于2017-03-11得票数 0
回答已采纳
1回答
所有人： 我尝试在联邦进程中加载'/root/.tff/emnist_all.sqlite'。在我能找到的示例中，只看到了本地模拟。 print('### CLIENT_DATA') client_data = sql_client_data.SqlClientData(database_path, 'digits_only_train').preprocess(_add_proto_parsing).dat
浏览 21提问于2021-10-27得票数 1
1回答
我有5个tfrecords文件，每个对象一个。在训练时，我希望从所有5个tfrecord中平等地读取数据，即如果我的批处理大小是50，我应该从第一个tfrecord文件中获得10个样本，从第二个tfrecord文件中获得10个样本，依此类推。目前，它只是从所有三个文件中顺序读取，即我从同一记录中获得50个样本。有没有办法从不同的tfrecords文件中采样？
浏览 5提问于2018-02-09得票数 5
回答已采纳
tf.contrib.data.Dataset (来自TensorFlow 1.2，请参阅和)用法:当我使用repeat (用于多个纪元)和shuffle (就像read_batch_features在内部所做的那样)时，另外，当时代结束时，ShuffleDataset是首先等待去排队，还是已经被下一个时代的更多数据填充了？在上一个时代，或者如果我不使用repeat，那么ShuffleDataset是否会像tf.RandomShuffleQueue脱队列一样，在关闭后对所有剩余的数据进行排线？我目前的解决方案，这也给了我更
浏览 7提问于2017-05-23得票数 5
回答已采纳
，但是当我尝试重新读取第一条记录以确认写入工作正常时，我添加了代码 # Read back one record to confirm:
raw_dataset = tf.data.TFRecordDataset
浏览 72提问于2021-01-04得票数 0
我可以用tensorflow来写和读TFrecord文件。如何快速获取TFRecord文件中包含的条目总数？有没有获取计数的API？
浏览 2提问于2016-08-29得票数 2
回答已采纳
1回答
根据本教程，我们可以将数据转换为TFRecords文件作为输入。现在我们有了一个大的TFRecords文件。因此，当我们为读取器指定一个FIFO队列时，是否意味着程序每次都会获取一批数据并输入图形，而不是加载整个数据文件？
浏览 1提问于2016-01-25得票数 3
回答已采纳
1回答
那么，当我们使用多线程(由QueueRunner生成)从数据源将一个队列入队时，入队顺序是什么？队列中的数据是否会保持数据源中的原始顺序？如果是这样，如何使用多线程来实现这一点呢？如果不是，为什么我们需要RandomShuffleQueue (如果入队顺序不是固定的，shuffle出队顺序看起来有点多余)？
提前谢谢你。
浏览 1提问于2017-12-23得票数 1
我们将处理过的数据写入TFRecords，并且在从TFRecords读取数据时注意到数据丢失。下面是可重复的例子。奇怪的是，它不仅会丢弃小数，而且看起来会随机地舍入/降值。20191221.1,20191222.1,20191223.1,20191224.1,20191225.1,20191226.1,20191227.1,20191228.1,20191229.1,20191230.1
，但从But记录读取将返回这些值
浏览 1提问于2020-01-10得票数 1
我有一个.tfrecords文件的文件夹，我希望将其读取到我的网络中。然而，我在一次读取多个tfrecords文件时遇到了很多问题。我所有的tfrecords文件都存储在path_to_folders列表中。我所有的功能名称也都是正确的。os.path.basename(folder) + '_csv'
data_path = os.path.join(path_to_data, os.path.basename(folder) +
浏览 0提问于2017-08-16得票数 0
1回答
流量OutOfRange误差
、、、、
我的代码是从文件中读取图像import numpy as np feature={'image':tf.FixedLenFeature([],tf.stringof the above exception, another exception occurred:
Trac
浏览 3提问于2017-12-20得票数 0
回答已采纳
但是，当从.tfrecords文件读取数据时，您不知道其中有多少培训示例。是否有更容易的方法从.tfrecords文件中获取训练示例的数量，或者根据时间而不是步骤设置学习速率衰减？
浏览 0提问于2016-08-11得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
