tensorflow-datasets 相关问题

TensorFlow的`tf.data`模块使用`tf.data.Dataset`和`tf.data.Iterator`类为构建输入管道提供了一个功能API。

具有可变批量大小的TensorFlow DataSet`from_generator`

我正在尝试使用TensorFlow数据集API使用from_generator方法读取HDF5文件。除非批量大小不均匀地分成事件数量,否则一切正常。我不......

回答 1 投票 2

如何使用DataSet API在Tensorflow中为tf.train.SequenceExample数据创建填充批次?

为了在Tensorflow中训练LSTM模型,我将数据结构化为tf.train.SequenceExample格式并将其存储到TFRecord文件中。我现在想使用新的DataSet API来生成...

回答 2 投票 12

如何在tf.data.Dataset中输入不同大小的列表列表

我有一长串的整数列表(代表每个不同大小的句子)我想用tf.data库提供。每个列表(列表列表)都有不同的长度,并且......

回答 3 投票 10

如何从TFrecord创建批量来训练网络中的张量流?

我将数据保存到tfrecord文件中。它有1000个样本和2个特征(一个输入另一个输出)。输入是形状[1,20]和输出[1,10]。它们都是由扁平的numpy创造出来的......

回答 1 投票 0

如何在完整的验证示例中评估Tensorflow模型

我正在使用Tensorflow的tf.estimator.DNNClassifier.evaluate函数来评估我的网络。我在这里使用Tensorflow的Iris数据。经过一些进一步的调查和数学,我有......

回答 1 投票 2

Tensorflow:tf.contrib.data中dataset.map()的类型不兼容

当使用与tf.contrib.Dataset.map()的哈希表查找时,它失败并出现以下错误:TypeError:在op'hash_table_Lookup'中,输入类型([tf.string,tf.string,tf.int32])是不......

回答 1 投票 0

tf.data.Dataset.map()和tf.data.Dataset.apply()之间的区别

随着最近升级到1.4版,Tensorflow在库核心中包含了tf.data。版本1.4发行说明中描述的一个“主要新功能”是tf.data.Dataset.apply(),它是一个“...

回答 3 投票 12

tensorflow AttributeError:'module'对象没有属性'data'

我尝试导入数据我尝试加载我创建的tfrecords数据集。但我总是得到这个错误。以下是代码:import tensorflow as tf EPOCHS = 10 BATCH_SIZE = 32 train_filename = ['/ ...

回答 1 投票 -3

从tfrecords导入数据后,批处理后标签的顺序是错误的

从tfrecords文件导入数据时出现问题。 tfrecords中的每个样本都包含一个长度为100的feautures向量和一个长度为13的单热标签向量。我使用下面的代码...

回答 1 投票 1

Tensorflow错误:不支持可调用

我按照教程https://www.tensorflow.org/tutorials/layers进行操作,我想用它来使用我自己的数据集。 def train_input_fn_custom(filenames_array,labels_array,batch_size):#读取图片...

回答 1 投票 2

恢复使用tf.estimator训练的模型并通过feed_dict输入输入

我用tf.estimator训练了一个resnet,在训练过程中保存了模型。保存的文件由.data,.index和.meta组成。我想加载这个模型并获得新的预测......

回答 2 投票 3

Tensorflow:从numpy数组> 2 GB创建minibatch

我正在尝试为我的模型提供小块数量的numpy数组,但我仍然坚持批处理。使用'tf.train.shuffle_batch'会引发错误,因为'images'数组大于2 GB。我试着去......

回答 1 投票 3

TensorFlow - tf.data.Dataset读取大型HDF5文件

我正在设置一个TensorFlow管道,用于读取大型HDF5文件作为我的深度学习模型的输入。每个HDF5文件包含100个可变大小长度的视频,存储为压缩的集合...

回答 2 投票 16

如何在Estimator训练期间动态加载数据集的新部分?

我有一个有趣的问题。我正在使用tf.Estimator对大型数据集(15M行,16列)进行回归,我使用常用 方法将数据加载到tf.Dataset:def input_fn_train(features,...

回答 1 投票 3

将一个热编码从文件提取到数据集中

我有一个数据集图像和相应的标签,每个图像文件的位置都有一个.txt文件,其中包含一个热编码:0 0 0 0 1 0我的代码看起来像这样:imageString = tf ....

回答 2 投票 2

如何在Tensorflow中组合feature_columns,model_to_estimator和dataset API

我在tensorflow中使用高级API有一个玩具示例:tf.estimator,tf.data和tf.feature_column。我想使用tf.keras.estimator交换罐装估算器和keras模型....

回答 2 投票 1

使用Tensorflow Dataset.from_generator生成的数据在调用iterator.get_next()时会导致错误

我是Tensorflow的新手。我关注了一些在线帖子并编写了代码来从生成器获取数据。代码如下所示:def gen(my_list_of_files):for my in my_list_of_files:with open(...

回答 1 投票 0

两个tf.data.Dataset可以共存并由tf.cond()控制

我在我的Graph中设置了两个数据集管道,用于train / test = 9:1设置,并且控制流量为tf.cond。我遇到了一个问题,即在训练期间,每个步骤都会激活两个管道。 ...

回答 1 投票 0

Tensorflow:连接多个tf.Dataset非常慢

我在Tensorflow 1.10现在我不确定这是不是一个bug。我一直试图连接我从多个tf.data.Dataset.from_generator生成的100个数据集。因为我......

回答 1 投票 4

© www.soinside.com 2019 - 2024. All rights reserved.