tensorflow-datasets 相关问题

TensorFlow的`tf.data`模块使用`tf.data.Dataset`和`tf.data.Iterator`类为构建输入管道提供了一个功能API。

我的编码函数是这样的： from transformers import BertTokenizer, BertModel MODEL = 'bert-base-multilingual-uncased' tokenizer = BertTokenizer.from_pretrained(MODEL) def ...。

tensorflow tensorflow-datasets huggingface-transformers

回答 1 投票 1

如何在任意位置从from_tensor_slices获取数据集（Tensorflow）。

我需要从数据集中获取任意位置的数据。它看起来像： tf.Tensor([77 78 79 80 81 82 83 84 85 86], shape=(10,), dtype=int32) tf.Tensor([ 7 8 9 10 11 12 13 14 15 16], shape=(10,), ...

tensorflow tensorflow-datasets tensorflow2.0

回答 1 投票 0

用TensorFlow数据集进行验证

从Train and evaluate with Keras: 当从Dataset对象进行训练时，不支持参数validation_split（从训练数据中生成一个保持集），因为这个特征需要 ...

python tensorflow machine-learning keras tensorflow-datasets

回答 1 投票 0

在TF 2.0中没有废弃的tf.placeholder方法的serving_input_receiver_fn()函数。

我有一个在TF 1中构建的tf.estimator流水线，但现在我决定转到TF 2.0，我在我的流水线的最后有问题，当我想把模型保存为.pb格式......

python-2.7 tensorflow tensorflow-datasets

回答 1 投票 1

Tensorflow Keras在训练和验证中使用不同数量的类别。

我正在使用Keras内置的Resnet（添加到一个序列中）和数据生成器构建一个图像分类器。图像被存储在单独的文件夹中，文件夹作为类。...

tensorflow keras tensorflow-datasets

回答 1 投票 1

在顺序模型中，将整数CSV数据送入Keras Dense第一层。

在CSV数据集的文档中，并没有展示如何使用CSV数据集来做任何实际的事情，比如使用数据来训练神经网络。有谁能提供一个直接的例子来......

tensorflow keras tensorflow-datasets

回答 1 投票 0

tfds split在python 3和tensorflow 2中抛出AssertionError。

当我把运行时切换到python 2时，下面这段代码可以正常运行，但在python 3中却出现了错误。test, train = tfds.Split.TRAIN.subsplit([1, 8]) train_set_raw = tfds.load("tf_flowers", split=...)

python python-3.x tensorflow tensorflow-datasets

回答 1 投票 1

在TensorFlow中对大型数据库进行时序化的递归错误。

我有很多txt文件，所以我做了一个数据集，按照这个教程的tensorflow：https:/www.tensorflow.orgtutorialsload_datatext?hl=es#build_vocabulary 我的程序工作与smalls ...

python tensorflow tensorflow-datasets tensorflow-estimator

回答 1 投票 1

用于分类补丁的Tensorflow数据集流水线

我试图在tensorflow中写一个数据集流水线来标记图像的补丁。现在我从一堆 tfrecord 文件中读取数据，每个文件有多个补丁，但只有一个标签。这个标签 ...

python tensorflow tensorflow-datasets tensorflow2.0

回答 1 投票 1

了解如何使用tf.dataset.map()

我正在将一些原本使用JPEG作为输入的代码转换为使用Matlab MAT文件。代码中包含以下几行： train_dataset = tf.dataset.list_files(PATH + 'train*.mat')......

python tensorflow tensorflow-datasets

回答 1 投票 1

如何将Tensorflow数据集保存到文件？

在SO上至少还有两个这样的问题，但一个都没有得到回答。我有一个数据集的形式。

python tensorflow serialization tensorflow-datasets

回答 1 投票 1

如何重复一个tf.dataset。

tf.dataset实际上有一个repeat方法，输出的东西更像一个磁片，即：list(tf.dataset.range(2).repeat(3).as_numpy_iterator()) # [0，1，0，1，0，1]就像：np......。

python numpy tensorflow tensorflow-datasets

回答 1 投票 1

tf.data: 并行加载步骤

我有一个数据输入管道，它有：输入数据点的类型是不能投射到tf.Tensor(dicts和什么)的预处理函数，不能理解tensorflow类型，需要 ...

python tensorflow tensorflow2.0 tensorflow-datasets

回答 1 投票 7

如何从SequenceExample TFRecord创建窗口化多变量数据集？

我正试图使用 tf.data.datasets 设置一个 Tensorflow 管道，以便将一些 TFRecord 载入 Keras 模型中。这些数据是多变量时间序列。我目前使用的是Tensorflow 2.0 ...

python-3.x tensorflow-datasets tensorflow2.0 tf.keras

回答 1 投票 1

在训练过程中，验证数据集是否每一次都会被初始化？

设置。U-Net网络被训练成处理小的补丁（例如64x64像素）。使用Tensorflow Dataset API给网络输入一个训练数据集和验证数据集。小补丁是...

tensorflow tensorflow2.0 tensorflow-datasets tf.keras

回答 1 投票 1

我想在CSV文件上训练我的模型，每个文件作为一个Label。和图像分类一样，每个文件夹中的所有图像都被贴上了标签

我有一个X,Y,Z坐标的模拟数据集。我想使用TensorFlow对任务进行实时分类。我想知道，我可以使用每个任务的数据，并可以标记多个CSV文件......

csv tensorflow classification real-time tensorflow-datasets

回答 1 投票 0

如何从包含文件名的列表中加载tensorflow数据管道中不同目录的.npy文件？

我试图将numpy数组(x, 1, 768)和标签(1, 768)加载到tf.data中，我的代码如下： import pandas as pdb import pdb import numpy as np import os, glob import tensorflow as tf #from ...

python tensorflow keras tensorflow2.0 tensorflow-datasets

回答 1 投票 0

tf.keras.preprocessing.text.Tokenizer()和tfds.features.text.Tokenizer()的比较。

作为一些背景，我最近对NLP和文本处理的研究越来越多。我对计算机视觉更加熟悉。我完全理解Tokenization的概念。我的困惑是...

python tensorflow keras tensorflow2.0 tensorflow-datasets

回答 1 投票 1

tf数据窗口多输入

我想用tf数据窗口来创建数据集，请问如何在下面的代码中flat_map batch 2输入？如何在下面的代码中flat_map批处理2的输入？我在网上找到的所有例子都是只有1个输入，导入tensorflow为tf def make_window_dataset(ds, ...

tensorflow2.0 tensorflow-datasets

回答 1 投票 0

为解析TFRecord数据集而定义映射函数时遇到的问题。

我以ELWC格式创建了TensorFLow排名的数据集，并将文件保存为.tfrecords文件。将get_descriptor_set()、decode_as_serialized_example_list()和parse()方法原封不动地复制了， ...