当前位置: 首页>>代码示例 >>用法及示例精选 >>正文

Python tf.data.TextLineDataset.prefetch用法及代码示例


用法

prefetch(
    buffer_size, name=None
)

参数

  • buffer_size tf.int64 标量 tf.Tensor ，表示预取时将缓冲的最大元素数。如果使用值tf.data.AUTOTUNE，则动态调整缓冲区大小。
  • name 可选的。 tf.data 转换的名称。

返回

  • Dataset 一个Dataset。

创建一个Dataset，从这个数据集中预取元素。

大多数数据集输入管道应以调用 prefetch 结束。这允许在处理当前元素的同时准备后面的元素。这通常会提高延迟和吞吐量，但代价是使用额外的内存来存储预取的元素。

注意：与其他 Dataset 方法一样，预取对输入数据集的元素进行操作。它没有示例与批次的概念。 examples.prefetch(2) 将预取两个元素(2 个示例)，而 examples.batch(20).prefetch(2) 将预取 2 个元素(2 个批次，每个 20 个示例)。

dataset = tf.data.Dataset.range(3)
dataset = dataset.prefetch(2)
list(dataset.as_numpy_iterator())
[0, 1, 2]

相关用法


注：本文由纯净天空筛选整理自tensorflow.org大神的英文原创作品 tf.data.TextLineDataset.prefetch。非经特殊声明，原始代码版权归原作者所有，本译文未经允许或授权，请勿转载或复制。