请问cycle_length并行度的设置有没有什么经验公式?

来源:4-4 tf.io.decode_csv使用

OliverSong

2019-07-18

请教老师,对于较大的dataset而言,这个参数的设置有没有什么经验或者俗约呢?

写回答

1回答

正十七

2019-07-31

一般用默认就可以了,默认是GPU的数目,或者用tf.data.experimental.AUTOTUNE,它会用最大的并行度。

需要考虑的点可能有一个,那就是数据的随机化程度,比如你的数据在不同的dataset中是有规律的,比如a开头的都放在一个dataset里,b开头的都放在一个dataset里,等等。此时要尽量开大来保证数据是随机的,或者从源头保证,不生成这样的文件。

0
1
OliverSong
谢谢,明白啦!
2019-08-01
共1条回复

Google老师亲授 TensorFlow2.0 入门到进阶

Tensorflow2.0实战—以实战促理论的方式学习深度学习

1849 学习 · 896 问题

查看课程