在训练的过程中,我们需要训练的数据往往会非常的大,不可能执行一次性读取的操作,不仅消耗内存,而且“计算”要花费更长的时间去等待“读取”的完成才能继续,tf提供了真正的多线程、队列以及文件的改善(tfrecords文件格式)机制,可以并行的去执行多个任务,
tf让子线程去读取数据,这样主线程就可以直接进行模型的训练。子线程没读取到一定量的数据(如100个)之后,主线程进行模型的训练。
原文:https://www.cnblogs.com/pengzhonglian/p/11866234.html