圖文詳解tensorflow數(shù)據(jù)讀取機(jī)制

　　在學(xué)習(xí)tensorflow的過程中，有很多小伙伴反映讀取數(shù)據(jù)這一塊很難理解。確實(shí)這一塊官方的教程比較簡(jiǎn)略，網(wǎng)上也找不到什么合適的學(xué)習(xí)材料。

　　這篇文章就以圖文并茂的方式，為大家詳細(xì)解釋一下tensorflow的數(shù)據(jù)讀取機(jī)制，文章的最后還會(huì)給出實(shí)戰(zhàn)代碼以供參考。

　　授權(quán)轉(zhuǎn)載：知乎專欄 AI Insight

　　一、tensorflow讀取機(jī)制圖解

　　首先需要思考的一個(gè)問題是，什么是數(shù)據(jù)讀??？以圖像數(shù)據(jù)為例，讀取數(shù)據(jù)的過程可以用下圖來(lái)表示：

　　假設(shè)我們的硬盤中有一個(gè)圖片數(shù)據(jù)集0001.jpg，0002.jpg，0003.jpg……我們只需要把它們讀取到內(nèi)存中，然后提供給GPU或是CPU進(jìn)行計(jì)算就可以了。這聽起來(lái)很容易，但事實(shí)遠(yuǎn)沒有那么簡(jiǎn)單。事實(shí)上，我們必須要把數(shù)據(jù)先讀入后才能進(jìn)行計(jì)算，假設(shè)讀入用時(shí)0.1s，計(jì)算用時(shí)0.9s，那么就意味著每過1s，GPU都會(huì)有0.1s無(wú)事可做，這就大大降低了運(yùn)算的效率。