python深度學習tensorflow實例數(shù)據(jù)下載與讀取
一、mnist數(shù)據(jù)
深度學習的入門實例,一般就是mnist手寫數(shù)字分類識別,因此我們應該先下載這個數(shù)據(jù)集。
tensorflow提供一個input_data.py文件,專門用于下載mnist數(shù)據(jù),我們直接調(diào)用就可以了,代碼如下:
import tensorflow.examples.tutorials.mnist.input_data mnist = input_data.read_data_sets("MNIST_data/", one_hot=True)
執(zhí)行完成后,會在當前目錄下新建一個文件夾MNIST_data, 下載的數(shù)據(jù)將放入這個文件夾內(nèi)。下載的四個文件為:
input_data文件會調(diào)用一個maybe_download函數(shù),確保數(shù)據(jù)下載成功。這個函數(shù)還會判斷數(shù)據(jù)是否已經(jīng)下載,如果已經(jīng)下載好了,就不再重復下載。
下載下來的數(shù)據(jù)集被分三個子集:5.5W行的訓練數(shù)據(jù)集(mnist.train
),5千行的驗證數(shù)據(jù)集(mnist.validation)和1W行的測試數(shù)據(jù)集(mnist.test
)。因為每張圖片為28x28的黑白圖片,所以每行為784維的向量。
每個子集都由兩部分組成:圖片部分(images)和標簽部分(labels), 我們可以用下面的代碼來查看 :
print mnist.train.images.shape print mnist.train.labels.shape print mnist.validation.images.shape print mnist.validation.labels.shape print mnist.test.images.shape print mnist.test.labels.shape
如果想在spyder編輯器中查看具體數(shù)值,可以將這些數(shù)據(jù)提取為變量來查看,如:
val_data=mnist.validation.images val_label=mnist.validation.labels
二、CSV數(shù)據(jù)
除了mnist手寫字體圖片數(shù)據(jù),tf還提供了幾個csv的數(shù)據(jù)供大家練習,存放路徑為:
/home/xxx/anaconda3/lib/python3.5/site-packages/tensorflow/contrib/learn/python/learn/datasets/data/text_train.csv
如果要將這些數(shù)據(jù)讀出來,可用代碼:
import tensorflow.contrib.learn.python.learn.datasets.base as base iris_data,iris_label=base.load_iris() house_data,house_label=base.load_boston()
前者為iris鳶尾花卉數(shù)據(jù)集,后者為波士頓房價數(shù)據(jù)。
三、cifar10數(shù)據(jù)
tf提供了cifar10數(shù)據(jù)的下載和讀取的函數(shù),我們直接調(diào)用就可以了。執(zhí)行下列代碼:
import tensorflow.models.image.cifar10.cifar10 as cifar10 cifar10.maybe_download_and_extract() images, labels = cifar10.distorted_inputs() print images print labels
就可以將cifar10下載并讀取出來。
以上就是python深度學習tensorflow實例數(shù)據(jù)下載與讀取的詳細內(nèi)容,更多關于python tensorflow數(shù)據(jù)下載讀取的資料請關注腳本之家其它相關文章!
相關文章
python3編寫ThinkPHP命令執(zhí)行Getshell的方法
這篇文章主要介紹了python3編寫ThinkPHP命令執(zhí)行Getshell的方法,小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2019-02-02在python win系統(tǒng)下 打開TXT文件的實例
下面小編就為大家分享一篇在python win系統(tǒng)下 打開TXT文件的實例,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2018-04-04運行獨立 pyspark 時出現(xiàn) Windows 錯誤解決辦法
在本篇文章里小編給大家分享的是一篇關于運行獨立 pyspark 時出現(xiàn) Windows 錯誤解決辦法,對此有需求的方法可以參考下。2021-12-12python+mediapipe+opencv實現(xiàn)手部關鍵點檢測功能(手勢識別)
這篇文章主要介紹了python+mediapipe+opencv實現(xiàn)手部關鍵點檢測功能(手勢識別),本文僅僅簡單介紹了mediapipe的使用,而mediapipe提供了大量關于圖像識別等的方法,需要的朋友可以參考下2022-01-01淺談pandas.cut與pandas.qcut的使用方法及區(qū)別
這篇文章主要介紹了淺談pandas.cut與pandas.qcut的使用方法及區(qū)別,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2020-03-03Python調(diào)用pyttsx3實現(xiàn)離線文字轉語音的方式
pyttsx3是 Python 中的文本到語音的離線轉換庫,本文給大家介紹Python調(diào)用pyttsx3實現(xiàn)離線文字轉語音的方式,感興趣的朋友一起看看吧2024-03-03