將數(shù)據(jù)集制作成VOC數(shù)據(jù)集格式的實(shí)例
在做目標(biāo)檢測任務(wù)時,若使用Github已復(fù)現(xiàn)的論文時,需首先將自己的數(shù)據(jù)集轉(zhuǎn)化為VOC數(shù)據(jù)集的格式,因?yàn)檎撐淖髡呤褂玫氖枪_數(shù)據(jù)集VOC 2007、VOC2012、COCO等類型數(shù)據(jù)集做方法驗(yàn)證與比對。
一、VOC數(shù)據(jù)集格式
--VOCdevkit2007
--VOC2007
--Annotations (xml格式的文件)
--000001.xml
--ImageSets
--Layout
--Main
--train.txt
--test.txt
--val.txt
--trainval.txt
--Segmentation
--JPEGImages (訓(xùn)練集和測試集圖片)
--000001.jpg
--results
二、轉(zhuǎn)換過程步驟
1. 使用標(biāo)注工具標(biāo)注圖片目標(biāo)檢測框,生成JSON格式的標(biāo)注文件(本人使用此生成類型的標(biāo)注工具,也可使用(LabelImg等標(biāo)注工具);
2. 批量修改圖片和標(biāo)注文件名稱,從000001.jpg、000001.json標(biāo)號開始;
#coding='utf-8'
import os
import numpy as np
def imgs_rename(imgs_path):
imgs_labels_name = np.array(os.listdir(imgs_path)).reshape(-1,2)
# 從 000001開始
i = 1
for img_label_name in imgs_labels_name:
if img_label_name[0].endswith('.jpg'):
# 修改圖片名稱
img_old_name = os.path.join(os.path.abspath(imgs_path), img_label_name[0])
# 類別+圖片編號 format(str(i),'0>3s') 填充對齊
img_new_name = os.path.join(os.path.abspath(imgs_path), '00' + format(str(i),'0>4s') + '.jpg')
os.rename(img_old_name, img_new_name)
# 修改json文件名稱
label_old_name = os.path.join(os.path.abspath(imgs_path), img_label_name[1])
label_new_name = os.path.join(os.path.abspath(imgs_path), '00' + format(str(i), '0>4s') + '.json')
os.rename(label_old_name, label_new_name)
i = i + 1
if __name__=='__main__':
# 讀取json文件的路徑
root = "read_file_path"
imgs_rename(root)
3. 提取圖片和標(biāo)注文件到不同文件夾下,并將讀取的標(biāo)注框轉(zhuǎn)化為txt文件格式(本人的圖片和JSON文件在同一目錄下生成);
import json
import os
import numpy as np
import cv2
#讀取json格式文件,返回坐標(biāo)
def read_json(file_name):
file = open(file_name,'r',encoding='utf-8')
set = json.load(file)
# print("讀取完整信息:",set)
coord = set['objects'][0]['seg'] # 只讀取第一個標(biāo)注的車牌
return coord
def save_imgs(imgs_jsons_files, imgs_path):
# 提取圖片文件夾中的jpg文件名稱
for idx in range(len(imgs_jsons_list)):
if imgs_jsons_list[idx][-3:]=='jpg':
img_name = imgs_jsons_list[idx]
read_img_path = os.path.join(imgs_jsons_files, img_name)
img = cv2.imread(read_img_path)
save_img_path = os.path.join(imgs_path, img_name)
cv2.imwrite(save_img_path, img)
def save_labels(imgs_jsons_files, labels_path):
# 提取圖片文件夾中的json文件名稱
for idx in range(len(imgs_jsons_list)):
if imgs_jsons_list[idx][-4:] == 'json':
json_name = imgs_jsons_list[idx]
# 操作每一個json文件,讀取并保存坐標(biāo)
json_path = os.path.join(imgs_jsons_files, json_name)
json_coord = read_json(json_path)
if len(json_coord) > 8:
print("標(biāo)注坐標(biāo)多于四個點(diǎn)的文件名稱:", json_name)
# 提取左上和右下坐標(biāo)
roi_coord = []
for idx in range(len(json_coord)):
if idx == 0 or idx == 1 or idx == 4 or idx == 5:
roi_coord.extend([json_coord[idx]])
# 保存roi坐標(biāo)到txt文件中
label_path = labels_path + json_name[:6] + '.txt'
np.savetxt(label_path, roi_coord)
if __name__=='__main__':
print("loading......")
# 讀取jpg json文件的路徑
imgs_jsons_files = "Jpg_json_file_path"
# 保存讀取的真實(shí)標(biāo)簽路徑
labels_path = "save_labels_path"
if not os.path.exists(labels_path):
os.mkdir(labels_path)
# 保存讀取的圖片
imgs_path = "sabe_imgs_path"
if not os.path.exists(imgs_path):
os.mkdir(imgs_path)
imgs_jsons_list = os.listdir(imgs_jsons_files)
save_imgs(imgs_jsons_files, imgs_path)
save_labels(imgs_jsons_files, labels_path)
print("done!!!")
4. 轉(zhuǎn)化標(biāo)注框txt格式為xml格式;
# encoding = utf-8
import os
import numpy as np
import codecs
import cv2
def read_txt(label_path):
file = open(label_path,'r',encoding='utf-8')
label_lines = file.readlines()
label = []
for line in label_lines:
one_line = float(line.strip().split('\n')[0])
label.extend([one_line])
return np.array(label,dtype=np.float64)
def covert_xml(label,xml_path, img_name, img_path):
# 獲得圖片信息
img = cv2.imread(img_path)
height, width, depth = img.shape
x_min,y_min,x_max,y_max = label
xml = codecs.open(xml_path, 'w', encoding='utf-8')
xml.write('<annotation>\n')
xml.write('\t<folder>' + 'VOC2007' + '</folder>\n')
xml.write('\t<filename>' + img_name + '</filename>\n')
xml.write('\t<source>\n')
xml.write('\t\t<database>The VOC 2007 Database</database>\n')
xml.write('\t\t<annotation>Pascal VOC2007</annotation>\n')
xml.write('\t\t<image>flickr</image>\n')
xml.write('\t\t<flickrid>NULL</flickrid>\n')
xml.write('\t</source>\n')
xml.write('\t<owner>\n')
xml.write('\t\t<flickrid>NULL</flickrid>\n')
xml.write('\t\t<name>faster</name>\n')
xml.write('\t</owner>\n')
xml.write('\t<size>\n')
xml.write('\t\t<width>' + str(width) + '</width>\n')
xml.write('\t\t<height>' + str(height) + '</height>\n')
xml.write('\t\t<depth>' + str(depth) + '</depth>\n')
xml.write('\t</size>\n')
xml.write('\t\t<segmented>0</segmented>\n')
xml.write('\t<object>\n')
xml.write('\t\t<name>plate</name>\n')
xml.write('\t\t<pose>Unspecified</pose>\n')
xml.write('\t\t<truncated>0</truncated>\n')
xml.write('\t\t<difficult>0</difficult>\n')
xml.write('\t\t<bndbox>\n')
xml.write('\t\t\t<xmin>' + str(x_min) + '</xmin>\n')
xml.write('\t\t\t<ymin>' + str(y_min) + '</ymin>\n')
xml.write('\t\t\t<xmax>' + str(x_max) + '</xmax>\n')
xml.write('\t\t\t<ymax>' + str(y_max) + '</ymax>\n')
xml.write('\t\t</bndbox>\n')
xml.write('\t</object>\n')
xml.write('</annotation>')
if __name__=='__main__':
labels_file_path = "D:/Code_py/VOC2007/labels/"
imgs_file_path = "D:/Code_Py/VOC2007/imgs/"
xmls_file_path = "D:/Code_py/VOC2007/xmls/"
if not os.path.exists(xmls_file_path):
os.mkdir(xmls_file_path)
labels_name = os.listdir(labels_file_path)
for label_name in labels_name:
label_path = os.path.join(labels_file_path, label_name)
label = read_txt(label_path)
xml_name = label_name[:6]+'.xml'
xml_path = os.path.join(xmls_file_path, xml_name)
img_name = label_name[:6]+'.jpg'
img_path = os.path.join(imgs_file_path, img_name)
covert_xml(label, xml_path, img_name, img_path)
5. 切分?jǐn)?shù)據(jù)集為訓(xùn)練集、驗(yàn)證集和測試集,僅保存圖片的名稱到txt問價下即可;
import os
import numpy as np
if __name__=='__main__':
root = "save_path"
train = open(root+"train.txt", 'w', encoding='utf-8')
train_val = open(root+"trainval.txt", 'w', encoding='utf-8')
test = open(root+"test.txt", 'w', encoding='utf-8')
val = open(root+"val.txt", 'w', encoding='utf-8')
imgs_path = os.path.join(root, "imgs")
imgs_name = os.listdir(imgs_path)
# 首先切分訓(xùn)練驗(yàn)證集和測試集
train_val_img_info = []
for img_name in imgs_name:
x = np.random.uniform(0,1)
img_info = str(img_name).strip().split('.')[0]
# 隨機(jī)選取1/2比例的數(shù)據(jù)為測試集
if x>0.5:
train_val_img_info.append(img_info)
train_val.writelines(img_info)
else:
test.writelines(img_info+'\n')
# 然后切分訓(xùn)練驗(yàn)證集為訓(xùn)練集和驗(yàn)證集
for img_name in train_val_img_info:
x = np.random.uniform(0,1)
if x>0.5:
train.writelines(img_name+'\n')
else:
val.writelines(img_name+'\n')
以上這篇將數(shù)據(jù)集制作成VOC數(shù)據(jù)集格式的實(shí)例就是小編分享給大家的全部內(nèi)容了,希望能給大家一個參考,也希望大家多多支持腳本之家。
相關(guān)文章
python自定義函數(shù)實(shí)現(xiàn)一個數(shù)的三次方計(jì)算方法
今天小編就為大家分享一篇python自定義函數(shù)實(shí)現(xiàn)一個數(shù)的三次方計(jì)算方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2019-01-01
python datetime 和時間戳互相轉(zhuǎn)換問題
time和datetime都是Python中的內(nèi)置模塊(不需要安裝,直接可以使用),都可以對時間進(jìn)行獲取,對時間格式進(jìn)行轉(zhuǎn)換,如時間戳和時間字符串的相互轉(zhuǎn)換,本文先給大家介紹python datetime 和時間戳互轉(zhuǎn)問題,感興趣的朋友一起看看吧2022-11-11
Python OpenCV對圖像進(jìn)行模糊處理詳解流程
OpenCV是一個基于BSD許可(開源)發(fā)行的跨平臺計(jì)算機(jī)視覺庫,可以運(yùn)行在Linux、Windows、Android和Mac OS操作系統(tǒng)上。它輕量級而且高效——由一系列 C 函數(shù)和少量 C++ 類構(gòu)成,同時提供了Python、Ruby、MATLAB等語言的接口,實(shí)現(xiàn)了圖像處理和計(jì)算機(jī)視覺方面很多通用算法2021-10-10
Python實(shí)現(xiàn)的tab文件操作類分享
這篇文章主要介紹了Python實(shí)現(xiàn)的tab文件操作類分享,本文直接給出實(shí)現(xiàn)代碼,需要的朋友可以參考下2014-11-11

