Извлечение ограничивающих рамок и меток категорий в наборе данных MS-COCO ⇐ Python

[Anonymous]

Я работаю с набором данных MS-COCO и хочу извлечь ограничивающие рамки, а также метки для изображений, соответствующих категориям рюкзак (идентификатор категории: 27) и ноутбук (идентификатор категории: 73), и сохранить их в разные текстовые файлы для последующего обучения модели на основе нейронной сети.

Я уже извлек изображения, соответствующие двум вышеупомянутым категориям, и создал пустые файлы аннотаций в отдельной папке, в которой я хочу хранить аннотации вместе с метками (формат файла аннотаций примерно такой: label x y w h, где w и h обозначают ширину и высоту обнаруженной категории). Я использовал COCO-API (точнее, coco.py) для извлечения изображений и создания пустых файлов текстовых аннотаций.

Ниже приведена основная функция, которую я написал поверх coco.py для этого:

Код: Выделить всё

if __name__ == "__main__":
littleCo = COCO('/home/r.bohare/coco_data/annotations/instances_train2014.json')
#id_laptop = littleCo.getCatIds('laptop')

"""Extracting image ids corresponding to backpack and laptop images."""
bag_img_ids = littleCo.getImgIds(catIds=[27])
laptop_img_ids = littleCo.getImgIds(catIds=[73])
#print "IDs of bag images:", bag_img_ids
#print "IDs of laptop imgs:", laptop_img_ids

"""Extracting annotation ids corresponding to backpack and laptop images."""
bag_ann_ids = littleCo.getAnnIds(catIds=[27])
laptop_ann_ids = littleCo.getAnnIds(catIds=[73])
#print "Annotation IDs of bags:", bag_ann_ids
#print "Annotation IDs of laptops:", laptop_ann_ids

"""Extracting image names corresponding to bag and laptop categories."""
bag_imgs = littleCo.loadImgs(ids=bag_img_ids)
laptop_imgs = littleCo.loadImgs(ids=laptop_img_ids)
#print "Bag images:", bag_imgs
#print "Laptop images:", laptop_imgs

bag_img_names = [image['file_name'] for image in bag_imgs]
laptop_img_names = [image['file_name'] for image in laptop_imgs]
print "Bag Images:", len(bag_img_names), bag_img_names[:5]
print "Laptop Images:", len(laptop_img_names), laptop_img_names[:5]

"""Extracting annotations corresponding to bag and laptop images."""
bag_ann = littleCo.loadAnns(ids=bag_ann_ids)
laptop_ann = littleCo.loadAnns(ids=laptop_ann_ids)
bag_bbox = [ann['bbox'] for ann in bag_ann]
laptop_bbox = [ann['bbox'] for ann in laptop_ann]
print "Bags' bounding boxes:", len(bag_ann), bag_bbox[:5]
print "Laptops' bounding boxes:", len(laptop_bbox), laptop_bbox[:5]

"""Saving files corresponding to bags and laptop category in a directory."""
import shutil
#path_to_imgs = "/export/work/Data Pool/coco_data/train2014/"
#path_to_subset_imgs = "/export/work/Data Pool/coco_subset_data/"
path_to_ann = "/export/work/Data Pool/coco_subset_data/annotations/"
dirs_list = [("/export/work/Data Pool/coco_data/train2014/", "/export/work/Data Pool/coco_subset_data/")]

for source_folder, destination_folder in dirs_list:
for img in bag_img_names:
shutil.copy(source_folder + img, destination_folder + img)
print "Bag images copied!"
for img in laptop_img_names:
shutil.copy(source_folder + img, destination_folder + img)
print "Laptop images copied!"

"""Creating empty files for annotation."""
for f in os.listdir("/export/work/Data Pool/coco_subset_data/images/"):
if f.endswith('.jpg'):
open(os.path.join(path_to_ann, f.replace('.jpg', '.txt')), 'w+').close()
print "Done creating empty annotation files."

Здесь я предоставил только основную функцию, поскольку остальная часть кода — это файл coco.py в COCO-API.

Я отладил код и обнаружил, что существуют разные структуры данных:

• Код: Выделить всё

  cats

  — словарь, который сопоставляет идентификаторы категорий с их суперкатегориями и названиями категорий (метками).

• Код: Выделить всё

  imgToAnns

  , а также словарь, который сопоставляет каждый идентификатор изображения с его истинной сегментацией, истинной ограничивающей рамкой, идентификатором категории и т. д. Из того, что мне удалось узнать на данный момент, я думаю, что мне нужно использовать этот словарь, чтобы каким-то образом сопоставить имена изображений, которые у меня есть в списках bag_img_names и laptop_img_names, с их метками и ограничивающими рамками, но я не могу думать в правильном направлении о том, как получить доступ к этому словарю (Ни один метод в coco.py не возвращает его напрямую).

• Код: Выделить всё

  imgs

  , еще один словарь, который предоставляет метаинформацию обо всех изображениях, например имя изображения, URL-адрес изображения, дату съемки и т. д.

Наконец, я знаю, что это чрезвычайно конкретный вопрос. Не стесняйтесь сообщить мне, принадлежит ли это сообществу, отличному от stackoverflow (например, stats.stackexchange.com), и я удалю его. Кроме того, возможно, я пропустил какую-то важную информацию. Я предоставлю его, если придумаю или если кто-нибудь спросит.

Я только новичок в Python, поэтому, пожалуйста, простите меня, если я мог пропустить что-то очевидное.

Любая помощь приветствуется. Спасибо.