- תיאור :
מערך הנתונים של Google RefExp הוא אוסף של תיאורי טקסט של אובייקטים בתמונות שמתבסס על מערך הנתונים הזמין הציבורי של MS-COCO. בעוד שכתוביות התמונה ב-MS-COCO חלות על התמונה כולה, מערך נתונים זה מתמקד בתיאורי טקסט המאפשרים לזהות באופן ייחודי אובייקט או אזור בודד בתוך תמונה. ראה פרטים נוספים במאמר זה: יצירה והבנה של תיאורי אובייקט חד משמעיים.
תיעוד נוסף : חקור על ניירות עם קוד
קוד מקור :
tfds.vision_language.gref.Gref
גרסאות :
-
1.0.0
(ברירת מחדל): שחרור ראשוני.
-
גודל הורדה :
Unknown size
גודל מערך נתונים :
4.60 GiB
הוראות הורדה ידניות : מערך נתונים זה מחייב אותך להוריד את נתוני המקור באופן ידני אל
download_config.manual_dir
(ברירת המחדל היא~/tensorflow_datasets/downloads/manual/
):
עקוב אחר ההוראות בכתובת https://github.com/mjhucla/Google_Refexp_toolbox כדי להוריד ולעבד מראש את הנתונים לפורמט מיושר עם COCO. הספרייה מכילה 2 קבצים ותיקיה אחת:google_refexp_train_201511_coco_aligned_catg.json
google_refexp_val_201511_coco_aligned_catg.json
coco_train2014/
התיקיה coco_train2014 מכילה את כל תמונות ההדרכה של COCO 2014.
שמירה אוטומטית במטמון ( תיעוד ): לא
פיצולים :
לְפַצֵל | דוגמאות |
---|---|
'train' | 24,698 |
'validation' | 4,650 |
- מבנה תכונה :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'image/id': int64,
'objects': Sequence({
'area': int64,
'bbox': BBoxFeature(shape=(4,), dtype=float32),
'id': int64,
'label': int64,
'label_name': ClassLabel(shape=(), dtype=int64, num_classes=80),
'refexp': Sequence({
'raw': Text(shape=(), dtype=string),
'referent': Text(shape=(), dtype=string),
'refexp_id': int64,
'tokens': Sequence(Text(shape=(), dtype=string)),
}),
}),
})
- תיעוד תכונה :
תכונה | מעמד | צוּרָה | Dtype | תיאור |
---|---|---|---|---|
FeaturesDict | ||||
תמונה | תמונה | (אין, אין, 3) | uint8 | |
תמונה/מזהה | מוֹתֵחַ | int64 | ||
חפצים | סדר פעולות | |||
חפצים/שטח | מוֹתֵחַ | int64 | ||
אובייקטים/bbox | BBoxFeature | (4,) | לצוף32 | |
אובייקטים/מזהה | מוֹתֵחַ | int64 | ||
חפצים/תווית | מוֹתֵחַ | int64 | ||
objects/label_name | ClassLabel | int64 | ||
אובייקטים / refexp | סדר פעולות | |||
objects/refexp/raw | טֶקסט | חוּט | ||
objects/refexp/referent | טֶקסט | חוּט | ||
objects/refexp/refexp_id | מוֹתֵחַ | int64 | ||
אובייקטים/refexp/אסימונים | רצף (טקסט) | (אף אחד,) | חוּט |
מפתחות בפיקוח (ראה
as_supervised
doc ):None
איור ( tfds.show_examples ):
- דוגמאות ( tfds.as_dataframe ):
- ציטוט :
@inproceedings{mao2016generation,
title={Generation and Comprehension of Unambiguous Object Descriptions},
author={Mao, Junhua and Huang, Jonathan and Toshev, Alexander and Camburu, Oana and Yuille, Alan and Murphy, Kevin},
booktitle={CVPR},
year={2016}
}