- Описание :
Набор данных Text REtrieval Conference (TREC) Question Classification содержит 5500 помеченных вопросов в обучающем наборе и еще 500 в тестовом наборе. Набор данных имеет 6 меток, 47 меток уровня 2. Средняя длина каждого предложения — 10, словарный запас — 8700. Данные собраны из четырех источников: 4500 вопросов по английскому языку, опубликованных USC (Hovy et al., 2001), около 500 составленных вручную вопросов для нескольких редких классов, 894 TREC 8 и TREC 9 вопросов, а также 500 вопросов из TREC 10, который служит тестовым набором.
Дополнительная документация : изучить документы с кодом
Домашняя страница : https://cogcomp.seas.upenn.edu/Data/QA/QC/
Исходный код :
tfds.datasets.trec.Builder
Версии :
-
1.0.0
(по умолчанию): нет примечаний к выпуску.
-
Размер загрузки :
350.79 KiB
Размер набора данных :
636.90 KiB
.Автоматическое кэширование ( документация ): Да
Сплиты :
Расколоть | Примеры |
---|---|
'test' | 500 |
'train' | 5452 |
- Структура функции :
FeaturesDict({
'label-coarse': ClassLabel(shape=(), dtype=int64, num_classes=6),
'label-fine': ClassLabel(shape=(), dtype=int64, num_classes=47),
'text': Text(shape=(), dtype=string),
})
- Документация по функциям :
Особенность | Сорт | Форма | Dтип | Описание |
---|---|---|---|---|
ОсобенностиDict | ||||
этикетка грубая | Метка класса | int64 | ||
ярлык-штраф | Метка класса | int64 | ||
текст | Текст | нить |
Ключи под наблюдением (см . документ
as_supervised
):None
Рисунок ( tfds.show_examples ): не поддерживается.
Примеры ( tfds.as_dataframe ):
- Цитата :
@inproceedings{li-roth-2002-learning,
title = "Learning Question Classifiers",
author = "Li, Xin and
Roth, Dan",
booktitle = "{COLING} 2002: The 19th International Conference on Computational Linguistics",
year = "2002",
url = "https://www.aclweb.org/anthology/C02-1150",
}
@inproceedings{hovy-etal-2001-toward,
title = "Toward Semantics-Based Answer Pinpointing",
author = "Hovy, Eduard and
Gerber, Laurie and
Hermjakob, Ulf and
Lin, Chin-Yew and
Ravichandran, Deepak",
booktitle = "Proceedings of the First International Conference on Human Language Technology Research",
year = "2001",
url = "https://www.aclweb.org/anthology/H01-1069",
}