- 説明:
顕著な範囲にラベルが付けられたウィキペディアの文章。
ホームページ: https://www.tensorflow.org/datasets/catalog/salient_span_wikipedia
バージョン:
-
1.0.0
(デフォルト): リリース ノートはありません。
-
ダウンロードサイズ: サイズ
Unknown size
自動キャッシュ(ドキュメント): いいえ
監視されたキー(
as_supervised
docを参照):None
図( tfds.show_examples ): サポートされていません。
引用:
@article{guu2020realm,
title={REALM: Retrieval-Augmented Language Model Pre-Training},
author={Kelvin Guu and Kenton Lee and Zora Tung and Panupong Pasupat and Ming-Wei Chang},
year={2020},
journal = {arXiv e-prints},
archivePrefix = {arXiv},
eprint={2002.08909},
}
salient_span_wikipedia/sentences (デフォルト設定)
構成の説明: 例は、エンティティを含む個々の文です。
データセットサイズ:
20.57 GiB
スプリット:
スプリット | 例 |
---|---|
'train' | 82,291,706 |
- 機能構造:
FeaturesDict({
'spans': Sequence({
'limit': int32,
'start': int32,
'type': string,
}),
'text': Text(shape=(), dtype=string),
'title': Text(shape=(), dtype=string),
})
- 機能のドキュメント:
特徴 | クラス | 形 | Dtype | 説明 |
---|---|---|---|---|
特徴辞書 | ||||
スパン | 順序 | |||
スパン/制限 | テンソル | int32 | ||
スパン/開始 | テンソル | int32 | ||
スパン/タイプ | テンソル | ストリング | ||
文章 | 文章 | ストリング | ||
題名 | 文章 | ストリング |
- 例( tfds.as_dataframe ):
salient_span_wikipedia/ドキュメント
構成の説明: 完全なドキュメントの例。
データセットサイズ:
16.52 GiB
スプリット:
スプリット | 例 |
---|---|
'train' | 13,353,718 |
- 機能構造:
FeaturesDict({
'sentences': Sequence({
'limit': int32,
'start': int32,
}),
'spans': Sequence({
'limit': int32,
'start': int32,
'type': string,
}),
'text': Text(shape=(), dtype=string),
'title': Text(shape=(), dtype=string),
})
- 機能のドキュメント:
特徴 | クラス | 形 | Dtype | 説明 |
---|---|---|---|---|
特徴辞書 | ||||
文章 | 順序 | |||
文/制限 | テンソル | int32 | ||
文/開始 | テンソル | int32 | ||
スパン | 順序 | |||
スパン/制限 | テンソル | int32 | ||
スパン/開始 | テンソル | int32 | ||
スパン/タイプ | テンソル | ストリング | ||
文章 | 文章 | ストリング | ||
題名 | 文章 | ストリング |
- 例( tfds.as_dataframe ):