参考文献:
アフエン
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/af-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 275512 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"af",
"en"
],
"id": null,
"_type": "Translation"
}
}
アーメン
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/am-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 89027 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"am",
"en"
],
"id": null,
"_type": "Translation"
}
}
アンエン
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/an-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'train' | 6961 |
- 特徴:
{
"translation": {
"languages": [
"an",
"en"
],
"id": null,
"_type": "Translation"
}
}
アーエン
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/ar-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"ar",
"en"
],
"id": null,
"_type": "Translation"
}
}
そのまま
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/as-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 138479 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"as",
"en"
],
"id": null,
"_type": "Translation"
}
}
アズエン
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/az-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 262089 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"az",
"en"
],
"id": null,
"_type": "Translation"
}
}
された
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/be-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 67312 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"be",
"en"
],
"id": null,
"_type": "Translation"
}
}
バックグラウンド
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/bg-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"bg",
"en"
],
"id": null,
"_type": "Translation"
}
}
ブンエン
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/bn-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"bn",
"en"
],
"id": null,
"_type": "Translation"
}
}
br-ja
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/br-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 153447 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"br",
"en"
],
"id": null,
"_type": "Translation"
}
}
bs-en
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/bs-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"bs",
"en"
],
"id": null,
"_type": "Translation"
}
}
カーン
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/ca-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"ca",
"en"
],
"id": null,
"_type": "Translation"
}
}
CS-ja
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/cs-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"cs",
"en"
],
"id": null,
"_type": "Translation"
}
}
シエン
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/cy-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 289521 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"cy",
"en"
],
"id": null,
"_type": "Translation"
}
}
だえん
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/da-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"da",
"en"
],
"id": null,
"_type": "Translation"
}
}
デエン
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/de-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"de",
"en"
],
"id": null,
"_type": "Translation"
}
}
dz-en
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/dz-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'train' | 624 |
- 特徴:
{
"translation": {
"languages": [
"dz",
"en"
],
"id": null,
"_type": "Translation"
}
}
エルエン
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/el-en')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"el",
"en"
],
"id": null,
"_type": "Translation"
}
}
エンエオ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-eo')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 337106 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"eo"
],
"id": null,
"_type": "Translation"
}
}
エンエス
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-es')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"es"
],
"id": null,
"_type": "Translation"
}
}
エンエット
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-et')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"et"
],
"id": null,
"_type": "Translation"
}
}
エンユー
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-eu')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"eu"
],
"id": null,
"_type": "Translation"
}
}
アンファ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-fa')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"fa"
],
"id": null,
"_type": "Translation"
}
}
エンファイ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-fi')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"fi"
],
"id": null,
"_type": "Translation"
}
}
フランス
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-fr')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"fr"
],
"id": null,
"_type": "Translation"
}
}
エンフィ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-fy')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 54342 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"fy"
],
"id": null,
"_type": "Translation"
}
}
エンガ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ga')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 289524 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ga"
],
"id": null,
"_type": "Translation"
}
}
英語
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-gd')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 1606年 |
'train' | 16316 |
'validation' | 1605年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"gd"
],
"id": null,
"_type": "Translation"
}
}
英語
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-gl')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 515344 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"gl"
],
"id": null,
"_type": "Translation"
}
}
えんぐ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-gu')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 318306 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"gu"
],
"id": null,
"_type": "Translation"
}
}
えんは
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ha')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 97983 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ha"
],
"id": null,
"_type": "Translation"
}
}
エンヘ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-he')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"he"
],
"id": null,
"_type": "Translation"
}
}
エンヒ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-hi')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 534319 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"hi"
],
"id": null,
"_type": "Translation"
}
}
毎時
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-hr')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"hr"
],
"id": null,
"_type": "Translation"
}
}
エンフ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-hu')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"hu"
],
"id": null,
"_type": "Translation"
}
}
エンヒ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-hy')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'train' | 7059 |
- 特徴:
{
"translation": {
"languages": [
"en",
"hy"
],
"id": null,
"_type": "Translation"
}
}
エンID
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-id')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"id"
],
"id": null,
"_type": "Translation"
}
}
英語
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ig')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 1843年 |
'train' | 18415 |
'validation' | 1843年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ig"
],
"id": null,
"_type": "Translation"
}
}
en-is
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-is')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"is"
],
"id": null,
"_type": "Translation"
}
}
エンイット
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-it')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"it"
],
"id": null,
"_type": "Translation"
}
}
エンジャ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ja')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ja"
],
"id": null,
"_type": "Translation"
}
}
演歌
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ka')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 377306 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ka"
],
"id": null,
"_type": "Translation"
}
}
エンク
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-kk')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 79927 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"kk"
],
"id": null,
"_type": "Translation"
}
}
エンキロ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-km')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 111483 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"km"
],
"id": null,
"_type": "Translation"
}
}
援交
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ko')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ko"
],
"id": null,
"_type": "Translation"
}
}
エンクン
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-kn')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 918 |
'train' | 14537 |
'validation' | 917 |
- 特徴:
{
"translation": {
"languages": [
"en",
"kn"
],
"id": null,
"_type": "Translation"
}
}
エンク
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ku')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 144844 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ku"
],
"id": null,
"_type": "Translation"
}
}
エンキー
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ky')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 27215 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ky"
],
"id": null,
"_type": "Translation"
}
}
エンリ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-li')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 25535 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"li"
],
"id": null,
"_type": "Translation"
}
}
en-lt
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-lt')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"lt"
],
"id": null,
"_type": "Translation"
}
}
英語版
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-lv')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"lv"
],
"id": null,
"_type": "Translation"
}
}
英語
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-mg')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 590771 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"mg"
],
"id": null,
"_type": "Translation"
}
}
en-mk
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-mk')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"mk"
],
"id": null,
"_type": "Translation"
}
}
英語/ml
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ml')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 822746 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ml"
],
"id": null,
"_type": "Translation"
}
}
アンメン
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-mn')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'train' | 4294 |
- 特徴:
{
"translation": {
"languages": [
"en",
"mn"
],
"id": null,
"_type": "Translation"
}
}
エンさん
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-mr')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 27007 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"mr"
],
"id": null,
"_type": "Translation"
}
}
en-ms
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ms')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ms"
],
"id": null,
"_type": "Translation"
}
}
エンマウント
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-mt')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"mt"
],
"id": null,
"_type": "Translation"
}
}
私の
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-my')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 24594 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"my"
],
"id": null,
"_type": "Translation"
}
}
en-nb
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-nb')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 142906 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"nb"
],
"id": null,
"_type": "Translation"
}
}
エンネ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ne')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 406381 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ne"
],
"id": null,
"_type": "Translation"
}
}
en-nl
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-nl')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"nl"
],
"id": null,
"_type": "Translation"
}
}
えん、ん
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-nn')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 486055 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"nn"
],
"id": null,
"_type": "Translation"
}
}
えんの
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-no')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"no"
],
"id": null,
"_type": "Translation"
}
}
en-oc
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-oc')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 35791 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"oc"
],
"id": null,
"_type": "Translation"
}
}
または
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-or')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 1318 |
'train' | 14273 |
'validation' | 1317 |
- 特徴:
{
"translation": {
"languages": [
"en",
"or"
],
"id": null,
"_type": "Translation"
}
}
エンパ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-pa')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 107296 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"pa"
],
"id": null,
"_type": "Translation"
}
}
英語
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-pl')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"pl"
],
"id": null,
"_type": "Translation"
}
}
en-ps
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ps')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 79127 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ps"
],
"id": null,
"_type": "Translation"
}
}
en-pt
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-pt')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"pt"
],
"id": null,
"_type": "Translation"
}
}
エンロ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ro')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ro"
],
"id": null,
"_type": "Translation"
}
}
えんる
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ru')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ru"
],
"id": null,
"_type": "Translation"
}
}
英語
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-rw')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 173823 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"rw"
],
"id": null,
"_type": "Translation"
}
}
エンセ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-se')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 35907 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"se"
],
"id": null,
"_type": "Translation"
}
}
英語
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-sh')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 267211 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"sh"
],
"id": null,
"_type": "Translation"
}
}
エンシ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-si')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 979109 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"si"
],
"id": null,
"_type": "Translation"
}
}
エンスク
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-sk')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"sk"
],
"id": null,
"_type": "Translation"
}
}
英語/スペイン語
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-sl')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"sl"
],
"id": null,
"_type": "Translation"
}
}
エンスクエア
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-sq')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"sq"
],
"id": null,
"_type": "Translation"
}
}
en-sr
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-sr')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"sr"
],
"id": null,
"_type": "Translation"
}
}
en-SV
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-sv')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"sv"
],
"id": null,
"_type": "Translation"
}
}
えんた
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ta')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 227014 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ta"
],
"id": null,
"_type": "Translation"
}
}
エンテ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-te')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 64352 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"te"
],
"id": null,
"_type": "Translation"
}
}
en-tg
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-tg')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 193882 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"tg"
],
"id": null,
"_type": "Translation"
}
}
1番目
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-th')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"th"
],
"id": null,
"_type": "Translation"
}
}
en-tk
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-tk')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 1852年 |
'train' | 13110 |
'validation' | 1852年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"tk"
],
"id": null,
"_type": "Translation"
}
}
入口
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-tr')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"tr"
],
"id": null,
"_type": "Translation"
}
}
えっと
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-tt')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 100843 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"tt"
],
"id": null,
"_type": "Translation"
}
}
英語
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ug')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 72170 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ug"
],
"id": null,
"_type": "Translation"
}
}
エンウク
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-uk')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"uk"
],
"id": null,
"_type": "Translation"
}
}
en-ur
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-ur')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 753913 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"ur"
],
"id": null,
"_type": "Translation"
}
}
en-uz
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-uz')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 173157 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"uz"
],
"id": null,
"_type": "Translation"
}
}
エンヴィ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-vi')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"vi"
],
"id": null,
"_type": "Translation"
}
}
エンワ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-wa')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 104496 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"wa"
],
"id": null,
"_type": "Translation"
}
}
ja-xh
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-xh')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 439671 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"xh"
],
"id": null,
"_type": "Translation"
}
}
エンイ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-yi')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 15010 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"yi"
],
"id": null,
"_type": "Translation"
}
}
えんよ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-yo')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'train' | 10375 |
- 特徴:
{
"translation": {
"languages": [
"en",
"yo"
],
"id": null,
"_type": "Translation"
}
}
日本語
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-zh')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 1000000 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"zh"
],
"id": null,
"_type": "Translation"
}
}
えんず
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/en-zu')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
'train' | 38616 |
'validation' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"en",
"zu"
],
"id": null,
"_type": "Translation"
}
}
アルデ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/ar-de')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"ar",
"de"
],
"id": null,
"_type": "Translation"
}
}
ar-fr
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/ar-fr')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"ar",
"fr"
],
"id": null,
"_type": "Translation"
}
}
ar-nl
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/ar-nl')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"ar",
"nl"
],
"id": null,
"_type": "Translation"
}
}
あるある
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/ar-ru')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"ar",
"ru"
],
"id": null,
"_type": "Translation"
}
}
ar-zh
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/ar-zh')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"ar",
"zh"
],
"id": null,
"_type": "Translation"
}
}
デフランス
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/de-fr')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"de",
"fr"
],
"id": null,
"_type": "Translation"
}
}
非nl
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/de-nl')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"de",
"nl"
],
"id": null,
"_type": "Translation"
}
}
でる
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/de-ru')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"de",
"ru"
],
"id": null,
"_type": "Translation"
}
}
デ・ジ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/de-zh')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"de",
"zh"
],
"id": null,
"_type": "Translation"
}
}
フランス-nl
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/fr-nl')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"fr",
"nl"
],
"id": null,
"_type": "Translation"
}
}
フロル
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/fr-ru')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"fr",
"ru"
],
"id": null,
"_type": "Translation"
}
}
フランス
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/fr-zh')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"fr",
"zh"
],
"id": null,
"_type": "Translation"
}
}
んるる
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/nl-ru')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"nl",
"ru"
],
"id": null,
"_type": "Translation"
}
}
nl-zh
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/nl-zh')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"nl",
"zh"
],
"id": null,
"_type": "Translation"
}
}
ル・ジ
次のコマンドを使用して、このデータセットを TFDS にロードします。
ds = tfds.load('huggingface:opus100/ru-zh')
- 説明:
OPUS-100 is English-centric, meaning that all training pairs include English on either the source or target side.
The corpus covers 100 languages (including English).OPUS-100 contains approximately 55M sentence pairs.
Of the 99 language pairs, 44 have 1M sentence pairs of training data, 73 have at least 100k, and 95 have at least 10k.
- ライセンス: 既知のライセンスはありません
- バージョン: 0.0.0
- 分割:
スプリット | 例 |
---|---|
'test' | 2000年 |
- 特徴:
{
"translation": {
"languages": [
"ru",
"zh"
],
"id": null,
"_type": "Translation"
}
}