лапы-х

Ссылки:

ru

Используйте следующую команду, чтобы загрузить этот набор данных в TFDS:

ds = tfds.load('huggingface:paws-x/en')
  • Описание : 
PAWS-X, a multilingual version of PAWS (Paraphrase Adversaries from Word Scrambling) for six languages.

This dataset contains 23,659 human translated PAWS evaluation pairs and 296,406 machine
translated training pairs in six typologically distinct languages: French, Spanish, German,
Chinese, Japanese, and Korean. English language is available by default. All translated
pairs are sourced from examples in PAWS-Wiki.

For further details, see the accompanying paper: PAWS-X: A Cross-lingual Adversarial Dataset
for Paraphrase Identification (https://arxiv.org/abs/1908.11828)

Note: There might be some missing or wrong labels in the dataset and we have replaced them with -1.
  • Лицензия : набор данных можно свободно использовать для любых целей, однако приветствуется упоминание Google LLC («Google») в качестве источника данных. Набор данных предоставляется «КАК ЕСТЬ» без каких-либо гарантий, явных или подразумеваемых. Google отказывается от любой ответственности за любой ущерб, прямой или косвенный, возникший в результате использования набора данных.
  • Версия : 1.1.0
  • Расколы :
Расколоть Примеры
'test' 2000 г.
'train' 49401
'validation' 2000 г.
  • Функции : 
{
    "id": {
        "dtype": "int32",
        "id": null,
        "_type": "Value"
    },
    "sentence1": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "sentence2": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "label": {
        "num_classes": 2,
        "names": [
            "0",
            "1"
        ],
        "names_file": null,
        "id": null,
        "_type": "ClassLabel"
    }
}

де

Используйте следующую команду, чтобы загрузить этот набор данных в TFDS:

ds = tfds.load('huggingface:paws-x/de')
  • Описание : 
PAWS-X, a multilingual version of PAWS (Paraphrase Adversaries from Word Scrambling) for six languages.

This dataset contains 23,659 human translated PAWS evaluation pairs and 296,406 machine
translated training pairs in six typologically distinct languages: French, Spanish, German,
Chinese, Japanese, and Korean. English language is available by default. All translated
pairs are sourced from examples in PAWS-Wiki.

For further details, see the accompanying paper: PAWS-X: A Cross-lingual Adversarial Dataset
for Paraphrase Identification (https://arxiv.org/abs/1908.11828)

Note: There might be some missing or wrong labels in the dataset and we have replaced them with -1.
  • Лицензия : набор данных можно свободно использовать для любых целей, однако приветствуется упоминание Google LLC («Google») в качестве источника данных. Набор данных предоставляется «КАК ЕСТЬ» без каких-либо гарантий, явных или подразумеваемых. Google отказывается от любой ответственности за любой ущерб, прямой или косвенный, возникший в результате использования набора данных.
  • Версия : 1.1.0
  • Расколы :
Расколоть Примеры
'test' 2000 г.
'train' 49401
'validation' 2000 г.
  • Функции : 
{
    "id": {
        "dtype": "int32",
        "id": null,
        "_type": "Value"
    },
    "sentence1": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "sentence2": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "label": {
        "num_classes": 2,
        "names": [
            "0",
            "1"
        ],
        "names_file": null,
        "id": null,
        "_type": "ClassLabel"
    }
}

эс

Используйте следующую команду, чтобы загрузить этот набор данных в TFDS:

ds = tfds.load('huggingface:paws-x/es')
  • Описание : 
PAWS-X, a multilingual version of PAWS (Paraphrase Adversaries from Word Scrambling) for six languages.

This dataset contains 23,659 human translated PAWS evaluation pairs and 296,406 machine
translated training pairs in six typologically distinct languages: French, Spanish, German,
Chinese, Japanese, and Korean. English language is available by default. All translated
pairs are sourced from examples in PAWS-Wiki.

For further details, see the accompanying paper: PAWS-X: A Cross-lingual Adversarial Dataset
for Paraphrase Identification (https://arxiv.org/abs/1908.11828)

Note: There might be some missing or wrong labels in the dataset and we have replaced them with -1.
  • Лицензия : набор данных можно свободно использовать для любых целей, однако приветствуется упоминание Google LLC («Google») в качестве источника данных. Набор данных предоставляется «КАК ЕСТЬ» без каких-либо гарантий, явных или подразумеваемых. Google отказывается от любой ответственности за любой ущерб, прямой или косвенный, возникший в результате использования набора данных.
  • Версия : 1.1.0
  • Расколы :
Расколоть Примеры
'test' 2000 г.
'train' 49401
'validation' 2000 г.
  • Функции : 
{
    "id": {
        "dtype": "int32",
        "id": null,
        "_type": "Value"
    },
    "sentence1": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "sentence2": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "label": {
        "num_classes": 2,
        "names": [
            "0",
            "1"
        ],
        "names_file": null,
        "id": null,
        "_type": "ClassLabel"
    }
}

фр.

Используйте следующую команду, чтобы загрузить этот набор данных в TFDS: 

ds = tfds.load('huggingface:paws-x/fr')
  • Описание : 
PAWS-X, a multilingual version of PAWS (Paraphrase Adversaries from Word Scrambling) for six languages.

This dataset contains 23,659 human translated PAWS evaluation pairs and 296,406 machine
translated training pairs in six typologically distinct languages: French, Spanish, German,
Chinese, Japanese, and Korean. English language is available by default. All translated
pairs are sourced from examples in PAWS-Wiki.

For further details, see the accompanying paper: PAWS-X: A Cross-lingual Adversarial Dataset
for Paraphrase Identification (https://arxiv.org/abs/1908.11828)

Note: There might be some missing or wrong labels in the dataset and we have replaced them with -1.
  • Лицензия : набор данных можно свободно использовать для любых целей, однако приветствуется упоминание Google LLC («Google») в качестве источника данных. Набор данных предоставляется «КАК ЕСТЬ» без каких-либо гарантий, явных или подразумеваемых. Google отказывается от любой ответственности за любой ущерб, прямой или косвенный, возникший в результате использования набора данных.
  • Версия : 1.1.0
  • Расколы :
Расколоть Примеры
'test' 2000 г.
'train' 49401
'validation' 2000 г.
  • Функции : 
{
    "id": {
        "dtype": "int32",
        "id": null,
        "_type": "Value"
    },
    "sentence1": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "sentence2": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "label": {
        "num_classes": 2,
        "names": [
            "0",
            "1"
        ],
        "names_file": null,
        "id": null,
        "_type": "ClassLabel"
    }
}

да

Используйте следующую команду, чтобы загрузить этот набор данных в TFDS: 

ds = tfds.load('huggingface:paws-x/ja')
  • Описание : 
PAWS-X, a multilingual version of PAWS (Paraphrase Adversaries from Word Scrambling) for six languages.

This dataset contains 23,659 human translated PAWS evaluation pairs and 296,406 machine
translated training pairs in six typologically distinct languages: French, Spanish, German,
Chinese, Japanese, and Korean. English language is available by default. All translated
pairs are sourced from examples in PAWS-Wiki.

For further details, see the accompanying paper: PAWS-X: A Cross-lingual Adversarial Dataset
for Paraphrase Identification (https://arxiv.org/abs/1908.11828)

Note: There might be some missing or wrong labels in the dataset and we have replaced them with -1.
  • Лицензия : Набор данных можно свободно использовать для любых целей, однако приветствуется упоминание Google LLC («Google») в качестве источника данных. Набор данных предоставляется «КАК ЕСТЬ» без каких-либо гарантий, явных или подразумеваемых. Google отказывается от любой ответственности за любой ущерб, прямой или косвенный, возникший в результате использования набора данных.
  • Версия : 1.1.0
  • Расколы :
Расколоть Примеры
'test' 2000 г.
'train' 49401
'validation' 2000 г.
  • Функции : 
{
    "id": {
        "dtype": "int32",
        "id": null,
        "_type": "Value"
    },
    "sentence1": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "sentence2": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "label": {
        "num_classes": 2,
        "names": [
            "0",
            "1"
        ],
        "names_file": null,
        "id": null,
        "_type": "ClassLabel"
    }
}

ко

Используйте следующую команду, чтобы загрузить этот набор данных в TFDS: 

ds = tfds.load('huggingface:paws-x/ko')
  • Описание : 
PAWS-X, a multilingual version of PAWS (Paraphrase Adversaries from Word Scrambling) for six languages.

This dataset contains 23,659 human translated PAWS evaluation pairs and 296,406 machine
translated training pairs in six typologically distinct languages: French, Spanish, German,
Chinese, Japanese, and Korean. English language is available by default. All translated
pairs are sourced from examples in PAWS-Wiki.

For further details, see the accompanying paper: PAWS-X: A Cross-lingual Adversarial Dataset
for Paraphrase Identification (https://arxiv.org/abs/1908.11828)

Note: There might be some missing or wrong labels in the dataset and we have replaced them with -1.
  • Лицензия : Набор данных можно свободно использовать для любых целей, однако приветствуется упоминание Google LLC («Google») в качестве источника данных. Набор данных предоставляется «КАК ЕСТЬ» без каких-либо гарантий, явных или подразумеваемых. Google отказывается от любой ответственности за любой ущерб, прямой или косвенный, возникший в результате использования набора данных.
  • Версия : 1.1.0
  • Расколы :
Расколоть Примеры
'test' 2000 г.
'train' 49401
'validation' 2000 г.
  • Функции : 
{
    "id": {
        "dtype": "int32",
        "id": null,
        "_type": "Value"
    },
    "sentence1": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "sentence2": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "label": {
        "num_classes": 2,
        "names": [
            "0",
            "1"
        ],
        "names_file": null,
        "id": null,
        "_type": "ClassLabel"
    }
}

ж

Используйте следующую команду, чтобы загрузить этот набор данных в TFDS: 

ds = tfds.load('huggingface:paws-x/zh')
  • Описание : 
PAWS-X, a multilingual version of PAWS (Paraphrase Adversaries from Word Scrambling) for six languages.

This dataset contains 23,659 human translated PAWS evaluation pairs and 296,406 machine
translated training pairs in six typologically distinct languages: French, Spanish, German,
Chinese, Japanese, and Korean. English language is available by default. All translated
pairs are sourced from examples in PAWS-Wiki.

For further details, see the accompanying paper: PAWS-X: A Cross-lingual Adversarial Dataset
for Paraphrase Identification (https://arxiv.org/abs/1908.11828)

Note: There might be some missing or wrong labels in the dataset and we have replaced them with -1.
  • Лицензия : Набор данных можно свободно использовать для любых целей, однако приветствуется упоминание Google LLC («Google») в качестве источника данных. Набор данных предоставляется «КАК ЕСТЬ» без каких-либо гарантий, явных или подразумеваемых. Google отказывается от любой ответственности за любой ущерб, прямой или косвенный, возникший в результате использования набора данных.
  • Версия : 1.1.0
  • Расколы :
Расколоть Примеры
'test' 2000 г.
'train' 49401
'validation' 2000 г.
  • Функции : 
{
    "id": {
        "dtype": "int32",
        "id": null,
        "_type": "Value"
    },
    "sentence1": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "sentence2": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "label": {
        "num_classes": 2,
        "names": [
            "0",
            "1"
        ],
        "names_file": null,
        "id": null,
        "_type": "ClassLabel"
    }
}