MDD

Referências:

tarefa1_qa

Use o seguinte comando para carregar este conjunto de dados no TFDS:

ds = tfds.load('huggingface:mdd/task1_qa')
  • Descrição :
The Movie Dialog dataset (MDD) is designed to measure how well
models can perform at goal and non-goal orientated dialog
centered around the topic of movies (question answering,
recommendation and discussion).
  • Licença : Licença Creative Commons Atribuição 3.0
  • Versão : 1.1.0
  • Divisões :
Dividir Exemplos
'test' 9952
'train' 96185
'validation' 9968
  • Características : 
{
    "dialogue_turns": {
        "feature": {
            "speaker": {
                "dtype": "int32",
                "id": null,
                "_type": "Value"
            },
            "utterance": {
                "dtype": "string",
                "id": null,
                "_type": "Value"
            }
        },
        "length": -1,
        "id": null,
        "_type": "Sequence"
    }
}

task2_recs

Use o seguinte comando para carregar este conjunto de dados no TFDS:

ds = tfds.load('huggingface:mdd/task2_recs')
  • Descrição :
The Movie Dialog dataset (MDD) is designed to measure how well
models can perform at goal and non-goal orientated dialog
centered around the topic of movies (question answering,
recommendation and discussion).
  • Licença : Licença Creative Commons Atribuição 3.0
  • Versão : 1.1.0
  • Divisões :
Dividir Exemplos
'test' 10.000
'train' 1.000.000
'validation' 10.000
  • Características : 
{
    "dialogue_turns": {
        "feature": {
            "speaker": {
                "dtype": "int32",
                "id": null,
                "_type": "Value"
            },
            "utterance": {
                "dtype": "string",
                "id": null,
                "_type": "Value"
            }
        },
        "length": -1,
        "id": null,
        "_type": "Sequence"
    }
}

task3_qarecs

Use o seguinte comando para carregar este conjunto de dados no TFDS:

ds = tfds.load('huggingface:mdd/task3_qarecs')
  • Descrição :
The Movie Dialog dataset (MDD) is designed to measure how well
models can perform at goal and non-goal orientated dialog
centered around the topic of movies (question answering,
recommendation and discussion).
  • Licença : Licença Creative Commons Atribuição 3.0
  • Versão : 1.1.0
  • Divisões :
Dividir Exemplos
'test' 4915
'train' 952125
'validation' 5052
  • Características : 
{
    "dialogue_turns": {
        "feature": {
            "speaker": {
                "dtype": "int32",
                "id": null,
                "_type": "Value"
            },
            "utterance": {
                "dtype": "string",
                "id": null,
                "_type": "Value"
            }
        },
        "length": -1,
        "id": null,
        "_type": "Sequence"
    }
}

task4_reddit

Use o seguinte comando para carregar este conjunto de dados no TFDS:

ds = tfds.load('huggingface:mdd/task4_reddit')
  • Descrição :
The Movie Dialog dataset (MDD) is designed to measure how well
models can perform at goal and non-goal orientated dialog
centered around the topic of movies (question answering,
recommendation and discussion).
  • Licença : Licença Creative Commons Atribuição 3.0
  • Versão : 1.1.0
  • Divisões :
Dividir Exemplos
'cand_test' 10.000
'cand_valid' 10.000
'test' 10.000
'train' 945198
'validation' 10.000
  • Características :
{
    "dialogue_turns": {
        "feature": {
            "speaker": {
                "dtype": "int32",
                "id": null,
                "_type": "Value"
            },
            "utterance": {
                "dtype": "string",
                "id": null,
                "_type": "Value"
            }
        },
        "length": -1,
        "id": null,
        "_type": "Sequence"
    }
}