듀오크

참고자료:

셀프RC

TFDS에 이 데이터세트를 로드하려면 다음 명령어를 사용하세요.

ds = tfds.load('huggingface:duorc/SelfRC')

설명 :

DuoRC contains 186,089 unique question-answer pairs created from a collection of 7680 pairs of movie plots where each pair in the collection reflects two versions of the same movie.

라이선스 : https://raw.githubusercontent.com/duorc/duorc/master/LICENSE
버전 : 1.0.0
분할 :

나뉘다	예
`'test'`	12559
`'train'`	60721
`'validation'`	12961

특징 :

{
    "plot_id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "plot": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "title": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "question_id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "question": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "answers": {
        "feature": {
            "dtype": "string",
            "id": null,
            "_type": "Value"
        },
        "length": -1,
        "id": null,
        "_type": "Sequence"
    },
    "no_answer": {
        "dtype": "bool",
        "id": null,
        "_type": "Value"
    }
}

의역RC

TFDS에 이 데이터세트를 로드하려면 다음 명령어를 사용하세요.

ds = tfds.load('huggingface:duorc/ParaphraseRC')

설명 :

DuoRC contains 186,089 unique question-answer pairs created from a collection of 7680 pairs of movie plots where each pair in the collection reflects two versions of the same movie.

라이선스 : https://raw.githubusercontent.com/duorc/duorc/master/LICENSE
버전 : 1.0.0
분할 :

나뉘다	예
`'test'`	15857
`'train'`	69524
`'validation'`	15591

특징 :

{
    "plot_id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "plot": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "title": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "question_id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "question": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "answers": {
        "feature": {
            "dtype": "string",
            "id": null,
            "_type": "Value"
        },
        "length": -1,
        "id": null,
        "_type": "Sequence"
    },
    "no_answer": {
        "dtype": "bool",
        "id": null,
        "_type": "Value"
    }
}