スクファクト

参考文献:

コーパス

次のコマンドを使用して、このデータセットを TFDS にロードします。

ds = tfds.load('huggingface:scifact/corpus')
  • 説明
SciFact, a dataset of 1.4K expert-written scientific claims paired with evidence-containing abstracts, and annotated with labels and rationales.
  • ライセンス: 既知のライセンスはありません
  • バージョン: 1.0.0
  • 分割:
スプリット
'train' 5183
  • 特徴
{
    "doc_id": {
        "dtype": "int32",
        "id": null,
        "_type": "Value"
    },
    "title": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "abstract": {
        "feature": {
            "dtype": "string",
            "id": null,
            "_type": "Value"
        },
        "length": -1,
        "id": null,
        "_type": "Sequence"
    },
    "structured": {
        "dtype": "bool",
        "id": null,
        "_type": "Value"
    }
}

主張

次のコマンドを使用して、このデータセットを TFDS にロードします。

ds = tfds.load('huggingface:scifact/claims')
  • 説明
SciFact, a dataset of 1.4K expert-written scientific claims paired with evidence-containing abstracts, and annotated with labels and rationales.
  • ライセンス: 既知のライセンスはありません
  • バージョン: 1.0.0
  • 分割:
スプリット
'test' 300
'train' 1261
'validation' 450
  • 特徴
{
    "id": {
        "dtype": "int32",
        "id": null,
        "_type": "Value"
    },
    "claim": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "evidence_doc_id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "evidence_label": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "evidence_sentences": {
        "feature": {
            "dtype": "int32",
            "id": null,
            "_type": "Value"
        },
        "length": -1,
        "id": null,
        "_type": "Sequence"
    },
    "cited_doc_ids": {
        "feature": {
            "dtype": "int32",
            "id": null,
            "_type": "Value"
        },
        "length": -1,
        "id": null,
        "_type": "Sequence"
    }
}