Tài liệu tham khảo:
Sử dụng lệnh sau để tải tập dữ liệu này trong TFDS:
ds = tfds.load('huggingface:msr_text_compression')
- Sự miêu tả :
This dataset contains sentences and short paragraphs with corresponding shorter (compressed) versions. There are up to five compressions for each input text, together with quality judgements of their meaning preservation and grammaticality. The dataset is derived using source texts from the Open American National Corpus (ww.anc.org) and crowd-sourcing.
- Giấy phép : Thỏa thuận cấp phép dữ liệu nghiên cứu của Microsoft
- Phiên bản : 1.1.0
- Chia tách :
| Tách ra | Ví dụ |
|---|---|
'test' | 785 |
'train' | 4936 |
'validation' | 447 |
- Đặc trưng :
{
"source_id": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"domain": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"source_text": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"targets": {
"feature": {
"compressed_text": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"judge_id": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"num_ratings": {
"dtype": "int64",
"id": null,
"_type": "Value"
},
"ratings": {
"feature": {
"dtype": "int64",
"id": null,
"_type": "Value"
},
"length": -1,
"id": null,
"_type": "Sequence"
}
},
"length": -1,
"id": null,
"_type": "Sequence"
}
}