참고자료:
TFDS에 이 데이터세트를 로드하려면 다음 명령어를 사용하세요.
ds = tfds.load('huggingface:kor_ner')
- 설명 :
Korean named entity recognition dataset
- 라이센스 : NER 라이센스, 비상업적 사용을 위한 MIT 라이센스
- 버전 : 1.1.0
- 분할 :
| 나뉘다 | 예 |
|---|---|
'test' | 366 |
'train' | 2928 |
'validation' | 366 |
- 특징 :
{
"text": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"annot_text": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"tokens": {
"feature": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"length": -1,
"id": null,
"_type": "Sequence"
},
"pos_tags": {
"feature": {
"num_classes": 42,
"names": [
"SO",
"SS",
"VV",
"XR",
"VCP",
"JC",
"VCN",
"JKB",
"MM",
"SP",
"XSN",
"SL",
"NNP",
"NP",
"EP",
"JKQ",
"IC",
"XSA",
"EC",
"EF",
"SE",
"XPN",
"ETN",
"SH",
"XSV",
"MAG",
"SW",
"ETM",
"JKO",
"NNB",
"MAJ",
"NNG",
"JKV",
"JKC",
"VA",
"NR",
"JKG",
"VX",
"SF",
"JX",
"JKS",
"SN"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
},
"length": -1,
"id": null,
"_type": "Sequence"
},
"ner_tags": {
"feature": {
"num_classes": 7,
"names": [
"I",
"O",
"B_OG",
"B_TI",
"B_LC",
"B_DT",
"B_PS"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
},
"length": -1,
"id": null,
"_type": "Sequence"
}
}