Referências:
dobra1
Use o seguinte comando para carregar esse conjunto de dados no TFDS:
ds = tfds.load('huggingface:persian_ner/fold1')
- Descrição :
The dataset includes 250,015 tokens and 7,682 Persian sentences in total. It is available in 3 folds to be used in turn as training and test sets. The NER tags are in IOB format.
- Licença : Licença Creative Commons Atribuição 4.0 Internacional
- Versão : 1.1.0
- Divisões :
| Dividir | Exemplos |
|---|---|
'test' | 2560 |
'train' | 5121 |
- Características :
{
"tokens": {
"feature": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"length": -1,
"id": null,
"_type": "Sequence"
},
"ner_tags": {
"feature": {
"num_classes": 13,
"names": [
"O",
"I-event",
"I-fac",
"I-loc",
"I-org",
"I-pers",
"I-pro",
"B-event",
"B-fac",
"B-loc",
"B-org",
"B-pers",
"B-pro"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
},
"length": -1,
"id": null,
"_type": "Sequence"
}
}
dobra2
Use o seguinte comando para carregar esse conjunto de dados no TFDS:
ds = tfds.load('huggingface:persian_ner/fold2')
- Descrição :
The dataset includes 250,015 tokens and 7,682 Persian sentences in total. It is available in 3 folds to be used in turn as training and test sets. The NER tags are in IOB format.
- Licença : Licença Creative Commons Atribuição 4.0 Internacional
- Versão : 1.1.0
- Divisões :
| Dividir | Exemplos |
|---|---|
'test' | 2561 |
'train' | 5120 |
- Características :
{
"tokens": {
"feature": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"length": -1,
"id": null,
"_type": "Sequence"
},
"ner_tags": {
"feature": {
"num_classes": 13,
"names": [
"O",
"I-event",
"I-fac",
"I-loc",
"I-org",
"I-pers",
"I-pro",
"B-event",
"B-fac",
"B-loc",
"B-org",
"B-pers",
"B-pro"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
},
"length": -1,
"id": null,
"_type": "Sequence"
}
}
dobra3
Use o seguinte comando para carregar esse conjunto de dados no TFDS:
ds = tfds.load('huggingface:persian_ner/fold3')
- Descrição :
The dataset includes 250,015 tokens and 7,682 Persian sentences in total. It is available in 3 folds to be used in turn as training and test sets. The NER tags are in IOB format.
- Licença : Licença Creative Commons Atribuição 4.0 Internacional
- Versão : 1.1.0
- Divisões :
| Dividir | Exemplos |
|---|---|
'test' | 2560 |
'train' | 5121 |
- Características :
{
"tokens": {
"feature": {
"dtype": "string",
"id": null,
"_type": "Value"
},
"length": -1,
"id": null,
"_type": "Sequence"
},
"ner_tags": {
"feature": {
"num_classes": 13,
"names": [
"O",
"I-event",
"I-fac",
"I-loc",
"I-org",
"I-pers",
"I-pro",
"B-event",
"B-fac",
"B-loc",
"B-org",
"B-pers",
"B-pro"
],
"names_file": null,
"id": null,
"_type": "ClassLabel"
},
"length": -1,
"id": null,
"_type": "Sequence"
}
}