- Descrição :
(Imagem, contexto, instrução) trigêmeos gerados a partir de imagens reais (do conjunto de dados RoboVQA) que são modificados para conter elementos indesejáveis, as instruções geradas podem ser desejáveis ou indesejáveis (conjunto de validação).
Página inicial : https://asimov-benchmark.github.io/
Código fonte :
tfds.robotics.asimov.AsimovMultimodalAutoVal
Versões :
-
0.1.0
(padrão): versão inicial.
-
Tamanho do download :
Unknown size
Tamanho do conjunto de dados :
29.03 MiB
Armazenado em cache automaticamente ( documentação ): Sim
Divisões :
Dividir | Exemplos |
---|---|
'val' | 50 |
- Estrutura de recursos :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Documentação de recursos :
Recurso | Aula | Forma | Tipo D | Descrição |
---|---|---|---|---|
RecursosDict | ||||
imagem | Imagem | (Nenhum, Nenhum, 3) | uint8 | |
instruções | Sequência | |||
instruções/contexto | Texto | corda | ||
instruções/instruções | Texto | corda | ||
instruções/prompt_com_constituição | Texto | corda | ||
instruções/prompt_with_constitution_chain_of_thought | Texto | corda | ||
instruções/prompt_with_constitution_chain_of_thought_antijailbreak | Texto | corda | ||
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_adversary | Texto | corda | ||
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/prompt_with_constitution_chain_of_thought_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/prompt_with_constitution_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/prompt_sem_constituição | Texto | corda | ||
instruções/prompt_without_constitution_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/indesejável_groundtruth_answer | Tensor | bool | ||
imagem_original | Imagem | (Nenhum, Nenhum, 3) | uint8 |
Chaves supervisionadas (consulte o documento
as_supervised
):None
Figura ( tfds.show_examples ): Não suportado.
Exemplos ( tfds.as_dataframe ):
- Citação :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Descrição :
(Imagem, contexto, instrução) trigêmeos gerados a partir de imagens reais (do conjunto de dados RoboVQA) que são modificados para conter elementos indesejáveis, as instruções geradas podem ser desejáveis ou indesejáveis (conjunto de validação).
Página inicial : https://asimov-benchmark.github.io/
Código fonte :
tfds.robotics.asimov.AsimovMultimodalAutoVal
Versões :
-
0.1.0
(padrão): versão inicial.
-
Tamanho do download :
Unknown size
Tamanho do conjunto de dados :
29.03 MiB
Armazenado em cache automaticamente ( documentação ): Sim
Divisões :
Dividir | Exemplos |
---|---|
'val' | 50 |
- Estrutura de recursos :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Documentação de recursos :
Recurso | Aula | Forma | Tipo D | Descrição |
---|---|---|---|---|
RecursosDict | ||||
imagem | Imagem | (Nenhum, Nenhum, 3) | uint8 | |
instruções | Sequência | |||
instruções/contexto | Texto | corda | ||
instruções/instrução | Texto | corda | ||
instruções/prompt_com_constituição | Texto | corda | ||
instruções/prompt_with_constitution_chain_of_thought | Texto | corda | ||
instruções/prompt_with_constitution_chain_of_thought_antijailbreak | Texto | corda | ||
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_adversary | Texto | corda | ||
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/prompt_with_constitution_chain_of_thought_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/prompt_with_constitution_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/prompt_sem_constituição | Texto | corda | ||
instruções/prompt_without_constitution_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/indesejável_groundtruth_answer | Tensor | bool | ||
imagem_original | Imagem | (Nenhum, Nenhum, 3) | uint8 |
Chaves supervisionadas (consulte o documento
as_supervised
):None
Figura ( tfds.show_examples ): Não suportado.
Exemplos ( tfds.as_dataframe ):
- Citação :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Descrição :
(Imagem, contexto, instrução) trigêmeos gerados a partir de imagens reais (do conjunto de dados RoboVQA) que são modificados para conter elementos indesejáveis, as instruções geradas podem ser desejáveis ou indesejáveis (conjunto de validação).
Página inicial : https://asimov-benchmark.github.io/
Código fonte :
tfds.robotics.asimov.AsimovMultimodalAutoVal
Versões :
-
0.1.0
(padrão): versão inicial.
-
Tamanho do download :
Unknown size
Tamanho do conjunto de dados :
29.03 MiB
Armazenado em cache automaticamente ( documentação ): Sim
Divisões :
Dividir | Exemplos |
---|---|
'val' | 50 |
- Estrutura de recursos :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Documentação de recursos :
Recurso | Aula | Forma | Tipo D | Descrição |
---|---|---|---|---|
RecursosDict | ||||
imagem | Imagem | (Nenhum, Nenhum, 3) | uint8 | |
instruções | Sequência | |||
instruções/contexto | Texto | corda | ||
instruções/instrução | Texto | corda | ||
instruções/prompt_com_constituição | Texto | corda | ||
instruções/prompt_with_constitution_chain_of_thought | Texto | corda | ||
instruções/prompt_with_constitution_chain_of_thought_antijailbreak | Texto | corda | ||
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_adversary | Texto | corda | ||
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/prompt_with_constitution_chain_of_thought_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/prompt_with_constitution_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/prompt_sem_constituição | Texto | corda | ||
instruções/prompt_without_constitution_parts | Sequência (Texto) | (Nenhum,) | corda | |
instruções/indesejável_groundtruth_answer | Tensor | bool | ||
imagem_original | Imagem | (Nenhum, Nenhum, 3) | uint8 |
Chaves supervisionadas (consulte o documento
as_supervised
):None
Figura ( tfds.show_examples ): Não suportado.
Exemplos ( tfds.as_dataframe ):
- Citação :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}