asimov_multimodal_auto_val,asimov_multimodal_auto_val,asimov_multimodal_auto_val

  • Descrição :

(Imagem, contexto, instrução) trigêmeos gerados a partir de imagens reais (do conjunto de dados RoboVQA) que são modificados para conter elementos indesejáveis, as instruções geradas podem ser desejáveis ​​ou indesejáveis ​​(conjunto de validação).

Dividir Exemplos
'val' 50
  • Estrutura de recursos :
FeaturesDict({
    'image': Image(shape=(None, None, 3), dtype=uint8),
    'instructions': Sequence({
        'context': Text(shape=(), dtype=string),
        'instruction': Text(shape=(), dtype=string),
        'prompt_with_constitution': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_without_constitution': Text(shape=(), dtype=string),
        'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'undesirable_groundtruth_answer': bool,
    }),
    'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
  • Documentação de recursos :
Recurso Aula Forma Tipo D Descrição
RecursosDict
imagem Imagem (Nenhum, Nenhum, 3) uint8
instruções Sequência
instruções/contexto Texto corda
instruções/instruções Texto corda
instruções/prompt_com_constituição Texto corda
instruções/prompt_with_constitution_chain_of_thought Texto corda
instruções/prompt_with_constitution_chain_of_thought_antijailbreak Texto corda
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_adversary Texto corda
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts Sequência (Texto) (Nenhum,) corda
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_parts Sequência (Texto) (Nenhum,) corda
instruções/prompt_with_constitution_chain_of_thought_parts Sequência (Texto) (Nenhum,) corda
instruções/prompt_with_constitution_parts Sequência (Texto) (Nenhum,) corda
instruções/prompt_sem_constituição Texto corda
instruções/prompt_without_constitution_parts Sequência (Texto) (Nenhum,) corda
instruções/indesejável_groundtruth_answer Tensor bool
imagem_original Imagem (Nenhum, Nenhum, 3) uint8
  • Citação :
@article{sermanet2025asimov,
  author    = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
  title     = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
  journal   = {arXiv preprint arXiv:2503.08663},
  url       = {https://arxiv.org/abs/2503.08663},
  year      = {2025},
}
,

  • Descrição :

(Imagem, contexto, instrução) trigêmeos gerados a partir de imagens reais (do conjunto de dados RoboVQA) que são modificados para conter elementos indesejáveis, as instruções geradas podem ser desejáveis ​​ou indesejáveis ​​(conjunto de validação).

Dividir Exemplos
'val' 50
  • Estrutura de recursos :
FeaturesDict({
    'image': Image(shape=(None, None, 3), dtype=uint8),
    'instructions': Sequence({
        'context': Text(shape=(), dtype=string),
        'instruction': Text(shape=(), dtype=string),
        'prompt_with_constitution': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_without_constitution': Text(shape=(), dtype=string),
        'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'undesirable_groundtruth_answer': bool,
    }),
    'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
  • Documentação de recursos :
Recurso Aula Forma Tipo D Descrição
RecursosDict
imagem Imagem (Nenhum, Nenhum, 3) uint8
instruções Sequência
instruções/contexto Texto corda
instruções/instrução Texto corda
instruções/prompt_com_constituição Texto corda
instruções/prompt_with_constitution_chain_of_thought Texto corda
instruções/prompt_with_constitution_chain_of_thought_antijailbreak Texto corda
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_adversary Texto corda
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts Sequência (Texto) (Nenhum,) corda
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_parts Sequência (Texto) (Nenhum,) corda
instruções/prompt_with_constitution_chain_of_thought_parts Sequência (Texto) (Nenhum,) corda
instruções/prompt_with_constitution_parts Sequência (Texto) (Nenhum,) corda
instruções/prompt_sem_constituição Texto corda
instruções/prompt_without_constitution_parts Sequência (Texto) (Nenhum,) corda
instruções/indesejável_groundtruth_answer Tensor bool
imagem_original Imagem (Nenhum, Nenhum, 3) uint8
  • Citação :
@article{sermanet2025asimov,
  author    = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
  title     = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
  journal   = {arXiv preprint arXiv:2503.08663},
  url       = {https://arxiv.org/abs/2503.08663},
  year      = {2025},
}
,

  • Descrição :

(Imagem, contexto, instrução) trigêmeos gerados a partir de imagens reais (do conjunto de dados RoboVQA) que são modificados para conter elementos indesejáveis, as instruções geradas podem ser desejáveis ​​ou indesejáveis ​​(conjunto de validação).

Dividir Exemplos
'val' 50
  • Estrutura de recursos :
FeaturesDict({
    'image': Image(shape=(None, None, 3), dtype=uint8),
    'instructions': Sequence({
        'context': Text(shape=(), dtype=string),
        'instruction': Text(shape=(), dtype=string),
        'prompt_with_constitution': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_without_constitution': Text(shape=(), dtype=string),
        'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'undesirable_groundtruth_answer': bool,
    }),
    'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
  • Documentação de recursos :
Recurso Aula Forma Tipo D Descrição
RecursosDict
imagem Imagem (Nenhum, Nenhum, 3) uint8
instruções Sequência
instruções/contexto Texto corda
instruções/instrução Texto corda
instruções/prompt_com_constituição Texto corda
instruções/prompt_with_constitution_chain_of_thought Texto corda
instruções/prompt_with_constitution_chain_of_thought_antijailbreak Texto corda
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_adversary Texto corda
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts Sequência (Texto) (Nenhum,) corda
instruções/prompt_with_constitution_chain_of_thought_antijailbreak_parts Sequência (Texto) (Nenhum,) corda
instruções/prompt_with_constitution_chain_of_thought_parts Sequência (Texto) (Nenhum,) corda
instruções/prompt_with_constitution_parts Sequência (Texto) (Nenhum,) corda
instruções/prompt_sem_constituição Texto corda
instruções/prompt_without_constitution_parts Sequência (Texto) (Nenhum,) corda
instruções/indesejável_groundtruth_answer Tensor bool
imagem_original Imagem (Nenhum, Nenhum, 3) uint8
  • Citação :
@article{sermanet2025asimov,
  author    = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
  title     = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
  journal   = {arXiv preprint arXiv:2503.08663},
  url       = {https://arxiv.org/abs/2503.08663},
  year      = {2025},
}