- Keterangan :
(Gambar, konteks, instruksi) triplet yang dihasilkan dari gambar nyata (dari dataset RoboVQA) yang dimodifikasi agar mengandung elemen yang tidak diinginkan, instruksi yang dihasilkan dapat diinginkan atau tidak diinginkan (set validasi).
Beranda : https://asimov-benchmark.github.io/
Kode sumber :
tfds.robotics.asimov.AsimovMultimodalAutoVal
Versi :
-
0.1.0
(default): Rilis awal.
-
Ukuran unduhan :
Unknown size
Ukuran kumpulan data :
29.03 MiB
Cache otomatis ( dokumentasi ): Ya
Perpecahan :
Membelah | Contoh |
---|---|
'val' | 50 |
- Struktur fitur :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Dokumentasi fitur :
Fitur | Kelas | Membentuk | Tipe D | Keterangan |
---|---|---|---|---|
FiturDict | ||||
gambar | Gambar | (Tidak ada, Tidak ada, 3) | uint8 | |
instruksi | Urutan | |||
instruksi/konteks | Teks | rangkaian | ||
petunjuk/instruksi | Teks | rangkaian | ||
instruksi/prompt_with_constitution | Teks | rangkaian | ||
instruksi/prompt_with_constitution_chain_of_think | Teks | rangkaian | ||
instruksi/prompt_with_constitution_chain_of_think_antijailbreak | Teks | rangkaian | ||
instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_adversary | Teks | rangkaian | ||
instruksi/prompt_dengan_konstitusi_rantai_pemikiran_antijailbreak_adversary_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_with_constitution_chain_of_ thought_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_with_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_tanpa_konstitusi | Teks | rangkaian | ||
instruksi/prompt_without_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/jawaban_dasar_yang tidak diinginkan | Tensor | bodoh | ||
gambar_asli | Gambar | (Tidak ada, Tidak ada, 3) | uint8 |
Kunci yang diawasi (Lihat dokumen
as_supervised
):None
Gambar ( tfds.show_examples ): Tidak didukung.
Contoh ( tfds.as_dataframe ):
- Kutipan :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Keterangan :
(Gambar, konteks, instruksi) triplet yang dihasilkan dari gambar nyata (dari dataset RoboVQA) yang dimodifikasi agar mengandung elemen yang tidak diinginkan, instruksi yang dihasilkan dapat diinginkan atau tidak diinginkan (set validasi).
Beranda : https://asimov-benchmark.github.io/
Kode sumber :
tfds.robotics.asimov.AsimovMultimodalAutoVal
Versi :
-
0.1.0
(default): Rilis awal.
-
Ukuran unduhan :
Unknown size
Ukuran kumpulan data :
29.03 MiB
Cache otomatis ( dokumentasi ): Ya
Perpecahan :
Membelah | Contoh |
---|---|
'val' | 50 |
- Struktur fitur :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Dokumentasi fitur :
Fitur | Kelas | Membentuk | Tipe D | Keterangan |
---|---|---|---|---|
FiturDict | ||||
gambar | Gambar | (Tidak ada, Tidak ada, 3) | uint8 | |
instruksi | Urutan | |||
instruksi/konteks | Teks | rangkaian | ||
petunjuk/instruksi | Teks | rangkaian | ||
instruksi/prompt_with_constitution | Teks | rangkaian | ||
instruksi/prompt_with_constitution_chain_of_think | Teks | rangkaian | ||
instruksi/prompt_with_constitution_chain_of_think_antijailbreak | Teks | rangkaian | ||
instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_adversary | Teks | rangkaian | ||
instruksi/prompt_dengan_konstitusi_rantai_pemikiran_antijailbreak_adversary_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_with_constitution_chain_of_ thought_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_with_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_tanpa_konstitusi | Teks | rangkaian | ||
instruksi/prompt_without_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/jawaban_dasar_yang tidak diinginkan | Tensor | bodoh | ||
gambar_asli | Gambar | (Tidak ada, Tidak ada, 3) | uint8 |
Kunci yang diawasi (Lihat dokumen
as_supervised
):None
Gambar ( tfds.show_examples ): Tidak didukung.
Contoh ( tfds.as_dataframe ):
- Kutipan :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Keterangan :
(Gambar, konteks, instruksi) triplet yang dihasilkan dari gambar nyata (dari dataset RoboVQA) yang dimodifikasi agar mengandung elemen yang tidak diinginkan, instruksi yang dihasilkan dapat diinginkan atau tidak diinginkan (set validasi).
Beranda : https://asimov-benchmark.github.io/
Kode sumber :
tfds.robotics.asimov.AsimovMultimodalAutoVal
Versi :
-
0.1.0
(default): Rilis awal.
-
Ukuran unduhan :
Unknown size
Ukuran kumpulan data :
29.03 MiB
Cache otomatis ( dokumentasi ): Ya
Perpecahan :
Membelah | Contoh |
---|---|
'val' | 50 |
- Struktur fitur :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Dokumentasi fitur :
Fitur | Kelas | Membentuk | Tipe D | Keterangan |
---|---|---|---|---|
FiturDict | ||||
gambar | Gambar | (Tidak ada, Tidak ada, 3) | uint8 | |
instruksi | Urutan | |||
instruksi/konteks | Teks | rangkaian | ||
petunjuk/instruksi | Teks | rangkaian | ||
instruksi/prompt_with_constitution | Teks | rangkaian | ||
instruksi/prompt_with_constitution_chain_of_think | Teks | rangkaian | ||
instruksi/prompt_with_constitution_chain_of_think_antijailbreak | Teks | rangkaian | ||
instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_adversary | Teks | rangkaian | ||
instruksi/prompt_dengan_konstitusi_rantai_pemikiran_antijailbreak_adversary_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_with_constitution_chain_of_ thought_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_with_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_tanpa_konstitusi | Teks | rangkaian | ||
instruksi/prompt_without_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/jawaban_dasar_yang tidak diinginkan | Tensor | bodoh | ||
gambar_asli | Gambar | (Tidak ada, Tidak ada, 3) | uint8 |
Kunci yang diawasi (Lihat dokumen
as_supervised
):None
Gambar ( tfds.show_examples ): Tidak didukung.
Contoh ( tfds.as_dataframe ):
- Kutipan :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Keterangan :
(Gambar, konteks, instruksi) triplet yang dihasilkan dari gambar nyata (dari dataset RoboVQA) yang dimodifikasi agar mengandung elemen yang tidak diinginkan, instruksi yang dihasilkan dapat diinginkan atau tidak diinginkan (set validasi).
Beranda : https://asimov-benchmark.github.io/
Kode sumber :
tfds.robotics.asimov.AsimovMultimodalAutoVal
Versi :
-
0.1.0
(default): Rilis awal.
-
Ukuran unduhan :
Unknown size
Ukuran kumpulan data :
29.03 MiB
Cache otomatis ( dokumentasi ): Ya
Perpecahan :
Membelah | Contoh |
---|---|
'val' | 50 |
- Struktur fitur :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Dokumentasi fitur :
Fitur | Kelas | Membentuk | Tipe D | Keterangan |
---|---|---|---|---|
FiturDict | ||||
gambar | Gambar | (Tidak ada, Tidak ada, 3) | uint8 | |
instruksi | Urutan | |||
instruksi/konteks | Teks | rangkaian | ||
petunjuk/instruksi | Teks | rangkaian | ||
instruksi/prompt_with_constitution | Teks | rangkaian | ||
instruksi/prompt_with_constitution_chain_of_think | Teks | rangkaian | ||
instruksi/prompt_with_constitution_chain_of_think_antijailbreak | Teks | rangkaian | ||
instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_adversary | Teks | rangkaian | ||
instruksi/prompt_dengan_konstitusi_rantai_pemikiran_antijailbreak_adversary_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_with_constitution_chain_of_ thought_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_with_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/prompt_tanpa_konstitusi | Teks | rangkaian | ||
instruksi/prompt_without_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
instruksi/jawaban_dasar_yang tidak diinginkan | Tensor | bodoh | ||
gambar_asli | Gambar | (Tidak ada, Tidak ada, 3) | uint8 |
Kunci yang diawasi (Lihat dokumen
as_supervised
):None
Gambar ( tfds.show_examples ): Tidak didukung.
Contoh ( tfds.as_dataframe ):
- Kutipan :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}