mimic_play

  • وصف :

مجموعة بيانات حقيقية مكونة من 14 مهمة معالجة طويلة المدى. مزيج من بيانات اللعب البشري وبيانات ذراع الروبوت الفردية التي تؤدي نفس المهام.

  • الصفحة الرئيسية : https://mimimic-play.github.io/

  • كود المصدر : tfds.robotics.rtx.MimicPlay

  • الإصدارات :

    • 0.1.0 (افتراضي): الإصدار الأولي.
  • حجم التحميل : Unknown size

  • حجم مجموعة البيانات : 7.14 GiB

  • التخزين المؤقت التلقائي ( الوثائق ): لا

  • الإنشقاقات :

ينقسم أمثلة
'train' 378
  • هيكل الميزة :
FeaturesDict({
    'episode_metadata': FeaturesDict({
        'file_path': string,
    }),
    'steps': Dataset({
        'action': Tensor(shape=(7,), dtype=float32),
        'discount': Scalar(shape=(), dtype=float32),
        'is_first': bool,
        'is_last': bool,
        'is_terminal': bool,
        'language_embedding': Tensor(shape=(512,), dtype=float32),
        'language_instruction': string,
        'observation': FeaturesDict({
            'image': FeaturesDict({
                'front_image_1': Image(shape=(120, 120, 3), dtype=uint8),
                'front_image_2': Image(shape=(120, 120, 3), dtype=uint8),
            }),
            'state': FeaturesDict({
                'ee_pose': Tensor(shape=(7,), dtype=float32),
                'gripper_position': float32,
                'joint_positions': Tensor(shape=(7,), dtype=float32),
                'joint_velocities': Tensor(shape=(7,), dtype=float32),
            }),
            'wrist_image': FeaturesDict({
                'wrist_image': Image(shape=(120, 120, 3), dtype=uint8),
            }),
        }),
        'reward': Scalar(shape=(), dtype=float32),
    }),
})
  • وثائق الميزة :
ميزة فصل شكل نوع D وصف
المميزاتDict
الحلقة_البيانات الوصفية المميزاتDict
Episode_metadata/file_path الموتر خيط
خطوات مجموعة البيانات
الخطوات/الإجراء الموتر (7،) float32
الخطوات/الخصم العددية float32
الخطوات/is_first الموتر منطقي
الخطوات/is_last الموتر منطقي
الخطوات/is_terminal الموتر منطقي
الخطوات/language_embedding الموتر (512،) float32
الخطوات/language_instruction الموتر خيط
الخطوات/الملاحظة المميزاتDict
الخطوات/الملاحظة/الصورة المميزاتDict
الخطوات/الملاحظة/صورة/front_image_1 صورة (120، 120، 3) uint8
الخطوات/الملاحظة/الصورة/front_image_2 صورة (120، 120، 3) uint8
الخطوات/الملاحظة/الحالة المميزاتDict
الخطوات/الملاحظة/الدولة/ee_pose الموتر (7،) float32
الخطوات/الملاحظة/الحالة/gripper_position الموتر float32
الخطوات/الملاحظة/الحالة/المفاصل_المواضع الموتر (7،) float32
الخطوات/الملاحظة/الحالة/السرعات المشتركة الموتر (7،) float32
الخطوات/الملاحظة/wrist_image المميزاتDict
الخطوات/الملاحظة/wrist_image/wrist_image صورة (120، 120، 3) uint8
خطوات/مكافأة العددية float32
  • الاقتباس :
@article{wang2023mimicplay,title={Mimicplay: Long-horizon imitation learning by watching human play},author={Wang, Chen and Fan, Linxi and Sun, Jiankai and Zhang, Ruohan and Fei-Fei, Li and Xu, Danfei and Zhu, Yuke and Anandkumar, Anima},journal={arXiv preprint arXiv:2302.12422},year={2023} }