escaneado a tierra

• Descripción :

Grounded SCAN (gSCAN) es un conjunto de datos sintéticos para evaluar la generalización compositiva en la comprensión del lenguaje situado. gSCAN combina instrucciones en lenguaje natural con secuencias de acción y requiere que el agente interprete las instrucciones dentro del contexto de un entorno de navegación visual basado en cuadrículas.

Se puede encontrar más información en:

• Para las divisiones de compositional_splits y la división de longitud de target_length_split : https://github.com/LauraRuis/groundedSCAN

• Para las spatial_relation_splits de relación espacial: https://github.com/google-research/language/tree/master/language/gscan/data

• Página de inicio: https://github.com/LauraRuis/groundedSCAN

• Código fuente : tfds.vision_language.grounded_scan.GroundedScan

• Versiones :

  • 1.0.0 : Versión inicial.
  • 1.1.0 : Se cambió la función de vector a Texto ().
  • 2.0.0 (predeterminado): agrega la nueva configuración de división_relación_espacial.

• Almacenamiento automático en caché ( documentación ): No

• Estructura de características :

FeaturesDict({
    'command': Sequence(Text(shape=(), dtype=string)),
    'manner': Text(shape=(), dtype=string),
    'meaning': Sequence(Text(shape=(), dtype=string)),
    'referred_target': Text(shape=(), dtype=string),
    'situation': FeaturesDict({
        'agent_direction': int32,
        'agent_position': FeaturesDict({
            'column': int32,
            'row': int32,
        }),
        'direction_to_target': Text(shape=(), dtype=string),
        'distance_to_target': int32,
        'grid_size': int32,
        'placed_objects': Sequence({
            'object': FeaturesDict({
                'color': Text(shape=(), dtype=string),
                'shape': Text(shape=(), dtype=string),
                'size': int32,
            }),
            'position': FeaturesDict({
                'column': int32,
                'row': int32,
            }),
            'vector': Text(shape=(), dtype=string),
        }),
        'target_object': FeaturesDict({
            'object': FeaturesDict({
                'color': Text(shape=(), dtype=string),
                'shape': Text(shape=(), dtype=string),
                'size': int32,
            }),
            'position': FeaturesDict({
                'column': int32,
                'row': int32,
            }),
            'vector': Text(shape=(), dtype=string),
        }),
    }),
    'target_commands': Sequence(Text(shape=(), dtype=string)),
    'verb_in_command': Text(shape=(), dtype=string),
})

• Documentación de características :

• Claves supervisadas (Ver as_supervised doc ): None

• Figura ( tfds.show_examples ): no compatible.

• Cita :

@inproceedings{NEURIPS2020_e5a90182,
 author = {Ruis, Laura and Andreas, Jacob and Baroni, Marco and Bouchacourt, Diane and Lake, Brenden M},
 booktitle = {Advances in Neural Information Processing Systems},
 editor = {H. Larochelle and M. Ranzato and R. Hadsell and M. F. Balcan and H. Lin},
 pages = {19861--19872},
 publisher = {Curran Associates, Inc.},
 title = {A Benchmark for Systematic Generalization in Grounded Language Understanding},
 url = {https://proceedings.neurips.cc/paper/2020/file/e5a90182cc81e12ab5e72d66e0b46fe3-Paper.pdf},
 volume = {33},
 year = {2020}
}

@inproceedings{qiu-etal-2021-systematic,
    title = "Systematic Generalization on g{SCAN}: {W}hat is Nearly Solved and What is Next?",
    author = "Qiu, Linlu  and
      Hu, Hexiang  and
      Zhang, Bowen  and
      Shaw, Peter  and
      Sha, Fei",
    booktitle = "Proceedings of the 2021 Conference on Empirical Methods in Natural Language Processing",
    month = nov,
    year = "2021",
    address = "Online and Punta Cana, Dominican Republic",
    publisher = "Association for Computational Linguistics",
    url = "https://aclanthology.org/2021.emnlp-main.166",
    doi = "10.18653/v1/2021.emnlp-main.166",
    pages = "2180--2188",
}

grounded_scan/compositional_splits (configuración predeterminada)

• Descripción de la configuración : Ejemplos de generalización compositiva.

• Tamaño de descarga : 82.10 MiB

• Tamaño del conjunto de datos : 998.11 MiB

• Divisiones :

• Ejemplos ( tfds.as_dataframe ):

Grounded_scan/Target_length_split

• Descripción de configuración : ejemplos para generalizar a longitudes de destino más grandes.

• Tamaño de la descarga : 53.41 MiB

• Tamaño del conjunto de datos : 546.73 MiB

• Divisiones :

• Ejemplos ( tfds.as_dataframe ):

grounded_scan/spatial_relation_splits

• Descripción de la configuración : Ejemplos de razonamiento de relaciones espaciales.

• Tamaño de la descarga : 89.59 MiB

• Tamaño del conjunto de datos : 675.09 MiB

• Divisiones :

• Ejemplos ( tfds.as_dataframe ):