razonamiento abstracto

l10n-placeholder1 denota el conjunto de tipos de relación (progresión, XOR, OR, AND, unión consistente), \\(O\\) denota los tipos de objeto (forma, línea) y \\(A\\) denota los tipos de atributos (tamaño, color, número de posición). La estructura de una matriz, \\(S\\), es el conjunto de tripletas \\(S={[r, o, a]}\\) que determinan el desafío que plantea una determinada matriz. Para usar este conjunto de datos: ```python import tensorflow_datasets as tfds ds = tfds.load('abstract_reasoning', split='train') for ex in ds.take(4): print(ex) ``` Ver [la guía ](https://www.tensorflow.org/datasets/overview) para obtener más información sobre [tensorflow_datasets](https://www.tensorflow.org/datasets). " />
  • Descripción :

Datos de matrices generadas por procedimientos (PGM) del artículo Medición del razonamiento abstracto en redes neuronales, Barrett, Hill, Santoro et al. 2018. El objetivo es inferir la respuesta correcta de los paneles de contexto basados ​​en un razonamiento abstracto.

Para usar este conjunto de datos, descargue todos los archivos *.tar.gz de la página del conjunto de datos y colóquelos en ~/tensorflow_datasets/abstract_reasoning/.

\(R\) denota el conjunto de tipos de relación (progresión, XOR, OR, AND, unión consistente), \(O\) denota los tipos de objetos (forma, línea) y \(A\) denota los tipos de atributos (tamaño, color, posición, número). La estructura de una matriz,\(S\), es el conjunto de tripletas \(S={[r, o, a]}\) que determinan el desafío que plantea una determinada matriz.

Separar Ejemplos
'test' 200,000
'train' 1,200,000
'validation' 20,000
  • Estructura de características :
FeaturesDict({
    'answers': Video(Image(shape=(160, 160, 1), dtype=uint8)),
    'context': Video(Image(shape=(160, 160, 1), dtype=uint8)),
    'filename': Text(shape=(), dtype=string),
    'meta_target': Tensor(shape=(12,), dtype=int64),
    'relation_structure_encoded': Tensor(shape=(4, 12), dtype=int64),
    'target': ClassLabel(shape=(), dtype=int64, num_classes=8),
})
  • Documentación de características :
Rasgo Clase Forma Tipo D Descripción
CaracterísticasDict
respuestas Vídeo (Imagen) (8, 160, 160, 1) uint8
contexto Vídeo (Imagen) (8, 160, 160, 1) uint8
Nombre del archivo Texto cuerda
meta_objetivo Tensor (12,) int64
relación_estructura_codificado Tensor (4, 12) int64
objetivo Etiqueta de clase int64
@InProceedings{pmlr-v80-barrett18a,
  title =    {Measuring abstract reasoning in neural networks},
  author =   {Barrett, David and Hill, Felix and Santoro, Adam and Morcos, Ari and Lillicrap, Timothy},
  booktitle =    {Proceedings of the 35th International Conference on Machine Learning},
  pages =    {511--520},
  year =     {2018},
  editor =   {Dy, Jennifer and Krause, Andreas},
  volume =   {80},
  series =   {Proceedings of Machine Learning Research},
  address =      {Stockholmsmassan, Stockholm Sweden},
  month =    {10--15 Jul},
  publisher =    {PMLR},
  pdf =      {http://proceedings.mlr.press/v80/barrett18a/barrett18a.pdf},
  url =      {http://proceedings.mlr.press/v80/barrett18a.html},
  abstract =     {Whether neural networks can learn abstract reasoning or whetherthey merely rely on superficial statistics is a topic of recent debate. Here, we propose a dataset and challenge designed to probe abstract reasoning, inspired by a well-known human IQ test. To succeed at this challenge, models must cope with various generalisation 'regimes' in which the training data and test questions differ in clearly-defined ways. We show that popular models such as ResNets perform poorly, even when the training and test sets differ only minimally, and we present a novel architecture, with structure designed to encourage reasoning, that does significantly better. When we vary the way in which the test questions and training data differ, we find that our model is notably proficient at certain forms of generalisation, but notably weak at others. We further show that the model's ability to generalise improves markedly if it is trained to predict symbolic explanations for its answers. Altogether, we introduce and explore ways to both measure and induce stronger abstract reasoning in neural networks. Our freely-available dataset should motivate further progress in this direction.}
}

abstract_reasoning/neutral (configuración predeterminada)

  • Descripción de la configuración : las estructuras que codifican las matrices tanto en el
    los conjuntos de entrenamiento y prueba contienen triples \([r, o, a]\) para \(r \\in R\),
    \(o \\in O\)y \(a \\in A\). Los conjuntos de entrenamiento y prueba son disjuntos, con
    separación que ocurre al nivel de las variables de entrada (es decir, píxel
    manifestaciones).

  • Tamaño del conjunto de datos : 42.02 GiB

  • Ejemplos ( tfds.as_dataframe ):

razonamiento_abstracto/interpolación

  • Descripción de configuración : como en la división neutral, \(S\) constaba de cualquier
    triplica \([r, o, a]\). Para la interpolación, en el conjunto de entrenamiento, cuando el
    atributo era "color" o "tamaño" (es decir, los atributos ordenados), los valores de
    los atributos estaban restringidos a miembros indexados pares de un conjunto discreto,
    mientras que en el conjunto de prueba solo se permitieron valores indexados impares. Tenga en cuenta que todos
    \(S\) contenía algún triple \([r, o, a]\) con el atributo de color o tamaño.
    Por lo tanto, se requiere generalización para cada pregunta en el conjunto de prueba.

  • Tamaño del conjunto de datos : 37.09 GiB

  • Ejemplos ( tfds.as_dataframe ):

razonamiento_abstracto/extrapolación

  • Descripción de la configuración : Igual que en la interpolación, pero los valores de
    los atributos estaban restringidos a la mitad inferior del conjunto discreto durante
    entrenamiento, mientras que en el conjunto de prueba tomaron valores en la mitad superior.

  • Tamaño del conjunto de datos : 35.91 GiB

  • Ejemplos ( tfds.as_dataframe ):

razonamiento_abstracto/attr.rel.pairs

  • Descripción de la configuración : todos \(S\) contenían al menos dos triples,
    \(([r_1,o_1,a_1],[r_2,o_2,a_2]) = (t_1, t_2)\), de los cuales 400 son viables. Nosotros
    asignado aleatoriamente 360 ​​al conjunto de entrenamiento y 40 al conjunto de prueba. miembros
    \((t_1, t_2)\) de los 40 pares retenidos no ocurrieron juntos en estructuras\(S\)
    en el conjunto de entrenamiento, y todas las estructuras \(S\) tenían al menos uno de esos pares
    \((t_1, t_2)\) como un subconjunto.

  • Tamaño del conjunto de datos : 41.07 GiB

  • Ejemplos ( tfds.as_dataframe ):

razonamiento_abstracto/attr.rels

  • Descripción de la configuración : en nuestro conjunto de datos, hay 29 posibles
    triplica \([r,o,a]\). Asignamos siete de estos para el conjunto de prueba, al azar,
    pero tal que cada uno de los atributos se representó exactamente una vez en este conjunto.
    Estos triples retenidos nunca ocurrieron en preguntas en el set de entrenamiento, y
    cada \(S\) en el conjunto de prueba contenía al menos uno de ellos.

  • Tamaño del conjunto de datos : 41.45 GiB

  • Ejemplos ( tfds.as_dataframe ):

razonamiento_abstracto/attrs.pairs

  • Descripción de la configuración : \(S\) contenía al menos dos triples. hay 20
    (desordenados) pares viables de atributos \((a_1, a_2)\) tales que para algunos
    \(r_i, o_i, ([r_1,o_1,a_1],[r_2,o_2,a_2])\) es un par triple viable
    \(([r_1,o_1,a_1],[r_2,o_2,a_2]) = (t_1, t_2)\). Asignamos 16 de estos pares
    para entrenamiento y cuatro para pruebas. Para un par \((a_1, a_2)\) en el conjunto de prueba,
    \(S\) en el conjunto de entrenamiento contenía triples con \(a_1\) o \(a_2\). En la prueba
    conjunto, todos los \(S\) contenían triples con \(a_1\) y \(a_2\).

  • Tamaño del conjunto de datos : 40.98 GiB

  • Ejemplos ( tfds.as_dataframe ):

abstract_reasoning/attrs.shape.color

  • Descripción de la configuración : atributo retenido forma-color. \(S\) en
    el conjunto de entrenamiento no contenía triples con \(o\)=forma y \(a\)=color.
    Todas las estructuras que rigen los acertijos en el conjunto de prueba contenían al menos un triple
    con \(o\)=forma y \(a\)=color.

  • Tamaño del conjunto de datos : 41.21 GiB

  • Ejemplos ( tfds.as_dataframe ):

razonamiento_abstracto/attrs.line.type

  • Descripción de configuración : tipo de línea de atributo retenido. \(S\) en
    el conjunto de entrenamiento no contenía triples con \(o\)=línea y \(a\)=tipo.
    Todas las estructuras que rigen los acertijos en el conjunto de prueba contenían al menos un triple
    con \(o\)=línea y \(a\)=tipo.

  • Tamaño del conjunto de datos : 41.40 GiB

  • Ejemplos ( tfds.as_dataframe ):