Crea un conjunto de datos que fragmenta el conjunto de datos de entrada.
Crea un conjunto de datos que fragmenta el conjunto de datos de entrada mediante num_workers, devolviendo un conjunto de datos fragmentado para el trabajador index-ésimo. Esto intenta fragmentar automáticamente un conjunto de datos examinando el gráfico del conjunto de datos e insertando una operación de fragmento antes de las entradas a un conjunto de datos lector (por ejemplo, CSVDataset, TFRecordDataset).
Este conjunto de datos generará un error NotFound si no podemos fragmentarlo automáticamente.
Clases anidadas
| clase | AutoShardDataset.Opciones | Atributos opcionales para AutoShardDataset | |
Constantes
| Cadena | OP_NOMBRE | El nombre de esta operación, como lo conoce el motor central de TensorFlow. |
Métodos públicos
| Salida < Tipo T > | como salida () Devuelve el identificador simbólico del tensor. |
| Opciones estáticas de AutoShardDataset. | autoShardPolicy (autoShardPolicy largo) |
| AutoShardDataset estático | crear ( alcance alcance , operando <?> inputDataset, operando < TInt64 > numWorkers, operando < TInt64 > índice, lista <clase <? extiende TType >> tipos de salida, lista < forma > formas de salida, opciones... opciones) Método de fábrica para crear una clase que envuelve una nueva operación de AutoShardDataset. |
| Salida <?> | manejar () |
Métodos heredados
Constantes
Cadena final estática pública OP_NAME
El nombre de esta operación, como lo conoce el motor central de TensorFlow.
Métodos públicos
Salida pública < TType > asOutput ()
Devuelve el identificador simbólico del tensor.
Las entradas a las operaciones de TensorFlow son salidas de otra operación de TensorFlow. Este método se utiliza para obtener un identificador simbólico que representa el cálculo de la entrada.
creación pública estática de AutoShardDataset (alcance del alcance , operando <?> inputDataset, operando < TInt64 > numWorkers, operando < TInt64 > índice, lista <clase <? extiende TType >> tipos de salida, lista < forma > formas de salida, opciones... opciones)
Método de fábrica para crear una clase que envuelve una nueva operación de AutoShardDataset.
Parámetros
| alcance | alcance actual |
|---|---|
| conjunto de datos de entrada | Un tensor variante que representa el conjunto de datos de entrada. |
| numeroTrabajadores | Un escalar que representa la cantidad de trabajadores para distribuir este conjunto de datos. |
| índice | Un escalar que representa el índice del trabajador actual entre num_workers. |
| opciones | lleva valores de atributos opcionales |
Devoluciones
- una nueva instancia de AutoShardDataset