Cria um conjunto de dados que fragmenta o conjunto de dados de entrada.
Cria um conjunto de dados que fragmenta o conjunto de dados de entrada por num_workers, retornando um conjunto de dados fragmentado para o trabalhador index-th. Isso tenta fragmentar automaticamente um conjunto de dados examinando o gráfico do conjunto de dados e inserindo um shard op antes das entradas para um conjunto de dados do leitor (por exemplo, CSVDataset, TFRecordDataset).
Este conjunto de dados lançará um erro NotFound se não pudermos fragmentar o conjunto de dados automaticamente.
Classes aninhadas
classe | ExperimentalAutoShardDataset.Options | Atributos opcionais para ExperimentalAutoShardDataset |
Métodos públicos
Saída <Objeto> | comoSaída () Retorna o identificador simbólico de um tensor. |
static ExperimentalAutoShardDataset.Options | autoShardPolicy (autoShardPolicy longo) |
static ExperimentalAutoShardDataset | |
Saída <?> | lidar () |
Métodos Herdados
Métodos públicos
Public Output <Object> asOutput ()
Retorna o identificador simbólico de um tensor.
As entradas para operações do TensorFlow são saídas de outra operação do TensorFlow. Este método é usado para obter um identificador simbólico que representa o cálculo da entrada.
public static ExperimentalAutoShardDataset create ( Escopo do escopo, Operando <?> inputDataset, Operando <Long> numWorkers, Operando <Long> index, List<Class<?>> outputTypes, List< Shape > outputShapes, Options... options)
Método de fábrica para criar uma classe que envolve uma nova operação ExperimentalAutoShardDataset.
Parâmetros
alcance | escopo atual |
---|---|
conjunto de dados de entrada | Um tensor variante que representa o conjunto de dados de entrada. |
numWorkers | Um escalar que representa o número de trabalhadores para distribuir esse conjunto de dados. |
índice | Um escalar que representa o índice do trabalhador atual de num_workers. |
opções | carrega valores de atributos opcionais |
Devoluções
- uma nova instância de ExperimentalAutoShardDataset