AutoShardDataset

classe final pública AutoShardDataset

Cria um conjunto de dados que fragmenta o conjunto de dados de entrada.

Cria um conjunto de dados que fragmenta o conjunto de dados de entrada por num_workers, retornando um conjunto de dados fragmentado para o índice-ésimo trabalhador. Isso tenta fragmentar automaticamente um conjunto de dados examinando o gráfico do conjunto de dados e inserindo uma operação de fragmento antes das entradas para um conjunto de dados leitor (por exemplo, CSVDataset, TFRecordDataset).

Este conjunto de dados gerará um erro NotFound se não pudermos fragmentar o conjunto de dados automaticamente.

Classes aninhadas

aula AutoShardDataset.Options Atributos opcionais para AutoShardDataset

Constantes

Corda OP_NAME O nome desta operação, conforme conhecido pelo mecanismo principal do TensorFlow

Métodos Públicos

Saída <TType>
asOutput ()
Retorna o identificador simbólico do tensor.
AutoShardDataset.Options estático
autoShardPolicy (autoShardPolicy longo)
AutoShardDataset estático
create ( Escopo do escopo , Operando <?> inputDataset, Operando < TInt64 > numWorkers, Operando < TInt64 > índice, List<Class<? estende TType >> outputTypes, List< Shape > outputShapes, Options... opções)
Método de fábrica para criar uma classe que envolve uma nova operação AutoShardDataset.
Saída <?>
lidar ()

Métodos herdados

Constantes

String final estática pública OP_NAME

O nome desta operação, conforme conhecido pelo mecanismo principal do TensorFlow

Valor constante: "ExperimentalAutoShardDataset"

Métodos Públicos

saída pública < TType > asOutput ()

Retorna o identificador simbólico do tensor.

As entradas para operações do TensorFlow são saídas de outra operação do TensorFlow. Este método é usado para obter um identificador simbólico que representa o cálculo da entrada.

público estático AutoShardDataset.Options autoShardPolicy (autoShardPolicy longo)

public static AutoShardDataset create ( Escopo de escopo , Operando <?> inputDataset, Operando < TInt64 > numWorkers, Operando < TInt64 > índice, List<Class<? estende TType >> outputTypes, List< Shape > outputShapes, Opções... opções)

Método de fábrica para criar uma classe que envolve uma nova operação AutoShardDataset.

Parâmetros
escopo escopo atual
conjunto de dados de entrada Um tensor variante que representa o conjunto de dados de entrada.
numWorkers Um escalar que representa o número de trabalhadores para distribuir este conjunto de dados.
índice Um escalar que representa o índice do trabalhador atual de num_workers.
opções carrega valores de atributos opcionais
Devoluções
  • uma nova instância do AutoShardDataset

Saída pública <?> identificador ()