Tworzy zestaw danych, który dzieli wejściowy zestaw danych.
Tworzy zestaw danych, który dzieli wejściowy zestaw danych na fragmenty przez num_workers, zwracając podzielony na fragmenty zestaw danych dla indeksowanego procesu roboczego. Próbuje to automatycznie podzielić zbiór danych na fragmenty, sprawdzając wykres zbioru danych i wstawiając operację fragmentu przed danymi wejściowymi do zbioru danych czytnika (np. CSVDataset, TFRecordDataset).
Ten zestaw danych zgłosi błąd NotFound, jeśli nie będzie można automatycznie podzielić zestawu danych.
Klasy zagnieżdżone
klasa | Eksperymentalny zestaw danych AutoShardDataset. Opcje | Opcjonalne atrybuty dla ExperimentalAutoShardDataset |
Metody publiczne
Wyjście <Obiekt> | jako wyjście () Zwraca symboliczny uchwyt tensora. |
statyczny ExperimentalAutoShardDataset.Options | autoShardPolicy (długie autoShardPolicy) |
statyczny zestaw danych eksperymentalnychAutoShardDataset | |
Wyjście <?> | uchwyt () |
Metody dziedziczone
Metody publiczne
publiczne wyjście <Obiekt> asOutput ()
Zwraca symboliczny uchwyt tensora.
Dane wejściowe operacji TensorFlow są wynikami innej operacji TensorFlow. Ta metoda służy do uzyskania symbolicznego uchwytu reprezentującego obliczenia danych wejściowych.
public static ExperimentalAutoShardDataset create ( Zakres zasięgu , Operand <?> inputDataset, Operand <Long> numWorkers, Operand <Long> indeks, Lista<Class<?>> OutputTypes, Lista< Shape > OutputShapes, Opcje... opcje)
Metoda fabryczna służąca do tworzenia klasy opakowującej nową operację ExperimentalAutoShardDataset.
Parametry
zakres | aktualny zakres |
---|---|
wejściowy zbiór danych | Tensor wariantu reprezentujący wejściowy zbiór danych. |
liczbaPracowników | Skalar reprezentujący liczbę procesów roboczych, pomiędzy którymi ma zostać rozprowadzony ten zestaw danych. |
indeks | Skalar reprezentujący indeks bieżącego pracownika spośród num_workers. |
opcje | przenosi opcjonalne wartości atrybutów |
Zwroty
- nowe wystąpienie ExperimentalAutoShardDataset