Giriş veri kümesini parçalayan bir veri kümesi oluşturur.
Giriş veri kümesini num_workers'a göre parçalayan ve dizin inci çalışan için parçalanmış bir veri kümesi döndüren bir veri kümesi oluşturur. Bu, Veri Kümesi grafiğini inceleyerek ve bir okuyucu Veri Kümesine (örn. CSVDataset, TFRecordDataset) girişlerden önce bir parçalama işlemi ekleyerek bir veri kümesini otomatik olarak parçalamaya çalışır.
Veri kümesini otomatik olarak parçalayamazsak, bu veri kümesi NotFound hatası verecektir.
İç İçe Sınıflar
sınıf | ExperimentalAutoShardDataset.Options | ExperimentalAutoShardDataset için isteğe bağlı özellikler |
Genel Yöntemler
Çıkış <Nesne> | Çıkış olarak () Bir tensörün sembolik tutamacını döndürür. |
statik ExperimentalAutoShardDataset.Options | autoShardPolicy (Uzun autoShardPolicy) |
statik ExperimentalAutoShardDataset | |
Çıkış <?> | halletmek () |
Kalıtsal Yöntemler
Genel Yöntemler
public Output <Object> asOutput ()
Bir tensörün sembolik tutamacını döndürür.
TensorFlow işlemlerinin girdileri, başka bir TensorFlow işleminin çıktılarıdır. Bu yöntem, girişin hesaplanmasını temsil eden sembolik bir tanıtıcı elde etmek için kullanılır.
public static ExperimentalAutoShardDataset create ( Kapsam kapsamı, İşlenen <?> inputDataset, İşlenen <Uzun> numWorkers, İşlenen <Uzun> dizini, Liste<Sınıf<?>> çıktı Türleri, Liste< Şekil > çıktı Şekilleri, Seçenekler... seçenekler)
Yeni bir ExperimentalAutoShardDataset işlemini saran bir sınıf oluşturmaya yönelik fabrika yöntemi.
Parametreler
kapsam | mevcut kapsam |
---|---|
girişVeri Kümesi | Giriş veri kümesini temsil eden değişken bir tensör. |
Sayıİşçiler | Bu veri kümesinin dağıtılacağı çalışan sayısını temsil eden bir skaler. |
dizin | Çalışan_sayısı arasından mevcut çalışanın endeksini temsil eden bir skaler. |
seçenekler | isteğe bağlı nitelik değerlerini taşır |
İadeler
- ExperimentalAutoShardDataset'in yeni bir örneği