TFX パイプラインのオーケストレーション

Kubeflow パイプライン

Kubeflow は、Kubernetes 上での機械学習 (ML) ワークフローのデプロイメントをシンプル、ポータブル、スケーラブルにすることに特化したオープンソース ML プラットフォームです。 Kubeflow Pipelines は、実験およびノー​​トブック ベースのエクスペリエンスと統合された、Kubeflow 上での再現可能なワークフローの構成と実行を可能にする Kubeflow プラットフォームの一部です。 Kubernetes 上の Kubeflow Pipelines サービスには、ホストされたメタデータ ストア、コンテナ ベースのオーケストレーション エンジン、ノートブック サーバー、およびユーザーが複雑な ML パイプラインを大規模に開発、実行、管理できるようにする UI が含まれています。 Kubeflow Pipelines SDK を使用すると、コンポーネントと構成、およびパイプラインをプログラムで作成および共有できます。

Google Cloud 上で大規模に TFX を実行する方法の詳細については、Kubeflow Pipelines の TFX の例をご覧ください。