概要
コレクションでコンテンツを整理
必要に応じて、コンテンツの保存と分類を行います。
ここ数年ほど、ニューラルネットワークアーキテクチャに挿入できる新しい差別化可能なグラフィックスレイヤーが増加しています。空間トランスフォーマーから差別化可能なグラフィックスレンダラーまで、新しいレイヤーはコンピュータビジョンとグラフィックスの研究で長年培われてきた知識を活用し、新しく、より効率的なネットワークアーキテクチャを構築しています。幾何学的な事前条件と制限をニューラルネットワークに明示的にモデル化することで、自己監視方式で堅牢で効率的かつより重要な方法でトレーニングできるアーキテクチャへの扉が開かれています。
大まかに言えば、コンピュータグラフィックスのパイプラインには、3D オブジェクトの表現、シーン内の絶対的位置、作成に使用される材料の説明、照明、およびカメラが必要です。このようなシーンの説明はレンダラーに解釈された上で、合成レンダリングが生成されます。
それと比べ、コンピュータビジョンシステムは画像をもとに
、シーンのパラメータを推論します。このため、シーンにどのようなオブジェクトがあるのか、どのような材料で作られているのか、および 3 次元の位置と向きの予測を行うことができます。
このような複雑な 3D ビジョンタスクを解決できる機械学習システムのトレーニングには、ほとんどの場合、大量のデータが必要となります。データのラベル付けはコストが高く、複雑なプロセスであるため、3 次元の世界を理解する一方で、あまり監督を必要とせずにトレーニングできる機械学習モデルの設計メカニズムが用意されていることが重要となります。コンピュータビジョンとコンピュータグラフィックスのテクニックを組み合わせれば、膨大な量の、ラベル付けされていない、すぐに利用できるデータを活用できるユニークな機会が得られます。下の画像に示されるとおり、たとえばビジョンシステムがシーンパラメータを抽出して、そのパラメータに基づいて、グラフィックスシステムが画像をレンダリングし直すという合成による分析を使用すれば、実現が可能と言えます。レンダリングが元の画像に一致すれば、ビジョンシステムはシーンのパラメータを正確に抽出したことになります。このセットアップでは、コンピュータビジョンとコンピュータグラフィックスはセットとして連携し、自己エンコーダに似た、自己監視式でトレーニングできる単一の機械学習システムを形成しています。
Tensorflow Graphics は、この種のチャレンジの一助となるように開発中であり、任意の機械学習モデルのトレーニングとデバッグに使用できる、差別化可能なグラフィックスと幾何学レイヤー(カメラ、反射モデル、空間トランスフォーマー、メッシュ畳み込みなど)と 3D ビューア機能(3D TensorBoard など)を提供しています。
特に記載のない限り、このページのコンテンツはクリエイティブ・コモンズの表示 4.0 ライセンスにより使用許諾されます。コードサンプルは Apache 2.0 ライセンスにより使用許諾されます。詳しくは、Google Developers サイトのポリシーをご覧ください。Java は Oracle および関連会社の登録商標です。
最終更新日 2022-08-09 UTC。
[{
"type": "thumb-down",
"id": "missingTheInformationINeed",
"label":"必要な情報がない"
},{
"type": "thumb-down",
"id": "tooComplicatedTooManySteps",
"label":"複雑すぎる / 手順が多すぎる"
},{
"type": "thumb-down",
"id": "outOfDate",
"label":"最新ではない"
},{
"type": "thumb-down",
"id": "translationIssue",
"label":"翻訳に関する問題"
},{
"type": "thumb-down",
"id": "samplesCodeIssue",
"label":"サンプル / コードに問題がある"
},{
"type": "thumb-down",
"id": "otherDown",
"label":"その他"
}]
[{
"type": "thumb-up",
"id": "easyToUnderstand",
"label":"わかりやすい"
},{
"type": "thumb-up",
"id": "solvedMyProblem",
"label":"問題の解決に役立った"
},{
"type": "thumb-up",
"id": "otherUp",
"label":"その他"
}]
{"lastModified": "\u6700\u7d42\u66f4\u65b0\u65e5 2022-08-09 UTC\u3002"}
[[["わかりやすい","easyToUnderstand","thumb-up"],["問題の解決に役立った","solvedMyProblem","thumb-up"],["その他","otherUp","thumb-up"]],[["必要な情報がない","missingTheInformationINeed","thumb-down"],["複雑すぎる / 手順が多すぎる","tooComplicatedTooManySteps","thumb-down"],["最新ではない","outOfDate","thumb-down"],["翻訳に関する問題","translationIssue","thumb-down"],["サンプル / コードに問題がある","samplesCodeIssue","thumb-down"],["その他","otherDown","thumb-down"]],["最終更新日 2022-08-09 UTC。"],[],[]]