Halaman ini menjelaskan cara membuat pustaka TensorFlow Lite untuk komputer berbasis ARM.
TensorFlow Lite mendukung dua sistem build dan fitur yang didukung dari setiap sistem build tidak sama. Periksa tabel berikut untuk memilih sistem build yang tepat.
Fitur | Bazel | CMembuat |
---|---|---|
Rantai alat yang telah ditentukan sebelumnya | armhf, aarch64 | armel, armhf, aarch64 |
Rantai alat khusus | lebih sulit untuk digunakan | mudah digunakan |
Pilih operasi TF | didukung | tidak didukung |
Delegasi GPU | hanya tersedia untuk Android | platform apa pun yang mendukung OpenCL |
Paket XNN | didukung | didukung |
Roda Python | didukung | didukung |
CAPI | didukung | didukung |
API C++ | didukung untuk proyek Bazel | didukung untuk proyek CMake |
Kompilasi silang untuk ARM dengan CMake
Jika Anda memiliki proyek CMake atau ingin menggunakan rantai alat khusus, sebaiknya gunakan CMake untuk kompilasi silang. Ada halaman TensorFlow Lite kompilasi silang terpisah dengan CMake yang tersedia untuk ini.
Kompilasi silang untuk ARM dengan Bazel
Jika Anda memiliki proyek Bazel atau ingin menggunakan operasi TF, sebaiknya gunakan sistem build Bazel. Anda akan menggunakan toolchain ARM GCC 8.3 terintegrasi dengan Bazel untuk membangun perpustakaan bersama ARM32/64.
Arsitektur Sasaran | Konfigurasi Bazel | Perangkat yang Kompatibel |
---|---|---|
armhf (ARM32) | --config=elinux_armhf | RPI3, RPI4 dengan OS Raspberry Pi 32-bit |
AArch64 (ARM64) | --config=elinux_aarch64 | Karang, RPI4 dengan Ubuntu 64 bit |
Petunjuk berikut telah diuji pada Ubuntu 16.04.3 64-bit PC (AMD64) dan TensorFlow devel docker image tensorflow/tensorflow:devel .
Untuk melakukan kompilasi silang TensorFlow Lite dengan Bazel, ikuti langkah-langkahnya:
Langkah 1. Instal Bazel
Bazel adalah sistem build utama untuk TensorFlow. Instal versi terbaru sistem build Bazel .
Langkah 2. Kloning repositori TensorFlow
git clone https://github.com/tensorflow/tensorflow.git tensorflow_src
Langkah 3. Bangun biner ARM
perpustakaan C
bazel build --config=elinux_aarch64 -c opt //tensorflow/lite/c:libtensorflowlite_c.so
Anda dapat menemukan perpustakaan bersama di: bazel-bin/tensorflow/lite/c/libtensorflowlite_c.so
.
Periksa halaman TensorFlow Lite C API untuk mengetahui detailnya.
perpustakaan C++
bazel build --config=elinux_aarch64 -c opt //tensorflow/lite:libtensorflowlite.so
Anda dapat menemukan perpustakaan bersama di: bazel-bin/tensorflow/lite/libtensorflowlite.so
.
Saat ini, tidak ada cara langsung untuk mengekstrak semua file header yang diperlukan, jadi Anda harus menyertakan semua file header di tensorflow/lite/ dari repositori TensorFlow. Selain itu, Anda memerlukan file header dari FlatBuffers dan Abseil.
Dll
Anda juga dapat membuat target Bazel lainnya dengan rantai alat. Berikut adalah beberapa target yang berguna.
- //tensorflow/lite/tools/benchmark:benchmark_model
- //tensorflow/lite/examples/label_image:label_image