KerasNLP
أسهل طريقة لبدء معالجة النص في TensorFlow هي استخدام KerasNLP، وهي مكتبة معالجة لغة طبيعية توفر مكونات معيارية بأحدث الأوزان والبنيات المعدة مسبقًا. يمكنك استخدام مكونات KerasNLP الجاهزة أو تخصيصها حسب الحاجة. يركز KerasNLP على الحساب في الرسم البياني لجميع مسارات العمل، لذلك يمكنك توقع إنتاج سهل باستخدام النظام البيئي TensorFlow.
لتثبيت KerasNLP، راجع التثبيت .
نص TensorFlow
توفر حزمة tensorflow_text مجموعة من الفئات والعمليات ذات الصلة بالنص الجاهزة للاستخدام مع TensorFlow. يمكن للمكتبة إجراء المعالجة المسبقة التي تتطلبها النماذج النصية بشكل منتظم، وتتضمن ميزات أخرى مفيدة لنمذجة التسلسل التي لا يوفرها TensorFlow الأساسي.
للحصول على تفاصيل التثبيت، راجع الدليل
نماذج TensorFlow - البرمجة اللغوية العصبية
يوفر مستودع نماذج TensorFlow تطبيقات لنماذج حديثة (SOTA). تتضمن حزمة النقاط tensorflow-models-official العديد من الوظائف والفئات عالية المستوى لبناء نماذج SOTA NLP بما في ذلك nlp.layers و nlp.losses و nlp.models و nlp.tasks .
يمكنك تثبيت الحزمة pip :
$ pip install tensorflow-models-official # For the latest release
$ #or
$ pip install tf-models-nightly # For the nightly build
تتوفر وظيفة البرمجة اللغوية العصبية (NLP) في الوحدة الفرعية tfm.nlp .
import tensorflow_models as tfm
tfm.nlp