توفر البرامج التعليمية الخاصة بمعالجة النصوص TensorFlow إرشادات خطوة بخطوة لحل مشكلات معالجة النص واللغة الطبيعية الشائعة (NLP).
يوفر TensorFlow حلين لمعالجة النص واللغة الطبيعية: KerasNLP و TensorFlow Text. KerasNLP هي مكتبة NLP عالية المستوى تتضمن جميع أحدث النماذج المستندة إلى Transformer بالإضافة إلى أدوات الترميز ذات المستوى الأدنى. إنه الحل الموصى به لمعظم حالات استخدام البرمجة اللغوية العصبية.
إذا كنت بحاجة إلى الوصول إلى أدوات معالجة النصوص ذات المستوى الأدنى ، فيمكنك استخدام TensorFlow Text. يوفر TensorFlow Text مجموعة من العمليات والمكتبات لمساعدتك في العمل مع الإدخال في نموذج نص مثل سلاسل النص الخام أو المستندات.
KerasNLP
- الشروع في العمل مع KerasNLP : تعلم KerasNLP من خلال إجراء تحليل المشاعر بمستويات تقدمية من التعقيد ، من استخدام نموذج مدرب مسبقًا إلى بناء محولك الخاص من نقطة الصفر.
توليد النص
- إنشاء نص باستخدام RNN : قم بإنشاء نص باستخدام RNN قائم على الأحرف ومجموعة بيانات من كتابات شكسبير.
- الترجمة الآلية العصبية مع الانتباه : تدريب نموذج التسلسل إلى التسلسل (seq2seq) للترجمة من الإسبانية إلى الإنجليزية.
- الترجمة الآلية العصبية باستخدام Transformer و Keras : قم بإنشاء وتدريب نموذج Transformer من تسلسل إلى تسلسل لترجمة البرتغالية إلى الإنجليزية.
- التعليق على الصورة باهتمام بصري : قم بإنشاء تعليقات للصور باستخدام نموذج محول-فك ترميز مبني مع طبقات الانتباه.
تصنيف النص
- تصنيف النص باستخدام BERT : صقل BERT لإجراء تحليل المشاعر على مجموعة بيانات لمراجعات أفلام IMDb ذات النص العادي.
- تصنيف النص باستخدام RNN : تدريب RNN على إجراء تحليل المشاعر على مراجعات أفلام IMDb.
- TF.Text Metrics : تعرف على المقاييس المتاحة من خلال نص TensorFlow. تحتوي المكتبة على تطبيقات لمقاييس تشابه النص مثل ROUGE-L ، والتي يمكن استخدامها للتقييم التلقائي لنماذج إنشاء النص.
البرمجة اللغوية العصبية مع بيرت
- حل مهام الغراء باستخدام BERT على TPU : تعرف على كيفية ضبط BERT للمهام من معيار GLUE .
- صقل نموذج BERT : صقل نموذج BERT باستخدام TensorFlow Model Garden .
- التعلم العميق للغة مع عدم اليقين مع BERT-SNGP : تطبيق SNGP على مهمة فهم اللغة الطبيعية (NLU). بناءً على مشفر BERT ، ستعمل على تحسين قدرة نموذج NLU على اكتشاف الاستعلامات خارج النطاق.
حفلات الزفاف
- تضمين الكلمة : قم بتدريب حفلات الزفاف الخاصة بك باستخدام نموذج Keras البسيط لمهمة تصنيف المشاعر ، ثم تصورها باستخدام جهاز عرض التضمين .
- مصفوفة طبقة التضمين ذات البداية الدافئة : تعرف على كيفية "البدء الدافئ" للتدريب على نموذج تصنيف المشاعر النصية.
- word2vec : تدريب نموذج word2vec على مجموعة بيانات صغيرة وتصور حفلات الزفاف المدربة في جهاز عرض التضمين .