การอ้างอิง API สำหรับไลบรารีข้อความและ NLP

เคราสNLP

การอ้างอิง API

วิธีที่ง่ายที่สุดในการเริ่มต้นประมวลผลข้อความใน TensorFlow คือการใช้ KerasNLP ซึ่งเป็นไลบรารีการประมวลผลภาษาธรรมชาติที่มีส่วนประกอบแบบโมดูลาร์พร้อมน้ำหนักและสถาปัตยกรรมที่ตั้งไว้ล่วงหน้าที่ล้ำสมัย คุณสามารถใช้ส่วนประกอบ KerasNLP ได้ทันทีหรือปรับแต่งได้ตามต้องการ KerasNLP เน้นการคำนวณในกราฟสำหรับเวิร์กโฟลว์ทั้งหมด ดังนั้นคุณจึงสามารถคาดหวังการผลิตที่ง่ายดายโดยใช้ระบบนิเวศ TensorFlow

หากต้องการติดตั้ง KerasNLP โปรดดู การติดตั้ง

ข้อความเทนเซอร์โฟลว์

การอ้างอิง API

แพ็คเกจ tensorflow_text มีคอลเลกชันของคลาสที่เกี่ยวข้องกับข้อความและการดำเนินการที่พร้อมใช้งานกับ TensorFlow ไลบรารีสามารถทำการประมวลผลล่วงหน้าซึ่งจำเป็นสำหรับโมเดลแบบข้อความเป็นประจำ และมีคุณสมบัติอื่นๆ ที่เป็นประโยชน์สำหรับการสร้างแบบจำลองลำดับที่ไม่ได้มาจาก Core TensorFlow

สำหรับรายละเอียดการติดตั้ง โปรดดู คำแนะนำ

โมเดล TensorFlow - NLP

การอ้างอิง API

พื้นที่เก็บข้อมูล TensorFlow Models นำเสนอการใช้งานโมเดลที่ล้ำสมัย (SOTA) แพ็คเกจ pip tensorflow-models-official ประกอบด้วยฟังก์ชันและคลาสระดับสูงมากมายสำหรับการสร้างแบบจำลอง SOTA NLP รวมถึง nlp.layers , nlp.losses , nlp.models และ nlp.tasks

คุณสามารถติดตั้งแพ็คเกจด้วย pip :

$ pip install tensorflow-models-official  # For the latest release
$ #or
$ pip install tf-models-nightly # For the nightly build

ฟังก์ชันการทำงานของ NLP มีอยู่ในโมดูลย่อย tfm.nlp

import tensorflow_models as tfm
tfm.nlp