- คำอธิบาย :
เกณฑ์มาตรฐาน Xtreme
การวัดประสิทธิภาพการโอนเงินข้ามภาษาของเกณฑ์มาตรฐาน Multilingual Encoder (XTREME) เป็นเกณฑ์มาตรฐานสำหรับการประเมินความสามารถทั่วไปในเชิงข้ามภาษาของแบบจำลองหลายภาษาที่ผ่านการฝึกอบรมล่วงหน้า ครอบคลุม 40 ภาษาที่มีความหลากหลายทางภาษา (ครอบคลุม 12 ตระกูลภาษา) และรวมถึงงานเก้างานที่ต้องให้เหตุผลโดยรวมเกี่ยวกับไวยากรณ์และความหมายในระดับต่างๆ ภาษาใน XTREME ได้รับการคัดเลือกเพื่อเพิ่มความหลากหลายของภาษา ความครอบคลุมในงานที่มีอยู่ และความพร้อมใช้งานของข้อมูลการฝึกอบรม กลุ่มคนเหล่านี้มีภาษาที่ยังไม่ได้รับการศึกษาจำนวนมาก เช่น ภาษาดราวิเดียน ทมิฬ (พูดในอินเดียตอนใต้ ศรีลังกา และสิงคโปร์) เตลูกูและมาลายาลัม (ส่วนใหญ่พูดในอินเดียตอนใต้) และภาษาไนเจอร์-คองโก สวาฮิลีและโยรูบา ในแอฟริกา.
สำหรับคำอธิบายโดยละเอียดของการวัดประสิทธิภาพ โปรดดู เอกสาร
- หน้าแรก :
https://sites.research.google/xtreme
รุ่น :
-
1.0.0
(ค่าเริ่มต้น): การเปิดตัวครั้งแรก
-
ชุดข้อมูลในเวอร์ชันเริ่มต้น :
-
xnli
:xtreme_xnli:1.1.0
-
pawsx
:xtreme_pawsx:1.0.0
- ตำแหน่ง :
pos
xtreme_pos:1.0.0
-
ner
:wikiann:1.0.0
-
xquad
:xquad:3.0.0
-
mlqa
:mlqa:1.0.0
-
tydiqa
:tydi_qa:3.0.0
-
bucc
:bucc:1.0.0
-
tatoeba
:tatoeba:1.0.0
-
อ้างอิง :