- الوصف :
BLiMP عبارة عن تحدي لتقييم ما تعرفه نماذج اللغة (LMs) عن الظواهر النحوية الرئيسية في اللغة الإنجليزية. يتكون BLiMP من 67 مجموعة بيانات فرعية ، كل منها يحتوي على 1000 زوج من الحد الأدنى لعزل تباينات معينة في بناء الجملة أو التشكل أو الدلالات. يتم إنشاء البيانات تلقائيًا وفقًا لقواعد النحو التي وضعها الخبراء.
وثائق إضافية : استكشف في الأوراق باستخدام الرمز
الصفحة الرئيسية : https://github.com/alexwarstadt/blimp/tree/master/
كود المصدر :
tfds.datasets.blimp.Builder
إصدارات :
-
0.1.0
(افتراضي): لا توجد ملاحظات حول الإصدار.
-
التخزين المؤقت التلقائي ( الوثائق ): نعم
الانقسامات :
انشق، مزق | أمثلة |
---|---|
'train' | 1،000 |
- هيكل الميزة :
FeaturesDict({
'UID': Text(shape=(), dtype=string),
'field': Text(shape=(), dtype=string),
'lexically_identical': bool,
'linguistics_term': Text(shape=(), dtype=string),
'one_prefix_method': bool,
'pair_id': int32,
'sentence_bad': Text(shape=(), dtype=string),
'sentence_good': Text(shape=(), dtype=string),
'simple_LM_method': bool,
'two_prefix_method': bool,
})
- وثائق الميزة :
ميزة | فصل | شكل | نوع | وصف |
---|---|---|---|---|
الميزات | ||||
المعرف الفريد | نص | سلسلة | ||
مجال | نص | سلسلة | ||
متطابقة معجمية | موتر | منطقي | ||
اللغويات_المصطلح | نص | سلسلة | ||
طريقة_prefix_ واحدة | موتر | منطقي | ||
معرّف الزوج | موتر | int32 | ||
الجملة_سيئة | نص | سلسلة | ||
الجملة_جيدة | نص | سلسلة | ||
بسيطة_أسلوب_م | موتر | منطقي | ||
two_prefix_method | موتر | منطقي |
المفاتيح الخاضعة للإشراف (انظر المستند
as_supervised
):None
الشكل ( tfds.show_examples ): غير مدعوم.
الاقتباس :
@article{warstadt2019blimp,
title={BLiMP: A Benchmark of Linguistic Minimal Pairs for English},
author={Warstadt, Alex and Parrish, Alicia and Liu, Haokun and Mohananey, Anhad and Peng, Wei, and Wang, Sheng-Fu and Bowman, Samuel R},
journal={arXiv preprint arXiv:1912.00582},
year={2019}
}
blimp / advunct_island (التكوين الافتراضي)
وصف التكوين : يتضمن هذا التكوين النموذج المساعد.
حجم التحميل :
350.86 KiB
حجم مجموعة البيانات :
366.47 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / anaphor_gender_agreement
وصف التكوين : يتضمن هذا التكوين النموذج anaphor_gender_agreement.
حجم التحميل :
426.51 KiB
حجم مجموعة البيانات :
332.31 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / anaphor_number_agreement
وصف التكوين : يتضمن هذا التكوين النموذج anaphor_number_agreement.
حجم التحميل :
440.29 KiB
حجم مجموعة البيانات :
341.07 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / animate_subject_passive
وصف التكوين : يتضمن هذا التكوين النموذج animate_subject_passive.
حجم التحميل :
451.46 KiB
حجم مجموعة البيانات :
345.50 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / animate_subject_trans
وصف التكوين : يتضمن هذا التكوين النموذج animate_subject_trans.
حجم التحميل :
422.95 KiB
حجم مجموعة البيانات :
329.27 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / المسبب
وصف التكوين : يتضمن هذا التكوين النموذج المسبب.
حجم التحميل :
309.73 KiB
حجم مجموعة البيانات :
324.36 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / المركب_جزيرة
وصف التكوين : يتضمن هذا التكوين النموذج المركب_NP_island.
حجم التحميل :
383.17 KiB
حجم مجموعة البيانات :
398.78 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / التنسيق_البنية_المتقنة
وصف التكوين : يتضمن هذا التكوين نموذج تنسيق_بنية_constraint_complex_left_branch.
حجم التحميل :
558.30 KiB
حجم مجموعة البيانات :
410.43 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / تنسيق_البنية_كونستراينت_الجسم_الاستخراج
وصف التكوين : يتضمن هذا التكوين نموذج تنسيق_بنية_كونستراينت_وبجيكستراكشن.
حجم التحميل :
357.47 KiB
حجم مجموعة البيانات :
372.10 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / المحدد_noun_agreement_1
وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_1.
حجم التحميل :
457.66 KiB
حجم مجموعة البيانات :
356.93 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / المحدد_noun_agreement_2
وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_2.
حجم التحميل :
477.40 KiB
حجم مجموعة البيانات :
357.01 KiB
أمثلة ( tfds.as_dataframe ):
منطاد / محدد
وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_iriform_1.
حجم التحميل :
463.80 KiB
حجم مجموعة البيانات :
365.08 KiB
أمثلة ( tfds.as_dataframe ):
منطاد / محدد
وصف التكوين : يتضمن هذا التكوين محدد النموذج_noun_agreement_iriform_2.
حجم التحميل :
479.35 KiB
حجم مجموعة البيانات :
361.76 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / المحدد_noun_agreement_with_adj_2
وصف التكوين : يتضمن هذا التكوين محدد النموذج_noun_agreement_with_adj_2.
حجم التحميل :
514.46 KiB
حجم مجموعة البيانات :
379.92 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / المحدد_noun_agreement_with_adj_iriform_1
وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_with_adj_iriform_1.
حجم التحميل :
487.95 KiB
حجم مجموعة البيانات :
384.67 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / المحدد_noun_agreement_with_adj_iriform_2
وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_with_adj_iriform_2.
حجم التحميل :
516.14 KiB
حجم مجموعة البيانات :
384.54 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / المحدد_noun_agreement_with_adjective_1
وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_with_adjective_1.
حجم التحميل :
492.85 KiB
حجم مجموعة البيانات :
385.25 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / distractor_agreement_relational_noun
وصف التكوين : يتضمن هذا التكوين النموذج distractor_agreement_relational_noun.
حجم التحميل :
513.33 KiB
حجم مجموعة البيانات :
391.45 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / distractor_agreement_relative_clause
وصف التكوين : يتضمن هذا التكوين النموذج distractor_agreement_relative_clause.
حجم التحميل :
551.53 KiB
حجم مجموعة البيانات :
416.14 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / drop_argument
وصف التكوين : يتضمن هذا التكوين نموذج drop_argument.
حجم التحميل :
297.07 KiB
حجم مجموعة البيانات :
311.70 KiB
أمثلة ( tfds.as_dataframe ):
blimp / ellipsis_n_bar_1
وصف التكوين : يتضمن هذا التكوين النموذج ellipsis_n_bar_1.
حجم التحميل :
402.32 KiB
حجم مجموعة البيانات :
417.06 KiB
أمثلة ( tfds.as_dataframe ):
blimp / ellipsis_n_bar_2
وصف التكوين : يتضمن هذا التكوين النموذج ellipsis_n_bar_2.
حجم التحميل :
417.53 KiB
حجم مجموعة البيانات :
432.47 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / الوجودي_ثير_جسم_الرائد
وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_object_raising.
حجم التحميل :
537.77 KiB
حجم مجموعة البيانات :
423.00 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / الوجودي_المقادير_المقادير_1
وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_quantifiers_1.
حجم التحميل :
348.95 KiB
حجم مجموعة البيانات :
363.58 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / الوجودي_المقادير_المقادير_2
وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_quantifiers_2.
حجم التحميل :
350.80 KiB
حجم مجموعة البيانات :
365.43 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / الوجودي_الموضوع_الرائد
وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_subject_raising.
حجم التحميل :
385.21 KiB
حجم مجموعة البيانات :
399.84 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / blimp_it_object_raising
وصف التكوين : يتضمن هذا التكوين النموذج expletive_it_object_raising.
حجم التحميل :
573.88 KiB
حجم مجموعة البيانات :
437.58 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / المستأنف
وصف التكوين : يتضمن هذا التكوين النموذج المستنشق.
حجم التحميل :
291.71 KiB
حجم مجموعة البيانات :
306.34 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / لازم
وصف التكوين : يتضمن هذا التكوين النموذج لازم.
حجم التحميل :
298.33 KiB
حجم مجموعة البيانات :
312.96 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / غير النظامية_اللصق_الأجزاء
وصف التكوين : يشتمل هذا التكوين على النموذج iredom_past_participle_adjectives.
حجم التحميل :
434.10 KiB
حجم مجموعة البيانات :
345.74 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / غير النظامية_لصق_جزء_الأفعال
وصف التكوين : يتضمن هذا التكوين النموذج ir Regular_past_participle_verbs.
حجم التحميل :
410.27 KiB
حجم مجموعة البيانات :
327.21 KiB
أمثلة ( tfds.as_dataframe ):
منطاد / غير منتظم
وصف التكوين : يتضمن هذا التكوين النموذج iriform_plural_subject_verb_agreement_1.
حجم التحميل :
449.91 KiB
حجم مجموعة البيانات :
366.17 KiB
أمثلة ( tfds.as_dataframe ):
منطاد / غير منتظم
وصف التكوين : يتضمن هذا التكوين النموذج irnorm_plural_subject_verb_agreement_2.
حجم التحميل :
442.75 KiB
حجم مجموعة البيانات :
354.70 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / left_branch_island_echo_question
وصف التكوين : يتضمن هذا التكوين النموذج left_branch_island_echo_question.
حجم التحميل :
471.31 KiB
حجم مجموعة البيانات :
348.84 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / left_branch_island_simple_question
وصف التكوين : يتضمن هذا التكوين النموذج left_branch_island_simple_question.
حجم التحميل :
335.40 KiB
حجم مجموعة البيانات :
351.01 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / matrix_question_npi_licensor_present
وصف التكوين : يتضمن هذا التكوين نموذج المصفوفة_question_npi_licensor_present.
حجم التحميل :
447.08 KiB
حجم مجموعة البيانات :
354.14 KiB
أمثلة ( tfds.as_dataframe ):
blimp / npi_present_1
وصف التكوين : يتضمن هذا التكوين النموذج npi_present_1.
حجم التحميل :
427.75 KiB
حجم مجموعة البيانات :
339.68 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / npi_present_2
وصف التكوين : يتضمن هذا التكوين النموذج npi_present_2.
حجم التحميل :
412.24 KiB
حجم مجموعة البيانات :
329.11 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / only_npi_licensor_present
وصف التكوين : يتضمن هذا التكوين النموذج only_npi_licensor_present.
حجم التحميل :
448.41 KiB
حجم مجموعة البيانات :
349.50 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / only_npi_scope
وصف التكوين : يتضمن هذا التكوين النموذج only_npi_scope.
حجم التحميل :
570.04 KiB
حجم مجموعة البيانات :
408.52 KiB
أمثلة ( tfds.as_dataframe ):
منطاد / سلبي_1
وصف التكوين : يتضمن هذا التكوين النموذج passive_1.
حجم التحميل :
332.30 KiB
حجم مجموعة البيانات :
346.93 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / الخامل_2
وصف التكوين : يتضمن هذا التكوين النموذج الخامل_2.
حجم التحميل :
301.12 KiB
حجم مجموعة البيانات :
315.75 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / Princip_A_c_command
وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_c_command.
حجم التحميل :
515.32 KiB
حجم مجموعة البيانات :
388.54 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / مبدأ_A_case_1
وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي_A_case_1.
حجم التحميل :
466.05 KiB
حجم مجموعة البيانات :
370.87 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / مبدأ_A_case_2
وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_case_2.
حجم التحميل :
481.42 KiB
حجم مجموعة البيانات :
370.88 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / مبدأ_A_domain_1
وصف التكوين : يتضمن هذا التكوين مبدأ النموذج_A_domain_1.
حجم التحميل :
488.15 KiB
حجم مجموعة البيانات :
371.62 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / مبدأ_A_domain_2
وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_domain_2.
حجم التحميل :
481.63 KiB
حجم مجموعة البيانات :
365.92 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / Princip_A_domain_3
وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_domain_3.
حجم التحميل :
501.84 KiB
حجم مجموعة البيانات :
359.74 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / Princip_A_reconstruction
وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي_A_reconstruction.
حجم التحميل :
337.40 KiB
حجم مجموعة البيانات :
353.00 KiB
أمثلة ( tfds.as_dataframe ):
blimp / normal_plural_subject_verb_agreement_1
وصف التكوين : يتضمن هذا التكوين النموذج normal_plural_subject_verb_agreement_1.
حجم التحميل :
441.26 KiB
حجم مجموعة البيانات :
359.56 KiB
أمثلة ( tfds.as_dataframe ):
blimp / normal_plural_subject_verb_agreement_2
وصف التكوين : يتضمن هذا التكوين النموذج normal_plural_subject_verb_agreement_2.
حجم التحميل :
445.78 KiB
حجم مجموعة البيانات :
354.47 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / sentential_negation_npi_licensor_present
وصف التكوين : يتضمن هذا التكوين نموذج sentential_negation_npi_licensor_present.
حجم التحميل :
479.49 KiB
حجم مجموعة البيانات :
372.30 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / sentential_negation_npi_scope
وصف التكوين : يتضمن هذا التكوين نموذج sentential_negation_npi_scope.
حجم التحميل :
600.52 KiB
حجم مجموعة البيانات :
431.18 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / sentential_subject_island
وصف التكوين : يتضمن هذا التكوين نموذج sentential_subject_island.
حجم التحميل :
357.25 KiB
حجم مجموعة البيانات :
372.86 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / الكميات الفائقة_1
وصف التكوين : يتضمن هذا التكوين النموذج superlative_quantifiers_1.
حجم التحميل :
372.25 KiB
حجم مجموعة البيانات :
360.02 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / الكميات الفائقة_2
وصف التكوين : يتضمن هذا التكوين النموذج superlative_quantifiers_2.
حجم التحميل :
504.02 KiB
حجم مجموعة البيانات :
360.07 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / صعبة_الصعبة_راسينغ_1
وصف التكوين : يتضمن هذا التكوين النموذج hard_vs_raising_1.
حجم التحميل :
334.99 KiB
حجم مجموعة البيانات :
349.62 KiB
أمثلة ( tfds.as_dataframe ):
منطاد / صعب_على_صعود_2
وصف التكوين : يشتمل هذا التكوين على النموذج hard_vs_raising_2.
حجم التحميل :
355.54 KiB
حجم مجموعة البيانات :
370.17 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / متعد
وصف التكوين : يتضمن هذا التكوين النموذج متعدية.
حجم التحميل :
449.50 KiB
حجم مجموعة البيانات :
334.45 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / wh_island
وصف التكوين : يتضمن هذا التكوين نموذج wh_island.
حجم التحميل :
438.12 KiB
حجم مجموعة البيانات :
343.47 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / wh_questions_object_gap
وصف التكوين : يتضمن هذا التكوين النموذج wh_questions_object_gap.
حجم التحميل :
378.35 KiB
حجم مجموعة البيانات :
392.99 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / wh_questions_subject_gap
وصف التكوين : يتضمن هذا التكوين النموذج wh_questions_subject_gap.
حجم التحميل :
380.84 KiB
حجم مجموعة البيانات :
395.47 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / wh_questions_subject_gap_long_distance
وصف التكوين : يتضمن هذا التكوين النموذج wh_questions_subject_gap_long_distance.
حجم التحميل :
451.82 KiB
حجم مجموعة البيانات :
466.53 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / wh_vs_that_no_gap
وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_no_gap.
حجم التحميل :
374.28 KiB
حجم مجموعة البيانات :
388.91 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / wh_vs_that_no_gap_long_distance
وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_no_gap_long_distance.
حجم التحميل :
431.08 KiB
حجم مجموعة البيانات :
445.74 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / wh_vs_that_with_gap
وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_with_gap.
حجم التحميل :
359.16 KiB
حجم مجموعة البيانات :
373.79 KiB
أمثلة ( tfds.as_dataframe ):
المنطاد / wh_vs_that_with_gap_long_distance
وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_with_gap_long_distance.
حجم التحميل :
416.00 KiB
حجم مجموعة البيانات :
430.63 KiB
أمثلة ( tfds.as_dataframe ):