شخص ساذج

  • الوصف :

BLiMP عبارة عن تحدي لتقييم ما تعرفه نماذج اللغة (LMs) عن الظواهر النحوية الرئيسية في اللغة الإنجليزية. يتكون BLiMP من 67 مجموعة بيانات فرعية ، كل منها يحتوي على 1000 زوج من الحد الأدنى لعزل تباينات معينة في بناء الجملة أو التشكل أو الدلالات. يتم إنشاء البيانات تلقائيًا وفقًا لقواعد النحو التي وضعها الخبراء.

انشق، مزق أمثلة
'train' 1،000
  • هيكل الميزة :
FeaturesDict({
    'UID': Text(shape=(), dtype=string),
    'field': Text(shape=(), dtype=string),
    'lexically_identical': bool,
    'linguistics_term': Text(shape=(), dtype=string),
    'one_prefix_method': bool,
    'pair_id': int32,
    'sentence_bad': Text(shape=(), dtype=string),
    'sentence_good': Text(shape=(), dtype=string),
    'simple_LM_method': bool,
    'two_prefix_method': bool,
})
  • وثائق الميزة :
ميزة فصل شكل نوع وصف
الميزات
المعرف الفريد نص سلسلة
مجال نص سلسلة
متطابقة معجمية موتر منطقي
اللغويات_المصطلح نص سلسلة
طريقة_prefix_ واحدة موتر منطقي
معرّف الزوج موتر int32
الجملة_سيئة نص سلسلة
الجملة_جيدة نص سلسلة
بسيطة_أسلوب_م موتر منطقي
two_prefix_method موتر منطقي
@article{warstadt2019blimp,
  title={BLiMP: A Benchmark of Linguistic Minimal Pairs for English},
  author={Warstadt, Alex and Parrish, Alicia and Liu, Haokun and Mohananey, Anhad and Peng, Wei, and Wang, Sheng-Fu and Bowman, Samuel R},
  journal={arXiv preprint arXiv:1912.00582},
  year={2019}
}

blimp / advunct_island (التكوين الافتراضي)

  • وصف التكوين : يتضمن هذا التكوين النموذج المساعد.

  • حجم التحميل : 350.86 KiB

  • حجم مجموعة البيانات : 366.47 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / anaphor_gender_agreement

  • وصف التكوين : يتضمن هذا التكوين النموذج anaphor_gender_agreement.

  • حجم التحميل : 426.51 KiB

  • حجم مجموعة البيانات : 332.31 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / anaphor_number_agreement

  • وصف التكوين : يتضمن هذا التكوين النموذج anaphor_number_agreement.

  • حجم التحميل : 440.29 KiB

  • حجم مجموعة البيانات : 341.07 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / animate_subject_passive

  • وصف التكوين : يتضمن هذا التكوين النموذج animate_subject_passive.

  • حجم التحميل : 451.46 KiB

  • حجم مجموعة البيانات : 345.50 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / animate_subject_trans

  • وصف التكوين : يتضمن هذا التكوين النموذج animate_subject_trans.

  • حجم التحميل : 422.95 KiB

  • حجم مجموعة البيانات : 329.27 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المسبب

  • وصف التكوين : يتضمن هذا التكوين النموذج المسبب.

  • حجم التحميل : 309.73 KiB

  • حجم مجموعة البيانات : 324.36 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المركب_جزيرة

  • وصف التكوين : يتضمن هذا التكوين النموذج المركب_NP_island.

  • حجم التحميل : 383.17 KiB

  • حجم مجموعة البيانات : 398.78 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / التنسيق_البنية_المتقنة

  • وصف التكوين : يتضمن هذا التكوين نموذج تنسيق_بنية_constraint_complex_left_branch.

  • حجم التحميل : 558.30 KiB

  • حجم مجموعة البيانات : 410.43 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / تنسيق_البنية_كونستراينت_الجسم_الاستخراج

  • وصف التكوين : يتضمن هذا التكوين نموذج تنسيق_بنية_كونستراينت_وبجيكستراكشن.

  • حجم التحميل : 357.47 KiB

  • حجم مجموعة البيانات : 372.10 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المحدد_noun_agreement_1

  • وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_1.

  • حجم التحميل : 457.66 KiB

  • حجم مجموعة البيانات : 356.93 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المحدد_noun_agreement_2

  • وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_2.

  • حجم التحميل : 477.40 KiB

  • حجم مجموعة البيانات : 357.01 KiB

  • أمثلة ( tfds.as_dataframe ):

منطاد / محدد

  • وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_iriform_1.

  • حجم التحميل : 463.80 KiB

  • حجم مجموعة البيانات : 365.08 KiB

  • أمثلة ( tfds.as_dataframe ):

منطاد / محدد

  • وصف التكوين : يتضمن هذا التكوين محدد النموذج_noun_agreement_iriform_2.

  • حجم التحميل : 479.35 KiB

  • حجم مجموعة البيانات : 361.76 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المحدد_noun_agreement_with_adj_2

  • وصف التكوين : يتضمن هذا التكوين محدد النموذج_noun_agreement_with_adj_2.

  • حجم التحميل : 514.46 KiB

  • حجم مجموعة البيانات : 379.92 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المحدد_noun_agreement_with_adj_iriform_1

  • وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_with_adj_iriform_1.

  • حجم التحميل : 487.95 KiB

  • حجم مجموعة البيانات : 384.67 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المحدد_noun_agreement_with_adj_iriform_2

  • وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_with_adj_iriform_2.

  • حجم التحميل : 516.14 KiB

  • حجم مجموعة البيانات : 384.54 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المحدد_noun_agreement_with_adjective_1

  • وصف التكوين : يتضمن هذا التكوين المحدد النموذجي_noun_agreement_with_adjective_1.

  • حجم التحميل : 492.85 KiB

  • حجم مجموعة البيانات : 385.25 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / distractor_agreement_relational_noun

  • وصف التكوين : يتضمن هذا التكوين النموذج distractor_agreement_relational_noun.

  • حجم التحميل : 513.33 KiB

  • حجم مجموعة البيانات : 391.45 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / distractor_agreement_relative_clause

  • وصف التكوين : يتضمن هذا التكوين النموذج distractor_agreement_relative_clause.

  • حجم التحميل : 551.53 KiB

  • حجم مجموعة البيانات : 416.14 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / drop_argument

  • وصف التكوين : يتضمن هذا التكوين نموذج drop_argument.

  • حجم التحميل : 297.07 KiB

  • حجم مجموعة البيانات : 311.70 KiB

  • أمثلة ( tfds.as_dataframe ):

blimp / ellipsis_n_bar_1

  • وصف التكوين : يتضمن هذا التكوين النموذج ellipsis_n_bar_1.

  • حجم التحميل : 402.32 KiB

  • حجم مجموعة البيانات : 417.06 KiB

  • أمثلة ( tfds.as_dataframe ):

blimp / ellipsis_n_bar_2

  • وصف التكوين : يتضمن هذا التكوين النموذج ellipsis_n_bar_2.

  • حجم التحميل : 417.53 KiB

  • حجم مجموعة البيانات : 432.47 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الوجودي_ثير_جسم_الرائد

  • وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_object_raising.

  • حجم التحميل : 537.77 KiB

  • حجم مجموعة البيانات : 423.00 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الوجودي_المقادير_المقادير_1

  • وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_quantifiers_1.

  • حجم التحميل : 348.95 KiB

  • حجم مجموعة البيانات : 363.58 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الوجودي_المقادير_المقادير_2

  • وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_quantifiers_2.

  • حجم التحميل : 350.80 KiB

  • حجم مجموعة البيانات : 365.43 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الوجودي_الموضوع_الرائد

  • وصف التكوين : يتضمن هذا التكوين النموذج الوجودي_there_subject_raising.

  • حجم التحميل : 385.21 KiB

  • حجم مجموعة البيانات : 399.84 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / blimp_it_object_raising

  • وصف التكوين : يتضمن هذا التكوين النموذج expletive_it_object_raising.

  • حجم التحميل : 573.88 KiB

  • حجم مجموعة البيانات : 437.58 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / المستأنف

  • وصف التكوين : يتضمن هذا التكوين النموذج المستنشق.

  • حجم التحميل : 291.71 KiB

  • حجم مجموعة البيانات : 306.34 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / لازم

  • وصف التكوين : يتضمن هذا التكوين النموذج لازم.

  • حجم التحميل : 298.33 KiB

  • حجم مجموعة البيانات : 312.96 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / غير النظامية_اللصق_الأجزاء

  • وصف التكوين : يشتمل هذا التكوين على النموذج iredom_past_participle_adjectives.

  • حجم التحميل : 434.10 KiB

  • حجم مجموعة البيانات : 345.74 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / غير النظامية_لصق_جزء_الأفعال

  • وصف التكوين : يتضمن هذا التكوين النموذج ir Regular_past_participle_verbs.

  • حجم التحميل : 410.27 KiB

  • حجم مجموعة البيانات : 327.21 KiB

  • أمثلة ( tfds.as_dataframe ):

منطاد / غير منتظم

  • وصف التكوين : يتضمن هذا التكوين النموذج iriform_plural_subject_verb_agreement_1.

  • حجم التحميل : 449.91 KiB

  • حجم مجموعة البيانات : 366.17 KiB

  • أمثلة ( tfds.as_dataframe ):

منطاد / غير منتظم

  • وصف التكوين : يتضمن هذا التكوين النموذج irnorm_plural_subject_verb_agreement_2.

  • حجم التحميل : 442.75 KiB

  • حجم مجموعة البيانات : 354.70 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / left_branch_island_echo_question

  • وصف التكوين : يتضمن هذا التكوين النموذج left_branch_island_echo_question.

  • حجم التحميل : 471.31 KiB

  • حجم مجموعة البيانات : 348.84 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / left_branch_island_simple_question

  • وصف التكوين : يتضمن هذا التكوين النموذج left_branch_island_simple_question.

  • حجم التحميل : 335.40 KiB

  • حجم مجموعة البيانات : 351.01 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / matrix_question_npi_licensor_present

  • وصف التكوين : يتضمن هذا التكوين نموذج المصفوفة_question_npi_licensor_present.

  • حجم التحميل : 447.08 KiB

  • حجم مجموعة البيانات : 354.14 KiB

  • أمثلة ( tfds.as_dataframe ):

blimp / npi_present_1

  • وصف التكوين : يتضمن هذا التكوين النموذج npi_present_1.

  • حجم التحميل : 427.75 KiB

  • حجم مجموعة البيانات : 339.68 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / npi_present_2

  • وصف التكوين : يتضمن هذا التكوين النموذج npi_present_2.

  • حجم التحميل : 412.24 KiB

  • حجم مجموعة البيانات : 329.11 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / only_npi_licensor_present

  • وصف التكوين : يتضمن هذا التكوين النموذج only_npi_licensor_present.

  • حجم التحميل : 448.41 KiB

  • حجم مجموعة البيانات : 349.50 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / only_npi_scope

  • وصف التكوين : يتضمن هذا التكوين النموذج only_npi_scope.

  • حجم التحميل : 570.04 KiB

  • حجم مجموعة البيانات : 408.52 KiB

  • أمثلة ( tfds.as_dataframe ):

منطاد / سلبي_1

  • وصف التكوين : يتضمن هذا التكوين النموذج passive_1.

  • حجم التحميل : 332.30 KiB

  • حجم مجموعة البيانات : 346.93 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الخامل_2

  • وصف التكوين : يتضمن هذا التكوين النموذج الخامل_2.

  • حجم التحميل : 301.12 KiB

  • حجم مجموعة البيانات : 315.75 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / Princip_A_c_command

  • وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_c_command.

  • حجم التحميل : 515.32 KiB

  • حجم مجموعة البيانات : 388.54 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / مبدأ_A_case_1

  • وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي_A_case_1.

  • حجم التحميل : 466.05 KiB

  • حجم مجموعة البيانات : 370.87 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / مبدأ_A_case_2

  • وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_case_2.

  • حجم التحميل : 481.42 KiB

  • حجم مجموعة البيانات : 370.88 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / مبدأ_A_domain_1

  • وصف التكوين : يتضمن هذا التكوين مبدأ النموذج_A_domain_1.

  • حجم التحميل : 488.15 KiB

  • حجم مجموعة البيانات : 371.62 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / مبدأ_A_domain_2

  • وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_domain_2.

  • حجم التحميل : 481.63 KiB

  • حجم مجموعة البيانات : 365.92 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / Princip_A_domain_3

  • وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي A_domain_3.

  • حجم التحميل : 501.84 KiB

  • حجم مجموعة البيانات : 359.74 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / Princip_A_reconstruction

  • وصف التكوين : يتضمن هذا التكوين المبدأ النموذجي_A_reconstruction.

  • حجم التحميل : 337.40 KiB

  • حجم مجموعة البيانات : 353.00 KiB

  • أمثلة ( tfds.as_dataframe ):

blimp / normal_plural_subject_verb_agreement_1

  • وصف التكوين : يتضمن هذا التكوين النموذج normal_plural_subject_verb_agreement_1.

  • حجم التحميل : 441.26 KiB

  • حجم مجموعة البيانات : 359.56 KiB

  • أمثلة ( tfds.as_dataframe ):

blimp / normal_plural_subject_verb_agreement_2

  • وصف التكوين : يتضمن هذا التكوين النموذج normal_plural_subject_verb_agreement_2.

  • حجم التحميل : 445.78 KiB

  • حجم مجموعة البيانات : 354.47 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / sentential_negation_npi_licensor_present

  • وصف التكوين : يتضمن هذا التكوين نموذج sentential_negation_npi_licensor_present.

  • حجم التحميل : 479.49 KiB

  • حجم مجموعة البيانات : 372.30 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / sentential_negation_npi_scope

  • وصف التكوين : يتضمن هذا التكوين نموذج sentential_negation_npi_scope.

  • حجم التحميل : 600.52 KiB

  • حجم مجموعة البيانات : 431.18 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / sentential_subject_island

  • وصف التكوين : يتضمن هذا التكوين نموذج sentential_subject_island.

  • حجم التحميل : 357.25 KiB

  • حجم مجموعة البيانات : 372.86 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الكميات الفائقة_1

  • وصف التكوين : يتضمن هذا التكوين النموذج superlative_quantifiers_1.

  • حجم التحميل : 372.25 KiB

  • حجم مجموعة البيانات : 360.02 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / الكميات الفائقة_2

  • وصف التكوين : يتضمن هذا التكوين النموذج superlative_quantifiers_2.

  • حجم التحميل : 504.02 KiB

  • حجم مجموعة البيانات : 360.07 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / صعبة_الصعبة_راسينغ_1

  • وصف التكوين : يتضمن هذا التكوين النموذج hard_vs_raising_1.

  • حجم التحميل : 334.99 KiB

  • حجم مجموعة البيانات : 349.62 KiB

  • أمثلة ( tfds.as_dataframe ):

منطاد / صعب_على_صعود_2

  • وصف التكوين : يشتمل هذا التكوين على النموذج hard_vs_raising_2.

  • حجم التحميل : 355.54 KiB

  • حجم مجموعة البيانات : 370.17 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / متعد

  • وصف التكوين : يتضمن هذا التكوين النموذج متعدية.

  • حجم التحميل : 449.50 KiB

  • حجم مجموعة البيانات : 334.45 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_island

  • وصف التكوين : يتضمن هذا التكوين نموذج wh_island.

  • حجم التحميل : 438.12 KiB

  • حجم مجموعة البيانات : 343.47 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_questions_object_gap

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_questions_object_gap.

  • حجم التحميل : 378.35 KiB

  • حجم مجموعة البيانات : 392.99 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_questions_subject_gap

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_questions_subject_gap.

  • حجم التحميل : 380.84 KiB

  • حجم مجموعة البيانات : 395.47 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_questions_subject_gap_long_distance

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_questions_subject_gap_long_distance.

  • حجم التحميل : 451.82 KiB

  • حجم مجموعة البيانات : 466.53 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_vs_that_no_gap

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_no_gap.

  • حجم التحميل : 374.28 KiB

  • حجم مجموعة البيانات : 388.91 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_vs_that_no_gap_long_distance

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_no_gap_long_distance.

  • حجم التحميل : 431.08 KiB

  • حجم مجموعة البيانات : 445.74 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_vs_that_with_gap

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_with_gap.

  • حجم التحميل : 359.16 KiB

  • حجم مجموعة البيانات : 373.79 KiB

  • أمثلة ( tfds.as_dataframe ):

المنطاد / wh_vs_that_with_gap_long_distance

  • وصف التكوين : يتضمن هذا التكوين النموذج wh_vs_that_with_gap_long_distance.

  • حجم التحميل : 416.00 KiB

  • حجم مجموعة البيانات : 430.63 KiB

  • أمثلة ( tfds.as_dataframe ):