- opis :
BLiMP to wyzwanie do oceny tego, co modele językowe (LM) wiedzą o głównych zjawiskach gramatycznych w języku angielskim. BLiMP składa się z 67 podzbiorów danych, z których każdy zawiera 1000 minimalnych par izolujących określone kontrasty w składni, morfologii lub semantyce. Dane są generowane automatycznie zgodnie z gramatykami opracowanymi przez ekspertów.
Dodatkowa dokumentacja : Przeglądaj dokumenty z kodem na
Strona główna : https://github.com/alexwarstadt/blimp/tree/master/
Kod źródłowy :
tfds.datasets.blimp.Builder
Wersje :
-
0.1.0
(domyślnie): Brak informacji o wersji.
-
Automatyczne buforowanie ( dokumentacja ): Tak
Podziały :
Rozdzielać | Przykłady |
---|---|
'train' | 1000 |
- Struktura funkcji :
FeaturesDict({
'UID': Text(shape=(), dtype=string),
'field': Text(shape=(), dtype=string),
'lexically_identical': bool,
'linguistics_term': Text(shape=(), dtype=string),
'one_prefix_method': bool,
'pair_id': int32,
'sentence_bad': Text(shape=(), dtype=string),
'sentence_good': Text(shape=(), dtype=string),
'simple_LM_method': bool,
'two_prefix_method': bool,
})
- Dokumentacja funkcji :
Funkcja | Klasa | Kształt | Typ D | Opis |
---|---|---|---|---|
FunkcjeDict | ||||
UID | Tekst | strunowy | ||
pole | Tekst | strunowy | ||
leksykalnie_identyczne | Napinacz | bool | ||
lingwistyka_term | Tekst | strunowy | ||
metoda_jeden_przedrostek | Napinacz | bool | ||
identyfikator_pary | Napinacz | int32 | ||
zdanie_złe | Tekst | strunowy | ||
zdanie_dobre | Tekst | strunowy | ||
prosta_metoda_LM | Napinacz | bool | ||
metoda_dwóch_prefiksów | Napinacz | bool |
Klucze nadzorowane (Zobacz dokument
as_supervised
):None
Rysunek ( tfds.show_examples ): Nieobsługiwany.
Cytat :
@article{warstadt2019blimp,
title={BLiMP: A Benchmark of Linguistic Minimal Pairs for English},
author={Warstadt, Alex and Parrish, Alicia and Liu, Haokun and Mohananey, Anhad and Peng, Wei, and Wang, Sheng-Fu and Bowman, Samuel R},
journal={arXiv preprint arXiv:1912.00582},
year={2019}
}
sterowiec/adjunct_island (domyślna konfiguracja)
Opis konfiguracji: ta konfiguracja obejmuje paradygmat adjunct_island.
Rozmiar pliku do pobrania :
350.86 KiB
Rozmiar zbioru danych :
366.47 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/anaphor_gender_agreement
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat anaphor_gender_agreement.
Rozmiar pliku do pobrania :
426.51 KiB
Rozmiar zbioru danych :
332.31 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/anafora_numer_umowy
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat anaphor_number_agreement.
Rozmiar pliku do pobrania :
440.29 KiB
Rozmiar zbioru danych :
341.07 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/animate_subject_passive
Opis konfiguracji: ta konfiguracja obejmuje paradygmat animate_subject_passive.
Rozmiar pliku do pobrania :
451.46 KiB
Rozmiar zbioru danych :
345.50 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/animate_subject_trans
Opis konfiguracji: ta konfiguracja obejmuje paradygmat animate_subject_trans.
Rozmiar pliku do pobrania :
422.95 KiB
Rozmiar zbioru danych :
329.27 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec / przyczynowy
Opis konfiguracji: Ta konfiguracja obejmuje przyczynę paradygmatu.
Rozmiar pliku do pobrania :
309.73 KiB
Rozmiar zbioru danych :
324.36 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/złożona_wyspa_NP
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat complex_NP_island.
Rozmiar pliku do pobrania :
383.17 KiB
Rozmiar zbioru danych :
398.78 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/coordinate_structure_constraint_complex_left_branch
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat współrzędnej_struktury_kontrakcji_kompleksu_lewej_branch.
Rozmiar pliku do pobrania :
558.30 KiB
Rozmiar zbioru danych :
410.43 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/coordinate_structure_constraint_object_extraction
Opis konfiguracji: ta konfiguracja obejmuje paradygmat współrzędna_struktura_ograniczenie_obiektu_ekstrakcja.
Rozmiar pliku do pobrania :
357.47 KiB
Rozmiar zbioru danych :
372.10 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/determiner_rzeczownik_zgoda_1
Opis konfiguracji: ta konfiguracja obejmuje paradygmatdeterminer_noun_agreement_1.
Rozmiar pliku do pobrania :
457.66 KiB
Rozmiar zbioru danych :
356.93 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/determiner_rzeczownik_zgoda_2
Opis konfiguracji: ta konfiguracja obejmuje paradygmatdeterminer_noun_agreement_2.
Rozmiar pliku do pobrania :
477.40 KiB
Rozmiar zbioru danych :
357.01 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/determiner_rzeczownik_agreement_irregular_1
Opis konfiguracji: ta konfiguracja zawiera paradygmatdeterminer_noun_agreement_irregular_1.
Rozmiar pliku do pobrania :
463.80 KiB
Rozmiar zbioru danych :
365.08 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/determiner_rzeczownik_agreement_irregular_2
Opis konfiguracji: ta konfiguracja zawiera paradygmatdeterminer_noun_agreement_irregular_2.
Rozmiar pliku do pobrania :
479.35 KiB
Rozmiar zbioru danych :
361.76 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/determiner_rzeczownik_zgoda_z_adj_2
Opis konfiguracji: ta konfiguracja obejmuje parametrdeterminer_noun_agreement_with_adj_2 paradygmatu.
Rozmiar pliku do pobrania :
514.46 KiB
Rozmiar zbioru danych :
379.92 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/determiner_rzeczownik_agreement_with_adj_irregular_1
Opis konfiguracji: ta konfiguracja obejmuje paradygmatdeterminer_noun_agreement_with_adj_irregular_1.
Rozmiar pliku do pobrania :
487.95 KiB
Rozmiar zbioru danych :
384.67 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/determiner_rzeczownik_zgoda_z_adj_irregular_2
Opis konfiguracji: ta konfiguracja zawiera paradygmatdeterminer_noun_agreement_with_adj_irregular_2.
Rozmiar pliku do pobrania :
516.14 KiB
Rozmiar zbioru danych :
384.54 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/determiner_rzeczownik_zgoda_z_przymiotnikiem_1
Opis konfiguracji: ta konfiguracja zawiera paradygmatdeterminer_noun_agreement_with_adjective_1.
Rozmiar pliku do pobrania :
492.85 KiB
Rozmiar zbioru danych :
385.25 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/distractor_agreement_relational_noun
Opis konfiguracji: ta konfiguracja obejmuje paradygmat dystraktor_agreement_relational_noun.
Rozmiar pliku do pobrania :
513.33 KiB
Rozmiar zbioru danych :
391.45 KiB
Przykłady ( tfds.as_dataframe ):
blimp/distractor_agreement_relative_clause
Opis konfiguracji: ta konfiguracja obejmuje paradygmat dystraktor_agreement_relative_clause.
Rozmiar pliku do pobrania :
551.53 KiB
Rozmiar zbioru danych :
416.14 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/drop_argument
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat drop_argument.
Rozmiar pliku do pobrania :
297.07 KiB
Rozmiar zbioru danych :
311.70 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/ellipsis_n_bar_1
Opis konfiguracji: ta konfiguracja obejmuje paradygmat ellipsis_n_bar_1.
Rozmiar pliku do pobrania :
402.32 KiB
Rozmiar zbioru danych :
417.06 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/ellipsis_n_bar_2
Opis konfiguracji: ta konfiguracja obejmuje paradygmat ellipsis_n_bar_2.
Rozmiar pliku do pobrania :
417.53 KiB
Rozmiar zbioru danych :
432.47 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/existential_there_object_raising
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat „existential_there_object_raising”.
Rozmiar pliku do pobrania :
537.77 KiB
Rozmiar zbioru danych :
423.00 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/existential_there_quantifiers_1
Opis konfiguracji: ta konfiguracja obejmuje paradygmat egzystencjalny_tam_kwantyfikatory_1.
Rozmiar pliku do pobrania :
348.95 KiB
Rozmiar zbioru danych :
363.58 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/existential_there_quantifiers_2
Opis konfiguracji: ta konfiguracja obejmuje paradygmat egzystencjalny_tam_kwantyfikatory_2.
Rozmiar pliku do pobrania :
350.80 KiB
Rozmiar zbioru danych :
365.43 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/existential_there_subject_raising
Opis konfiguracji: ta konfiguracja obejmuje paradygmat „existential_there_subject_raising”.
Rozmiar pliku do pobrania :
385.21 KiB
Rozmiar zbioru danych :
399.84 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/przekleństwo_it_object_raising
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat expletive_it_object_raising.
Rozmiar pliku do pobrania :
573.88 KiB
Rozmiar zbioru danych :
437.58 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec / inchoative
Opis konfiguracji: ta konfiguracja obejmuje paradygmat inchoative.
Rozmiar pliku do pobrania :
291.71 KiB
Rozmiar zbioru danych :
306.34 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec / nieprzechodni
Opis konfiguracji: Ta konfiguracja zawiera nieprzechodni paradygmat.
Rozmiar pliku do pobrania :
298.33 KiB
Rozmiar zbioru danych :
312.96 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/nieregularne_past_participle_adjectives
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat nieregularny_past_participle_adjectives.
Rozmiar pliku do pobrania :
434.10 KiB
Rozmiar zbioru danych :
345.74 KiB
Przykłady ( tfds.as_dataframe ):
blimp/nieregularne_past_participle_verbs
Opis konfiguracji: ta konfiguracja obejmuje paradygmat nieregularny_past_participle_verbs.
Rozmiar pliku do pobrania :
410.27 KiB
Rozmiar zbioru danych :
327.21 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/nieregularny_plural_subject_verb_agreement_1
Opis konfiguracji: ta konfiguracja obejmuje paradygmat nieregularny_plural_subject_verb_agreement_1.
Rozmiar pliku do pobrania :
449.91 KiB
Rozmiar zbioru danych :
366.17 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/nieregularny_plural_subject_verb_agreement_2
Opis konfiguracji: ta konfiguracja obejmuje paradygmat nieregularny_plural_subject_verb_agreement_2.
Rozmiar pliku do pobrania :
442.75 KiB
Rozmiar zbioru danych :
354.70 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/left_branch_island_echo_question
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat left_branch_island_echo_question.
Rozmiar pliku do pobrania :
471.31 KiB
Rozmiar zbioru danych :
348.84 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/left_branch_island_simple_question
Opis konfiguracji: ta konfiguracja obejmuje paradygmat left_branch_island_simple_question.
Rozmiar pliku do pobrania :
335.40 KiB
Rozmiar zbioru danych :
351.01 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/matrix_question_npi_licensor_present
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat matrix_question_npi_licensor_present.
Rozmiar pliku do pobrania :
447.08 KiB
Rozmiar zbioru danych :
354.14 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/npi_present_1
Opis konfiguracji: ta konfiguracja obejmuje paradygmat npi_present_1.
Rozmiar pliku do pobrania :
427.75 KiB
Rozmiar zbioru danych :
339.68 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/npi_present_2
Opis konfiguracji: ta konfiguracja obejmuje paradygmat npi_present_2.
Rozmiar pliku do pobrania :
412.24 KiB
Rozmiar zbioru danych :
329.11 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/only_npi_licensor_present
Opis konfiguracji: ta konfiguracja obejmuje paradygmat only_npi_licensor_present.
Rozmiar pliku do pobrania :
448.41 KiB
Rozmiar zbioru danych :
349.50 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/only_npi_scope
Opis konfiguracji: ta konfiguracja obejmuje paradygmat only_npi_scope.
Rozmiar pliku do pobrania :
570.04 KiB
Rozmiar zbioru danych :
408.52 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/pasywny_1
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat pasywny_1.
Rozmiar pliku do pobrania :
332.30 KiB
Rozmiar zbioru danych :
346.93 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/pasywny_2
Opis konfiguracji: ta konfiguracja obejmuje paradygmat pasywny_2.
Rozmiar pliku do pobrania :
301.12 KiB
Rozmiar zbioru danych :
315.75 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/zasada_A_c_command
Opis konfiguracji: Ta konfiguracja obejmuje zasadę paradygmatu_A_c_command.
Rozmiar pliku do pobrania :
515.32 KiB
Rozmiar zbioru danych :
388.54 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/zasada_A_przypadek_1
Opis konfiguracji: ta konfiguracja obejmuje zasadę paradygmatu_A_case_1.
Rozmiar pliku do pobrania :
466.05 KiB
Rozmiar zbioru danych :
370.87 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/zasada_A_przypadek_2
Opis konfiguracji: ta konfiguracja obejmuje zasadę paradygmatu_A_case_2.
Rozmiar pliku do pobrania :
481.42 KiB
Rozmiar zbioru danych :
370.88 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/zasada_A_domena_1
Opis konfiguracji: ta konfiguracja obejmuje zasadę paradygmatu_A_domena_1.
Rozmiar pliku do pobrania :
488.15 KiB
Rozmiar zbioru danych :
371.62 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/zasada_A_domena_2
Opis konfiguracji: ta konfiguracja obejmuje zasadę paradygmatu_A_domena_2.
Rozmiar pliku do pobrania :
481.63 KiB
Rozmiar zbioru danych :
365.92 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/zasada_A_domena_3
Opis konfiguracji: ta konfiguracja obejmuje zasadę paradygmatu_A_domena_3.
Rozmiar pliku do pobrania :
501.84 KiB
Rozmiar zbioru danych :
359.74 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/zasada_A_rekonstrukcja
Opis konfiguracji: ta konfiguracja obejmuje zasadę paradygmatu_A_rekonstrukcję.
Rozmiar pliku do pobrania :
337.40 KiB
Rozmiar zbioru danych :
353.00 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/regular_plural_subject_verb_agreement_1
Opis konfiguracji: ta konfiguracja obejmuje paradygmat regular_plural_subject_verb_agreement_1.
Rozmiar pliku do pobrania :
441.26 KiB
Rozmiar zbioru danych :
359.56 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/regular_plural_subject_verb_agreement_2
Opis konfiguracji: ta konfiguracja obejmuje paradygmat regular_plural_subject_verb_agreement_2.
Rozmiar pliku do pobrania :
445.78 KiB
Rozmiar zbioru danych :
354.47 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/sentential_negation_npi_licensor_present
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat sentential_negation_npi_licensor_present.
Rozmiar pliku do pobrania :
479.49 KiB
Rozmiar zbioru danych :
372.30 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/sentential_negation_npi_scope
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat sentential_negation_npi_scope.
Rozmiar pliku do pobrania :
600.52 KiB
Rozmiar zbioru danych :
431.18 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/wyspa_przedmiotu_zdaniowego
Opis konfiguracji: ta konfiguracja obejmuje paradygmat sentential_subject_island.
Rozmiar pliku do pobrania :
357.25 KiB
Rozmiar zbioru danych :
372.86 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/superlative_quantifiers_1
Opis konfiguracji: ta konfiguracja obejmuje paradygmat superlative_quantifiers_1.
Rozmiar pliku do pobrania :
372.25 KiB
Rozmiar zbioru danych :
360.02 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/superlative_quantifiers_2
Opis konfiguracji: ta konfiguracja obejmuje paradygmat superlative_quantifiers_2.
Rozmiar pliku do pobrania :
504.02 KiB
Rozmiar zbioru danych :
360.07 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/tough_vs_raising_1
Opis konfiguracji: ta konfiguracja obejmuje paradygmat "hard_vs_raising_1".
Rozmiar pliku do pobrania :
334.99 KiB
Rozmiar zbioru danych :
349.62 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/tough_vs_raising_2
Opis konfiguracji: ta konfiguracja zawiera paradygmat trudnych_kontras_raising_2.
Rozmiar pliku do pobrania :
355.54 KiB
Rozmiar zbioru danych :
370.17 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/przechodni
Opis konfiguracji: ta konfiguracja obejmuje paradygmat przechodni.
Rozmiar pliku do pobrania :
449.50 KiB
Rozmiar zbioru danych :
334.45 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/biała_wyspa
Opis konfiguracji: ta konfiguracja obejmuje paradygmat wh_island.
Rozmiar pliku do pobrania :
438.12 KiB
Rozmiar zbioru danych :
343.47 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/wh_questions_object_gap
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat wh_questions_object_gap.
Rozmiar pliku do pobrania :
378.35 KiB
Rozmiar zbioru danych :
392.99 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/wh_questions_subject_gap
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat wh_questions_subject_gap.
Rozmiar pliku do pobrania :
380.84 KiB
Rozmiar zbioru danych :
395.47 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/wh_questions_subject_gap_long_distance
Opis konfiguracji: ta konfiguracja obejmuje paradygmat wh_questions_subject_gap_long_distance.
Rozmiar pliku do pobrania :
451.82 KiB
Rozmiar zbioru danych :
466.53 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/wh_vs_that_no_gap
Opis konfiguracji: ta konfiguracja obejmuje paradygmat wh_vs_that_no_gap.
Rozmiar pliku do pobrania :
374.28 KiB
Rozmiar zbioru danych :
388.91 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/wh_vs_that_no_gap_long_distance
Opis konfiguracji: ta konfiguracja obejmuje paradygmat wh_vs_that_no_gap_long_distance.
Rozmiar pliku do pobrania :
431.08 KiB
Rozmiar zbioru danych :
445.74 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/wh_vs_that_with_gap
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat wh_vs_that_with_gap.
Rozmiar pliku do pobrania :
359.16 KiB
Rozmiar zbioru danych :
373.79 KiB
Przykłady ( tfds.as_dataframe ):
sterowiec/wh_vs_that_with_gap_long_distance
Opis konfiguracji: Ta konfiguracja obejmuje paradygmat wh_vs_that_with_gap_long_distance.
Rozmiar pliku do pobrania :
416.00 KiB
Rozmiar zbioru danych :
430.63 KiB
Przykłady ( tfds.as_dataframe ):