- 설명 :
BLiMP는 언어 모델(LM)이 영어의 주요 문법 현상에 대해 알고 있는 것을 평가하기 위한 챌린지 세트입니다. BLiMP는 67개의 하위 데이터 세트로 구성되며 각 하위 데이터 세트에는 구문, 형태 또는 의미 체계에서 특정 대비를 격리하는 1000개의 최소 쌍이 포함됩니다. 데이터는 전문가가 만든 문법에 따라 자동으로 생성됩니다.
소스 코드 :
tfds.datasets.blimp.Builder
버전 :
-
0.1.0
(기본값): 릴리스 정보가 없습니다.
-
자동 캐시 ( 문서 ): 예
분할 :
나뉘다 | 예 |
---|---|
'train' | 1,000 |
- 기능 구조 :
FeaturesDict({
'UID': Text(shape=(), dtype=string),
'field': Text(shape=(), dtype=string),
'lexically_identical': bool,
'linguistics_term': Text(shape=(), dtype=string),
'one_prefix_method': bool,
'pair_id': int32,
'sentence_bad': Text(shape=(), dtype=string),
'sentence_good': Text(shape=(), dtype=string),
'simple_LM_method': bool,
'two_prefix_method': bool,
})
- 기능 문서 :
특징 | 수업 | 모양 | D타입 | 설명 |
---|---|---|---|---|
풍모Dict | ||||
UID | 텍스트 | 끈 | ||
필드 | 텍스트 | 끈 | ||
lexically_identical | 텐서 | 부울 | ||
언어학_용어 | 텍스트 | 끈 | ||
one_prefix_method | 텐서 | 부울 | ||
pair_id | 텐서 | int32 | ||
sentence_bad | 텍스트 | 끈 | ||
sentence_good | 텍스트 | 끈 | ||
simple_LM_방법 | 텐서 | 부울 | ||
two_prefix_method | 텐서 | 부울 |
감독된 키 (
as_supervised
문서 참조):None
그림 ( tfds.show_examples ): 지원되지 않습니다.
인용 :
@article{warstadt2019blimp,
title={BLiMP: A Benchmark of Linguistic Minimal Pairs for English},
author={Warstadt, Alex and Parrish, Alicia and Liu, Haokun and Mohananey, Anhad and Peng, Wei, and Wang, Sheng-Fu and Bowman, Samuel R},
journal={arXiv preprint arXiv:1912.00582},
year={2019}
}
비행선/adjunct_island(기본 구성)
구성 설명 : 이 구성에는 패러다임 adjunct_island가 포함됩니다.
다운로드 크기 :
350.86 KiB
데이터 세트 크기 :
366.47 KiB
예 ( tfds.as_dataframe ):
비행선/anaphor_gender_agreement
구성 설명 : 이 구성에는 패러다임 anaphor_gender_agreement가 포함됩니다.
다운로드 크기 :
426.51 KiB
데이터 세트 크기 :
332.31 KiB
예 ( tfds.as_dataframe ):
비행선/anaphor_number_agreement
구성 설명 : 이 구성에는 패러다임 anaphor_number_agreement가 포함됩니다.
다운로드 크기 :
440.29 KiB
데이터 세트 크기 :
341.07 KiB
예 ( tfds.as_dataframe ):
비행선/animate_subject_passive
구성 설명 : 이 구성에는 패러다임 animate_subject_passive가 포함됩니다.
다운로드 크기 :
451.46 KiB
데이터 세트 크기 :
345.50 KiB
예 ( tfds.as_dataframe ):
비행선/animate_subject_trans
구성 설명 : 이 구성에는 패러다임 animate_subject_trans가 포함됩니다.
다운로드 크기 :
422.95 KiB
데이터 세트 크기 :
329.27 KiB
예 ( tfds.as_dataframe ):
비행선/원인
구성 설명 : 이 구성에는 패러다임 원인이 포함됩니다.
다운로드 크기 :
309.73 KiB
데이터 세트 크기 :
324.36 KiB
예 ( tfds.as_dataframe ):
비행선/complex_NP_island
구성 설명 : 이 구성에는 패러다임 complex_NP_island가 포함됩니다.
다운로드 크기 :
383.17 KiB
데이터 세트 크기 :
398.78 KiB
예 ( tfds.as_dataframe ):
비행선/coordinate_structure_constraint_complex_left_branch
구성 설명 : 이 구성에는 paradigm coordinate_structure_constraint_complex_left_branch가 포함됩니다.
다운로드 크기 :
558.30 KiB
데이터 세트 크기 :
410.43 KiB
예 ( tfds.as_dataframe ):
비행선/coordinate_structure_constraint_object_extraction
구성 설명 : 이 구성에는 paradigm coordinate_structure_constraint_object_extraction이 포함됩니다.
다운로드 크기 :
357.47 KiB
데이터 세트 크기 :
372.10 KiB
예 ( tfds.as_dataframe ):
비행선/determiner_noun_agreement_1
구성 설명 : 이 구성에는 패러다임 결정자_명사_계약_1이 포함됩니다.
다운로드 크기 :
457.66 KiB
데이터 세트 크기 :
356.93 KiB
예 ( tfds.as_dataframe ):
비행선/determiner_noun_agreement_2
구성 설명 : 이 구성에는 paradigm identifier_noun_agreement_2가 포함됩니다.
다운로드 크기 :
477.40 KiB
데이터 세트 크기 :
357.01 KiB
예 ( tfds.as_dataframe ):
비행선/determiner_noun_agreement_irregular_1
구성 설명 : 이 구성에는 패러다임 결정자_명사_계약_irregular_1이 포함됩니다.
다운로드 크기 :
463.80 KiB
데이터 세트 크기 :
365.08 KiB
예 ( tfds.as_dataframe ):
비행선/determiner_noun_agreement_irregular_2
구성 설명 : 이 구성에는 paradigm explain_noun_agreement_irregular_2가 포함됩니다.
다운로드 크기 :
479.35 KiB
데이터 세트 크기 :
361.76 KiB
예 ( tfds.as_dataframe ):
비행선/determiner_noun_agreement_with_adj_2
구성 설명 : 이 구성에는 paradigm explain_noun_agreement_with_adj_2가 포함됩니다.
다운로드 크기 :
514.46 KiB
데이터 세트 크기 :
379.92 KiB
예 ( tfds.as_dataframe ):
비행선/determiner_noun_agreement_with_adj_irregular_1
구성 설명 : 이 구성에는 패러다임 결정자_명사_계약_with_adj_irregular_1이 포함됩니다.
다운로드 크기 :
487.95 KiB
데이터 세트 크기 :
384.67 KiB
예 ( tfds.as_dataframe ):
비행선/determiner_noun_agreement_with_adj_irregular_2
구성 설명 : 이 구성에는 패러다임 결정자_명사_계약_with_adj_irregular_2가 포함됩니다.
다운로드 크기 :
516.14 KiB
데이터 세트 크기 :
384.54 KiB
예 ( tfds.as_dataframe ):
비행선/determiner_noun_agreement_with_adjective_1
구성 설명 : 이 구성에는 결정자_명사_계약_with_adjective_1 패러다임이 포함됩니다.
다운로드 크기 :
492.85 KiB
데이터 세트 크기 :
385.25 KiB
예 ( tfds.as_dataframe ):
비행선/distractor_agreement_relational_noun
Config description : 이 구성에는 paradigm squeezer_agreement_relational_noun이 포함됩니다.
다운로드 크기 :
513.33 KiB
데이터 세트 크기 :
391.45 KiB
예 ( tfds.as_dataframe ):
비행선/distractor_agreement_relative_clause
Config description : 이 구성에는 패러다임 driftor_agreement_relative_clause가 포함되어 있습니다.
다운로드 크기 :
551.53 KiB
데이터 세트 크기 :
416.14 KiB
예 ( tfds.as_dataframe ):
비행선/drop_argument
구성 설명 : 이 구성에는 paradigm drop_argument가 포함됩니다.
다운로드 크기 :
297.07 KiB
데이터 세트 크기 :
311.70 KiB
예 ( tfds.as_dataframe ):
소형 연식 비행선/ellipsis_n_bar_1
구성 설명 : 이 구성에는 패러다임 ellipsis_n_bar_1이 포함됩니다.
다운로드 크기 :
402.32 KiB
데이터 세트 크기 :
417.06 KiB
예 ( tfds.as_dataframe ):
소형 연식 비행선/ellipsis_n_bar_2
구성 설명 : 이 구성에는 패러다임 ellipsis_n_bar_2가 포함됩니다.
다운로드 크기 :
417.53 KiB
데이터 세트 크기 :
432.47 KiB
예 ( tfds.as_dataframe ):
소형 연식 비행선/existential_there_object_raising
구성 설명 : 이 구성에는 존재_there_object_raise라는 패러다임이 포함되어 있습니다.
다운로드 크기 :
537.77 KiB
데이터 세트 크기 :
423.00 KiB
예 ( tfds.as_dataframe ):
비행선/existential_there_quantifiers_1
구성 설명 : 이 구성에는 존재하는 패러다임(existential_there_quantifiers_1)이 포함됩니다.
다운로드 크기 :
348.95 KiB
데이터 세트 크기 :
363.58 KiB
예 ( tfds.as_dataframe ):
비행선/existential_there_quantifiers_2
구성 설명 : 이 구성에는 존재하는 패러다임(existential_there_quantifiers_2)이 포함됩니다.
다운로드 크기 :
350.80 KiB
데이터 세트 크기 :
365.43 KiB
예 ( tfds.as_dataframe ):
소형 연식 비행선/existential_there_subject_raising
구성 설명 : 이 구성에는 존재_there_subject_raising 패러다임이 포함됩니다.
다운로드 크기 :
385.21 KiB
데이터 세트 크기 :
399.84 KiB
예 ( tfds.as_dataframe ):
소형 연식 비행선/expletive_it_object_raising
구성 설명 : 이 구성에는 expletive_it_object_raising 패러다임이 포함되어 있습니다.
다운로드 크기 :
573.88 KiB
데이터 세트 크기 :
437.58 KiB
예 ( tfds.as_dataframe ):
소형 연식 비행선
구성 설명 : 이 구성에는 패러다임 발동이 포함되어 있습니다.
다운로드 크기 :
291.71 KiB
데이터 세트 크기 :
306.34 KiB
예 ( tfds.as_dataframe ):
연식 비행선/자동사
구성 설명 : 이 구성에는 자동사 패러다임이 포함됩니다.
다운로드 크기 :
298.33 KiB
데이터 세트 크기 :
312.96 KiB
예 ( tfds.as_dataframe ):
비행선/irregular_past_participle_adjectives
구성 설명 : 이 구성에는 불규칙_과거_분절_형용사 패러다임이 포함됩니다.
다운로드 크기 :
434.10 KiB
데이터 세트 크기 :
345.74 KiB
예 ( tfds.as_dataframe ):
연식 비행선/irregular_past_participle_verbs
구성 설명 : 이 구성에는 regular_past_participle_verbs 패러다임이 포함됩니다.
다운로드 크기 :
410.27 KiB
데이터 세트 크기 :
327.21 KiB
예 ( tfds.as_dataframe ):
연식 비행선/irregular_plural_subject_verb_agreement_1
구성 설명 : 이 구성에는 불규칙_plural_subject_verb_agreement_1 패러다임이 포함됩니다.
다운로드 크기 :
449.91 KiB
데이터 세트 크기 :
366.17 KiB
예 ( tfds.as_dataframe ):
연식 비행선/irregular_plural_subject_verb_agreement_2
구성 설명 : 이 구성에는 불규칙_plural_subject_verb_agreement_2 패러다임이 포함됩니다.
다운로드 크기 :
442.75 KiB
데이터 세트 크기 :
354.70 KiB
예 ( tfds.as_dataframe ):
비행선/left_branch_island_echo_question
구성 설명 : 이 구성에는 left_branch_island_echo_question 패러다임이 포함됩니다.
다운로드 크기 :
471.31 KiB
데이터 세트 크기 :
348.84 KiB
예 ( tfds.as_dataframe ):
비행선/left_branch_island_simple_question
구성 설명 : 이 구성에는 left_branch_island_simple_question 패러다임이 포함됩니다.
다운로드 크기 :
335.40 KiB
데이터 세트 크기 :
351.01 KiB
예 ( tfds.as_dataframe ):
비행선/matrix_question_npi_licensor_present
구성 설명 : 이 구성에는 패러다임 matrix_question_npi_licensor_present가 포함됩니다.
다운로드 크기 :
447.08 KiB
데이터 세트 크기 :
354.14 KiB
예 ( tfds.as_dataframe ):
비행선/npi_present_1
구성 설명 : 이 구성에는 패러다임 npi_present_1이 포함됩니다.
다운로드 크기 :
427.75 KiB
데이터 세트 크기 :
339.68 KiB
예 ( tfds.as_dataframe ):
비행선/npi_present_2
구성 설명 : 이 구성에는 패러다임 npi_present_2가 포함됩니다.
다운로드 크기 :
412.24 KiB
데이터 세트 크기 :
329.11 KiB
예 ( tfds.as_dataframe ):
비행선/only_npi_licensor_present
구성 설명 : 이 구성에는 패러다임 only_npi_licensor_present가 포함됩니다.
다운로드 크기 :
448.41 KiB
데이터 세트 크기 :
349.50 KiB
예 ( tfds.as_dataframe ):
비행선/only_npi_scope
구성 설명 : 이 구성에는 패러다임 only_npi_scope가 포함됩니다.
다운로드 크기 :
570.04 KiB
데이터 세트 크기 :
408.52 KiB
예 ( tfds.as_dataframe ):
비행선/passive_1
구성 설명 : 이 구성에는 패러다임 passive_1이 포함됩니다.
다운로드 크기 :
332.30 KiB
데이터 세트 크기 :
346.93 KiB
예 ( tfds.as_dataframe ):
비행선/passive_2
구성 설명 : 이 구성에는 패러다임 passive_2가 포함됩니다.
다운로드 크기 :
301.12 KiB
데이터 세트 크기 :
315.75 KiB
예 ( tfds.as_dataframe ):
비행선/principle_A_c_command
구성 설명 : 이 구성에는 패러다임 principal_A_c_command가 포함됩니다.
다운로드 크기 :
515.32 KiB
데이터 세트 크기 :
388.54 KiB
예 ( tfds.as_dataframe ):
비행선/principle_A_case_1
구성 설명 : 이 구성에는 패러다임 원리_A_case_1가 포함됩니다.
다운로드 크기 :
466.05 KiB
데이터 세트 크기 :
370.87 KiB
예 ( tfds.as_dataframe ):
비행선/principle_A_case_2
구성 설명 : 이 구성에는 패러다임 원리_A_case_2가 포함됩니다.
다운로드 크기 :
481.42 KiB
데이터 세트 크기 :
370.88 KiB
예 ( tfds.as_dataframe ):
비행선/principle_A_domain_1
구성 설명 : 이 구성에는 패러다임 principal_A_domain_1이 포함됩니다.
다운로드 크기 :
488.15 KiB
데이터 세트 크기 :
371.62 KiB
예 ( tfds.as_dataframe ):
비행선/principle_A_domain_2
구성 설명 : 이 구성에는 패러다임 principal_A_domain_2가 포함됩니다.
다운로드 크기 :
481.63 KiB
데이터 세트 크기 :
365.92 KiB
예 ( tfds.as_dataframe ):
비행선/principle_A_domain_3
구성 설명 : 이 구성에는 패러다임 principal_A_domain_3이 포함됩니다.
다운로드 크기 :
501.84 KiB
데이터 세트 크기 :
359.74 KiB
예 ( tfds.as_dataframe ):
비행선/principle_A_reconstruction
구성 설명 : 이 구성에는 패러다임 원리_A_재구성이 포함됩니다.
다운로드 크기 :
337.40 KiB
데이터 세트 크기 :
353.00 KiB
예 ( tfds.as_dataframe ):
비행선/regular_plural_subject_verb_agreement_1
구성 설명 : 이 구성에는 regular_plural_subject_verb_agreement_1 패러다임이 포함됩니다.
다운로드 크기 :
441.26 KiB
데이터 세트 크기 :
359.56 KiB
예 ( tfds.as_dataframe ):
비행선/regular_plural_subject_verb_agreement_2
구성 설명 : 이 구성에는 regular_plural_subject_verb_agreement_2 패러다임이 포함됩니다.
다운로드 크기 :
445.78 KiB
데이터 세트 크기 :
354.47 KiB
예 ( tfds.as_dataframe ):
비행선/sentential_negation_npi_licensor_present
구성 설명 : 이 구성에는 sentential_negation_npi_licensor_present 패러다임이 포함됩니다.
다운로드 크기 :
479.49 KiB
데이터 세트 크기 :
372.30 KiB
예 ( tfds.as_dataframe ):
비행선/sentential_negation_npi_scope
구성 설명 : 이 구성에는 패러다임 sentential_negation_npi_scope가 포함됩니다.
다운로드 크기 :
600.52 KiB
데이터 세트 크기 :
431.18 KiB
예 ( tfds.as_dataframe ):
비행선/sentential_subject_island
구성 설명 : 이 구성에는 sentential_subject_island 패러다임이 포함됩니다.
다운로드 크기 :
357.25 KiB
데이터 세트 크기 :
372.86 KiB
예 ( tfds.as_dataframe ):
비행선/superlative_quantifiers_1
구성 설명 : 이 구성에는 패러다임 superlative_quantifiers_1이 포함됩니다.
다운로드 크기 :
372.25 KiB
데이터 세트 크기 :
360.02 KiB
예 ( tfds.as_dataframe ):
비행선/superlative_quantifiers_2
구성 설명 : 이 구성에는 패러다임 superlative_quantifiers_2가 포함됩니다.
다운로드 크기 :
504.02 KiB
데이터 세트 크기 :
360.07 KiB
예 ( tfds.as_dataframe ):
소형 연식 비행선/tough_vs_raising_1
구성 설명 : 이 구성에는 tough_vs_raising_1 패러다임이 포함됩니다.
다운로드 크기 :
334.99 KiB
데이터 세트 크기 :
349.62 KiB
예 ( tfds.as_dataframe ):
소형 연식 비행선/tough_vs_raising_2
구성 설명 : 이 구성에는 tough_vs_raising_2 패러다임이 포함됩니다.
다운로드 크기 :
355.54 KiB
데이터 세트 크기 :
370.17 KiB
예 ( tfds.as_dataframe ):
연식 비행선/전이
구성 설명 : 이 구성에는 패러다임 전이가 포함됩니다.
다운로드 크기 :
449.50 KiB
데이터 세트 크기 :
334.45 KiB
예 ( tfds.as_dataframe ):
비행선/wh_island
구성 설명 : 이 구성에는 wh_island 패러다임이 포함됩니다.
다운로드 크기 :
438.12 KiB
데이터 세트 크기 :
343.47 KiB
예 ( tfds.as_dataframe ):
비행선/wh_questions_object_gap
구성 설명 : 이 구성에는 패러다임 wh_questions_object_gap이 포함됩니다.
다운로드 크기 :
378.35 KiB
데이터 세트 크기 :
392.99 KiB
예 ( tfds.as_dataframe ):
비행선/wh_questions_subject_gap
구성 설명 : 이 구성에는 패러다임 wh_questions_subject_gap이 포함됩니다.
다운로드 크기 :
380.84 KiB
데이터 세트 크기 :
395.47 KiB
예 ( tfds.as_dataframe ):
비행선/wh_questions_subject_gap_long_distance
구성 설명 : 이 구성에는 패러다임 wh_questions_subject_gap_long_distance가 포함됩니다.
다운로드 크기 :
451.82 KiB
데이터 세트 크기 :
466.53 KiB
예 ( tfds.as_dataframe ):
비행선/wh_vs_that_no_gap
구성 설명 : 이 구성에는 패러다임 wh_vs_that_no_gap이 포함됩니다.
다운로드 크기 :
374.28 KiB
데이터 세트 크기 :
388.91 KiB
예 ( tfds.as_dataframe ):
비행선/wh_vs_that_no_gap_long_distance
구성 설명 : 이 구성에는 패러다임 wh_vs_that_no_gap_long_distance가 포함됩니다.
다운로드 크기 :
431.08 KiB
데이터 세트 크기 :
445.74 KiB
예 ( tfds.as_dataframe ):
비행선/wh_vs_that_with_gap
구성 설명 : 이 구성에는 패러다임 wh_vs_that_with_gap이 포함됩니다.
다운로드 크기 :
359.16 KiB
데이터 세트 크기 :
373.79 KiB
예 ( tfds.as_dataframe ):
비행선/wh_vs_that_with_gap_long_distance
구성 설명 : 이 구성에는 패러다임 wh_vs_that_with_gap_long_distance가 포함됩니다.
다운로드 크기 :
416.00 KiB
데이터 세트 크기 :
430.63 KiB
예 ( tfds.as_dataframe ):