cfq

  • বর্ণনা :

রচনাগত সাধারণীকরণ পরিমাপের জন্য CFQ ডেটাসেট (এবং এটি বিভক্ত)।

পটভূমির জন্য https://arxiv.org/abs/1912.09713.pdf দেখুন।

বৈধতা সেট সম্পর্কে একটি নোট: যেহেতু এটির পরীক্ষার সেটের মতোই বিতরণ রয়েছে এবং আমরা একটি অজানা পরীক্ষা বিতরণের ক্ষেত্রে একটি মডেলের রচনাগত সাধারণীকরণ পরিমাপ করতে আগ্রহী, আমরা পরামর্শ দিই যে ট্রেনের একটি উপসেটে যেকোনো টিউনিং করা উচিত। শুধুমাত্র সেট করুন (কাগজের বিভাগ 5.1 দেখুন)।

উদাহরণ ব্যবহার:

data = tfds.load('cfq/mcd1')
FeaturesDict({
    'query': Text(shape=(), dtype=string),
    'question': Text(shape=(), dtype=string),
})
  • বৈশিষ্ট্য ডকুমেন্টেশন :
বৈশিষ্ট্য ক্লাস আকৃতি ডিটাইপ বর্ণনা
ফিচারসডিক্ট
প্রশ্ন পাঠ্য স্ট্রিং
প্রশ্ন পাঠ্য স্ট্রিং
  • তত্ত্বাবধান করা কী (দেখুন as_supervised doc ): ('question', 'query')

  • চিত্র ( tfds.show_examples ): সমর্থিত নয়।

  • উদ্ধৃতি :

@inproceedings{Keysers2020,
  title={Measuring Compositional Generalization: A Comprehensive Method on
         Realistic Data},
  author={Daniel Keysers and Nathanael Sch"{a}rli and Nathan Scales and
          Hylke Buisman and Daniel Furrer and Sergii Kashubin and
          Nikola Momchev and Danila Sinopalnikov and Lukasz Stafiniak and
          Tibor Tihon and Dmitry Tsarkov and Xiao Wang and Marc van Zee and
          Olivier Bousquet},
  booktitle={ICLR},
  year={2020},
  url={https://arxiv.org/abs/1912.09713.pdf},
}

cfq/mcd1 (ডিফল্ট কনফিগারেশন)

  • ডেটাসেটের আকার : 49.75 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/mcd2

  • ডেটাসেটের আকার : 51.39 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/mcd3

  • ডেটাসেটের আকার : 50.22 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/question_complexity_split

  • ডেটাসেটের আকার : 52.81 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 10,340
'train' ৯৮,৯৯৯
'validation' 10,339

cfq/question_pattern_split

  • ডেটাসেটের আকার : 52.81 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,909
'train' ৯৫,৬৫৪
'validation' 12,115

cfq/query_complexity_split

  • ডেটাসেটের আকার : 52.81 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 9,512
'train' 100,654
'validation' 9,512

cfq/query_pattern_split

  • ডেটাসেটের আকার : 52.81 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 12,589
'train' 94,600
'validation' 12,489

cfq/random_split

  • ডেটাসেটের আকার : 52.81 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,967
'train' 95,744
'validation' 11,967

cfq/cd0_r1

  • ডেটাসেটের আকার : 49.72 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r2

  • ডেটাসেটের আকার : 49.45 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r3

  • ডেটাসেটের আকার : 49.76 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r4

  • ডেটাসেটের আকার : 50.04 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r5

  • ডেটাসেটের আকার : 49.36 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r6

  • ডেটাসেটের আকার : 49.36 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r7

  • ডেটাসেটের আকার : 49.93 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r8

  • ডেটাসেটের আকার : 48.58 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0_r9

  • ডেটাসেটের আকার : 49.23 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r1

  • ডেটাসেটের আকার : 51.54 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r2

  • ডেটাসেটের আকার : 48.18 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r3

  • ডেটাসেটের আকার : 49.23 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r4

  • ডেটাসেটের আকার : 49.76 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r5

  • ডেটাসেটের আকার : 49.10 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r6

  • ডেটাসেটের আকার : 49.10 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r7

  • ডেটাসেটের আকার : 48.02 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r8

  • ডেটাসেটের আকার : 48.13 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.1_r9

  • ডেটাসেটের আকার : 48.44 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r1

  • ডেটাসেটের আকার : 50.90 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r2

  • ডেটাসেটের আকার : 49.12 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r3

  • ডেটাসেটের আকার : 50.68 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r4

  • ডেটাসেটের আকার : 52.61 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r5

  • ডেটাসেটের আকার : 50.63 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r6

  • ডেটাসেটের আকার : 50.63 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r7

  • ডেটাসেটের আকার : 52.39 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r8

  • ডেটাসেটের আকার : 50.53 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.2_r9

  • ডেটাসেটের আকার : 50.64 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r1

  • ডেটাসেটের আকার : 52.08 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r2

  • ডেটাসেটের আকার : 52.11 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r3

  • ডেটাসেটের আকার : 51.25 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r4

  • ডেটাসেটের আকার : 49.94 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r5

  • ডেটাসেটের আকার : 49.71 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r6

  • ডেটাসেটের আকার : 49.71 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r7

  • ডেটাসেটের আকার : 50.86 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r8

  • ডেটাসেটের আকার : 49.43 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.3_r9

  • ডেটাসেটের আকার : 50.32 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r1

  • ডেটাসেটের আকার : 48.52 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r2

  • ডেটাসেটের আকার : 47.40 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r3

  • ডেটাসেটের আকার : 49.18 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r4

  • ডেটাসেটের আকার : 47.86 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r5

  • ডেটাসেটের আকার : 49.01 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r6

  • ডেটাসেটের আকার : 49.01 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r7

  • ডেটাসেটের আকার : 51.70 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r8

  • ডেটাসেটের আকার : 50.94 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.4_r9

  • ডেটাসেটের আকার : 51.98 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r1

  • ডেটাসেটের আকার : 51.00 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r2

  • ডেটাসেটের আকার : 49.91 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r3

  • ডেটাসেটের আকার : 51.26 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r4

  • ডেটাসেটের আকার : 51.27 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r5

  • ডেটাসেটের আকার : 51.87 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r6

  • ডেটাসেটের আকার : 51.87 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r7

  • ডেটাসেটের আকার : 48.52 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r8

  • ডেটাসেটের আকার : 48.62 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.5_r9

  • ডেটাসেটের আকার : 48.48 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r1

  • ডেটাসেটের আকার : 49.32 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r2

  • ডেটাসেটের আকার : 49.36 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r3

  • ডেটাসেটের আকার : 49.85 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r4

  • ডেটাসেটের আকার : 50.07 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r5

  • ডেটাসেটের আকার : 49.86 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r6

  • ডেটাসেটের আকার : 49.86 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r7

  • ডেটাসেটের আকার : 49.42 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r8

  • ডেটাসেটের আকার : 48.52 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd0.6_r9

  • ডেটাসেটের আকার : 49.54 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r1

  • ডেটাসেটের আকার : 49.75 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r2

  • ডেটাসেটের আকার : 49.07 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r3

  • ডেটাসেটের আকার : 50.22 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r4

  • ডেটাসেটের আকার : 49.12 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r5

  • ডেটাসেটের আকার : 48.80 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r6

  • ডেটাসেটের আকার : 48.80 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r7

  • ডেটাসেটের আকার : 50.69 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r8

  • ডেটাসেটের আকার : 51.39 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968

cfq/cd1_r9

  • ডেটাসেটের আকার : 49.94 MiB

  • বিভাজন :

বিভক্ত উদাহরণ
'test' 11,968
'train' 95,743
'validation' 11,968