เบียร์

• คำอธิบาย :

BEIR เป็นเกณฑ์มาตรฐานที่แตกต่างกันซึ่งมีงาน IR ที่หลากหลาย นอกจากนี้ยังมีกรอบทั่วไปและง่ายสำหรับการประเมินแบบจำลองการดึงตาม NLP ของคุณภายในเกณฑ์มาตรฐาน

• เอกสารประกอบเพิ่มเติม : สำรวจเอกสารด้วยรหัส north_east

• หน้าแรก : https://github.com/beir-cellar/beir

• รหัสที่มา : tfds.datasets.beir.Builder

• รุ่น :

  • 1.0.0 (ค่าเริ่มต้น): การเปิดตัวครั้งแรก

• โครงสร้างคุณลักษณะ :

FeaturesDict({
    'passage': Text(shape=(), dtype=string),
    'passage_id': Text(shape=(), dtype=string),
    'passage_metadata': Text(shape=(), dtype=string),
    'query': Text(shape=(), dtype=string),
    'query_id': Text(shape=(), dtype=string),
    'query_metadata': Text(shape=(), dtype=string),
    'score': float32,
})

• เอกสารคุณสมบัติ :

• คีย์ภายใต้การดูแล (ดู as_supervised doc ): None

• รูปภาพ ( tfds.show_examples ): ไม่รองรับ

• การอ้างอิง :

@inproceedings{
    thakur2021beir,
    title={ {BEIR}: A Heterogeneous Benchmark for Zero-shot Evaluation of Information Retrieval Models},
    author={Nandan Thakur and Nils Reimers and Andreas R{"u}ckl{'e} and Abhishek Srivastava and Iryna Gurevych},
    booktitle={Thirty-fifth Conference on Neural Information Processing Systems Datasets and Benchmarks Track (Round 2)},
    year={2021},
    url={https://openreview.net/forum?id=wCu6T5xFjeJ}
}

beir/msmarco (การกำหนดค่าเริ่มต้น)

• ขนาดการดาวน์โหลด : 1.01 GiB

• ขนาดชุดข้อมูล : 4.53 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

เบียร์/trec_covid

• ขนาดการดาวน์โหลด : 70.45 MiB

• ขนาดชุดข้อมูล : 292.04 MiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

เบียร์/nfcorpus

• ขนาดการดาวน์โหลด : 2.34 MiB

• ขนาดชุดข้อมูล : 24.94 MiB

• แคชอัตโนมัติ ( เอกสาร ): ใช่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

เบอ/nq

• ขนาดการดาวน์โหลด : 475.22 MiB

• ขนาดชุดข้อมูล : 1.66 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

เบอ/หม้อไฟ

• ขนาดการดาวน์โหลด : 623.73 MiB

• ขนาดชุดข้อมูล : 2.64 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

เบบีร์/ฟีกา

• ขนาดการดาวน์โหลด : 17.12 MiB

• ขนาดชุดข้อมูล : 73.39 MiB

• แคชอัตโนมัติ ( เอกสาร ): ใช่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

เบียร์/อาร์กัวน่า

• ขนาดการดาวน์โหลด : 3.60 MiB

• ขนาดชุดข้อมูล : 15.08 MiB

• แคชอัตโนมัติ ( เอกสาร ): ใช่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/webis_touche2020

• ขนาดการดาวน์โหลด : 216.61 MiB

• ขนาดชุดข้อมูล : 747.57 MiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/cqadupstack.android

• ขนาดการดาวน์โหลด : 4.98 GiB

• ขนาดชุดข้อมูล : 883.49 MiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/cqadupstack.english

• ขนาดการดาวน์โหลด : 4.98 GiB

• ขนาดชุดข้อมูล : 3.78 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/cqadupstack.gaming

• ขนาดการดาวน์โหลด : 4.98 GiB

• ขนาดชุดข้อมูล : 2.64 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/cqadupstack.gis

• ขนาดการดาวน์โหลด : 4.98 GiB

• ขนาดชุดข้อมูล : 1.47 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/cqadupstack.mathematica

• ขนาดการดาวน์โหลด : 4.98 GiB

• ขนาดชุดข้อมูล : 1.58 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/cqadupstack.physics

• ขนาดการดาวน์โหลด : 4.98 GiB

• ขนาดชุดข้อมูล : 2.02 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/cqadupstack.programmers

• ขนาดการดาวน์โหลด : 4.98 GiB

• ขนาดชุดข้อมูล : 2.14 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/cqadupstack.stats

• ขนาดการดาวน์โหลด : 4.98 GiB

• ขนาดชุดข้อมูล : 941.07 MiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/cqadupstack.tex

• ขนาดการดาวน์โหลด : 4.98 GiB

• ขนาดชุดข้อมูล : 21.75 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/cqadupstack.unix

• ขนาดการดาวน์โหลด : 4.98 GiB

• ขนาดชุดข้อมูล : 2.04 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/cqadupstack.webmasters

• ขนาดการดาวน์โหลด : 4.98 GiB

• ขนาดชุดข้อมูล : 650.08 MiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/cqadupstack.wordpress

• ขนาดการดาวน์โหลด : 4.98 GiB

• ขนาดชุดข้อมูล : 726.15 MiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

เบียร์/โควรา

• ขนาดการดาวน์โหลด : 15.12 MiB

• ขนาดชุดข้อมูล : 121.33 MiB

• แคชอัตโนมัติ ( เอกสาร ): ใช่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

beir/dbpedia_entity

• ขนาดการดาวน์โหลด : 609.67 MiB

• ขนาดชุดข้อมูล : 2.47 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

เบียร์/สซิด็อก

• ขนาดการดาวน์โหลด : 135.87 MiB

• ขนาดชุดข้อมูล : 573.04 MiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

เบียร์ / ไข้

• ขนาดการดาวน์โหลด : 1.15 GiB

• ขนาดชุดข้อมูล : 3.70 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

เบียร์/climate_fever

• ขนาดการดาวน์โหลด : 1.14 GiB

• ขนาดชุดข้อมูล : 3.64 GiB

• แคชอัตโนมัติ ( เอกสารประกอบ ): ไม่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):

เบียร์/ซิแฟคท์

• ขนาดการดาวน์โหลด : 2.69 MiB

• ขนาดชุดข้อมูล : 10.16 MiB

• แคชอัตโนมัติ ( เอกสาร ): ใช่

• แยก :

• ตัวอย่าง ( tfds.as_dataframe ):