แท็ก

#open-data

2 บทความ

AI2 เปิด BenchMIRT: วิเคราะห์เบนช์มาร์กทีละข้อด้วย IRT แล้วพบว่า BBQ กับ WMDP วัด "การให้เหตุผล" มากกว่าวัด "ความปลอดภัย" — และเหลือคำถามแค่ 10% ก็ยังจัดอันดับโมเดลได้เหมือนเดิม
งานวิจัย

AI2 เปิด BenchMIRT: วิเคราะห์เบนช์มาร์กทีละข้อด้วย IRT แล้วพบว่า BBQ กับ WMDP วัด "การให้เหตุผล" มากกว่าวัด "ความปลอดภัย" — และเหลือคำถามแค่ 10% ก็ยังจัดอันดับโมเดลได้เหมือนเดิม

Ai2 เผยแพร่ BenchMIRT เมื่อ 1 ก.ย. 2026 — วิธีตรวจสอบเบนช์มาร์ก LLM ที่ระดับคำถามรายข้อด้วย multidimensional Item Response Theory ฝึกจากผลของ 100 โมเดลบน 16 เบนช์มาร์กกว่า 34,000 คำถาม ผลคือมันค้นพบสองมิติหลัก (ความปลอดภัย กับ การให้เหตุผล) เองโดยไม่ต้องบอก และพบว่า BBQ กับ WMDP เกาะกับมิติการให้เหตุผลมากกว่าความปลอดภัย

· อ่าน 7 นาที
LAION ปล่อยชุดข้อมูลวิดีโอเปิด 10 ล้านชั่วโมง — BVD ที่กลั่นจาก URL 1.3 พันล้าน แต่ติดป้าย "วิจัยเท่านั้น" และภาระทางกฎหมายตกที่คนดาวน์โหลด
งานวิจัย

LAION ปล่อยชุดข้อมูลวิดีโอเปิด 10 ล้านชั่วโมง — BVD ที่กลั่นจาก URL 1.3 พันล้าน แต่ติดป้าย "วิจัยเท่านั้น" และภาระทางกฎหมายตกที่คนดาวน์โหลด

LAION เปิด LAION-BVD ชุดข้อมูลวิดีโอเปิดขนาด 10 ล้านชั่วโมง กลั่นจาก URL 1.3 พันล้านรายการบน CommonCrawl เหลือวิดีโอที่โหลดได้จริง 80 ล้านไฟล์ พร้อมคลิปติดแคปชัน 55 ล้านคลิปและเฟรม 300 ล้านภาพ เปเปอร์ขึ้น arXiv 25 ส.ค. โมเดล ViCLIP ที่เทรนบนชุดนี้ชนะ InternVid สูงสุด 2.1 จุด — แต่ใบอนุญาตเป็น research-only และตัวไฟล์วิดีโอต้องขอสิทธิ์เข้าถึง

· อ่าน 7 นาที