Tether เปิดตัวชุดข้อมูล STEM ขนาด 1.914 แสนล้านโทเคน เดิมพันกับ "ความสามารถในการอธิบาย" ของโมเดลขนาดเล็กในเครื่อง

ข่าว BlockBeats วันที่ 23 กันยายน Tether AI Research ภายใต้บริษัทสกุลเงินดิจิทัลยักษ์ใหญ่ Tether ได้เปิดตัว QVAC Genesis III ในวันนี้ ซึ่งเป็นชุดข้อมูลฝึกอบรมสังเคราะห์สำหรับสาขาวิทยาศาสตร์ เทคโนโลยี วิศวกรรมศาสตร์ และคณิตศาสตร์ มีขนาดถึง 1.9143 แสนล้าน Token ครอบคลุมเอกสาร 159.6 ล้านฉบับ

เป็นที่ทราบกันว่า Tether หวังที่จะใช้สิ่งนี้เพื่อยกระดับความสามารถในการ推理และการสอนของโมเดล AI ขนาดเล็ก ทำให้ผู้ช่วย AI จำนวนมากขึ้นสามารถทำงานบนแล็ปท็อป โทรศัพท์มือถือ และเซิร์ฟเวอร์ภายในเครื่องได้โดยตรง ลดการพึ่งพาโมเดลคลาวด์ขนาดใหญ่อย่างต่อเนื่อง

Genesis III สืบทอดเส้นทางข้อมูลของ Genesis I และ Genesis II เนื้อหาครอบคลุมสาขาที่เกี่ยวข้องกับระบบหลักสูตร 19 แห่ง เช่น ชีววิทยา เคมี ฟิสิกส์ คณิตศาสตร์ วิทยาการคอมพิวเตอร์ การแพทย์ วิศวกรรมไฟฟ้า และแมชชีนเลิร์นนิง มุ่งเป้าไปที่การใช้งานระดับมัธยมปลาย มหาวิทยาลัย และระดับมืออาชีพ Tether กล่าวว่าชุดข้อมูลจะเน้นการฝึกโมเดลให้อธิบายเส้นทางการแก้ปัญหา ระบุการ推理ที่ผิดพลาด และให้การแก้ไข มากกว่าการส่งออกเพียงคำตอบสุดท้าย

ตามผลการทดสอบที่ Tether เปิดเผย โมเดลขนาด 1.7 พันล้านพารามิเตอร์ที่ฝึกด้วยข้อมูลระดับตัวเลือกของ Genesis III มีอัตราการตอบที่มีประสิทธิภาพถึง 99.45% ในการทดสอบ基準ที่เกี่ยวข้อง เมื่อเปรียบเทียบกับโมเดลที่ฝึกด้วย Cosmopedia-v2 ซึ่งมีขนาด Token ใกล้เคียงกัน Genesis III มีคะแนนเพิ่มขึ้น 28.57, 21.35 และ 15.03 จุดเปอร์เซ็นต์ตามลำดับบน基準 ARC-Easy, ARC-Challenge และ MMLU STEM