JetBrains เปิดโอเพนซอร์ส Mellum2.1: ผลทดสอบ LiveCodeBench แซง Qwen3.5-9B

动察 Beating ข่าวด่วน AI: JetBrains เปิดตัวโมเดลเขียนโค้ดโอเพนซอร์ส Mellum2.1 เมื่อเทียบกับ Mellum2 ที่เปิดตัวเมื่อเดือนมิถุนายนปีนี้ เวอร์ชันใหม่ยังคงมีพารามิเตอร์รวม 12,000 ล้านตัว แต่เปิดใช้งานเพียง 2,500 ล้านตัวต่อการสร้างแต่ละครั้ง ทว่ามีความสามารถในการค้นหาปัญหาในโค้ด แก้ไขไฟล์ และตรวจสอบผลลัพธ์ได้ดีขึ้น

JetBrains ไม่ได้เปลี่ยนแปลงสถาปัตยกรรมของโมเดล แต่เพิ่มความสามารถผ่านการเรียนรู้แบบเสริมกำลังเป็นหลัก ทีมงานได้รันงานในสภาพแวดล้อมจำลองหลายล้านครั้งในสภาพแวดล้อมหลายพันแบบ ในระหว่างการฝึก โมเดลจะเรียกใช้เครื่องมือเทอร์มินัลและแก้ไขไฟล์ในคลังโค้ดจริง และจะได้รับรางวัลเมื่อผ่านการทดสอบสำเร็จ

ผลการทดสอบเองของ JetBrains แสดงให้เห็นว่าอัตราความสำเร็จใน SWE-bench Verified (การทดสอบแก้ไขปัญหาซอฟต์แวร์จริง) เพิ่มขึ้นจาก 2% ในเวอร์ชันเก่าเป็น 47% ซึ่งต่ำกว่า 50% ของ Qwen3.5-9B เล็กน้อย แต่ในการทดสอบเขียนโปรแกรม LiveCodeBench v6 นั้น Mellum2.1 ได้คะแนน 82% สูงกว่า 75.4% ของ Qwen JetBrains ยังกล่าวอีกว่า เมื่อรันที่โหลดสูงบน H200 เพียงใบเดียว ปริมาณการส่งออกของโมเดลใหม่ใกล้เคียงกับสองเท่าของ Qwen3.5-9B

น้ำหนักโมเดลและเวอร์ชันควอนไทซ์ GGUF ได้เปิดให้ใช้งานแล้วบน Hugging Face ภายใต้สัญญาอนุญาต Apache 2.0 สำหรับนักพัฒนาในการติดตั้งใช้งานในเครื่อง