จาก动察 Beating ตรวจสอบพบว่า NVIDIA กำลังเร่งพัฒนา Nemotron 4 โดยหวังให้เป็นหนึ่งในโมเดลโอเพนซอร์สที่แข็งแกร่งที่สุดในโลก The Information อ้างอิงจากพนักงานหลายรายในโครงการว่า โมเดลที่ใหญ่ที่สุดในซีรีส์นี้คาดว่าจะมีพารามิเตอร์อย่างน้อย 1 ล้านล้านตัว ซึ่งประมาณสองเท่าของ Nemotron 3 Ultra ยังไม่มีการกำหนดสเปกและกำหนดเวลาวางจำหน่ายที่แน่ชัด และการฝึกขั้นสุดท้ายยังไม่เริ่มต้น
NVIDIA ต้องการใช้โมเดลโอเพนซอร์สที่แข็งแกร่งขึ้นเพื่อกระตุ้นความต้องการ GPU ในช่วงไม่กี่ปีที่ผ่านมา บริษัทเพิ่มการลงทุนด้านพลังประมวลผลสำหรับโมเดลที่พัฒนาขึ้นเองอย่างเห็นได้ชัด ณ เดือนเมษายนปีนี้ ข้อผูกพันในการจัดซื้อบริการคลาวด์ในอีกหลายปีข้างหน้าเพิ่มขึ้นเป็น 28,000 ล้านดอลลาร์สหรัฐ ซึ่งประมาณสามเท่าของปีก่อนหน้า อย่างไรก็ตาม ตัวเลขนี้รวมถึงการใช้งานเพื่อการวิจัยและพัฒนาอื่นๆ ด้วย
Nemotron 4 ยังดึงดูดบริษัทภายนอกหลายแห่งให้ร่วมพัฒนาด้วย Cursor, Mistral, Thinking Machines, Reflection AI และอื่นๆ จะให้ข้อมูลฝึกฝน การประเมินผล และการออกแบบโมเดล ขณะที่ Prime Intellect ยังสนับสนุนสภาพแวดล้อมจำลอง 300,000 แห่ง
ปัญหาคือ บริษัทเหล่านี้หลายแห่งเป็นลูกค้าหรือบริษัทที่ NVIDIA ลงทุนอยู่แล้ว OpenAI และบริษัทโมเดลชั้นนำอื่นๆ ก็เป็นหนึ่งในผู้ซื้อ GPU รายใหญ่ที่สุดของ NVIDIA ตอนนี้ NVIDIA เองกำลังบุกตลาดโมเดลโอเพนซอร์สระดับแนวหน้า ทั้งต้องการขยายตลาดโมเดลโอเพนซอร์สให้ใหญ่ขึ้น และเริ่มแข่งขันกับลูกค้าและพันธมิตรของตัวเอง
