จางอีหมิง: ข้อมูลการฝึกของ Seed น้อยกว่าหลายลำดับขนาด ByteDance ต้องรอถึงปี 2029 จึงจะแข่งขันกับ OpenAI และ Anthropic ได้

动察 Beating ข่าวด่วน AI จางอีหมิงได้ให้กรอบเวลาในการประชุม全体员工ของทีม Seed เมื่อเร็วๆ นี้ว่า ByteDance อย่างเร็วที่สุดก็ต้องรอถึงปี 2029 ถึง 2030 จึงจะมีโอกาสแข่งขันกับ OpenAI และ Anthropic ในด้าน AI ล้ำสมัย

จางอีหมิงชี้เป็นพิเศษว่า ชุดข้อมูลพรีเทรนที่โมเดลภาษาขนาดใหญ่ Seed ใช้นั้นเล็กกว่าคู่แข่งชั้นนำหลายลำดับขนาด

อันที่จริง ByteDance ได้ไพ่ดีๆ มาหลายใบในด้าน AI แล้ว Doubao เป็นแอปแชท AI ที่มีผู้ใช้มากที่สุดในประเทศ และ Seedance ก็ติดอันดับโมเดลสร้างวิดีโอชั้นนำระดับโลก ทว่าโมเดลภาษาทั่วไปกลับตามไม่ทัน เมื่อเปิดตัว Seed2.1 ในเดือนมิถุนายนปีนี้ ทีมเองก็ยอมรับว่าโมเดลยังมีจุดอ่อนที่ชัดเจนในงานเปิดกว้างที่มีความยากสูงและปัญหาการวิจัยทางวิทยาศาสตร์ล้ำสมัย

ByteDance เตรียมทุ่มเงินมหาศาลเพื่อสิ่งนี้ ในเดือนพฤษภาคมปีนี้ บริษัทเคยหารือถึงการเพิ่มรายจ่ายลงทุนทั้งปีขึ้นเป็นสูงสุด 7 หมื่นล้านดอลลาร์สหรัฐฯ โดยหลักเพื่อสร้างโครงสร้างพื้นฐาน เช่น ศูนย์ข้อมูล AI ในเดือนสิงหาคมยังมีข่าวว่า Seed กำลังพรีเทรนโมเดลขนาดใหญ่ที่มีพารามิเตอร์สูงสุดถึง 1 หมื่นล้านล้าน ซึ่งมีขนาดใหญ่กว่าโมเดลสาธารณะทั้งหมดในประเทศ

จางอีหมิงก็ไม่ต้องการใช้วิธีลัดด้วยการกลั่นความรู้ (distillation) การกลั่นความรู้หมายถึงการนำคำตอบที่สร้างโดยโมเดลชั้นนำอย่าง Claude กลับมาใช้ฝึกโมเดลของตัวเอง ในเดือนสิงหาคมปีนี้ เขาระบุชัดเจนว่าวิธีนี้ปรับปรุงประสิทธิภาพได้จริงในระยะสั้น แต่สิ่งที่เรียนมาก็คือความสามารถที่คนอื่นมีอยู่แล้ว อย่างมากก็ทำได้เพียงเข้าใกล้อย่างต่อเนื่อง ยากที่จะก้าวข้ามได้จริง ภายใน Seed ยังใช้การตรวจจับผ่าน API และการกรองข้อมูลฝึก เพื่อจำกัดไม่ให้ผลลัพธ์จากโมเดลบุคคลที่สามเข้าสู่ชุดข้อมูลฝึก

เพื่อไล่ตามให้ทัน ByteDance ยังรับคนและรักษาคนอย่างต่อเนื่อง ปัจจุบัน Seed มีนักวิจัยและพัฒนาประมาณ 1,000 คน นำทีมโดยอู๋หยงฮุย ซึ่งจางอีหมิงดึงตัวมาจาก Google DeepMind เมื่อปีที่แล้ว ByteDance ยังเปิดตัวหุ้นเสมือน "หุ้น Doubao" ที่ผูกกับธุรกิจ Doubao โดยเฉพาะ พนักงานที่มีคุณสมบัติสามารถเลือกรับโบนัสสิ้นปีเป็นหุ้น Doubao เพื่อแบ่งปันผลตอบแทนจากการเติบโตของธุรกิจ

ByteDance วางแผนเปิดตัวผู้ช่วย AI ส่วนบุคคลที่คล้ายกับ Meta Muse ในอีกไม่กี่สัปดาห์ข้างหน้า ให้ผู้ใช้โต้ตอบกับ AI ผ่านเสียงและอวาตาร์เสมือน และให้มันทำงานแทนผู้ใช้ โครงการผู้ช่วยส่วนบุคคลภายในของ Doubao ที่มีชื่อรหัสว่า "Spell" เริ่มทดสอบภายในตั้งแต่เดือนเมษายนแล้ว แต่ภายหลังเนื่องจากเหตุผลต่างๆ เช่น การเปิดตัวโทรศัพท์ Doubao จึงยังไม่เปิดตัวอย่างเป็นทางการ หลังจาก Meta Muse กลายเป็นกระแสฮิต ByteDance ก็เร่งความคืบหน้า รีบพัฒนาก่อนช่วงวันหยุดชาติ โดยวางแผนผสาน Spell เข้ากับ Doubao ให้แนบแน่นยิ่งขึ้น