Runway ฝึกหุ่นยนต์ด้วยวิดีโอจากอินเทอร์เน็ต ผลลัพธ์เกือบเทียบเท่าข้อมูลระดับมืออาชีพ

动察 Beating ข่าวด่วน AI，Runway เปิดตัวโมเดลหุ่นยนต์ Praxis-1，นำความสามารถในการฝึกโมเดลวิดีโอ AI มาใช้กับหุ่นยนต์จริง โดยจะเริ่มเรียนรู้จากการเคลื่อนที่ของวัตถุและวิธีการทำงานของมนุษย์จากวิดีโอทั่วไปจำนวนมาก แล้วเปลี่ยนประสบการณ์เหล่านั้นให้เป็นการเคลื่อนไหวของหุ่นยนต์

Runway ได้ทำการทดสอบการวางวัตถุ หลังจากฝึกด้วยวิดีโอจากอินเทอร์เน็ต หุ่นยนต์มีค่าความคลาดเคลื่อนเฉลี่ย 16.1 เซนติเมตร เมื่อเปลี่ยนมาใช้วิดีโอเทเลโอเปอเรชันของหุ่นยนต์ที่เก็บรวบรวมโดยเฉพาะ ค่าความคลาดเคลื่อนอยู่ที่ 16.0 เซนติเมตร การทดสอบทำทั้งหมด 93 ชุด ผลลัพธ์ของการฝึกทั้งสองวิธีแทบจะเสมอกัน

หากเส้นทางนี้สามารถขยายต่อไปได้ ข้อมูลที่ขาดแคลนที่สุดในการฝึกหุ่นยนต์อาจเพิ่มขึ้นหลายลำดับขนาดในทันที การเก็บข้อมูลด้วยการควบคุมหุ่นยนต์จากมนุษย์ต้องใช้อุปกรณ์ สถานที่ และแรงงาน แต่วิดีโอทั่วไปมีอยู่ทั่วอินเทอร์เน็ตอยู่แล้ว สิ่งที่ Runway ต้องการทำคือเปลี่ยนวิดีโอที่เดิมไม่สามารถควบคุมหุ่นยนต์ได้โดยตรง ให้กลายเป็นวัสดุฝึกสำหรับการเรียนรู้การเคลื่อนไหวของหุ่นยนต์

Praxis-1 ได้รับการทดสอบบนหุ่นยนต์หลายประเภทของ Noble Machines, Standard Bots และ Ultra รวมถึงแขนกล หุ่นยนต์สองแขน และหุ่นยนต์เคลื่อนที่ Runway ยังได้สาธิตการใช้นโยบายเดียวกันย้ายจากสตูดิโอไปยังห้องครัวเพื่อทำงานต่อ โมเดลในปัจจุบันเปิดรับเฉพาะการสมัครทดสอบช่วงแรกเท่านั้น น้ำหนักโมเดลมีแผนจะเปิดเผยในอีกไม่กี่เดือนข้างหน้า จำนวนพารามิเตอร์และการประเมินอิสระที่สมบูรณ์ยิ่งขึ้นยังไม่ได้รับการเปิดเผย