高通เปิดตัว IMSDK 2.0: เชื่อมโยง AI เชิงสร้างสรรค์กับมัลติมีเดีย ผลักดันการพัฒนาแอปพลิเคชัน AI ระดับเอดจ์ให้เร็วขึ้น

動察 Beating AI ข่าวด่วน Qualcomm เปิดตัว Qualcomm Intelligent Multimedia SDK (IMSDK) 2.0 เปิดตัวกรอบการพัฒนา AI และมัลติมีเดียแบบรวมสำหรับแพลตฟอร์ม Qualcomm Dragonwing และ Linux Edge โดยมีเป้าหมายเพื่อลดความซับซ้อนของการรวมฟังก์ชันต่างๆ เช่น กล้อง วิดีโอและเสียง เซนเซอร์ การอนุมาน AI และการเชื่อมต่อคลาวด์ เพื่อเร่งการใช้งานผลิตภัณฑ์ เช่น กล้องอัจฉริยะ หุ่นยนต์ โดรน และ AI อุตสาหกรรม

IMSDK 2.0 เพิ่ม Python และ C++ Pipeline API พร้อมตัวสร้างแอปพลิเคชัน การอนุมาน AI เชิงสร้างสรรค์ ไมโครเซอร์วิสแบบคอนเทนเนอร์ ทักษะตัวแทนการเขียนโปรแกรม AI และฟีเจอร์ "เอกสารเป็นโค้ด" โดยนักพัฒนาสามารถสลับโมเดล AI ผ่านรันไทม์การอนุมานที่หลากหลาย เช่น QAIRT, ONNX Runtime และ TFLite โดยไม่ต้อง重构ไปป์ไลน์มัลติมีเดียทั้งหมด

Qualcomm ระบุว่า IMSDK 2.0 สร้างขึ้นบนสถาปัตยกรรม GStreamer และรวมปลั๊กอินเร่งความเร็วฮาร์ดแวร์ การถ่ายโอนข้อมูลแบบ zero-copy และความสามารถของไปป์ไลน์หลายสตรีมและหลายโมเดล รองรับแอปพลิเคชัน เช่น AI ภาพ LLM/VLM AI เสียง และการสร้างภาพจากข้อความ โดยไมโครเซอร์วิสแบบคอนเทนเนอร์ยังครอบคลุมการอนุมาน การวิเคราะห์ และบริการแพลตฟอร์ม พร้อมรองรับการเชื่อมต่อระดับองค์กร เช่น Kafka, MQTT, AWS IoT และ Azure IoT

นอกจากนี้ IMSDK 2.0 ยังแนะนำทักษะตัวแทนการเขียนโปรแกรม AI ซึ่งช่วยนักพัฒนาในการกำหนดค่าไปป์ไลน์ การเชื่อมต่อโมเดล การคอมไพล์ การดีบัก และการปรับใช้ผ่านภาษาธรรมชาติ Qualcomm ระบุว่า SDK นี้ถูกใช้โดยบริษัท เช่น Samsung, Amazon และ Bose ในการพัฒนาผลิตภัณฑ์ที่เกี่ยวข้อง