动察 Beating ข่าวด่วน AI นักพัฒนาอิสระ Wang Zan ได้เปิดซอร์สผู้ช่วย AI บน Android ชื่อ Mika ซึ่งสามารถควบคุมแอปอย่าง WeChat และ Xiaohongshu บนมือถือได้โดยตรง ช่วยผู้ใช้จัดระเบียบประวัติแชทและส่งข้อความ
ผู้พัฒนาได้สาธิตให้ Mika เลื่อนดูแชทกลุ่ม WeChat ในเบื้องหลัง สรุปประวัติแชท และยังส่งข้อความไปยังผู้ช่วยถ่ายโอนไฟล์ของ WeChat ได้ด้วย ตลอดกระบวนการ ผู้ใช้สามารถใช้แอปอื่นบนหน้าจอหลักต่อไปได้ ไม่จำเป็นต้องยกหน้าจอให้ AI
ผู้ช่วยมือถือ Doubao อาศัยสิทธิ์ระดับระบบที่ผู้ผลิตมือถือมอบให้ ส่วน Mika ใช้การดีบักไร้สายบน Android เพื่อเริ่มโปรเซสเสริมที่มีสิทธิ์ Shell สร้างหน้าจอเสมือนที่มองไม่เห็นบนมือถือทั่วไป ให้แอปอย่าง WeChat ทำงานบนนั้น AI อ่านปุ่ม ข้อความ และช่องป้อนข้อมูลผ่านบริการการเข้าถึง เพื่อดำเนินการคลิก ปัด และพิมพ์ เมื่อเจออินเทอร์เฟซที่ไม่สามารถระบุตัวควบคุมได้ จะใช้ OCR ภายในเครื่องหรือโมเดลภาพเพื่อดูภาพและดำเนินการ
การใช้งาน Mika ครั้งแรกต้องเปิดตัวเลือกนักพัฒนา จับคู่การดีบักไร้สาย และอนุญาตบริการการเข้าถึง โมเดลสามารถกำหนดค่า API ได้เอง และยังรองรับการเข้าสู่ระบบด้วยบัญชี ChatGPT ขณะทำงานไม่จำเป็นต้องเชื่อมต่อคอมพิวเตอร์ และเครื่องมืออย่าง Codex บนคอมพิวเตอร์ยังสามารถมอบหมายงานให้ผ่าน MCP ได้
สามารถใช้ฟังก์ชันข้ามแอปได้ตั้งแต่ Android 12 เป็นต้นไป เมื่อถึง Android 14 Mika สามารถใช้ความสามารถโฟกัสอิสระของหน้าจอเสมือน เพื่อไม่แย่งโฟกัสอินพุตของหน้าจอหลักขณะทำงานเบื้องหลัง
