Google ประกาศเปิดตัวฟีเจอร์ใหม่ Guided Vision บนระบบ Gemini Live สำหรับอุปกรณ์ Android ที่รองรับอย่างเป็นทางการ โดยเทคโนโลยีนี้จะใช้ปัญญาประดิษฐ์ในการวิเคราะห์และบรรยายรายละเอียดของสิ่งต่าง ๆ ที่กล้องสมาร์ตโฟนจับภาพอยู่ให้ผู้ใช้งานฟังเป็นเสียงแบบเรียลไทม์ ออกแบบมาเพื่อช่วยเหลือผู้พิการทางสายตาและผู้มีปัญหาทางการมองเห็นในการใช้ชีวิตประจำวันได้อย่างสะดวกยิ่งขึ้น
ฟีเจอร์ Guided Vision สามารถทำงานร่วมกับแอปพลิเคชัน Gemini และระบบเข้าถึงบริการสำหรับผู้พิการอย่าง Google TalkBack รวมถึงสามารถตั้งค่าเป็นปุ่มลัดในเมนูการเข้าถึง (Accessibility) บนอุปกรณ์ที่รันระบบปฏิบัติการ Android 9 ขึ้นไปได้ทันที โดยความสามารถหลักประกอบด้วยการอ่านข้อความขนาดเล็ก การบรรยายสภาพแวดล้อมรอบตัว การช่วยค้นหาหรือระบุวัตถุ ตลอดจนการอธิบายรายละเอียดเฉพาะของสิ่งของนั้น ๆ นอกจากนี้ ผู้ใช้ยังสามารถถามคำถามเพิ่มเติมกับ Gemini ได้ เช่น การขอให้อ่านวันหมดอายุบนบรรจุภัณฑ์สินค้าที่ระบบเพิ่งช่วยค้นหาให้
การทำงานของระบบจะมีการแจ้งเตือนด้วยเสียง (Audio Cues) เพื่อช่วยให้ผู้ใช้งานปรับมุมกล้องให้ตรงกับวัตถุหากสิ่งนั้นไม่ได้อยู่ในเฟรมภาพ อย่างไรก็ตาม Google ได้ออกคำเตือนอย่างชัดเจนว่า ผู้ใช้ไม่ควรพึ่งพาฟีเจอร์ Guided Vision สำหรับการนำทาง การเดินทางอย่างปลอดภัย หรือการตรวจจับสิ่งกีดขวาง และห้ามใช้ฟีเจอร์นี้ทดแทนไม้เท้าขาวหรืออุปกรณ์ช่วยเดินอื่น ๆ โดยเด็ดขาด ทั้งนี้ ฟีเจอร์ดังกล่าวเริ่มเปิดให้ใช้งานแล้วในกลุ่มอุปกรณ์ Pixel และ Android รุ่นที่รองรับ
