גוגל משיקה את Guided Vision ב-Gemini Live, תיאור קולי בזמן אמת למצלמת הטלפון

מה הושק ואיפה

גוגל הפעילה החל מאתמול את Guided Vision בתוך Gemini Live במכשירי אנדרואיד תואמים. הפיצ'ר משתף את המצלמה עם המודל ומחזיר תיאור קולי בזמן אמת של מה שהעדשה קולטת, טקסט קטן, עצמים בסביבה, פרטים על אובייקט מסוים. ההשקה הגיעה כחלק מעדכוני פיקסל אחרונים.

איך זה עובד בפועל

כשהמצלמה משותפת, אפשר לבקש מ-Gemini להקריא תאריך תפוגה על מוצר שזוהה, לזהות חפץ שהלך לאיבוד או להסביר מה כתוב בשלט רחוק. אם האובייקט המבוקש לא בפריים, המודל מנחה בקול איך לכוון את הטלפון. אפשר גם לשאול שאלות המשך על מה שנראה, והשיחה נשארת רציפה בלי צורך להפעיל מחדש.

למי זה מיועד, והשוואה לאפל

הכלי תוכנן מלכתחילה לאנשים עם עיוורון או לקות ראייה, וגם למי שזקוק לסיוע נקודתי בסיטואציות מסוימות. הקונספט מקביל ל-VoiceOver Live Recognition שאפל הוסיפה לאייפון ול-Vision Pro, זיהוי סצנה בזמן אמת והקראתה, רק שהמימוש של גוגל יושב בתוך Gemini Live ולא כפיצ'ר מערכת נפרד.

זמינות: אפליקציה, TalkBack וקיצור דרך

מעבר לאפליקציית Gemini, Guided Vision נגיש גם דרך Google TalkBack, ומי שמעדיף גישה מהירה יכול להגדיר קיצור נגישות בהגדרות המערכת. הדרישה המינימלית היא אנדרואיד 9 ומעלה, כך שטווח המכשירים התומכים רחב יחסית.

המגבלות שגוגל מציינת במפורש

גוגל מבהירה שהפיצ'ר אינו תחליף למקל נחייה, אינו מיועד לניווט, להכוונת נסיעה בטוחה או לזיהוי מכשולים. האזהרה מופיעה במסמכי ההשקה ונועדה למנוע הסתמכות יתר על תיאור קולי שאינו מובטח כמדויק בסביבות דינמיות.