Apple, Columbia Üniversitesi ile birlikte görme engelli bireylerin şehir hayatında karşılaştığı zorlukları azaltacak yeni bir teknoloji geliştirdi. SceneScout adı verilen bu yapay zekâ destekli sistem, kullanıcıların günlük yaşamda daha bağımsız hareket etmesine katkı sağlamayı hedefliyor.
Henüz araştırma aşamasında olan SceneScout, Apple Haritalar’dan elde edilen panoramik sokak görüntülerini analiz ederek detaylı metin açıklamalarına dönüştürüyor. Bu sayede görme engelli ve az gören bireyler, bilmedikleri bir bölgeye gitmeden önce çevre hakkında kapsamlı bilgi sahibi olabiliyor.
Sistemin rota önizleme modu ve sanal keşif modu olacak şekilde iki ana kullanım modu bulunuyor.
Rota Önizleme modu, yürüyüşe başlamadan önce kaldırım durumu, kavşak yapıları ve otobüs durakları gibi kritik bilgileri kullanıcıya sunuyor. Sanal Keşif modu ise kişilerin ilgilendikleri bir çevreyi sanal olarak gezmesine ve sokakları detaylı betimlemelerle tanımasına olanak tanıyor.
SceneScout, GPT-4o tabanlı yapay zekâ modeli sayesinde sokak manzaralarını kısa, orta ve uzun açıklamalar halinde sesli ya da yazılı olarak aktarabiliyor. Ayrıca web arayüzü, ekran okuyucu kullanan bireyler için erişilebilirlik standartlarına uygun olarak tasarlandı.
Yapılan ilk testlerde, sistemi deneyen 10 görme engelli kullanıcı özellikle Sanal Keşif modunun faydalı olduğunu belirtti. Ancak test sonuçlarında, açıklamaların %72’sinin doğru olduğu tespit edildi. Bazı betimlemelerde örneğin, sesli sinyal bulunmayan geçitlerde bu özelliğin varmış gibi gösterildiği ya da sokak tabelalarının yanlış tanımlandığı görüldü.
Apple ve Columbia Üniversitesi, SceneScout’un doğruluk oranını artırmak için çalışmalarını sürdürüyor.
Yorumlar kapalı.