OmniPredict adı verilen bu sistem, insanların görsel ve bağlamsal ipuçlarını gerçek zamanlı olarak yorumlayarak niyetlerini anlama yeteneği sergiliyor. Yayaların davranışlarını öngören yeni teknoloji OmniPredict, yayaların nasıl davranacağını tahmin etmek için Çok Modlu Büyük Dil Modeli (MLLM) kullanan ilk sistem olma özelliğini taşıyor. İnsan Benzeri Sezgi ile Otonom Sürüş Daha Güvenli Hale Geliyor OmniPredict, gelişmiş sohbet…
OmniPredict adı verilen bu sistem, insanların görsel ve bağlamsal ipuçlarını gerçek zamanlı olarak yorumlayarak niyetlerini anlama yeteneği sergiliyor. Yayaların davranışlarını öngören yeni teknoloji OmniPredict, yayaların nasıl davranacağını tahmin etmek için Çok Modlu Büyük Dil Modeli (MLLM) kullanan ilk sistem olma özelliğini taşıyor.
OmniPredict, gelişmiş sohbet botlarında ve görüntü tanıma teknolojilerinde kullanılan alt yapıyı temel alarak, gördüğü sahneleri bağlamsal detaylarla eşleştirerek bir kişinin bir sonraki adımda ne yapacağını önceden kestiriyor. Dr. Srikanth Saripalli liderliğindeki ekip, sistemin araçlara insan benzeri bir sezgi kazandırarak otonom sürüşü daha güvenli hale getirmeyi amaçladığını belirtiyor. Yaya hareketlerini analiz eden sistem, özellikle yoğun kentsel ortamlarda otonom araçların daha akıcı ve güvenli hareket etmesini sağlayabilir.
OmniPredict; vücut duruşundaki değişiklikleri, tereddütleri veya stres belirtilerini okuyarak askeri operasyonlar ve acil durum müdahaleleri için de önemli bir araç olabilir. Sistemin, tehlikeli davranışları erkenden tespit ederek güvenlik personeline durumsal farkındalık ve hızlı karar verme yeteneği kazandırabileceği belirtiliyor.
OmniPredict, görsel algıyı davranışsal muhakeme ile birleştirerek yaya davranışı araştırmalarındaki en zorlu veri setleri üzerinde test edildi. Yapılan başarı testleri sonucunda, OmniPredict’in yüzde 67 doğruluk oranına ulaşarak en güncel modelleri yüzde 10 geride bıraktığı belirlendi. Yapay zeka, karmaşık senaryolarda dahi yüksek performans sergilemeye devam ediyor.
