Yapay zeka ve robotik alanında sorun olarak görülen bir hususla ilgili değerli bir çalışma yapıldı. Columbia Üniversitesi mühendislik araştırmacıları, konuşurken insan dudak hareketlerini taklit edebilen robot yüzü geliştirdi. Bu teknoloji, robotların konuşmayı yalnızca sesle değil, yüz sözleriyle birlikte daha doğal bir formda aktarmasını mümkün kılıyor.
Araştırma kapsamında oluşturulan robot, ses girişini tahlil ederek dudak motorlarını denetim eden bir yapay zeka sistemi kullanıyor. Sistem, insanların konuşmasıyla alakalı dudak hareketlerini modelleyip robotun yüzündeki 26 farklı aktüatörü (küçük hareket birimi) koordine ediyor. Böylelikle robot, farklı lisanlarda konuşabilmenin yanında, müzik söyleme üzere daha karmaşık seslerde dahi dudaklarını gerçek vakitli olarak eşleştirebiliyor.
Bu teknoloji, evvelden programlanmış kurallar yerine makine tahsili temelli bir modelden güç alıyor. Robot birinci kademede kendi yüzünü aynada izleyerek yüz ve dudak hareketlerini öğreniyor akabinde insan konuşmalarını içeren görüntüleri izleyerek dudak-ses bağını kavrıyor. Böylelikle ses girişlerine uygun dudak hareketlerini, evvelce tarifli hareket dizileri olmaksızın üretmeyi başarıyor.
Araştırmacılar, dudak senkronunun bugüne kadar robotik etkileşimde en zorlayıcı meselelerden biri olduğuna dikkat çekiyor. Zira insan irtibatının yaklaşık yarısı yüz mimikleri ve dudak hareketleriyle gerçekleşiyor; mekanik ve kısıtlı dudak hareketi, robotların beşere yakın etkileşim kurmasını zorlaştırıyor ve “tekinsiz vadi” tesirini güçlendiriyor. Tekinsiz vadi olarak isimlendirilen tesir sebebiyle robotlar bize cansız, geçersiz ve birçok vakit ürkütücü görünürler. Bunun en büyük sebebi ise mimiklerden mahrum olmaları ve dudakları hareket ettirmeden konuşmaları oluyor.
Bilim insanları, bu gelişmenin sırf konuşma değil, yüz sözleri ve duyusal bağlamlarla birlikte daha varlıklı bir insan-robot irtibatı sağlayacağını belirtiyor. Dudak senkronu yeteneğinin, sohbet robotları, toplumsal hizmet robotları, bakım ve eğitim robotları üzere alanlarda daha inandırıcı etkileşimlere önayak olabileceği tabir ediliyor.
GELECEĞİ NASIL OLACAK?
Geliştirilen model şu anda istenildiği kadar kusursuz çalışmıyor. Bilhassa “B” üzere kimi seslerde ve dudak büzülmesi gerektiren durumlarda güzelleştirilmesi gereken kısımlar var. Araştırmacılar daha gelişmiş motor denetimi ve daha yüksek eğitim verisiyle performansın vakitle artacağını düşünüyor.
Bu çalışma, robot yüzü ve ses ortasındaki temasta yeni bir adım olarak görülüyor ve geleceğin insansı robotlarının daha gerçekçi ve ikna edici konuşma marifetlerine sahip olmasına katkı sunuyor.
