Block, insan konuşmalarıyla eğitilen yapay zekasını tanıttı
Jack Dorsey’nin şirketi Block tarafından geliştirilen Dessa, herhangi bir metin verisi veya önceden eğitilmiş model kullanılmadan yalnızca insan konuşmalarından eğitildi.
Twitter’ın kurucu ortaklarından Jack Dorsey’nin yönettiği Block, insanlarla daha doğal ve gerçek zamanlı konuşmalar yapabilen Dessa adlı ses tabanlı yapay zeka modelini tanıttı. Şirkete göre model, metin verisi veya önceden eğitilmiş modeller kullanılmadan tamamen insan konuşmalarından sıfırdan eğitildi. Dessa, aynı anda hem dinleyip hem konuşabilmesiyle geleneksel sesli asistanlardan ayrılıyor.
Metne ihtiyaç duymadan konuşmayı öğreniyor
Birçok mevcut sesli yapay zeka sistemi, kullanıcının konuşmasını önce metne çeviriyor, bu metni işleyerek yanıt oluşturuyor ve yanıtı sese dönüştürüyor. Bu süreçte konuşmanın tonu, duygusal nüanslar ve doğal ritim gibi ayrıntılar kaybolabiliyor.
Block’un geliştirdiği Dessa ise doğrudan ses girdisiyle çalışıp ses çıktısı üreten bir yapıya sahip. Şirket, modelin eğitiminde herhangi bir metin verisi veya önceden eğitilmiş model kullanılmadığını belirtiyor. Böylece Dessa’nın, insanların dili yalnızca dinleyerek öğrenmesine benzer bir yaklaşımla geliştirildiği ifade ediliyor.
Dessa’nın öne çıkan özelliklerinden biri, full-duplex olarak adlandırılan çalışma biçimi. Bu teknoloji sayesinde model, kullanıcı konuşmasını bitirene kadar beklemek yerine aynı anda dinleyip konuşabiliyor. Kullanıcı sözünü kestiğinde tepki verebilmesi, konuşma sırasında kısa geri bildirimler sunabilmesi ve karşılıklı diyaloğun ritmine uyum sağlaması hedefleniyor.
Block’un yayımladığı örneklerde Dessa, sesli tahmin oyunları oynuyor, filmler hakkında sohbet ediyor ve OpenAI’ın GPT-Live-1 ses modeliyle konuşuyor. Bazı demolar oldukça doğal bir etkileşim izlenimi verirken model zaman zaman konuştuğu kişiyi yanlış tanıyabiliyor veya konudan uzaklaşabiliyor. Dolayısıyla gösterimler, sistemin henüz kusursuz bir konuşma deneyimi sunmadığını da ortaya koyuyor.
Block’un açıklamasına göre Dessa, M4 Max işlemcili MacBook Pro veya daha güçlü donanımlarda yerel olarak çalışabiliyor. Şirket, modelin çıkarım işlemlerini gerçek zamanlıdan daha hızlı gerçekleştirebildiğini de belirtiyor. Bununla birlikte modelin boyutu, bağımsız performans testleri ve farklı donanımlardaki gecikme değerleri henüz açıklanmış değil.
Dessa şimdilik araştırma ön izlemesi aşamasında bulunuyor. Block, modeli öncelikle küçük bir yapay zeka güvenliği araştırmacısı grubunun erişimine sunmayı planlıyor.