Sonilo, üretken ses modelleri için 11 milyon dolar yatırım aldı

Sonilo’nun merkezi San Francisco’da. Şirket, temel teknolojisini “Sound World Model” olarak adlandırıyor.

Şirkete göre bu teknoloji, video anlama ile ses üretimi ve zamanlamayı birleştiren çok modlu bir sistem olarak tasarlandı. Sistem, müzik ve efektleri bağımsız parçalar gibi ele almak yerine sahnedeki hareketi ve duygusal değişimleri okuyup görüntüye özel ses üretiyor.

Video yükle, ses bandı üret

Sonilo’da kullanıcılar bir video klibi yükleyerek, metinle tarif yazarak veya ikisini birleştirerek ticari kullanıma hazır, senkronize bir müzik ve ses bandı oluşturabiliyor. Sonilo CEO’su ve kurucu ortağı Shawn Song, sistemin görüntüyü kare kare anlayıp sahnenin temposu, duygusu ve hikâyesine uygun müzik ve ses efektleri ürettiğini söyledi.

Platformun kısa biçimli video ve kısa dramalar üreten içerik üreticilerini, yapay zekâ video araçları geliştiren platformları ve kurumsal prodüksiyon ekiplerini hedeflediği belirtildi. Platformda dudak senkronlu yapay zekâ dublajı özelliği bulunduğu, bu özelliğin kısa drama ekipleri ve içerik stüdyolarının videoyu kurgu sonrası süreçte elle düzenleme yapmadan başka dillere yerelleştirmesine imkân verdiği aktarıldı.

Kullanıcılar, video ve metinle ticari kullanıma hazır senkronize bir müzik ve ses bandı oluşturabiliyor.

Ortaklıklar ve lisans planı

TapNow’un ve ComfyUI’nin erken dağıtım ortakları olarak anlaşma yaptığı belirtildi. B Capital genel ortağı Daisy Cai, Sonilo’nun metinle tarif ederek veya video vererek sahneye uyan müzik ve ses efektleri üretmeye imkân tanıdığını söyledi.

Haklar tarafında Shutterstock’ın erken dönem lisanslama ortağı olduğu belirtildi. Sonilo, modellerinin lisanslı müziklerden öğrendiğini, sanatçılar ve hak sahiplerinin lisans ücretine ek olarak gelirden pay aldığını açıkladı. Şirketin büyük hak kuruluşlarıyla yayıncılık ve master kayıt anlaşmalarını tamamlamak üzere olduğu ve bu anlaşmaları haftalar içinde sonuçlandırmayı beklediği bildirildi.