Gerçek Zamanlı Altyazılar ve Çeviriler Görüntülü Sohbetin Geleceği Olabilir

Navi bir uygulamadır FaceTime aramalarınıza canlı altyazılar ve gerçek zamanlı çeviriler ekler.

Uygulama, FaceTime aramalarınıza 20 dilde altyazı ve çeviri eklemek için SharePlay ve yerleşik Konuşma Tanıma özelliğini kullanır. Çoğumuzun başka yerlerdeki insanlarla senkronize edilmiş filmleri izlemenin aldatıcı bir yolu olarak gördüğü SharePlay'in inanılmaz bir kullanımı. Henüz çevirmeninizi kovmanız gerekmeyebilir, ancak bunu iyi yapan bir uygulama delicesine faydalı olabilir.

Navi geliştiricisi, "FaceTime aramasından ses alamıyorum" diye yazıyor Jordi Bruin Twitter'da, "ancak bunu görüşmedeki katılımcılar arasında paylaşmak için SharePlay'i kullanmak."

PaylaşOynat

SharePlay, iOS 15'teki yeni bir özelliktir ve FaceTime aramalarındaki şeyleri paylaşmanıza ve senkronize etmenize olanak tanıyan macOS 12.1. Yukarıdaki film izleme örneğinde, örneğin siz FaceTime görüşmesinde sohbet ederken herhangi bir katılımcı filmi duraklatabilir veya oynatabilir. FaceTime videosu, küçük, kayan, resim içinde resim panelinde açık kalır ve her katılımcı, uygulamayı kendi cihazlarında yerel olarak çalıştırır. SharePlay'in hilesi, bu yerel uygulamalarda olup bitenleri senkronize etmektir, böylece bir film, bir Fitness+ antrenmanı veya bir elektronik tablo olsun, herkes deneyimi paylaşır.

Navi aynı teknolojiyi kullanır, yalnızca arama içi uygulama bir film değil, gerçek zamanlı bir çeviri motorudur. Kullanmak için, bir FaceTime görüşmesi sırasında uygulamayı başlatır ve 'Altyazıları Aç' düğmesine dokunun. Ardından, diğer katılımcılar da eyleme katılabilir ve mevcut konuşmacı için canlı altyazıları görebilir. Birisi monolog yapıyorsa, konuşma balonu büyür ve biraz daha uzun süre orada kalır.

Sağırlar için bu, insanları aramakla aramamak arasındaki fark anlamına gelebilir. Ve herkes için, aynı dili paylaşmayan insanlar arasında faydalı konuşmalar yapabileceğiniz anlamına gelir.

Evrensel Metin

İnternet metin üzerine kuruludur ve bu harika. Küçük ve oluşturması, okuması ve çevirmesi kolay. Sentezlenmiş konuşmaya dönüştürmek de kolaydır. Sonuç, herhangi bir yerden herhangi birinin herhangi bir konuşmaya katılabilmesidir. Görme veya işitme engelliler için iyi erişilebilirlik araçlarına sahip bir cihaz kullandığınız sürece, dil engel değildir, sağırlık veya herhangi bir körlük de değildir.

Ancak konuşulan kelimeyi işlemek çok daha zordur. Konuşmadan metne dikte etme etkileyicidir, ancak genel konuşma tanımanın genel kullanım için yeterince iyi hale gelmesi nispeten yakın zamandadır - Apple'ın Çeviri uygulaması buna iyi bir örnektir. iOS 15'te tanıtılan, gerçek zamanlı sesli çeviriler sunar. Yine de yurt dışı tatillerine gitseydik, mükemmel olurdu.

Artık videoları iş için ve arkadaşlarınızla ve ailenizle iletişimde kalmak için giderek daha fazla kullanıyoruz. Gelecekte nasıl çalışırsak çalışalım, görüntülü aramaların önündeki engel tamamen yıkıldı. Artık yaygın bir araçtır, ancak yazılı iletişim araçlarının inceliğinden pek yoksundur.

Gerçek zamanlı altyazılar ve çeviriler sunan Navi gibi bir şey önemli olabilir. Erişilebilirlik bir yönüdür, ancak dilini konuşmadığınız insanlarla sohbet etme yeteneği, uluslararası ticareti şaşırtıcı derecede açar.

Eylemde

Navi'yi uygulama geliştirici, yazar ve işitme cihazı kullanıcısı ile test ettim Graham Bower. Oldukça iyi ama kritik görevler için henüz hazır değil. Bazı çeviriler gülünç derecede kötüydü ve anlatılamayacak kadar bayağıydı. Konuşmamız devam ettikçe, konuşmasını doğru bir şekilde tanımak çok daha iyi oldu. Bu mantıklı çünkü iOS dikte motoru zaman içinde sesinize uyum sağlıyor.

Çeviri kalitesi girdinin doğruluğuna bağlı olsa da çeviri de işe yaradı.

Bu tür bir teknolojiyi gelecekteki Apple Gözlüklerine veya bu hafta üzerinde çalıştığı söylentileri ne olursa olsun AR/VR ürününe yansıtmak kolaydır.

Bower, konuşmamız sırasında "Bunun AR gözlüklerinde çalıştığını görebiliyorum" dedi. "Bazı insanlar, normal işitmeye sahip olsalar bile, filmlerde alt yazıları tercih ederler. Bu gerçek hayat için altyazı gibi olurdu."

Etkileyici bir teknoloji demosu olsa da, Navi henüz orada değil. Güvenilir iş kullanımı için, Apple'ın ilk konuşma tanıma özelliğinin çok daha doğru olması gerekecek. Ancak hız açısından sorun yok ve çeviriler de diğerleri kadar iyi.

Ama şimdi yoldayız ve bu tür şeyler sadece daha iyi olacak.