AR ve ChatGPT, çeviri ve transkripsiyon için harika bir kombinasyon olabilir
GÖRÜŞ: MWC 2023 salonlarını dolaşırken, Qualcomm’un referans AR kulaklık tasarımı ile uygulamalı çalışma fırsatı buldum. Donanım hala geliştirme aşamasında ve esas olarak üreticilere ve geliştiricilere odaklanmış olsa da, demo daha önce hiç düşünmediğim bir şeyi tanıttı: açık AI platformu ChatGPT’den yararlanmak.
Qualcomm, aslında tüketiciler için AR kulaklıkları üretmeyecek, ancak şirket, son birkaç yılda, esasen diğer şirketlerin kendi AR kulaklıklarını yaratmaları için bir plan görevi gören birkaç referans AR kulaklık tasarımı yayınladı.
Yavaş yavaş daha kompakt hale geliyorlar ve hantal Microsoft HoloLens’e daha az benziyorlar, ancak esasen aynı şekilde çalışıyorlar ve gerçek dünyayı sanal öğelerle zenginleştiriyorlar.
Üreticiler şimdiden bu teknolojiden yararlanmaya başlıyor – Nreal Air, erken dönem AR gözlüklerine iyi bir örnek – ancak ince AR gözlükleriyle tamamen artırılmış bir geleceğe girmeden önce daha gidilecek çok yol var. Örneğin, kullandığım kulaklık, kulaklıktan gelen tüm verileri işlemek için hala bir akıllı telefona kablolu bağlantı gerektiriyor.
Qualcomm’un süper hızlı bağlantı için Wi-Fi 7 kullanan Snapdragon XR2 yonga seti tarafından desteklenen en yeni AR Görüntüleyici Konsepti ile bu durum değişti – Qualcomm 10 ms’den daha az gecikme olduğunu iddia ediyor – ancak fuardaki çok sayıda kablosuz cihaz nedeniyle bu olmadı. demo yapmak mümkün.
Yine de, biraz daha eski Snapdragon XR1 referans kulaklığıyla biraz zaman geçirebildim ve tamamen ChatGPT tarafından desteklenen yeni bir gerçek zamanlı çeviri ve deşifre hizmeti sunuldu.
ChatGPT şu anda teknolojinin en sıcak konusu ve açık yapay zeka platformu, kod satırları oluşturmaktan uygulama geliştirmeyi hızlandırmaya ve çocukların ev ödevlerini yapmasına yardımcı olmaya kadar her şeyi yapabiliyor gibi görünüyor. Hatta ChatGPT’nin ABD’deki Tıbbi Lisanslama sınavının 1. adımını geçerek donanımın ne kadar etkileyici olduğunu gösteren bir hikayesi bile var.
Bunu göz önünde bulundurarak ChatGPT, doğal dil modellemeye odaklanan gerçek zamanlı transkripsiyon ve çeviri için ideal aday gibi görünüyor.
Kulaklık, (çok gürültülü) demo alanından sesi almak için özel bir mikrofon kullandı ve gözlüklerde söylenenleri neredeyse mükemmel bir şekilde kopyaladı ve birden fazla hoparlörü algılayacak ve konuşmacı 0, hoparlör ile transkripsiyonu aralarında bölecek kadar akıllı. 1 ve benzeri.
API işini yaparken hala hafif bir gecikme var, ancak bir veya iki saniye içinde, üç yönlü konuşmamın etkili bir şekilde canlı altyazılarını görüyordum.
Bu ilk bakışta biraz hileli gelebilir, ancak yalnızca çeviri için gerçek bir oyun değiştirici olabilir – yalnızca bir çift gözlük kullanarak biriyle farklı bir dilde konuşabildiğinizi hayal edin – ama tartışmasız daha da önemlisi, gerçek bir işitme engelliler için nimet. Gerçek zamanlı olarak etkili bir şekilde metne dönüştürme yeteneği, özellikle işaret dilini akıcı olmayan biriyle sohbet ederken, işitme güçlüğü olanlar için özgür olabilir.
Elbette, hepimiz ChatGPT özellikli transkripsiyon ve çeviri hizmetlerine sahip AR kulaklıkları takana kadar kat etmemiz gereken daha çok yol var, ancak bu, önümüzdeki birkaç yıl içinde piyasaya çıkmasını gerçekten beklememiz gereken şeyin cezbedici bir önizlemesi.
