Öğrenci, işaret dilini gerçek zamanlı olarak çeviren Yapay Zeka geliştirdi

Mevcut teknoloji senaryosunda hiçbir konu Yapay Zeka kadar yeni inovasyonlar hakkında spekülasyon yapılmıyor. İşte bu rekabetçi senaryonun ortasında, Rio de Janeiro'daki UFF'de istatistik öğrencisi olan Gabriel Sales, işaret dilini çeviren bir Yapay Zeka projesine liderlik ederek bir vizyoner olarak ortaya çıkıyor. Projesi, işaret dilini gerçek zamanlı olarak Portekizce'ye dönüştürmenin etkili bir yolunu sunarak, sağır ve işiten insanlar arasındaki iletişim engellerini aşmayı amaçlıyor.

Gabriel'e göre bu yapay zekanın temel amacı, topluluğa erişilebilirlik, bağımsızlık ve fırsatlar sağlayarak sağır insanların iletişim biçiminde devrim yaratmak. Halen geliştirilme aşamasında olan proje, sağır kişilerin videolardaki işaretlerini yorumlayarak bunları anında Portekizce'ye çevirebildiğini gösteriyor.

Sağır insanlar için yapay zeka nasıl çalışır?

Proje, amacına ulaşmak için üç farklı yapay zeka kullanıyor. İlk yapay zeka, vücuttaki önemli noktaları yakalayıp bunları bir videonun kareleri boyunca haritalandırmaktan sorumlu. Bu veriler daha sonra, yapılan spesifik sinyali tanımlayan bir sınıflandırıcı olan ikinci AI'ya gönderilir. En yeni yapay zeka, belirlenen sinyalleri bağlamsallaştırmak ve tahmin edilen sinyallerin listesini Portekizce okunabilir ve anlaşılır bir mesaja dönüştürmek için devreye giriyor.

Bu projenin potansiyeli çok büyük. Genel olarak, sağır insanlar ile Terazi burcunu yorumlamakta güçlük çeken kişiler arasındaki tüm iletişim, diyalogdaki gürültüyü çözecek simültane bir çeviri şeklinde basitleştirilecektir. IBGE'ye göre, etkili olması halinde teknoloji, Brezilya'da yaklaşık 10 milyon sağır vatandaşı, yani Brezilya nüfusunun yaklaşık %5'ini etkileyen çeşitli iletişim sorunlarını çözebilir.

Ancak Gabriel Sales, projesinde temel verilerin toplanmasında donanım ve kaynak sınırlamaları gibi zorluklarla karşı karşıya. Projenin araştırma ve geliştirme sürecini ilerletmek için daha güçlü bir bilgisayar, yüksek kaliteli kameralar ve kaynaklar elde etmek için katkı arıyor. Vakinha çevrimiçi.

Yalnızca Gabriel Sales tarafından yönetilen proje, yalnızca onun teknolojiye olan tutkusunu yansıtmakla kalmıyor, aynı zamanda yapay zekanın önemli toplumsal etkiye sahip yenilikçi çözümler yaratma gücünü de vurguluyor. Instagram'da AI güncellemeleriniz hakkında videolar yayınlamak, @projeto_ia_librasGabriel, gönderilerine binlerce görüntülemenin yanı sıra şimdiden 86,1 binden fazla takipçi kazandı.

Yapay zekanın yaratıcısıyla röportaj

İşaret dilini içeren diyalogların gerçek zamanlı transkripsiyonunda bu yapay zekanın işlevselliğini daha iyi anlamak için, projenin programcısı ve yaratıcısı istatistik öğrencisi Gabriel Sales ile röportaj yaptık.

Projenin arkasındaki programcı ve UFF istatistik öğrencisi kimdir? Peki bu fikre nasıl ulaştınız?

Gabriel'in Satışı: Adım Gabriel, Rio de Janeiro'luyum. Teknolojiye meraklı bir öğrenciyim. İlk bilgisayarıma on yaşımdayken sahip oldum ve o andan itibaren bilişimin bu alanına girdim. On iki yaşımdan beri programlama okumaya başladım ve veri bilimine ulaşana kadar ilerledim. Alanı keşfettiğimde gerçekten harika olduğunu düşündüm, özellikle de robotların neredeyse insan gibi düşündüğü yapay zeka kısmı beni çok etkiledi. Ve böylece bu konuları incelemeye başladım. İstatistik, veri bilimi için önemli bir temel olduğundan UFF'de istatistik fakültesine girdim. Ve yapay zekanın bu alanında yolculuğuma başladım.

Yapay zekayı daha derinlemesine araştırmaya başladım, birkaç küçük proje yapmaya başladım. Geçen yılın ilk döneminde üniversitemde Terazi burcu dersim vardı ve öğretmenin hikayesinden çok etkilendim, çünkü kendisi hikayesinde bahsettiği tüm zorluklara rağmen sağırdı ve doktor olmayı başardı.

Böylece onlara yardım etmek için bu topluluk için ilginç ve kapsayıcı ne yapabileceğimi düşünmeye başladım. Daha sonra Terazi alfabelerini sınıflandırabilecek bir yapay zeka fikriyle işe başladım. Tür: a harfi, b harfi, c harfi vb. Bütün bunlar video aracılığıyla. Bu benim ilk fikrimdi, bunun ne kadar zor, ne kadar karmaşık olacağını görmeye yönelik ilk testimdi ve sonra geliştim, sağlam sinyaller eklemeye ve yapay zeka bilgisini geliştirmeye başladım.

Projenizi nasıl tanımlarsınız? Bununla özellikle işitme engelliler için mevcut gerçeklikte neyi değiştirmeyi düşünüyorsunuz?

Gabriel'in Satışı: Temel amaç, sağır ve işiten insanlar arasındaki iletişimde devrim yaratmaktır çünkü bu insanlar arasında çok büyük bir engel vardır. Çünkü sağır insanlarla iletişim kurabilmek için mutlaka Terazi burcunu bilmeniz gerekiyor, dolayısıyla bu yapay zeka sistemine sahip olarak bu engeli bir nebze olsun kırabilirsiniz. Bunu şirketlerde, müşteri hizmetlerinde, dijital erişilebilirlikte uygulayabiliriz. Sağır müşteri oraya gider ve ne istediğini açıkça söyleyebilir. Bir şey satın almak istiyorsa, herhangi bir özel yardıma ihtiyacı varsa, Libra tercümanına ihtiyaç duymadan her şey yapay zeka ile dijital olarak yapılabilir.

Ayrıca hastanelerde, acil durumlarda, kişinin acil bakıma ihtiyaç duyduğu ve bazen Terazi dilini konuşmayı bilen birinin bulunmadığı durumlarda, değil mi? Bazen kan grubunu bilmeniz gerekir, herhangi bir hastalığı olup olmadığını veya buna benzer bir şeyin olup olmadığını bilmeniz gerekir ve bu sistemle bu da mümkün olabilir.

Eğitimde de Terazi burcunu öğretmek için eğitimdeki bu sistem öğrencilerin işaretlerini doğru yapıyorsa, iyi öğreniyorsa doğruluğunu test etmede çok etkili olacaktır. Ve hepsi konuşma yeteneğine sahip olmayan sağır öğretmenler için bile, çünkü konuşma yeteneğini geliştirebilen ancak hepsinin yapamadığı bazı sağır insanlar var, sistem bu durumda da faydalı olacaktır. Yani yapılabilecek birçok uygulama var.

Bu yapay zekanın nasıl çalıştığını nasıl tanımlıyorsunuz?

Gabriel'in Satışı: Üç AI var. Biri vücudun kilit noktalarını yakalayacak, böylece kişinin tüm vücudunu, yüzünü, omuzunu, dirseğini, ellerini, parmaklarını çerçeveler boyunca haritalandıracak, çünkü bunu video. Yani bu haritalama çerçeveler boyunca yapılacaktır. Daha sonra bir sınıflandırıcıya aktarılacaktır. Bu verileri vücudun kilit noktalarından itibaren sınıflandıracak ve size hangi seçeneğin olduğunu söyleyecektir.

Ve sonuncusu işaretlerin bağlamı nedeniyle. Yani vücut haritasını geçtikten sonra, hangi burç olduğunu sınıflandırdıktan sonra, planlanan burçlar listesine katılacak ve bunu bir mesaja, anlaşılabilecek doğal bir mesaja dönüştürecek. Yani bu, ikinci yapay zeka tarafından halihazırda öngörülen sinyallerin bağlamını bir araya getirecek.

Bir bütün olarak projeniz benzersiz mi yoksa sağır insanlara bu şekilde yardımcı olmak için yapay zekayı içeren benzer projeleriniz var mı?

Gabriel'in Satışı: Mutlaka benzer projeler olmalı. Ancak belki de Brezilya'daki yatırım eksikliğinden dolayı hiçbiri başarılı olamadı. Özellikle teknolojiye kolay erişim nedeniyle insanlar ülke dışına çıkmak zorunda kalıyor. Ama geliştirilir mi bilmiyorum (başka projeler), prototipler olabilir.

Kasım 2023'te Showmetech, Lenovo'nun 2024'te işaret dilini yorumlayabilen ve çevirebilen bir yapay zekayı piyasaya sürmeyi planladığını bildirdi.

Bu durumda projenizin size göre en büyük farkı nedir?

Gabriel'in Satışı: Ölçeklenebilirlik, yatırımla çok kolay ölçeklenebilir ve daha hızlı geliştirilebilir... Temel fark, sağır insanlar için iletişim engelini aşmamızdır, çünkü bu eğitime, ekonomiye, kültüre, politikaya yardımcı olacaktır.

Proje ölçeğini oluşturmak için neye ihtiyacınız var?

Gabriel'in Satışı: Veriye ihtiyacım var çünkü yapay zekanın eğitilmesi için videolara ihtiyacı var... Bu bir çocuğa öğretmek gibi, sinyalin ne olduğunu göstermemiz ve anlayana kadar bunu birkaç kez tekrarlamamız gerekiyor. Ayrıca hepsini işleyecek ekipman da var, çünkü bir büyük Veri bu taraftan.

Gabriel, diğer insanların projenin gelişimine destek olabilmesi için 2023'ün sonunda bir Vakinha'yı piyasaya sürdü.

Projeyle ilgili sonraki adımlarınız neler?

Gabriel'in Satışı: Bir süredir ortak şirket arıyorum, web sitemde bana yardımcı olan bir şirket var. Ve şimdi bu pazardaki bazı etkili insanlarla bir ortaklık arıyorum, belki bir startup açabilirim, yatırımcı bulabilirim ve daha sonra daha kolay ölçeklenebilirim. Buradaki fikir, bunu müşterilerine sunmak için dijital erişilebilirliğe sahip olmak isteyen şirketlere satış yapmaktır.

Yapay zekanızı "çalıntıdan" nasıl korursunuz?

Gabriel'in Satışı: Yapay zeka söz konusu olduğunda intihal yapmak zordur. Benzer bir şey yapabilirsiniz ama aynısı çok zordur. Bu, Elon Musk'un ChatGPT'ye benzer bir yapay zeka yapması gibi, yapabilir, ancak her ikisinin de farklı yanıtları olacaktır. Çünkü buna müdahale eden şey mevcut verilerdir ve pound cinsinden kıttır. Veri toplamaya yatırım yapılması gerekiyor.

Yapay zekanın sinyalleri pound cinsinden doğru yorumladığını anlamak için hangi testlerden geçiyorsunuz?

Gabriel'in Satışı: Gerçek zamanlı testler yapıyorum, doğruluğunu kontrol etmek için farklı sinyaller veriyorum. Üniversitede ders sırasında öğrendiğim pound cinsinden az bilgiyi, yapay zeka eğitimini geliştirmek için internetten uyguluyor ve videolar izliyorum.

Şunu da görün:

Kaynaklar: Milne, Forbes e Akıllı tıklama.

Tarafından gözden geçirildi Glaukon Hayati 18/1/24 tarihinde.