Skip to content Skip to navigation

İç Konuşmalarımızı Kelimelere Döken Cihaz

Dr. Tuba Sarıgül
24/04/2018 - 16:51

lorrie Lejeune/MIT

Massachusetts Teknoloji Enstitüsü’nden (MIT) araştırmacılar, geliştirdikleri yapay zekâ uygulaması ve kafaya takılan kulaklığa benzer bir cihaz yardımıyla iç konuşmalarımızı yazıya dönüştürmeyi başardı.

Bir şey okurken ya da gündelik işlerimizle ilgili bir plan yaparken kelimeleri sesli olarak söylemesek de kafamızın içinde duyabiliriz. Konuşma birçok karmaşık sürecin bir arada gerçekleşmesiyle ortaya çıkan bir işlev. Konuşmanın beynin Broca bölgesinde ortaya çıktığı düşünülüyor. Beyindeki tamamlayıcı motor alan (supplementary motor area) isimli bölge ise konuşma organlarının hareketini kontrol eder. Konuşma sırasında beyinden konuşma organlarına sinir sinyalleri iletilirken, sinir hücreleri ile kas iplikçiklerinin birleştiği noktalarda çeşitli kimyasal maddeler salgılanır ve bu bölgelerde bir elektrik sinyali oluşur. Bu değişim konuşma organlarımız aracılığıyla seslerin ortaya çıkmadığı iç konuşma sırasında da gözlenir. Ayrıca iç konuşmalar sırasında gırtlak ve yüzdeki bazı kasların, belirgin şekilde olmasa da, hareket ettiği biliniyor.

MIT araştırmacılarının geliştirdiği AlterEgo isimli sistem iki bileşenden oluşuyor. Kafaya takılan kulaklık benzeri cihazdaki elektrotlar, konuşma sırasında aktif olan yüzdeki ve çenedeki kasların hareketlerini kontrol eden sinir sinyallerini algılıyor. Geliştirilen yapay zekâ uygulaması ise bu sinyalleri analiz ederek sessiz konuşmadaki kelimeleri belirliyor.

İç konuşmalarımızı başarılı bir şekilde kelimelere dökebilen ve vücudun içine yerleştirilmesine gerek duyulmayan bir cihaz daha önce geliştirilmemişti. Araştırmacılar bunu başarabilmek için ilk olarak 16 elektrotu (elektrik sinyallerini algılayan bir cihaz) yüzün farklı bölgelerine yerleştirdi. Araştırmaya katılan denekler aynı kelimeyi birçok kez tekrarladı. Bu sırada elektrotlar oluşan sinir sinyallerini kaydetti. Araştırmacılar sonuçları inceleyerek bir kelime telaffuz edildiğinde yüzün hangi noktasında ayırt edici bir sinyal oluştuğunu tespit etti. Böylece ağzın ve çenenin etrafında giyilebilir bir cihazda kullanılabilecek ve hareketi zorlaştırmayan dört nokta belirlendi.

MIT Media Lab - ACM IUI 2018

Araştırmacılar sessiz konuşma sırasında oluşan sinyalleri kelimelere dönüştürecek yapay zekâ uygulamasını geliştirirken yapay sinir ağları yönteminden yararlandı. Başlangıçta çok sayıda kelime içermeyen konuşmalar analiz edildi. Sonuçta, geliştirilen sistem %92 doğrulukla sessiz konuşmaları kelimelere çevirebildi. AlterEgo sisteminin gelecekte daha karmaşık konuşmaları daha doğru şekilde kelimelere dönüştürebilmesi hedefleniyor.

Kafaya takılan cihazda ayrıca sesin kemikler aracılığıyla kulağa iletilmesini sağlayan bir kulaklık sistemi var. Böylece sistem tamamen sessiz olunması gereken ya da konuşmaların duyulmasının zor olduğu, çok gürültülü ortamlarda insanların birbirleriyle kolay bir şekilde iletişim kurmasını ve çeşitli hastalıklar nedeniyle konuşma yeteneğini sonradan kaybeden insanların diğer insanlarla “konuşmasını” sağlayabilir. Ayrıca insanların iç seslerini “duyabilen” AlterEgo sistemi sayesinde teknolojik cihazlarla herhangi bir fiziksel etkileşime ihtiyaç duymadan iletişim kurmak mümkün olabilir.

 

Kaynaklar:

İlgili İçerikler

Beyin ve Sinir Bilim

Dr. Tolga Çukur Ulusal Manyetik Rezonans Araştırma Merkezi’nde (UMRAM) manyetik rezonans görüntüleme teknikleri ile gerçekleştirdiği araştırmalarını anlatıyor.

 

Beyin ve Sinir Bilim

Sevgili gençler, Geçen ay sorduğumuz problemi hatırlayalım. Birincilik ödülü kazanmış bu problemde siyahın yapabileceği bütün hamlelere karşı beyazın “hazır” matları olduğunu görüyoruz.

Beyin ve Sinir Bilim

İtalya’da düzenlenen turnuvada büyük usta (GM) olma yolundaki son basamağı da tamamlayarak 12 yıl 10 ay 13 günlükken profesyonel satranç tarihinde bu unvanı alan en genç ikinci kişi oldu.

Beyin ve Sinir Bilim

Satranç köşesinde bu ay Haziran 2018 probleminin çözümüne ve Temmuz 2018 problemine yer veriyoruz.

Beyin ve Sinir Bilim

Kanada’daki McGill Üniversitesi’nde yapılan bir çalışmada araştırmacılar insanların beyninin ön kısmına sadece birkaç dakikalık manyetik uyarı vererek müzik beğenilerini değiştirebildiklerini keşfetti.

Beyin ve Sinir Bilim

Alzheimer hastalığına yakalanma ihtimali yüksek olan kişilerin beyinlerindeki değişimleri hastalığa teşhis konmadan on yıl önce tespit edebilen yapay zekâya dayalı bir teknik geliştirildi. Teknik, beyinden alınan manyetik rezonans (MR) görüntülerini kullanarak beynin farklı bölgelerinin ne şekilde bağlantılandığının belirlenmesini sağlıyor.

Beyin ve Sinir Bilim

Atların sosyal zekâya sahip olduğu bilinir. Geçmişte yapılan çalışmalar, atların insanların yüz ifadelerini anlayabildiğini göstermişti. Yakın zamanlarda Sussex ve Portsmouth üniversitelerinde çalışan bir grup araştırmacının yaptığı deneyler ve gözlemler, atların aynı zamanda duygusal hafızaya sahibi olduğunu, geçmişte gördükleri insanların duygusal hallerini hatırlayabildiklerini gösteriyor.

Beyin ve Sinir Bilim

Satranç köşesinde bu ay Mayıs 2018 probleminin çözümüne ve Haziran 2018 problemine yer veriyoruz.

Beyin ve Sinir Bilim

Yapılan bir araştırmada iştahı tetikleyen bir hormon olan grelinin yeni beyin hücrelerinin oluşumunu desteklediği ve onları yaşlanmanın etkilerinden koruduğu yönünde kanıtlar elde edildi. Açlık hormonu olarak da bilinen grelini mide boş olduğunda üretiyor. Birkaç saatliğine bir şeyler yemeyecek olsak grelinin kanımızdaki değeri yükseliyor.

Beyin ve Sinir Bilim

Güney Kaliforniya Üniversitesi’nden ve Wake Forest Baptist Tıp Merkezi’nden bilim insanları, beyin sinyallerini algılayan elektrotlar sayesinde kısa ve uzun süreli hafızayı güçlendirmeyi başardı.