تبدیل امواج مغزی به جملات به کمک هوش مصنوعی

سیستم هوش مصنوعی جدیدی که پژوهشگران دانشگاه کالیفرنیا آن را توسعه داده‌اند، می‌تواند به‌طور دقیق افکار را به جمله تبدیل کند. این سیستم ممکن است ما را به بازگرداندن گفتار به افرادی که به‌علت فلجی این توانایی را از دست داده‌اند، نزدیک‌تر کند.

جوزف ماکین و همکارانش از الگوریتم‌های یادگیری عمیق برای مطالعه‌ی سیگنال‌های مغزی چهار زن هنگام صحبت کردن، استفاده کردند. زنان که همگی دچار صرع بودند، از قبل دارای الکترودهایی بودند که برای نظارت‌بر تشنج‌ها به مغز آن‌ها متصل شده بود. از هر کدام از این زنان خواسته شد تا مجموعه‌ای از جملات را با صدای بلند بخوانند و در همان زمان، پژوهشگران فعالیت مغز آن‌ها را اندازه‌گیری می‌کردند. بزرگ‌ترین گروه جملات حاوی ۲۵۰ کلمه‌ی منحصر‌به‌فرد بود.

پژوهشگران فعالیت مغز ثبت‌شده را به الگوریتم شبکه‌ی عصبی تغذیه کرده و آن را آموزش دادند تا الگوهای منظمی را که می‌توانست با جنبه‌های تکراری گفتار مانند صامت‌ها و مصوت‌ها مرتبط باشند، شناسایی کند. این الگوها سپس به شبکه‌ی عصبی دیگری تغذیه شد که سعی داشت آن‌ها را از شکل جمله به کلمات تبدیل کند. هر یک از زنان حداقل دو بار این جملات را تکرار می‌کردند ولی تکرار نهایی بخشی از داده‌های مرحله‌ی آموزش نبود و برای آزمایش سیستم از آن استفاده می‌شد. هنگام خواندن جملات یکسان به‌وسیله‌ی شرکت‌کنندگان، فعالیت مغزی همبسته با آن در افراد مختلف مشابه ولی کاملا یکسان نبود. ماکین می‌گوید:

بهترین عملکرد هوش مصنوعی در این آزمایش، متوسط خطای ترجمه‌ی ۳ درصد داشت. ماکین می‌گوید که استفاده از تعداد کمی جمله این امر را برای هوش مصنوعی ساده‌تر کرد که یاد بگیرد که معمولا کدام کلمات به‌دنبال هم می‌آیند. برای مثال هوش مصنوعی تنها با استفاده از فعالیت مغز توانست کشف کند که در این مجموعه جمله‌ها، کلمه‌ی Turner اغلب به‌دنبال کلمه‌ی Tina می‌آید.

پژوهشگران سعی کردند سیگنال‌های مغزی را به‌جای کل جملات، به کلمات واحد رمزگشایی کنند اما این مسئله حتی در مورد بهترین عملکرد، موجب ۳۸ درصد افزایش در خطا شد. ماکین می‌گوید:

این امر موجب می‌شود افزایش واژگان سیستم دشوار شود زیرا هر کلمه‌ی جدید تعداد جملات ممکن را افزایش داده و باعث کاهش دقت می‌شود. ماکین می‌گوید، ۲۵۰ کلمه نیز برای افرادی که نمی‌توانند سخن بگویند، مفید است. او می‌گوید:

 سوفی اسکات از کالج دانشگاهی لندن می‌گوید هنوز راهی طولانی به‌سمت توانایی ترجمه‌ی جامع‌ سیگنال‌های مغزی داریم. او می‌گوید:

 نتایج این مطالعه در مجله‌ی  Nature Neuroscience منتشر شده است.