پردازش مغز صداها برای درک مکالمه

مغز چگونه صداها را به مکالمه تبدیل می‌کند؟

شناسایی این مسیرها نه تنها درک ما از ارتباطات انسانی را عمیق‌تر می‌سازد، بلکه زمین را برای پیشرفت‌های تحول‌آفرین در فناوری گفتار و ابزارهای ارتباطی هموار می‌کند.

به نقل از مدیکال‌اکسپرس، این پژوهش لایه‌های آکوستیک، گفتاری و واژگانیِ زبان را بررسی می‌کند و درک بی‌سابقه‌ای در مورد نحوه پردازش مغز گفتار روزمره در محیط‌های واقعی ارائه می‌دهد.

در این مطالعه، فعالیت مغز در طول بیش از ۱۰۰ ساعت مکالمه طبیعی با استفاده از روش الکتروکورتیکوگرافی (ECoG) ثبت شده است.

برای تحلیل این داده‌ها، محققان از مدل تبدیل گفتار به متن «ویسپر» (Whisper) بهره گرفتند که زبان را در سه سطح تجزیه می‌کند: صداهای ساده، الگوهای گفتاری و معنای کلمات. سپس این لایه‌ها با کمک مدل‌های محاسباتی پیشرفته با فعالیت‌های مغزی تطبیق داده شدند.

نتایج نشان داد که این چارچوب می‌تواند فعالیت مغز را با دقت بالا پیش‌بینی نماید. حتی وقتی مدل بر روی مکالمه‌هایی که بخشی از داده‌های اصلی نبوده‌اند اعمال می‌شود، همچنان مناطق مختلف مغز را به توابع زبانی خاص متصل می‌کند. به عنوان مثال، نواحی درگیر شنیدن و گفتار با الگوهای صدا و گفتار هم‌خوانی داشتند، در حالی که مناطق مربوط به درک سطح بالاتر با معانی کلمات هم‌سو بودند.

این مطالعه آشکار کرد که مغز زبان را در یک توالی پردازش می‌کند. پیش از گفتار، مغز از تفکر در مورد کلمات به ساخت صداها حرکت می‌کند، در حالی که پس از شنیدن، فرآیند معکوس رخ می‌دهد تا مفهوم کلمات شنیده‌شده فهمیده شود. چارچوب مورد استفاده در این تحقیق نسبت به روش‌های قدیمی‌تر در ثبت این فرآیندهای پیچیده موثرتر بوده است.

یافته‌های ما به درک این موضوع کمک می‌کند که مغز چگونه مکالمات را در شرایط واقعی مدیریت می‌کند. با اتصال لایه‌های مختلف زبان، مکانیزمِ کاریِ طبیعیِ ما — یعنی گفتن و درک یکدیگر — کشف می‌شود.

این تحقیق کاربردهای عملی بالقوه‌ای دارد، از بهبود تکنولوژی‌های تشخیص گفتار تا توسعه ابزارهای بهتری برای افرادی که با چالش‌های ارتباطی روبرو هستند. این درک نوین نشان می‌دهد که چرا مغز مکالمه را به apariencia ساده انجام می‌دهد.

این مطالعه گامی مهم به سمت ساخت ابزارهایExtended برای مطالعه نحوه مدیریت زبان در موقعیت‌های دنیای واقعی توسط مغز است.