تعزيز الكلام المرئي المتزامن للتماثل القشري مع الكلام السمعي المستمر في ظروف خالية من الضوضاء

يعزز الكلام السمعي المرئي المتزامن قدرتنا على فهم المتحدث، حتى في ظروف خالية من الضوضاء. عندما يتم تقديم معلومات سمعية ومرئية غير متطابقة في وقت واحد، يمكن أن تعيق إدراك المستمع وتجعلهم يتصورون معلومات لم تُعرض في أي من الصيغتين. غالبًا ما تركز الجهود للتحقيق في الأساس العصبي لهذه التأثيرات على الحالة الخاصة من المقطوعات السمعية المرئية المنفصلة التي تتوافق زمنياً ومكانيًا، مع قلة العمل على حالة الكلام الطبيعي المستمر. أظهرت الدراسات الكهربية الحديثة أن قياسات الاستجابة القشرية للكلام السمعي المستمر يمكن الحصول عليها بسهولة باستخدام طرق التحليل المتغيرات المتعددة. هنا، نطبق مثل هذه الطرق على حالة الكلام السمعي المرئي، ومن المهم أن نقدم إطار عمل جديد لفهرسة التكامل المتعددي الحواس في سياق الكلام المستمر. على وجه التحديد، نقوم بدراسة كيف يؤثر التوافق الزمني والسياقي للكلام السمعي المرئي المستمر على تشفير القشرة لغطاء الكلام في البشر باستخدام تخطيط الدماغ الكهربائي. نوضح أن التمثيل القشري لغطاء الكلام يتحسن من خلال تقديم الكلام السمعي المرئي المتزامن في ظروف خالية من الضوضاء. علاوة على ذلك، نوضح أن هذا يرجع على الأرجح إلى مساهمة مولدات عصبية ليست نشطة بشكل خاص أثناء التحفيز أحادي الصيغة والتي تكون أكثر وضوحًا عند المقياس الزمني المقابل لمعدل المقطع (2-6 هرتز). أخيرًا، تشير بياناتنا إلى أن الانسجام العصبي مع غطاء الكلام يتعطل عندما تكون التدفقات السمعية والمرئية غير متوافقة زمنيًا وسياقيًا. بيان الأهمية: رؤية وجه المتحدث أثناء حديثه يمكن أن تساعد كثيرًا في فهم ما يقوله المتحدث. وذلك لأن حركات وجه المتحدث تنقل معلومات حول ما يقوله المتحدث، ولكن أيضًا، وبشكل مهم، متى يقوله. كان من الصعب منهجيًا دراسة كيف يستخدم الدماغ هذه العلاقة الزمنية لدمج المعلومات من الكلام السمعي والمرئي المستمر. هنا نقدم نهجًا جديدًا للقيام بذلك باستخدام تسجيلات غير مكلفة نسبيًا وغير جراحية. على وجه التحديد، نوضح أن تمثيل الدماغ للكلام السمعي يتحسن عندما يتشارك الإشارة المرئية المرافقة نفس التوقيت. علاوة على ذلك، نوضح أن هذا التحسن يكون الأكثر وضوحًا عند مقياس زمن يتوافق مع متوسط طول المقطع.