मानव कोर्टिकल गतिविधि का उपयोग करके प्रश्न और उत्तर भाषण संवाद का वास्तविक समय में डीकोडिंग

स्वाभाविक संचार अक्सर संवाद में होता है, सुनने और बोलने के दौरान श्रवण और संवेदी-मोटर मस्तिष्क क्षेत्रों को भिन्नता से भाग लेते हुए। हालाँकि, मानव मस्तिष्क से सीधे भाषण को डीकोड करने के पहले के प्रयास आमतौर पर सुनने या बोलने के कार्यों को अलग-अलग मानते हैं। यहाँ, मानव प्रतिभागियों ने प्रश्नों को सुना और उत्तरों के साथ जोर से प्रतिक्रिया दी जबकि हमने उच्च घनत्व वाली इलेक्ट्रोकॉर्टीकोग्राफी (ECoG) रिकॉर्डिंग का उपयोग किया ताकि यह पता लगाया जा सके कि उन्होंने कब किसी अभिव्यक्ति को सुना या कहा और फिर उस अभिव्यक्ति की पहचान को डीकोड किया। क्योंकि कुछ उत्तर केवल कुछ प्रश्नों के लिए संभावित प्रतिक्रियाएँ थीं, हमने डीकोड की गई प्रश्न संभावनाओं का उपयोग करके प्रत्येक उत्तर की प्राथमिक संभावनाओं को गतिशील रूप से अपडेट किया। हमने उत्पादित और महसूस की गई अभिव्यक्तियों को क्रमशः 61% और 76% की सटीकता दर से डीकोड किया (संयोग 7% और 20% है)। डीकोड की गई प्रश्न संभावनाओं का संदर्भात्मक एकीकरण उत्तर डीकोडिंग में महत्वपूर्ण रूप से सुधार करता है। ये परिणाम एक संवादात्मक सेटिंग में भाषण की वास्तविक समय में डीकोडिंग को दर्शाते हैं, जिसका रोगियों के लिए महत्वपूर्ण मायने है जो संवाद करने में असमर्थ हैं।