يقوم البشر بأداء مهام تتضمن التلاعب بالمُدخلات بغض النظر عن كيفية إدراك الدماغ لهذه الإشارات، وذلك بفضل التمثيلات التي تظل ثابتة بغض النظر عن نوع المُثير. في هذه الورقة، نقدم مفككات شفرات مستقلة عن الوسائط تستفيد من هذه التمثيلات غير المعتمدة على نوع المُثير للتنبؤ بالمثير الذي يراه الشخص، بغض النظر عن الوسيط الذي يُعرض من خلاله المُثير. أصبح تدريب هذه المفككات المستقلة عن الوسائط ممكنًا بفضل مجموعة بيانات جديدة كبيرة النطاق من fMRI نطلق عليها SemReps-8K، وصدرَت علنًا مع هذه الورقة. تحتوي هذه المجموعة على بيانات من ستة أشخاص يشاهدون صورًا ووصفًا نصيًا قصيرًا لتلك الصور، بالإضافة إلى الحالات التي كان فيها الأشخاص يتخيلون مشاهد بصرية. وجدنا أن المفككات المستقلة عن الوسائط يمكنها الأداء بمستوى مماثل لمفككات الشفرات الخاصة بكل وسيط، بل وتتفوق عليها عند فك ترميز التعليقات التوضيحية والتخيل الذهني. علاوة على ذلك، كشفت تحليل البحث الضوئي عن أن مناطق واسعة من الدماغ تحتوي على تمثيلات غير معتمدة على الوسيط. هذه المناطق مناسبة بشكل خاص أيضًا لفك ترميز المشاهد البصرية من حالة التخيل الذهني.
درس نيكولاوس وآخرون (Fri,) هذا السؤال.