هل النماذج اللغوية الكبيرة على دراية بالبيانات الجغرافية؟

على الرغم من الأداء الم impressive للنماذج اللغوية الكبيرة (LLM) في المهام المختلفة لمعالجة اللغة الطبيعية، إلا أنه قليل ما هو معروف عن فهمها للبيانات الجغرافية وقدرتها ذات الصلة على تسهيل اتخاذ قرارات جغرافية مستنيرة. تبحث هذه الورقة في مدى المعرفة الجغرافية والوعي والقدرات الاستدلالية المشفرة داخل هذه النماذج اللغوية الكبيرة المدربة مسبقاً. مع التركيز على نماذج اللغة الانحدارية الذاتية، نضع أساليب تجريبية تتعلق بـ (i) اختبار النماذج اللغوية الكبيرة للحصول على إحداثيات جغرافية لتقييم المعرفة الجغرافية، (ii) استخدام حروف الجر الجغرافية وغير الجغرافية لقياس وعيها الجغرافي، و (iii) الاستفادة من تجربة القياس متعدد الأبعاد (MDS) لتقييم قدرات الاستدلال الجغرافي للنماذج وتحديد مواقع المدن بناءً على التحفيز. تؤكد نتائجنا أنه لا يتطلب الأمر فقط نماذج لغوية أكبر ولكن أيضاً أكثر تعقيداً لدمج المعرفة الجغرافية من المعلومات النصية. وبالتالي، تسهم هذه البحث في فهم إمكانيات وقيود النماذج اللغوية الكبيرة في التعامل مع المعلومات الجغرافية.