Nutzung von KI-gestützten Übersetzungen von Fragebögen in interkultureller und grenzüberschreitender Forschung: Einblicke und Empfehlungen

In diesem Forschungsbericht haben wir die Machbarkeit KI-gestützter Übersetzungen von Umfragematerialien in interkultureller und grenzüberschreitender Forschung untersucht und die Qualität maschineller Übersetzungen mit traditionellen menschlichen Übersetzungen verglichen. Fokussierend auf das HEXACO-Persönlichkeitsinventar haben wir das originale englische Inventar mit Google Translate und GPT-3.5 in 33 Sprachen übersetzt, für die validierte menschliche Übersetzungen existieren. Die statistische Ähnlichkeit zwischen menschlichen und maschinell erzeugten Übersetzungen variierte erheblich zwischen den Zielsprache. Sie war am höchsten für Zielsprache, die zur gleichen Sprachfamilie wie die Ausgangssprache gehören, was möglicherweise darauf zurückzuführen ist, dass diese Verwandtschaft direktere maschinelle Übersetzungen ermöglichte. Konsistent mit dieser Überlegung erklärte die genetische Ähnlichkeit zwischen den Sprachen weitgehend die festgestellten Unterschiede. Die Temperatureinstellung von GPT, die bestimmt, wie streng oder frei ein Text übersetzt wird, hatte wenig Einfluss auf die Ähnlichkeitsschätzungen, aber sehr hohe Werte neigten dazu, etwas niedrigere statistische Ähnlichkeit zu erzeugen. Um die Qualität der maschinellen Übersetzungen zu validieren, bewertete eine Gruppe von Sozialwissenschaftlern die Übersetzung in einer Sprache, für die die menschlichen und maschinellen Übersetzungen statistisch stark konvergierten. Obwohl die menschliche Übersetzung als qualitativ höherwertig als vier von fünf maschinellen Übersetzungen bewertet wurde, waren diese Unterschiede relativ gering. Entscheidend ist, dass die Sozialwissenschaftler die menschliche Übersetzung nicht signifikant besser bewerteten als die GPT 3.5-Übersetzung mit der niedrigsten Temperatureinstellung. Basierend auf diesen Erkenntnissen schlagen wir ein Rahmenwerk mit vier Empfehlungen für die Nutzung KI-gestützter Übersetzungen in der grenzüberschreitenden und interkulturellen Forschung vor, das die KI in unterschiedlich starkem Maße in den Vorwärts-Rückwärts-Übersetzungsprozess einbezieht.