What question did this study set out to answer?

अध्ययन का लक्ष्य यह आकलन करना है कि क्या बड़े भाषा मॉडल सॉफ़्टवेयर इंजीनियरों को आर्किटेक्चरल ज्ञान खोजने में सटीकता से सहायता कर सकते हैं।

February 8, 20260 citationsOpen Access

क्या बड़े भाषा मॉडल सॉफ़्टवेयर आर्किटेक्चर ज्ञान रखते हैं? GPT के साथ एक अन्वेषणात्मक केस अध्ययन

MSMohamed Soliman JKJan KeimKarlsruhe Institute of Technology

Key Points

अध्ययन का लक्ष्य यह आकलन करना है कि क्या बड़े भाषा मॉडल सॉफ़्टवेयर इंजीनियरों को आर्किटेक्चरल ज्ञान खोजने में सटीकता से सहायता कर सकते हैं।
अन्वेषणात्मक केस अध्ययन डिज़ाइन
आर्किटेक्चर से संबंधित प्रश्नों पर GPT-3.5 के उत्तरों का मूल्यांकन
सटीकता, गुणवत्ता, और विश्वसनीयता पर केंद्रित आकलन मानदंड
GPT-3.5 के उत्तरों में सटीकता और गुणवत्ता में भिन्नता थी
ऐसे उदाहरण पहचाने गए जहां GPT ने आर्किटेक्ट की अवधारणाओं में उपयोगी अंतर्दृष्टि प्रदान की
प्रश्नों के संदर्भ और जटिलता द्वारा GPT के उत्तरों की विश्वसनीयता प्रभावित हुई

Abstract

हमारा पेपर SK25, जो 22वें IEEE अंतर्राष्ट्रीय सम्मेलन पर सॉफ़्टवेयर आर्किटेक्चर (ICSA) में प्रकाशित हुआ, जांच करता है कि कैसे बड़े भाषा मॉडल, विशेष रूप से GPT-3.5, सॉफ़्टवेयर इंजीनियरों को हेड फ़ाइल डेटा प्रणाली (HDFS) जैसे वास्तविक दुनिया के सिस्टम में आर्किटेक्चरल नॉलेज (AK) खोजने और उसके बारे में सोचने में सहायता कर सकते हैं, GPT के आर्किटेक्चर से संबंधित प्रश्नों के उत्तरों की सटीकता, गुणवत्ता और विश्वसनीयता का मूल्यांकन करके।

AI से पूछें

Bookmark

View Full Paper