दृश्य, भाषा, और निर्णय-निर्माण कार्यों में गहरी शिक्षा मॉडल कीremarkable सफलता के साथ, यह प्रमाणों का बढ़ता हुआ शरीर है कि ये मॉडल प्रतिकूल हमलों के प्रति संवेदनशील हैं, जो सावधानीपूर्वक तैयार की गई विकृतियाँ हैं जो उच्च-विश्वास वाले गलत वर्गीकरण का कारण बनती हैं जब कि ये मनुष्यों के लिए अदृश्य रहती हैं, इस प्रकार उनके विश्वसनीयता, सुरक्षा, और वास्तविक दुनिया के अनुप्रयोगों में उनकी विश्वासworthiness के बारे में मौलिक चिंताओं को बढ़ाती हैं। Szegedy et al. (2014) द्वारा प्रतिकूल उदाहरणों की ऐतिहासिक खोज और Goodfellow et al. (2015) द्वारा यह ग्रेडिएंट-आधारित विधियों के माध्यम से औपचारिक किया गया, प्रतिकूल मजबूती एक केंद्रीय और अंतःविषय अनुसंधान चुनौती के रूप में उभरी है, जो विश्वास योग्य कृत्रिम बुद्धिमत्ता में फैली हुई है, जिसमें मशीन लर्निंग, सुरक्षा, और सुरक्षा-आवश्यक प्रणालियाँ शामिल हैं। इस लेख में, हम गहरे लर्निंग मॉडलों में प्रतिकूल हमलों और रक्षा रणनीतियों का एक समग्र सर्वेक्षण प्रस्तुत करते हैं, 2000 से 2021 तक के प्रमुख सैद्धांतिक और अनुभवजन्य विकास को संयोजित करते हैं, जबकि यह उजागर करते हैं कि कैसे यह क्षेत्र प्रारंभिक खतरे के मॉडलों से आधुनिक मजबूती के ढाँचों में विकसित हुआ है। हम हमलाओं की विधियों को सफेद-बक्सा, काला-बक्सा, और भौतिक-विश्व के हमलों में व्यवस्थित रूप से वर्गीकृत करते हैं, उनके अंतर्निहित तंत्र, हस्तांतरणीयता, और व्यावहारिक व्यवहार्यता का विश्लेषण करते हैं, और प्रतिकूल प्रशिक्षण, रक्षा वाष्पीकरण, समूह-आधारित तरीकों, और प्रमाणित रक्षाओं सहित प्रमुख रक्षा तंत्रों की जांच करते हैं, साथ ही उनकी ताकतें, सीमाएँ, और संगणकीय व्यापार-संतुलन भी। इसके अलावा, हम स्वायत्त ड्राइविंग, बायोमेट्रिक्स, स्वास्थ्य देखभाल, और साइबर सुरक्षा जैसे क्षेत्रों में तैनात प्रणालियों के लिए प्रतिकूल संवेदनशीलता के व्यावहारिक निहितार्थों पर चर्चा करते हैं। तेज ग्रेडिएंट साइन विधि (FGSM) दृश्यन, भौतिक-विश्व प्रतिकूल उदाहरणों के डेमोंस्ट्रेशन, और प्रतिकूल प्रशिक्षण प्रयोगों के अनुभवजन्य प्रमाणों सहित प्रतिनिधि आकृतियों का उपयोग करके, हम प्रतिकूल हेरफेर के तहत गहरे न्यूरल नेटवर्क की नाजुकता और लचीलापन दोनों को दर्शाते हैं। अंत में, हम इस विषय के तहत निरंतर खुले चुनौतियों और भरोसेमंद, व्याख्या योग्य, और विश्वसनीय एआई प्रणालियों को विकसित करने की संभावनाएँ प्रस्तुत करते हैं जो अनुकूली और वास्तविक दुनिया के प्रतिकूल खतरों का सामना कर सकें।
Turner et al. (Sat,) ने इस प्रश्न का अध्ययन किया।
Synapse has enriched 5 closely related papers on similar clinical questions. Consider them for comparative context: