大規模言語モデルの概念知識の編集

最近、大規模言語モデル（LLM）における知識編集への関心が高まっています。現在のアプローチと評価は、インスタンスレベルの編集のみを探索していますが、LLMが概念を修正する能力を持っているかどうかは不明です。本論文は、概念知識の編集に関する調査の先駆けとして、新しいベンチマークデータセットConceptEditを構築し、評価のための新しいメトリックの一式を確立します。実験結果は、既存の編集方法が概念レベルの定義をある程度効率的に修正できる一方で、LLM内の関連するインスタンシャル知識を歪める可能性があるため、パフォーマンスが低下することが明らかになりました。これがLLMの理解を深めるさらなる進展を促すことにつながると期待しています。プロジェクトのホームページは https://zjunlp.github.io/project/ConceptEdit でご覧いただけます。