프로그래머의 조수: 소프트웨어 개발을 위한 대규모 언어 모델과의 대화형 상호작용

대규모 언어 모델(LLMs)은 최근 소프트웨어 공학에 적용되어 프로그래밍 언어 간 코드 번역, 자연어에서 코드 생성, 코드 작성 중 자동 완성을 수행하는 작업을 수행하고 있습니다. 개발 도구 내에서 사용될 때, 이러한 시스템은 일반적으로 각 모델 호출을 이전의 모든 호출과 독립적으로 처리하며, 사용자 인터페이스 내에서 특정 제한된 기능만을 노출합니다. 이러한 사용자 상호작용 방식은 사용자가 이전 상호작용의 맥락과 코드의 맥락이 모델의 응답에 영향을 미치게 하여 모델과 더 깊이 관여할 기회를 놓치고 있습니다. 우리는 코드에 기반한 대화형 상호작용의 유용성을 탐구하고, 코드에 능숙한 LLM과 대화하는 것에 대한 소프트웨어 엔지니어들의 수용도를 조사하기 위해 프로토타입 시스템인 프로그래머의 조수를 개발하였습니다. 다양한 수준의 프로그래밍 경험을 가진 42명의 참가자와의 평가를 통해, 우리의 시스템이 장기간의 다중 턴 대화를 수행할 수 있으며, 코드 생성 외에 추가적인 지식과 기능이 LLM에서 나타날 수 있음을 발견했습니다. 대화형 프로그래밍 지원에 대한 초기 비관적인 기대에도 불구하고, 참가자들은 조수의 능력 범위, 응답의 질, 그리고 생산성 향상 가능성에 깊은 인상을 받았습니다. 우리의 연구는 LLM과의 대화형 상호작용이 소프트웨어 개발과 같은 공동 창작 과정에서의 독특한 잠재력을 보여줍니다.