AgentGUI: 장시간 실행되는 AI 에이전트 관찰 및 제어를 위한 인터페이스

AgentGUI: An Interface for Observing and Steering Long-Running AI Agents

AI 에이전트는 점점 더 복잡하고 시간이 오래 걸리는 작업을 처리하는 데 능숙해지고 있습니다. 자율 기능의 급속한 발전으로 인해, 인간 중심적인 인터페이스의 부족으로 인해 인간의 감독 능력은 뒤쳐지는 경향이 있습니다. 이러한 문제를 해결하기 위해, 우리는 AgentGUI를 소개합니다. AgentGUI는 사용하기 쉬운 로컬 호스팅 GUI로, 여러 개의 동시에 실행되는 장시간 작업 환경에서 AI 에이전트를 원활하게 관찰하고 제어할 수 있도록 설계되었습니다. AgentGUI는 다음과 같은 기능을 제공합니다. 1) 풍부한 에이전트 동작 시각화, 2) 효과적인 수동 및 자동 제어, 그리고 3) 오픈 소스 및 최첨단 에이전트 프레임워크와의 통합 및 조정. 통제된 사용자 연구 결과, AgentGUI를 사용했을 때 에이전트 기록으로부터 주요 요소를 식별하는 데 걸리는 시간이 유의미하게 감소했습니다 (38% 더 빠름, p = 0.023). 예비 실험에서, AgentGUI의 자동 드리프트 방지 기능은 0.8B~9B 모델 환경에서 작은 로컬 에이전트의 작업 완료율을 최대 34pp까지 향상시켰습니다 (모델당 50회 실행). AgentGUI는 프로젝트 웹사이트(https://agent-gui-project.github.io) 및 오픈 소스 저장소(https://github.com/eth-medical-ai-lab/agent-gui)를 통해 공개적으로 제공되며, 데모 영상은 다음 링크에서 확인할 수 있습니다 (https://youtube.com/watch?v=GSDyxN1gTF0).

AI agents are increasingly adept at tackling complex, long-running tasks. With the rapid surge of autonomous capabilities, human oversight is systematically lagging behind due to limited human-centered interfacing. Aiming to address this, we introduce AgentGUI, a user-friendly, locally hosted GUI for seamlessly observing and steering AI agents amid multiple concurrent, long-running sessions. AgentGUI features 1) rich agent trajectory visualizations, 2) effective manual and automated steering, and 3) integration with and coordination between open-source and frontier agent frameworks. A controlled user study demonstrates statistically significant reduction in the time it takes to identify key elements from agent traces (38% faster, p = 0.023). In a preliminary experiment, AgentGUI's automated drift prevention feature raises the task completion rate of small local agents by as high as 34pp across a 0.8B--9B model ladder (N=50 runs per model). AgentGUI is publicly available through its project website (https://agent-gui-project.github.io) and open-source repository (https://github.com/eth-medical-ai-lab/agent-gui), along with a demo video (https://youtube.com/watch?v=GSDyxN1gTF0).