InfoSeeker: 웹 정보 검색을 위한 확장 가능한 계층적 병렬 에이전트 프레임워크

InfoSeeker: A Scalable Hierarchical Parallel Agent Framework for Web Information Seeking

최근의 에이전트 기반 검색 시스템은 심층적이고 다단계 추론을 강조하여 상당한 발전을 이루었습니다. 그러나 이러한 접근 방식은 종종 광범위한 정보 통합의 어려움을 간과하는데, 여기서는 에이전트가 여러 소스에서 방대한 양의 이질적인 증거를 수집해야 합니다. 그 결과, 대부분의 기존 대규모 언어 모델 에이전트 시스템은 데이터 집약적인 환경에서 심각한 제한에 직면하며, 여기에는 컨텍스트 포화, 오류 전파 및 높은 전체 지연 시간이 포함됩니다. 이러한 과제를 해결하기 위해, 우리는 'InfoSeeker'라는 계층적 프레임워크를 제안합니다. 이 프레임워크는 근사 분해 원칙을 기반으로 하며, 전략적인 '호스트', 여러 '매니저', 그리고 병렬 '워커'로 구성됩니다. 매니저 계층에서 집계 및 반사 메커니즘을 활용하여, 당사 프레임워크는 엄격한 컨텍스트 격리를 통해 포화 및 오류 전파를 방지합니다. 동시에, 워커 계층의 병렬성은 전체 작업 실행 속도를 가속화하여 상당한 지연 시간을 줄입니다. 두 가지 상호 보완적인 벤치마크를 사용한 평가 결과, 당사 프레임워크는 효율성(3~5배 속도 향상)과 효과성 모두를 달성했습니다. 특히, 'WideSearch-en' 데이터셋에서 8.4%의 성공률, 'BrowseComp-zh' 데이터셋에서 52.9%의 정확도를 보였습니다. 코드 공개는 https://github.com/agent-on-the-fly/InfoSeeker 에서 확인할 수 있습니다.

Recent agentic search systems have made substantial progress by emphasising deep, multi-step reasoning. However, this focus often overlooks the challenges of wide-scale information synthesis, where agents must aggregate large volumes of heterogeneous evidence across many sources. As a result, most existing large language model agent systems face severe limitations in data-intensive settings, including context saturation, cascading error propagation, and high end-to-end latency. To address these challenges, we present \framework, a hierarchical framework based on principle of near-decomposability, containing a strategic \textit{Host}, multiple \textit{Managers} and parallel \textit{Workers}. By leveraging aggregation and reflection mechanisms at the Manager layer, our framework enforces strict context isolation to prevent saturation and error propagation. Simultaneously, the parallelism in worker layer accelerates the speed of overall task execution, mitigating the significant latency. Our evaluation on two complementary benchmarks demonstrates both efficiency ($ 3-5 \times$ speed-up) and effectiveness, achieving a $8.4\%$ success rate on WideSearch-en and $52.9\%$ accuracy on BrowseComp-zh. The code is released at https://github.com/agent-on-the-fly/InfoSeeker