AgentSPEX: An Agent SPecification and EXecution Language

Paper ID: 2604.13346 • 49 Upvotes

Agent LLM Workflow DSL Orchestration Reasoning Benchmark Evaluation

AgentSPEX: An Agent SPecification and EXecution Language

📝 핵심 요약

LLM 에이전트의 복잡한 워크플로우를 명시적 제어 흐름과 모듈식 구조로 정의하여 개발 및 유지보수를 용이하게 하는 새로운 언어 AgentSPEX를 제안합니다.

📖 상세 내용

현재 LLM 에이전트 시스템은 반응형 프롬프팅에 의존하거나 파이썬에 강하게 결합된 오케스트레이션 프레임워크를 사용합니다. 이는 에이전트의 제어 흐름과 중간 상태를 불분명하게 만들고, 행동 제어를 어렵게 하며, 유지보수 및 수정에 어려움을 초래합니다. 본 논문은 명시적인 제어 흐름과 모듈식 구조를 가진 LLM 에이전트 워크플로우를 위한 AgentSPEX라는 새로운 명세 및 실행 언어를 소개합니다. AgentSPEX는 타입 스텝, 분기, 루프, 병렬 실행, 재사용 가능한 서브모듈, 명시적 상태 관리를 지원하며, 도구 접근, 샌드박스 환경, 체크포인팅, 검증, 로깅을 제공하는 에이전트 하네스 내에서 실행됩니다. 또한, 시각적 편집기도 제공됩니다. AgentSPEX는 7가지 벤치마크에서 평가되었으며, 사용자 연구를 통해 기존 인기 에이전트 프레임워크보다 더 해석 가능하고 접근하기 쉬운 워크플로우 작성 패러다임을 제공함을 입증했습니다.

🔑 주요 내용 (Key Points)

LLM 에이전트 워크플로우를 위한 명시적 제어 흐름과 모듈식 구조를 가진 새로운 언어 AgentSPEX 제안.
타입 스텝, 분기, 루프, 병렬 실행, 재사용 가능한 서브모듈, 명시적 상태 관리 등 고급 워크플로우 기능 지원.
도구 접근, 샌드박스, 체크포인팅, 검증, 로깅을 포함하는 사용자 정의 가능한 에이전트 실행 하네스 제공.

💡 실무적 가치 (Relevance)

기존 LLM 에이전트 개발의 고질적인 문제인 제어의 어려움과 유지보수 복잡성을 해결하여, 개발자들이 더욱 안정적이고 예측 가능한 에이전트 시스템을 구축하고 관리할 수 있도록 돕습니다.

✅ 추천 액션 (Actionable Items)

복잡한 제어 흐름이 필요한 새로운 LLM 에이전트 프로젝트에 AgentSPEX 도입을 검토.
기존의 반응형 프롬프팅 기반 에이전트나 파이썬 결합 워크플로우를 AgentSPEX로 전환하여 유지보수성 개선 가능성 평가.
AgentSPEX의 시각적 편집기를 활용하여 에이전트 워크플로우를 설계하고 팀 내 협업 효율성 증대.

View on Hugging Face View PDF (arXiv)