실시간 대칭 공격-방어 전투를 통한 AI 에이전트 벤치마킹: CyberArena
연구진은 정적 환경의 한계를 극복하기 위해, 공격자와 방어자가 실시간으로 상호작용하며 취약점을 발견하고 패치하는 동적이고 대칭적인 공격-방어 전투 환경인 CyberArena를 구축하였다. 이 벤치마크를 통해 12개의 최신 LLM 에이전트를 40가지 도전 과제에서 466번의 매치를 통해 평가하였다.
시사점 AI 에이전트의 실제 사이버 보안 능력을 평가하려면, 정적 테스트가 아닌 동적이고 상호작용적인 전투 시뮬레이션 환경이 필요하다.