성공률을 넘어: 비용 인지형 공격 및 방어 보안 에이전트 평가

요약

본 논문은 기존의 보안 에이전트 평가 방식이 실제 운영 환경의 비용 문제를 간과한다고 지적하며, '비용-성공률 관점'을 도입했습니다. 공격적인 Cybench와 방어적인 Splunk BOTS v1 챌린지를 통해 추론 및 도구 사용에 따른 비용 효율성을 분석합니다. 연구 결과는 레드팀과 블루팀 작업의 스케일링 영역이 다름을 보여주며, 경제적 효율성 측정의 중요성을 강조합니다.

핵심 포인트

• 보안 에이전트 평가는 단순 성공률보다 비용-효율성이 중요함.
• 공격(Red Team)은 컴퓨팅 자원 증가에 따라 성능 향상이 나타남.
• 방어(Blue Team/SOC)는 도구 사용과 원격 측정 탐색에 더 크게 의존함.
• 벤치마크는 경제적 효율성과 운영 적합성을 함께 측정해야 함.