네트워크 및 IT 운영을 위한 LLM 에이전트 아키텍처와 평가 체계

한줄 요약

LLM 기반 네트워크 운영 및 AIOps 에이전트의 아키텍처, 평가, 안전성을 체계적으로 정리한 서베이 논문.

풀어야 하는 문제

네트워크 운영과 IT 운영에서 LLM 에이전트의 도입이 증가하지만, 운영 결정의 즉각적 영향으로 인해 신뢰성과 안전성 확보가 중요하다. 기존 평가는 정적 QA에 치우쳐 실제 워크플로의 복잡성을 반영하지 못한다.

접근 방법

자율성 계층, 도구 범위, 증적 추적, 보증 계약의 네 가지 축으로 관련 문헌을 조직화한다. 텔레메트리 질의 추천, 진단, 근본 원인 분석, 설정 합성, 변경 계획, 제한적 자가 치유 등 다양한 작업에서 일관된 패턴을 식별한다. 운영 신뢰성은 모델 자체보다 주변 메커니즘에 달려 있음을 주장하며, 워크플로 중심 평가(증적 품질, 제한된 도구 사용, 안전한 제안 생성, 샌드박스 재현, 카나리 시험)를 제안한다.

결과·기여

지능형 NetOps/AIOps의 발전은 자율성을 제약된 운영 제어 문제로 취급하고, 출력의 신뢰성, 감사 가능성, 안전한 배포를 보장하는 데 달려 있음을 결론짓는다. 보안, 프라이버시, 거버넌스 리스크에 대한 분석도 포함한다.