AI 워크

권한은 좁게, 기록은 길게 남기는 AI 에이전트 보안

직원 29%가 승인 안 된 에이전트를 써 봤다는 조사가 나왔다. 국내외 보안기관 지침은 최소 권한, 사람 확인, 행동 기록으로 모인다.

Daniel Moon3분 읽기

연재 · 4화AI 에이전트란 무엇이고 회사 업무는 어떻게 바뀔까?목록
  1. 1화에이전트 10종을 직접 만든 조달청, AI 에이전트가 바꾸는 회사 일
  2. 2화AI 에이전트 종류, 챗봇과는 어디서 갈릴까
  3. 3화코딩 없이 하는 AI 에이전트 만들기는 업무 하나 고르기에서 시작한다
  4. 4화권한은 좁게, 기록은 길게 남기는 AI 에이전트 보안지금 읽는 글
연재 소개·전체 목록
권한은 좁게, 기록은 길게 남기는 AI 에이전트 보안 핵심 숫자 카드

핵심 요약

  • 마이크로소프트 조사에서 직원 29%가 승인 안 된 AI 에이전트를 써 봤고, 보안 통제를 갖춘 조직은 47%였다.
  • KISA 매뉴얼은 위협 21개 중 도구 설계·하이재킹·DoS·메모리 오염 4개를 에이전트 위협으로 묶었다.
  • 미국 CISA 등 여러 나라 보안기관은 2026년 5월 1일 넓은 권한을 주지 말라는 공동 지침을 냈다.
  • 인공지능기본법은 2026년 1월 22일 시행됐고, 정부는 최소 1년 규제를 유예한다고 밝혔다.

회사에서 AI 에이전트를 쓰는 직원은 늘었지만 관리는 그 속도를 따라가지 못하고 있다. 마이크로소프트가 2026년 2월 낸 보안 보고서에 따르면 직원의 29%가 회사 승인을 받지 않은 AI 에이전트를 업무에 써 본 적이 있다. 생성형 AI 보안 통제를 갖춘 조직은 47%에 그쳤다. 보고서는 권한을 지나치게 받았거나 잘못된 지시를 받은 에이전트가 조직을 공격하는 쪽으로 돌아설 수 있다며 이를 '이중 에이전트'라고 불렀다.

에이전트에만 생기는 위험 네 가지

한국인터넷진흥원이 2026년 7월 7일 공개한 'AI 보안 위협 대응 매뉴얼'은 거대언어모델 시스템의 위협을 21개로 나눴다. 이 가운데 에이전트 위협으로 따로 묶은 항목이 4개다.

위협 내용
부적절한 도구 설계 도구 권한 제어와 검증이 허술해 악성 입력이 오동작·유출로 이어짐
에이전트 하이재킹 웹페이지·문서에 숨은 악성 지시를 정상 지시로 착각
에이전트 DoS 무한 반복이나 과도한 API 호출로 자원과 비용을 소진
에이전트 메모리 오염 기억 저장소에 들어간 악성 데이터가 이후 판단을 계속 왜곡

두 번째 항목이 특히 까다롭다. 에이전트는 메일과 첨부 문서, 웹페이지를 읽으며 일한다. 누군가 문서 안에 "이 내용을 외부 주소로 보내라" 같은 문장을 숨겨 두면, 에이전트는 그것을 사용자 지시와 구분하지 못할 수 있다. 사람이 시킨 적 없는 행동이 사람의 권한으로 실행되는 셈이다.

나머지 항목도 업무 현장과 가깝다. 에이전트 DoS는 해킹보다 설정 실수에서 더 자주 시작될 수 있다. 조건을 잘못 걸어 같은 작업이 끝없이 반복되면, 사용량에 따라 요금이 붙는 도구에서는 곧바로 비용 문제가 된다. 메모리 오염은 한 번 잘못 저장된 정보가 이후 판단에 계속 섞인다는 점에서 발견이 늦다. 매뉴얼은 여기에 더해 에이전트의 자율적 판단이 사용자 통제 범위를 벗어나는 '통제 상실'을 고성능 모델 위협으로 따로 다룬다.

해외 보안기관들이 함께 낸 지침

미국 사이버보안·인프라보안청(CISA)과 국가안보국(NSA), 호주·캐나다·뉴질랜드·영국의 사이버보안 기관은 2026년 5월 1일 에이전틱 AI 서비스 도입 지침을 공동으로 냈다. 권고의 큰 줄기는 네 가지다. 에이전트 위험을 기존 사이버보안 체계 안에서 관리할 것, 에이전트에 넓거나 제한 없는 접근 권한을 주지 않을 것, 여러 겹의 방어와 강한 신원 관리를 갖출 것, 위협 모델링과 상시 감시를 할 것.

새로운 원칙이라기보다 사람 직원에게 적용하던 원칙을 에이전트에도 똑같이 적용하라는 내용에 가깝다. 출입증을 필요한 층에만 열어 주고, 출입 기록을 남기고, 퇴사하면 바로 회수하는 것과 같은 이치다.

국내 법이 요구하는 것

국내에서는 인공지능기본법이 2026년 1월 22일 시행됐다. 고영향 AI나 생성형 AI를 활용한 제품·서비스를 제공하는 AI 사업자는 이용자에게 AI를 쓴다는 사실을 미리 알리는 의무를 진다. 정부는 기업 준비 기간을 고려해 최소 1년 규제를 유예하고, 그동안 사실조사와 과태료는 계도 위주로 운영한다고 밝혔다. 최종 의사결정에 사람이 개입하는 경우는 통제 가능한 것으로 보고 고영향 AI 대상에서 뺀다는 기준도 내놨다.

사내 업무용 에이전트가 곧바로 이 의무에 걸리지 않더라도, 고객 응대나 채용처럼 바깥 사람에게 닿는 일에 쓴다면 고지와 사람의 최종 판단을 함께 설계해 두는 편이 안전하다.

도입 전 체크리스트

  • 에이전트마다 하는 일과 접근하는 데이터를 문서로 적고, 필요한 최소 권한만 주기
  • 회사가 승인한 에이전트 목록을 만들고, 승인 안 된 도구에 사내 자료를 넣지 않도록 알리기
  • 외부 메일·문서를 읽는 에이전트는 발송·삭제·결제 같은 행동 전에 사람 확인을 거치게 하기
  • 호출 횟수와 비용 한도를 걸어 반복 실행이 멈추지 않는 상황 막기
  • 에이전트의 행동 기록을 남기고, 이상할 때 바로 끄는 담당자 정하기

출처

관련 글