RESOURCE GUIDE · V2.0.0

Part 0–2

디지털 인프라 거버넌스 가이드

먼저 8대 카테고리의 전체 지도를 보고, 자신의 역할과 현재 과제에 맞는 챕터로 이동한다.

BOUNDARY경계
ACCESS권한
COST비용
RISK리스크

CLOUDAI

발행
버전
2.0.0
작성
801 PLANET
기술 검토
최종 검토
공개 출처
28
목차가이드 허브·공통 원리
  1. Part 0–2가이드 허브·공통 원리
    1. Part 0. 서문 — 이 가이드의 사용법
    2. 0.1 목적
    3. 0.2 대상 독자와 활용법
    4. 0.3 다루는 범위와 다루지 않는 범위
    5. Part 1. 기업 기술 거버넌스란 무엇인가
    6. 1.1 정의
    7. 1.2 왜 필요한가 — 거버넌스 부재의 리스크
    8. 1.3 용어 정리 — 거버넌스, 통제(Control), 가드레일(Guardrail)
    9. 1.4 8대 카테고리 프레임워크 — 이 가이드의 전체 지도
    10. Part 2. 전체 아키텍처·통제 원리 — 클라우드와 AI가 공유하는 문법
    11. 2.1 계층 구조 + 정책 상속의 공통 원리
    12. 2.2 예방(Preventive)형과 탐지(Detective)형 통제
    13. 2.3 롤아웃의 공통 패턴 — 단계적 강제
    14. 2.4 멀티클라우드·멀티벤더의 구조적 한계
  2. Part 3계정·조직
  3. Part 4IAM
  4. Part 5FinOps
  5. Part 6클라우드 보안
  6. Part 7AI 사용·자산
  7. Part 8에이전트 접근 통제
  8. Part 9AI 비용
  9. Part 10AI 리스크
  10. Part 11–12운영 모델·로드맵
  11. Part 13통합 컴플라이언스
  12. Part 14실행 체크리스트
  13. Part 15용어집
  14. Part 16참고자료

클라우드와 AI를 경계·권한·비용·리스크라는 공통 통제 문법으로 설계하는 실무 프레임워크.

Part 0. 서문 — 이 가이드의 사용법 0.1 목적

회사가 여러 클라우드 계정과 AI 도구를 동시에 운영하면 여덟 가지 질문을 피할 수 없다. 계정과 조직을 어떻게 나눌 것인가. 누구에게, 어떤 AI 에이전트에게 어떤 권한을 줄 것인가. 클라우드 인프라와 AI 토큰에 얼마를 쓰고 있고 그 지출은 가치가 있는가. 설정과 AI 유스케이스가 안전하고 합법적인 상태를 유지하는가. 이 가이드는 이 여덟 질문에 업계 표준 프레임워크가 제시하는 답을 하나의 문서로 통합한다.

이 문서는 특정 벤더의 홍보 자료가 아니다. AWS·Azure·GCP 세 클라우드 벤더의 공식 문서, FinOps Foundation·CIS(Center for Internet Security) 같은 벤더 중립 표준 기구의 자료, 그리고 ISO/IEC 42001·NIST AI RMF·EU AI Act·OWASP AISVS 같은 AI 거버넌스 국제 표준을 교차 검증해 재구성했다.

핵심 발견은 이렇다. 클라우드 거버넌스와 AI 거버넌스는 서로 다른 두 문제가 아니라 같은 뼈대를 공유하는 한 문제다. 벤더마다 명칭은 다르지만(AWS의 “Multi-Account Strategy”, Azure의 “Govern 5 Disciplines”, 일본 CAIO 매뉴얼의 “거버넌스 라이프사이클 게이트” 등) 기업 기술 거버넌스는 공통적으로 네 가지 질문 — 경계를 어떻게 그을 것인가, 권한을 어떻게 줄 것인가, 비용을 어떻게 관리할 것인가, 리스크를 어떻게 통제할 것인가 — 로 수렴한다. 이 가이드는 이 네 질문을 클라우드 축과 AI 축 각각에 적용해 8개 카테고리를 만들고, 카테고리마다 배경 지식·표준 프레임워크·실무 절차·체크리스트·흔한 함정을 다룬다.

0.2 대상 독자와 활용법

처음부터 끝까지 순서대로 읽을 필요는 없다. 자신이 담당하는 카테고리를 먼저 찾아 그 부분부터 읽어라. 아래 표에 역할별로 우선 읽을 파트를 정리했다.

디지털 인프라 거버넌스 비교표
담당 역할우선 파트이 가이드에서 얻는 것
클라우드 플랫폼/인프라 아키텍트Part 1, 2, 3, 11, 12계정·조직 구조 설계 원칙, 랜딩존 구축 절차, CCoE 조직 구성법
IAM/보안 엔지니어Part 1, 2, 4, 6, 13최소권한·Zero Trust·JIT 설계 원칙, 정책 엔진별 구현 방법, 컴플라이언스 매핑
FinOps 실무자/재무 담당Part 1, 5, 9, 12비용 가시화·배분·최적화 체계, 성숙도 모델, KPI 설계
보안/컴플라이언스 담당자Part 1, 2, 6, 10, 13정책 자동화 원리, CIS·ISO·NIST·EU AI Act 매핑, 감사 준비
AI 프로덕트 오너/데이터·ML 엔지니어Part 1, 7, 8, 9AI 사용 경계 설계, 에이전트 권한·실행 통제, 토큰 비용 관리
AI 거버넌스 담당자(CAIO실)Part 1, 10, 11, 13리스크 분류·평가 절차, CAIO·AI 스티어링 커미티 운영, 규제 매핑
CCoE·CAIO 리더/경영진Part 0, 1, 11, 12, 14전체 그림, 조직 체계, 도입 로드맵, 종합 체크리스트
0.3 다루는 범위와 다루지 않는 범위

이 가이드는 AWS·Azure·GCP 3대 퍼블릭 클라우드에 공통 적용 가능한 인프라 거버넌스 원칙과, 사내에서 생성형 AI·AI 에이전트를 도입·운용할 때 필요한 AI 거버넌스 원칙을 함께 다룬다. 온프레미스 인프라, 특정 SaaS 제품의 개별 도입 심사, 소프트웨어 개발 방법론(SDLC), AI 모델 자체의 학습·파인튜닝 기법은 범위 밖이다. 이 가이드는 업계 표준이 요구하는 것을 제시하지만, 회사의 실제 업종·규제·조직 규모에 맞춘 세부 정책값(로그 보존 기간, 승인 SLA, 리스크 수용 기준 등)은 회사 내부 리스크 위원회와 법무·컴플라이언스 부서가 최종 결정해야 한다.

Part 1. 기업 기술 거버넌스란 무엇인가 1.1 정의

“클라우드 거버넌스란 조직이 클라우드 자원을 관리하고, 보호하고, 효율적으로 운영하기 위해 사용하는 정책·절차·기술적 통제의 집합이다.” (CloudQuery, Cloud Governance Framework: 4-Step Design Guide)

“AI 거버넌스란 AI 안전성에 기여하는 요소를 기술·사업·조직·사회 4개 관점에서 체계적으로 포착하고, 각 이해관계자가 연계해 설계·운용하는 활동이다.” (宮脇峻平, Algomatic, AI 거버넌스 입문)

두 정의는 대상만 다를 뿐 구조가 같다. 둘 다 세 요소로 이루어진다. 정책은 무엇을 할 수 있고 무엇을 할 수 없는지 정하는 규칙이다. 절차는 그 규칙을 누가 어떻게 적용하는지 정한다. 기술적 통제는 그 규칙을 사람이 아니라 시스템이 강제하는 장치다. 거버넌스가 취약한 조직은 이 세 요소 중 하나 이상이 비어 있다 — 정책은 있지만 강제하는 기술이 없거나, 통제 기술은 있지만 그것을 운영할 절차가 없다.

이 가이드는 두 정의를 하나로 묶는다. 기업 기술 거버넌스란 조직이 클라우드 인프라와 AI 시스템을 안전하고 효율적으로 운영하기 위해 갖추는 정책·절차·기술적 통제의 총체다.

1.2 왜 필요한가 — 거버넌스 부재의 리스크

클라우드는 신용카드 한 장으로, AI는 계정 하나로 새 자원을 만들 수 있다는 것이 강점이자 위험이다. 거버넌스 없이 성장한 조직에서는 다음 패턴이 클라우드와 AI 양쪽에서 똑같이 반복된다.

디지털 인프라 거버넌스 비교표
리스크클라우드에서AI에서
경계 없는 확산팀마다 독립적으로 계정을 만들어 누가 무엇을 소유하는지 아무도 모른다부서마다 승인 없이 AI 도구를 도입해 섀도 AI가 확산된다
권한 과잉 부여관리자급 권한이 기본값이 되고 아무도 그 이유를 기억하지 못한다에이전트가 사용자 권한을 그대로 물려받아 사람이 할 수 없는 일까지 실행한다
비용 폭주태그 표준이 없어 청구서를 받고서야 지출을 안다종량제 토큰 사용량이 개인별 상한 없이 누적된다
표류하는 기준선엔지니어 개인 판단에 따라 설정이 제각각이다AI 유스케이스가 리스크 평가 없이 그대로 서비스에 반영된다
감사 대응 불가계정·권한 구조가 문서화되어 있지 않아 감사 질문에 답할 수 없다AI가 왜 그런 결정을 내렸는지 설명할 증적이 남아 있지 않다

이 다섯 가지 리스크는 서로를 낳는다. 경계 없는 확산은 권한 과잉 부여로 이어지고, 권한 과잉 부여는 감사 대응 불가로 이어진다. 그래서 거버넌스는 카테고리를 하나씩 개별적으로 손보는 일이 아니라, 여덟 카테고리를 하나의 체계로 함께 설계하는 일이다.

1.3 용어 정리 — 거버넌스, 통제(Control), 가드레일(Guardrail)

이 가이드 전체에서 반복되는 세 용어를 구분한다. AWS Well-Architected Framework의 정의를 기준으로 삼는다.

  • 거버넌스(Governance): 조직이 기술을 어떻게 운영할 것인가에 대한 정책·절차·통제 전체 체계. 가장 상위 개념.

  • 통제(Control): 리스크가 현실화되었을 때 이를 완화하거나 탐지하는 수단. “PCI 워크로드는 특정 리전 밖에서 실행 금지”, “권리·안전영향 AI는 이중 승인 필수” 같은 정책 자체.

  • 가드레일(Guardrail): 그 통제를 달성하는 기술적 구현체. 앞의 통제를 강제하는 SCP 코드, 또는 승인 게이트를 강제하는 워크플로우가 가드레일이다.

가드레일은 다시 예방(Preventive)형과 탐지(Detective)형으로 나뉜다. 예방형은 위반으로 이어지는 행위 자체를 원천 차단한다. 탐지형은 위반이 이미 일어난 뒤 이를 발견하고 경고한다. 성숙한 거버넌스는 둘을 함께 쓴다. 예방형만으로는 모든 시나리오를 미리 예측할 수 없고, 탐지형만으로는 사고를 막지 못하고 사후 대응에 그친다. 이 원리는 클라우드와 AI 모두에 그대로 적용된다 — Part 2.3에서 두 축의 대응 관계를 표로 정리한다.

1.4 8대 카테고리 프레임워크 — 이 가이드의 전체 지도

클라우드 표준(AWS·Azure·Cloud Adoption Framework·GCP Architecture Framework·FinOps Foundation·CIS)과 AI 거버넌스 표준(ISO/IEC 42001·NIST AI RMF·EU AI Act·OWASP AISVS·일본 CAIO 매뉴얼)을 나란히 놓으면, 벤더와 도메인은 달라도 네 가지 질문이 반복된다는 사실이 드러난다.

디지털 인프라 거버넌스 비교표
카테고리핵심 질문핵심 메커니즘
클라우드① 계정/조직워크로드를 어떤 경계로 격리하는가?계층 구조 + 정책 상속(OU/Management Group/Folder)
클라우드② 권한(IAM)누가/무엇이 무엇을 할 수 있는가?최소권한 + JIT + 중앙 아이덴티티
클라우드③ 재무(FinOps)인프라에 얼마를 쓰고 있고 가치 있는가?가시화 → 최적화 → 운영 순환
클라우드④ 보안 baseline설정이 안전한 상태를 유지하는가?선언적 정책 + 예방/탐지 가드레일
AI⑤ 사용 경계·자산 카탈로그어떤 AI를 누가 어떤 용도로 쓸 수 있는가?개인 사용/업무 내장 분리 + 승인 자산 카탈로그
AI⑥ 에이전트 권한·실행 통제AI 에이전트가 무엇을 실행할 수 있는가?Agent Identity + 의미 기반 정책 + 지명 스폰서
AI⑦ 비용(토큰) 거버넌스AI에 얼마를 쓰고 있고 가치 있는가?개인 상한 + 정액 이전 + 상시 모니터링
AI⑧ 리스크·컴플라이언스 baseline이 AI 유스케이스는 안전하고 합법적인가?리스크 등급 분류 + 라이프사이클 승인 게이트

여덟 카테고리는 독립적이지 않다. 클라우드 축과 AI 축은 같은 논리를 서로 다른 대상에 적용한 짝이다. ①과 ⑤는 둘 다 “권한이 부착될 경계를 정의한다.” ②와 ⑥은 둘 다 “행위자에게 최소권한을 부여한다” — 다만 ②의 행위자는 사람과 서비스 계정이고 ⑥의 행위자는 자율적으로 의도를 생성하는 AI 에이전트라는 점이 다르다. ③과 ⑦은 둘 다 “가변 비용을 가시화하고 배분한다.” ④와 ⑧은 둘 다 “위험한 상태로의 전이를 사전에 막고 사후에 탐지한다.”

Part 3부터 10까지는 이 여덟 카테고리를 하나씩 심층적으로 다룬다. 각 파트는 같은 구조를 따른다 — 배경, 필요 지식, 표준 체계, 실무 적용 단계, 실전 패턴, 체크리스트, 흔한 함정. 클라우드 편에서 익힌 사고방식을 AI 편에 그대로 적용할 수 있도록 의도적으로 설계했다.

Part 2. 전체 아키텍처·통제 원리 — 클라우드와 AI가 공유하는 문법 2.1 계층 구조 + 정책 상속의 공통 원리

클라우드 3사는 모두 위에서 아래로 상속되는 계층 구조 위에 정책을 붙인다. AWS는 Organization 아래 OU를, Azure는 Management Group 아래 Subscription을, GCP는 Organization 아래 Folder를 둔다. 상위 노드에 붙은 정책은 하위 노드 전체로 자동 전파된다.

AI 거버넌스도 같은 원리를 조직 계층에 적용한다. CAIO(Chief AI Officer)가 전사 AI 원칙을 정하고, 전사 AI 스티어링 커미티가 유스케이스 단위 승인 권한을 행사하며, 사업부는 그 원칙 안에서 개별 유스케이스를 운영한다. 클라우드의 “OU에 정책을 붙인다”가 AI에서는 “리스크 등급에 승인 게이트를 붙인다”로 반복된다 — 계층은 조직도가 아니라 정책이 실제로 필요한 경계를 기준으로 그어야 한다는 원칙도 그대로 적용된다.

2.2 예방(Preventive)형과 탐지(Detective)형 통제
디지털 인프라 거버넌스 비교표
유형클라우드 구현AI 구현
예방(Preventive)SCP, Azure Policy(Deny), GCP Org Policy — 위반 행위를 API 레벨에서 차단PoC 진입 전 AIIA(AI Impact Assessment), 본번화 승인 게이트 — 리스크가 확인되지 않으면 다음 단계로 진행 불가
탐지(Detective)AWS Config Rules, CSPM — 비준수 리소스를 지속 스캔운용 단계 모니터링 대시보드, 정기 내부감사 — 이상 징후·인시던트를 사후 포착

두 유형은 클라우드에서든 AI에서든 함께 써야 한다. 예방형만 있으면 사전에 예측하지 못한 시나리오에 무방비해지고, 탐지형만 있으면 사고를 막지 못하고 뒷수습만 하게 된다.

2.3 롤아웃의 공통 패턴 — 단계적 강제

클라우드와 AI 모두 동일한 롤아웃 원칙을 따른다. 처음부터 전면 강제하지 말고, 작게 시작해 검증한 뒤 넓혀라.

디지털 인프라 거버넌스 비교표
단계클라우드(Audit → Enforce)AI(파일럿 → 전사 전개)
1단계Audit 모드로 기존 리소스의 비준수 현황을 먼저 스캔이미 그 도구를 쓰던 사용자(섀도 이용자)를 정규화해 소규모 파일럿 구성
2단계예외 목록 설계 — 정당한 이유로 정책을 지킬 수 없는 리소스 유형 파악파일럿에서 예산·지식·거버넌스 체계를 동시에 검증
3단계신뢰도 높은 정책부터 Enforce(차단) 모드로 전환전사 공지와 동시에 지원 채널·입문 설명회·보안 설명회를 함께 배포
4단계신규 리소스는 즉시 준수, 기존 리소스는 비동기 마이그레이션리스크 등급에 따라 일반 승인과 이중 승인(CAIO+스티어링 커미티)을 구분 적용

이 대칭을 처음 배치하는 이유는 단순하다. 클라우드 정책 롤아웃을 이미 운영해 본 팀은 AI 롤아웃에서도 같은 실수를 피할 수 있다 — 감사 없이 곧바로 강제하면 사고가 나고, 예외 설계 없이 전면 적용하면 정당한 사용까지 막힌다.

2.4 멀티클라우드·멀티벤더의 구조적 한계

AWS·Azure·GCP는 각자의 클라우드만 본다. AWS Config는 Azure 리소스를 모르고, Azure Policy는 GCP 프로젝트를 보지 못한다. AI에서도 같은 문제가 반복된다 — 사내에서 Claude·Gemini·ChatGPT를 동시에 쓰면, 벤더마다 다른 로그 형식·권한 모델·감사 API를 개별적으로 통합해야 한다.

  • 재무 영역의 해법: 클라우드는 FOCUS(FinOps Open Cost and Usage Specification)가, AI는 FinOps Foundation의 “FinOps for AI” Technology Category가 여러 벤더의 비용 데이터를 정규화하는 표준으로 이 공백을 메운다.

  • 보안/컴플라이언스 영역의 해법: 클라우드는 CSPM이, AI는 AI 자산 거버넌스 카탈로그(MCP Gateway and Registry 등)가 여러 벤더의 설정·자산 상태를 하나의 대시보드로 통합한다.

  • 계정/권한 영역의 해법: 아직 업계 전체를 아우르는 공개 표준이 없다. 조직이 자체적으로 중앙 IdP(클라우드)와 Agent Identity 플랫폼(AI)을 통해 통합해야 한다.

CITATIONS · PRIMARY FIRST

이 챕터의 출처

  1. 01
  2. 02
  3. 03
  4. 04
    FinOps FrameworkFinOps Foundation
  5. 05
    NIST AI Risk Management Framework 1.0National Institute of Standards and Technology