0 / 0

AI 위험 지도책

마지막 업데이트 날짜: 2025년 6월 20일
AI 위험 지도책
리스크 아틀라스 랜딩 페이지의 배경 이미지

이 아틀라스를 살펴보고 에이전트 AI, 제너레이티브 AI 및 머신 러닝 모델 작업의 몇 가지 위험을 이해하세요.

맨 위로 돌아가기

에이전트 AI의 새로운 위험과 증폭된 위험

에이전트 AI의 새롭고 증폭된 위험에 대한 배경 이미지

위험성은 다음 태그 중 하나로 분류됩니다.

에이전트 AI로 증폭
에이전트 AI로 인해 더 심각하거나 가능성이 높은 위험.
에이전트 AI 전용
에이전트 AI와 특별히 관련된 위험.

AI 에이전트는 AI 기술을 사용하고 설정된 목표에 따라 환경에서 행동할 수 있는 에이전트를 갖춘 소프트웨어 개체로, 어떤 작업을 수행할지 결정하고 실행할 수 있는 능력을 갖추고 있습니다. 에이전트 AI 시스템은 도구, 플래너, 메모리, 데이터 세트와 같은 다른 구성 요소와 함께 AI 에이전트를 활용하고 목표를 추구하며 자율적으로 작동할 수 있는 소프트웨어 시스템입니다.

AI 상담원은 세 가지 유형의 작업을 수행할 수 있습니다:

  • 세상에 영향을 미치는 행동(물리적 또는 디지털)을 취하세요.
  • 리소스를 참조하고 도구를 사용하세요.
  • 리소스/도구/기타 AI 에이전트 선택에서 어떤 프로세스를 선택할지 결정하고 해당 프로세스를 선택합니다.

이 섹션의 위험은 에이전트 AI에만 해당되거나 에이전트 AI에 의해 증폭됩니다. 최근 에이전트는 대규모 언어 모델을 기반으로 구축되므로 다음 섹션의 생성형 AI 위험은 에이전트 AI에도 적용될 수 있습니다.

공정성 공정성 위험을 나타내는 아이콘입니다.

공정성

차별적 행위
에이전트 AI로 증폭
데이터 편향성 도입
에이전트 AI로 증폭
개인정보 보호 개인정보 위험을 나타내는 아이콘입니다.

개인정보 보호

사용자와 IP/PI/기밀 정보 공유
에이전트 AI로 증폭
도구로 IP/PI/기밀 정보 공유
에이전트 AI 전용

값 맞추기

AI 에이전트에 대한 과잉 또는 과소 의존도
에이전트 AI로 증폭
잘못 정렬된 작업
에이전트 AI로 증폭
견고함 견고성 위험을 나타내는 아이콘입니다.

견고성

AI 에이전트의 외부 리소스에 대한 공격
에이전트 AI 전용
무단 사용
에이전트 AI로 증폭
신뢰 불일치 악용
에이전트 AI로 증폭
환각을 호출하는 함수
에이전트 AI 전용
계산 비효율성 계산 비효율성을 나타내는 아이콘입니다.

계산 비효율성

중복 작업
에이전트 AI 전용
거버넌스 거버넌스 리스크를 나타내는 아이콘입니다.

거버넌스

불완전한 AI 상담원 평가
에이전트 AI로 증폭
완화 및 유지 관리
에이전트 AI로 증폭
AI 상담원의 투명성 부족
에이전트 AI로 증폭
재현성
에이전트 AI 전용
AI 에이전트 행동의 책임성
에이전트 AI로 증폭
AI 상담원 규정 준수
에이전트 AI로 증폭
사회적 영향 사회적 영향 위험을 나타내는 아이콘입니다.

사회적 영향

인간의 존엄성에 미치는 영향
에이전트 AI로 증폭
AI 에이전트가 인간 에이전트에 미치는 영향
에이전트 AI로 증폭
AI 에이전트가 일자리에 미치는 영향
에이전트 AI로 증폭
AI 에이전트가 환경에 미치는 영향
에이전트 AI로 증폭
설명가능성 설명 가능성 위험을 나타내는 아이콘입니다.

설명가능성

설명할 수 없고 추적할 수 없는 행동
에이전트 AI로 증폭

위험성은 다음 태그 중 하나로 분류됩니다.

AI의 전통적인 위험
기존 모델과 생성 모델 모두에 적용되는 AI의 위험성을 확립했습니다.
제너레이티브 AI로 증폭
생성형 AI로 인해 더 심각하거나 발생할 가능성이 높은 위험. 이러한 위험은 기존 AI 모델에도 적용됩니다.
제너레이티브 AI 전용
특히 생성 AI 모델과 관련된 위험은 다음과 같습니다.

아래의 위험은 생성형 AI 모델과 기존(비생성형) AI 모델에 적용되는 위험에 대해 설명합니다. 이러한 위험은 에이전트 AI에도 적용될 수 있으며, 특히 에이전트의 행동이나 출력이 생성형 또는 기존 AI 모델을 사용하여 결정되는 경우 더욱 그렇습니다.

훈련 데이터 위험

정렬 정렬 위험을 나타내는 아이콘입니다.

정확도

대표할 수 없는 데이터
AI의 전통적인 위험
데이터 오염
제너레이티브 AI로 증폭
공정성 공정성 위험을 나타내는 아이콘입니다.

공정성

데이터 바이어스
제너레이티브 AI로 증폭

값 맞추기

부적절한 데이터 큐레이션
제너레이티브 AI로 증폭
부적절한 재교육
제너레이티브 AI로 증폭
견고함 견고성 위험을 나타내는 아이콘입니다.

견고성

데이터 중독
AI의 전통적인 위험
개인정보 보호 개인정보 위험을 나타내는 아이콘입니다.

개인정보 보호

데이터의 개인 정보
AI의 전통적인 위험
대한
AI의 전통적인 위험
데이터 개인정보 보호 권한 조정
제너레이티브 AI로 증폭
투명도 투명성 위험을 나타내는 아이콘입니다.

투명도

트레이닝 데이터 투명성 부족
제너레이티브 AI로 증폭
데이터 출처가 불확실함
제너레이티브 AI로 증폭
데이터 법률 데이터 법률 위험을 나타내는 아이콘입니다.

데이터 법률

데이터 수집 제한
제너레이티브 AI로 증폭
데이터 사용 제한
AI의 전통적인 위험
데이터 전송 제한
AI의 전통적인 위험
지적 재산 지적 재산권 위험을 나타내는 아이콘입니다.

지적 재산

데이터의 기밀 정보
제너레이티브 AI로 증폭
데이터 사용 권한 제한
제너레이티브 AI로 증폭

추론 위험

정렬 정렬 위험을 나타내는 아이콘입니다.

정확도

모델 정확도 불량
제너레이티브 AI로 증폭
견고함 견고성 위험을 나타내는 아이콘입니다.

견고성: 모델 동작 조작

공격 회피
제너레이티브 AI로 증폭
추출 공격
제너레이티브 AI로 증폭
탈옥
제너레이티브 AI 전용
지적 재산 지적 재산권 위험을 나타내는 아이콘입니다.

지적 재산

프롬프트의 IP 정보
제너레이티브 AI 전용
프롬프트의 기밀 데이터
제너레이티브 AI 전용
견고함 견고성 위험을 나타내는 아이콘입니다.

견고함: 프롬프트 공격

프롬프트 인젝션 공격
제너레이티브 AI 전용
프롬프트 누출
제너레이티브 AI 전용
프롬프트 프라이밍
제너레이티브 AI 전용
컨텍스트 과부하 공격
제너레이티브 AI 전용
직접 지시 공격
제너레이티브 AI 전용
인코딩된 상호 작용 공격
제너레이티브 AI 전용
간접 지시 공격
제너레이티브 AI 전용
소셜 해킹 공격
제너레이티브 AI 전용
특수 토큰 공격
제너레이티브 AI 전용
개인정보 보호 개인정보 위험을 나타내는 아이콘입니다.

개인정보 보호

프롬프트의 개인 정보
제너레이티브 AI 전용
속성 추론 공격
제너레이티브 AI로 증폭
멤버십 추론 공격
제너레이티브 AI로 증폭

산출물 위험

공정성 공정성 위험을 나타내는 아이콘입니다.

공정성

의사결정 편향성
AI의 전통적인 위험
출력 편향성
제너레이티브 AI 전용

값 맞추기

유해한 출력
제너레이티브 AI 전용
유해한 코드 생성
제너레이티브 AI 전용
독성 출력
제너레이티브 AI 전용
불완전한 조언
제너레이티브 AI 전용
과신 또는 과소신
제너레이티브 AI로 증폭
오용 오용 위험을 나타내는 아이콘입니다.

오용

위험한 사용
제너레이티브 AI 전용
정보 분산
제너레이티브 AI 전용
동의하지 않은 사용
제너레이티브 AI 전용
분산 독성
제너레이티브 AI 전용
부적절한 사용법
제너레이티브 AI로 증폭
비밀 유지
제너레이티브 AI 전용
견고함 견고성 위험을 나타내는 아이콘입니다.

견고성

환각
제너레이티브 AI 전용
개인정보 보호 개인정보 위험을 나타내는 아이콘입니다.

개인정보 보호

개인 정보 노출
제너레이티브 AI로 증폭
지적 재산 지적 재산권 위험을 나타내는 아이콘입니다.

지적 재산

저작권 침해
제너레이티브 AI 전용
기밀 정보 노출
제너레이티브 AI로 증폭
설명가능성 설명 가능성 위험을 나타내는 아이콘입니다.

설명가능성

설명할 수 없는 출력
제너레이티브 AI로 증폭
신뢰할 수 없는 소스 귀속
제너레이티브 AI 전용
추적할 수 없는 속성
제너레이티브 AI로 증폭
액세스할 수 없는 훈련 데이터
제너레이티브 AI로 증폭

비기술적 위험

거버넌스 거버넌스 리스크를 나타내는 아이콘입니다.

거버넌스

데이터 투명성 부족
제너레이티브 AI로 증폭
모델 투명성 부족
AI의 전통적인 위험
시스템 투명성 부족
AI의 전통적인 위험
불완전한 사용 정의
제너레이티브 AI 전용
잘못된 위험 테스트
제너레이티브 AI로 증폭
비대표 위험 테스트
제너레이티브 AI로 증폭
테스트 다양성 부족
제너레이티브 AI로 증폭
법률 준수 법률 준수 위험을 나타내는 아이콘입니다.

법률 준수

모델 사용 권한 제한
AI의 전통적인 위험
법적 책임
제너레이티브 AI로 증폭
생성된 콘텐츠 소유권 및 IP
제너레이티브 AI 전용
사회적 영향 사회적 영향 위험을 나타내는 아이콘입니다.

사회적 영향

환경에 미치는 영향
제너레이티브 AI로 증폭
영향을 받는 커뮤니티에 미치는 영향
AI의 전통적인 위험
사용자 개발
제너레이티브 AI로 증폭
채용에 미치는 영향
제너레이티브 AI로 증폭
AI 에이전트가 인간 에이전트에 미치는 영향
제너레이티브 AI로 증폭
문화적 다양성에 미치는 영향
제너레이티브 AI 전용
교육에 미치는 영향: 학습 우회
제너레이티브 AI 전용
교육에 미치는 영향: 표절
제너레이티브 AI 전용