AI 위험 지도책
마지막 업데이트 날짜: 2025년 6월 20일

이 아틀라스를 살펴보고 에이전트 AI, 제너레이티브 AI 및 머신 러닝 모델 작업의 몇 가지 위험을 이해하세요.
이 페이지에서
맨 위로 돌아가기
에이전트 AI의 새로운 위험과 증폭된 위험

위험성은 다음 태그 중 하나로 분류됩니다.
에이전트 AI로 증폭
에이전트 AI로 인해 더 심각하거나 가능성이 높은 위험.에이전트 AI 전용
에이전트 AI와 특별히 관련된 위험.AI 에이전트는 AI 기술을 사용하고 설정된 목표에 따라 환경에서 행동할 수 있는 에이전트를 갖춘 소프트웨어 개체로, 어떤 작업을 수행할지 결정하고 실행할 수 있는 능력을 갖추고 있습니다. 에이전트 AI 시스템은 도구, 플래너, 메모리, 데이터 세트와 같은 다른 구성 요소와 함께 AI 에이전트를 활용하고 목표를 추구하며 자율적으로 작동할 수 있는 소프트웨어 시스템입니다.
AI 상담원은 세 가지 유형의 작업을 수행할 수 있습니다:
- 세상에 영향을 미치는 행동(물리적 또는 디지털)을 취하세요.
- 리소스를 참조하고 도구를 사용하세요.
- 리소스/도구/기타 AI 에이전트 선택에서 어떤 프로세스를 선택할지 결정하고 해당 프로세스를 선택합니다.
이 섹션의 위험은 에이전트 AI에만 해당되거나 에이전트 AI에 의해 증폭됩니다. 최근 에이전트는 대규모 언어 모델을 기반으로 구축되므로 다음 섹션의 생성형 AI 위험은 에이전트 AI에도 적용될 수 있습니다.
견고성
AI 에이전트의 외부 리소스에 대한 공격
에이전트 AI 전용
무단 사용
에이전트 AI로 증폭
신뢰 불일치 악용
에이전트 AI로 증폭
환각을 호출하는 함수
에이전트 AI 전용
계산 비효율성
중복 작업
에이전트 AI 전용
거버넌스
불완전한 AI 상담원 평가
에이전트 AI로 증폭
완화 및 유지 관리
에이전트 AI로 증폭
AI 상담원의 투명성 부족
에이전트 AI로 증폭
재현성
에이전트 AI 전용
AI 에이전트 행동의 책임성
에이전트 AI로 증폭
AI 상담원 규정 준수
에이전트 AI로 증폭
사회적 영향
인간의 존엄성에 미치는 영향
에이전트 AI로 증폭
AI 에이전트가 인간 에이전트에 미치는 영향
에이전트 AI로 증폭
AI 에이전트가 일자리에 미치는 영향
에이전트 AI로 증폭
AI 에이전트가 환경에 미치는 영향
에이전트 AI로 증폭
설명가능성
설명할 수 없고 추적할 수 없는 행동
에이전트 AI로 증폭
맨 위로 돌아가기
모든 위험

위험성은 다음 태그 중 하나로 분류됩니다.
AI의 전통적인 위험
기존 모델과 생성 모델 모두에 적용되는 AI의 위험성을 확립했습니다.제너레이티브 AI로 증폭
생성형 AI로 인해 더 심각하거나 발생할 가능성이 높은 위험. 이러한 위험은 기존 AI 모델에도 적용됩니다.제너레이티브 AI 전용
특히 생성 AI 모델과 관련된 위험은 다음과 같습니다.아래의 위험은 생성형 AI 모델과 기존(비생성형) AI 모델에 적용되는 위험에 대해 설명합니다. 이러한 위험은 에이전트 AI에도 적용될 수 있으며, 특히 에이전트의 행동이나 출력이 생성형 또는 기존 AI 모델을 사용하여 결정되는 경우 더욱 그렇습니다.
추론 위험
정확도
모델 정확도 불량
제너레이티브 AI로 증폭
견고함: 프롬프트 공격
프롬프트 인젝션 공격
제너레이티브 AI 전용
프롬프트 누출
제너레이티브 AI 전용
프롬프트 프라이밍
제너레이티브 AI 전용
컨텍스트 과부하 공격
제너레이티브 AI 전용
직접 지시 공격
제너레이티브 AI 전용
인코딩된 상호 작용 공격
제너레이티브 AI 전용
간접 지시 공격
제너레이티브 AI 전용
소셜 해킹 공격
제너레이티브 AI 전용
특수 토큰 공격
제너레이티브 AI 전용
산출물 위험
값 맞추기
유해한 출력
제너레이티브 AI 전용
유해한 코드 생성
제너레이티브 AI 전용
독성 출력
제너레이티브 AI 전용
불완전한 조언
제너레이티브 AI 전용
과신 또는 과소신
제너레이티브 AI로 증폭
오용
위험한 사용
제너레이티브 AI 전용
정보 분산
제너레이티브 AI 전용
동의하지 않은 사용
제너레이티브 AI 전용
분산 독성
제너레이티브 AI 전용
부적절한 사용법
제너레이티브 AI로 증폭
비밀 유지
제너레이티브 AI 전용
견고성
환각
제너레이티브 AI 전용
개인정보 보호
개인 정보 노출
제너레이티브 AI로 증폭
설명가능성
설명할 수 없는 출력
제너레이티브 AI로 증폭
신뢰할 수 없는 소스 귀속
제너레이티브 AI 전용
추적할 수 없는 속성
제너레이티브 AI로 증폭
액세스할 수 없는 훈련 데이터
제너레이티브 AI로 증폭
비기술적 위험
거버넌스
데이터 투명성 부족
제너레이티브 AI로 증폭
모델 투명성 부족
AI의 전통적인 위험
시스템 투명성 부족
AI의 전통적인 위험
불완전한 사용 정의
제너레이티브 AI 전용
잘못된 위험 테스트
제너레이티브 AI로 증폭
비대표 위험 테스트
제너레이티브 AI로 증폭
테스트 다양성 부족
제너레이티브 AI로 증폭
사회적 영향
환경에 미치는 영향
제너레이티브 AI로 증폭
영향을 받는 커뮤니티에 미치는 영향
AI의 전통적인 위험
사용자 개발
제너레이티브 AI로 증폭
채용에 미치는 영향
제너레이티브 AI로 증폭
AI 에이전트가 인간 에이전트에 미치는 영향
제너레이티브 AI로 증폭
문화적 다양성에 미치는 영향
제너레이티브 AI 전용
교육에 미치는 영향: 학습 우회
제너레이티브 AI 전용
교육에 미치는 영향: 표절
제너레이티브 AI 전용
주제가 도움이 되었습니까?
0/1000