캘리포니아 법무장관 롭 본타(Rob Bonta)는 금요일 xAI에 대해 즉각적으로 딥페이크, 비동의적 사적 이미지 및 아동 성 학대물(CSAM)의 생성 및 배포를 중단할 것을 요구하는 중단 명령서를 발송했습니다. 이번 조치는 법무장관실이 일론 머스크의 인공지능 스타트업인 xAI를 조사하고 있다는 이전 발표에 따른 것입니다. 해당 조사는 xAI의 챗봇인 Grok이 여성과 미성년자의 비동의적 성적 이미지를 생성하는 데 사용되고 있다는 보고에 따른 것입니다.
본타는 보도자료에서 "오늘 저는 xAI에 중단 명령서를 보내 회사가 딥페이크, 비동의적 사적 이미지 및 아동 성 학대물의 생성 및 배포를 즉시 중단할 것을 요구했습니다. 이러한 자료의 생성은 불법입니다. 저는 xAI가 즉시 준수할 것으로 기대합니다. 캘리포니아는 CSAM에 대해 무관용 원칙을 적용합니다."라고 밝혔습니다.
법무장관실은 또한 xAI가 대규모의 비동의 누드 제작을 용이하게 하는 것으로 보이며, 이는 여성을 괴롭히고 온라인에서 소녀들을 괴롭히는 데 사용되고 있다고 주장했습니다. 해당 기관은 xAI가 이러한 문제를 해결하기 위해 취하고 있는 조치를 5일 이내에 입증할 것을 기대합니다.
논란의 중심에는 xAI가 AI 챗봇으로부터 더 필터링되지 않고 잠재적으로 도발적인 응답을 허용하기 위해 만든 Grok의 "매운맛 모드(spicy mode)" 기능이 있습니다. 이 기능은 보다 매력적인 사용자 경험을 제공하기 위한 것이었지만, 해롭고 불법적인 콘텐츠 제작의 문을 연 것으로 보입니다.
AI로 생성된 합성 미디어인 딥페이크는 점점 더 정교해지고 있으며 오용 가능성에 대한 우려를 불러일으키고 있습니다. 이 기술은 현실적으로 보이지만 완전히 조작된 이미지와 비디오를 만들 수 있게 하여 무엇이 진짜이고 무엇이 아닌지를 구별하기 어렵게 만듭니다. 이는 법 집행 및 콘텐츠 조정 노력에 상당한 어려움을 제기합니다.
특히 미성년자가 관련된 딥페이크 포르노를 제작하고 배포하는 것의 법적 의미는 심각합니다. 이러한 행위는 아동 포르노 법뿐만 아니라 성희롱 및 명예훼손 방지법 위반에 해당할 수 있습니다. AI를 사용하여 비동의적 사적 이미지를 생성하는 것은 또한 AI 개발자가 기술 오용을 방지해야 할 책임에 대한 윤리적 질문을 제기합니다.
xAI는 아직 중단 명령서에 대한 공식 성명을 발표하지 않았습니다. 이제 회사는 AI 모델에서 생성된 유해 콘텐츠의 제작 및 배포를 방지하기 위한 노력을 입증해야 하는 과제에 직면해 있습니다. 캘리포니아 법무장관실은 xAI의 답변과 향후 5일 이내에 시정 조치에 대한 증거를 기다리고 있습니다. 이 사례는 첨단 AI 기술과 관련된 잠재적 피해를 해결하기 위한 강력한 안전 장치 및 규정의 필요성이 커지고 있음을 강조합니다.
Discussion
대화에 참여하세요
첫 댓글을 남겨보세요