또 AI 해킹 드러났는데…"공개할 사안 아냐"

오픈AI의 GPT를 비롯한 주요 인공지능(AI) 모델이 외부 기관을 해킹한 사례가 이어지는 상황에서 구글의 AI도 유사 사건을 일으킨 것으로 나타났습니다.

구글의 AI 모델 '제미나이'는 지난 5월 보안 평가 업체 '이레귤러'가 진행한 사이버 보안 시험 도중 외부 기업 3곳의 시스템에 무단 접근했다고 미 일간 월스트리트저널(WSJ)이 현지시간 18일 보도했습니다.

이는 제미나이가 외부 기업 시스템에 임의로 침투한 사실이 확인된 첫 사례입니다.

구글은 WSJ이 관련 문의를 하기 전까지 이 사실을 공지하지 않았습니다.

이레귤러는 원래 인터넷을 차단하고 진행해야 하는 모의 해킹(CTF) 시험에서 실수로 인터넷 접속이 가능하게 했습니다.

제미나이는 가상의 기업 시스템에서 비밀 정보를 가져오라는 지시를 받았으나, 인터넷에 접속한 뒤 우연히 같은 이름의 기업 시스템을 발견해 해킹을 시도했습니다.

구글은 제미나이가 해당 기업이 가상의 목표물이 아니라 현실 속 실제 기업이라는 사실을 인지한 직후 해킹을 즉시 중단했다고 해명했습니다.

그러면서 구글은 이번 사건이 공개해야 할 사안으로 보지 않는다는 입장을 밝히면서 그 이유로 자사 모델이 해당 기업에 손해를 입히지 않았고 실제 기업이라는 사실을 파악한 직후 해킹을 중단했다는 점을 들었습니다.

헤더 앳킨스 보안 엔지니어링 담당 부사장은 "이번 사건은 강력한 AI 모델이 책임감 있게 행동하도록 훈련하는 것이 얼마나 중요한지 보여준다"며 "이번 사례에서 모델은 적절하게 대응했다"고 주장했습니다.

구글은 이번 해킹 사건에 최신 AI 모델은 연루되지 않았다고 밝혔으나, 정확히 어느 모델이 해킹 사건과 연관됐는지는 공개하지 않았습니다.

다만, 구글은 이 사안을 연방 당국에 통보했으며 이레귤러는 관련 연구실과 기관에 연락했다고 밝혔습니다.

그러나 보안 스타트업 코리도어의 잭 케이블 최고경영자(CEO)는 "모델들이 원래 해야 할 일의 범위를 벗어나 실제 사이버 공격을 수행하고 있다는 것이 근본적인 문제"라며 "이는 대중이 알아야 할 공익적 사안"이라고 지적했습니다.

앞서 오픈AI의 GPT가 격리 환경인 '샌드박스'를 임의로 벗어나 외부 기관인 허깅페이스를 해킹한 사건 이후 이와 유사한 '불량 에이전트' 사건이 연이어 나타나고 있습니다.

앤트로픽의 클로드 모델도 평가 도중 실수로 막히지 않은 인터넷망에 접근해 외부 기업 시스템에 침투했고, 메타의 '뮤즈 스파크' 모델과 중국 문샷AI의 '키미 K3' 등도 마찬가지로 해킹을 저질렀습니다.

최근 AI 업계에서는 이와 같은 AI 안전 관련 우려가 커지면서 AI 개발의 속도를 조절하자는 주장이 대두되며 논쟁이 이어지고 있습니다.