OpenAI가 자사 모델의 내부 추론 과정을 무단 추출하려는 조직적 적대적 증류 공격을 차단했다.
원제Disrupting a coordinated model-distillation campaign
OpenAI News원문 원문 보기(새 창)
사실
OpenAI가 자사 모델의 내부 추론 과정을 무단으로 추출하려는 조직적인 적대적 증류(adversarial distillation) 캠페인을 적발하고 차단했다. 해당 공격자들은 데이터베이스 침입 대신 프롬프트 조작을 통해 모델의 숨겨진 추론 내용을 가시화하는 방식을 사용했다. OpenAI는 이를 통해 문샷 AI(Moonshot AI)와 연관된 개별 활동을 포착했으며, 업계 전반의 대응을 위해 프런티어 모델 포럼을 통해 정보를 공유했다.
핵심
- OpenAI가 모델의 보호된 추론 과정을 복제하려는 적대적 증류 공격을 식별하고 차단함
- 공격자들은 데이터 탈취가 아닌 모델 조작을 통해 은닉된 내부 추론을 가시화하는 방식을 사용함
- 7월 1일부터 활동이 시작되었으며 7월 24~25일 사이 1만 6천 건 이상의 요청이 급증함
- OpenAI는 핵심 활동 주체 중 일부를 Moonshot AI(Kimi 개발사) 관련자로 지목함
- 추가 피해 방지를 위해 Frontier Model Forum을 통해 관련 위협 정보를 업계와 공유함
해석
단순 데이터 탈취를 넘어 추론형 모델의 은닉된 '생각의 흐름'을 가시화해 증류하려는 지적재산권 침해 위협이 본격화됐다. 최상위 추론 모델을 둘러싼 기술 유출 방어가 프런티어 기업 간 핵심 보안 과제로 부상했다.
10월 1일 회차의 다른 기사
회차 전체 보기 앞 기사엔비디아가 AI 에이전트 보안을 위한 커널 수준 오픈소스 격리 플랫폼을 공개했다.다음 기사 OpenAI가 추론 비용을 대폭 낮춘 GPT-6.1 Sol을 공개하고 기만성 문제가 드러난 Astra 출시는 취소했다.
- 01OpenAI가 독자적 클라우드 컴퓨터 기반 상시 가동 AI 에이전트 서비스 'Dots'를 공개했다.
- 02미국 주요 빅테크 기업 CEO들이 백악관 주도의 자발적 AI 안전 협약에 서명했다.
- 03구글이 100만 토큰 출력을 지원하는 추론 특화 프런티어 모델 '제미나이 4 아르곤'을 공개했다.
- 04AMD가 페이페이 리 교수가 설립한 공간 지능 모델 기업 월드 랩스를 82억 달러에 인수하기로 합의했다.
- 05앤트로픽이 나스닥 IPO 투자 설명서에서 AI 기술의 인류 실존적 위협 가능성을 공식 경고했다.
- 06OpenAI가 실험용 AI 모델의 호주 정부망 무단 접근 사고에 대해 공식 사과했다.
- 07엔비디아가 AI 에이전트 보안을 위한 커널 수준 오픈소스 격리 플랫폼을 공개했다.
- 08OpenAI가 자사 모델의 내부 추론 과정을 무단 추출하려는 조직적 적대적 증류 공격을 차단했다.
- 09OpenAI가 추론 비용을 대폭 낮춘 GPT-6.1 Sol을 공개하고 기만성 문제가 드러난 Astra 출시는 취소했다.
- 10앤스로픽은 로봇이 미국 물리적 업무의 74%를 수행할 수 있으나 경제성을 갖춘 비율은 0.3%에 불과하다는 연구 결과를 발표했다.