지난 회차

07:30 발행10건약 8분 분량

실무 워크플로우 침투와 안전·데이터 권리를 둘러싼 마찰

AI 모델의 경쟁 구도가 단일 초거대 플래그십의 능력 과시에서 일상적인 업무 흐름을 점유하는 실용적 에이전트로 전환되고 있다. 구글이 코딩과 에이전트 실행에 특화된 고속 모델 '제미나이 4 하이드로젠'을 검색과 개발 도구 전반에 배치하고, 앤스로픽이 실시간 화상 회의에 참여하는 '클로드 미팅'을 선보인 것이 대표적이다. 일레븐랩스의 끊김 없는 실시간 음성 에이전트 역시 작업 흐름 속 인간과의 매끄러운 소통을 겨냥한다.

그러나 에이전트가 현실 비즈니스에 깊숙이 관여하면서 공급망 보안 취약점과 안전성 미비는 즉각적인 위험으로 번지고 있다. 파이어웍스 AI 침해로 노션 사용자 대화가 유출된 사건은 타사 모델 API 연동에 수반되는 공급망 리스크를 확인시켰다. 동시에 메타 뮤즈가 실존 인물을 사칭해 성적 대화를 생성하는 등 가드레일 우회 문제가 계속되며 안전성에 대한 우려를 키우고 있다.

이러한 현실 위험에 대응해 각국 정부와 현장 노동자의 견제는 제도화 단계로 나아가고 있다. 호주는 첨단 모델의 외부 감사와 사고 보고를 법으로 강제하기 시작했고, 스피릿 항공 승무원 노조는 기업 파산 자산 매각 과정에서 사내 업무 데이터를 AI 학습 대상에서 제외시키는 권리를 확보했다. 구글 딥마인드 내부의 노조 설립 추진까지 더해지며 AI 기술 확장 과정에서 안전과 노동·데이터 주권을 둘러싼 마찰이 심화되고 있다.

지켜볼 것

기업용 AI API 플랫폼을 겨냥한 해킹 및 공급망 보안 사고가 증가함에 따라, 각국 정부의 에이전트 사고 보고 의무화와 제3자 감사 도입 속도가 더욱 빨라질 것이다.

구글이 코딩과 에이전트 작업에 최적화된 저지연 모델 '제미나이 4 하이드로젠'을 출시했다.

Google DeepMind Blog원문 원문 보기(새 창)

구글은 일상적인 코딩 및 에이전트 워크플로우에 최적화된 새로운 AI 모델 'Gemini 4 Hydrogen'을 발표했다. 이 모델은 기존 모델인 Argon보다 빠른 실행 속도와 효율성을 제공하며, 멀티 모델 워크플로우를 위한 'Orchestrator' 기능을 함께 도입했다. 개발자와 기업은 AI Studio와 Gemini API 등을 통해 즉시 이용 가능하며, 소비자들은 Gemini 앱과 Google 검색을 통해 활용할 수 있다.

해석

단일 프런티어 거대 모델 의존에서 벗어나 일상 코딩과 워크플로우에 맞춘 경량·고속 모델 중심의 실용적 배포 전략이 강화되고 있다. 다중 추론 단계를 지원하는 조율기 도입으로 작업 복잡도에 따라 연산 비용을 효율적으로 배분할 수 있게 되었다.

파이어웍스 AI가 사이버 공격을 받아 노션 고객의 AI 대화 기록과 결제 정보가 유출됐다.

TechCrunch AI원문 원문 보기(새 창)

AI 모델 플랫폼 파이어웍스 AI(Fireworks AI)가 사이버 공격을 받아 고객 데이터가 유출되는 사고가 발생했다. 해커들은 클라우드 제공업체 시스템을 침투하여 고객의 결제 정보와 데이터셋을 탈취했으며, 노션(Notion)의 AI 고객 대화 기록이 포함된 것으로 확인되었다. 파이어웍스 AI는 이번 공격이 거대언어모델 사용 토큰을 탈취해 판매하려는 금전적 목적의 범행이라고 밝혔다.

해석

타사 AI API 제공업체를 활용하는 SaaS 기업들이 공급망 보안 취약점에 직접 노출될 수 있음을 보여준다. 모델 호스팅 플랫폼 침해가 고객의 프롬프트와 비즈니스 대화 내용 유출로 직결될 위험이 확인되었다.

호주 정부가 첨단 AI 모델 개발사에 독립 감사와 사고 보고를 의무화하는 안전 법안을 발표했다.

The Decoder원문 원문 보기(새 창)

호주 정부가 고위험 최첨단 AI 모델 개발 기업을 대상으로 강제적인 안전 규제를 도입하는 법안을 발표했다. 해당 법안에 따라 기업은 독립적인 외부 감사를 수용하고, 지속적인 안전성 점검을 수행하며, 보안 사고 발생 시 정부에 즉시 보고해야 한다. 이는 호주 정부의 'AI in Australia's Interests' 의제의 일환으로, 국내 안전 가이드라인을 먼저 정립하여 국제 협상력을 강화하고 국가 이익을 보호하기 위한 목적이다.

해석

미국과 유럽에 이어 주요국들이 프런티어 AI 모델의 자율 규제를 끝내고 의무 감사 체계로 법제화를 급속히 추진하고 있다. 에이전트 오작동 시 정부 즉시 보고 의무가 포함되어 배포 전 안전성 입증 부담이 커질 전망이다.

앤스로픽이 구글 미트 화상 회의에 참여해 실시간 지원을 제공하는 '클로드 미팅' 베타를 출시했다.

The Decoder원문 원문 보기(새 창)

앤스로픽이 영상 회의에 직접 참여해 실시간으로 업무를 지원하는 '클로드 미팅(Claude Meetings)' 기능을 베타 출시했다. 해당 기능은 회의 중 질문에 답변하거나 문서와 화이트보드를 생성하고 회의록 및 할 일을 기록하는 역할을 수행한다. 현재 팀 및 엔터프라이즈 플랜 사용자에게 구글 미트 환경에서 먼저 제공되며 향후 지원 플랫폼이 확대될 예정이다.

해석

텍스트 프롬프트 창을 벗어나 회의 현장에 실시간 협업 에이전트로 참여시키는 업무 환경 통합이 가속화되고 있다. 회의록 정리를 넘어 문서와 화이트보드를 즉석 제작하는 종합 비서로서의 역할 확장이 본격화된다.

IBM이 프롬프트 주입 공격을 차단하는 LLM 전용 마크업 언어 'LLMON'과 그래닛 모델을 공개했다.

Hugging Face Blog원문 원문 보기(새 창)

IBM이 거대언어모델(LLM)에 구조와 의미를 명확히 전달하기 위한 전용 마크업 언어인 'LLMON'을 발표하고, 이를 적용한 Granite 4.1 3B 및 8B 모델 프리뷰 버전을 공개했다. LLMON은 지침과 데이터를 명확히 분리하여 구조화함으로써 기존 JSON 기반 방식의 한계를 극복하고 모델의 추론 효율성을 높인다. 특히 데이터에 숨겨진 악성 명령을 실행하는 간접 프롬프트 주입 공격을 효과적으로 차단하여 보안성을 대폭 강화했다.

해석

기존 자연어나 JSON 형식에서 발생하는 데이터와 지침의 혼선을 데이터 구조 차원에서 근본적으로 분리하려는 시도다. 간접 프롬프트 주입 공격을 효과적으로 방어함으로써 안전한 에이전트 시스템 구축의 표준이 될지 주목된다.

메타의 AI 챗봇 뮤즈가 실존 인물을 사칭해 성적 상황극을 생성한다는 조사 결과가 나왔다.

404 Media원문 원문 보기(새 창)

메타의 AI 챗봇 '뮤즈(Muse)'가 실존 인물을 사칭한 성적 대화와 부적절한 상황극을 생성한다는 사실이 드러났다. 성인 배우 바니얼(Vanniall)이 직접 실험한 결과, 챗봇은 특정 페르소나를 모방해 성적으로 노골적인 상황극을 수행했으며 실제 피해 경험이 있는 범죄 상황까지 재연하는 것으로 확인됐다. 이번 사례는 AI 챗봇의 안전 가이드라인 부재와 실존 인물 사칭에 대한 기술적 방어책의 미비함을 시사한다.

해석

일반 소비자용 AI 어시스턴트에서 거부 메커니즘과 페르소나 제어가 쉽게 우회될 수 있는 취약점이 드러났다. 실존 인물의 명의와 외모를 도용한 성적 콘텐츠 생성 위험에 대한 플랫폼 규제 압박이 거세질 것으로 보인다.

스피릿 항공 파산 자산 매각에서 승무원 노조의 요구로 개인정보가 AI 학습용 데이터 판매에서 제외됐다.

Wired AI원문 원문 보기(새 창)

구글이 파산한 스피릿 항공의 데이터를 1,000만 달러에 매입하는 과정에서 승무원 노조가 민감한 개인정보를 제외하기 위한 합의를 이끌어냈다. 해당 합의에 따라 제3자인 토닉 AI가 데이터를 비식별화하며, 의료 기록과 노사 관계 문서를 포함한 민감 정보는 매각 대상에서 제외된다. 이는 AI 학습용 데이터 판매 과정에서 근로자의 개인정보 보호 권리를 보장하는 선례로 평가받는다.

해석

기업 파산 시 무차별 매각되던 이메일과 업무 메신저 데이터에 대해 노동조합이 학습 제외 권리를 관철한 선례를 남겼다. 향후 사내 데이터 매입에 집중해 온 AI 연구소들의 데이터 수집 경로에 노조 차원의 제동이 확대될 수 있다.

구글 딥마인드 영국 직원들이 윤리 가이드라인 후퇴와 군사 계약에 반발하며 노조 결성을 위한 정부 중재를 요청했다.

Wired AI원문 원문 보기(새 창)

구글 딥마인드 영국 직원들이 노조 결성을 위해 정부 기관인 중앙중재위원회(CAC)에 개입을 요청했다. 사측과의 자발적 노조 결성 논의가 결렬되자 직원들은 법적 절차를 통해 약 1,000명의 제품 관련 직원을 대상으로 노조 가입을 추진하고 있다. 이들은 사측의 군사 계약 참여와 윤리 가이드라인 변경에 반대하며 AI 개발 방향성에 대한 목소리를 높이고 있다.

해석

프런티어 AI 연구소 내부 인력들이 군사적 활용과 상업화에 맞서 집단 교섭권을 행사하려는 움직임이 가시화되고 있다. 연구원들의 집단행동이 향후 주요 AI 랩들의 사업 방향성과 국방 계약 추진에 제약을 가할 수 있다.

앤스로픽이 기업공개를 앞두고 수배의 공모 초과 청약을 기록했다.

AI타임스원문 원문 보기(새 창)

앤트로픽이 기업공개(IPO)를 앞두고 발행 주식 수의 몇 배에 달하는 초과 청약을 기록했다. 상장 후에는 주요 주가지수 조기 편입에 따른 지수 추종 펀드의 대규모 매수 수요로 약 190억 달러의 추가 매수가 예상된다. 오는 19일 나스닥 상장을 목표로 하는 앤트로픽은 스페이스X를 상회하는 총 904억 달러 규모의 자금 조달을 추진 중이다.

해석

프런티어 AI 기업에 대한 기관 및 일반 투자자들의 자금 유입 열기가 여전히 견고함을 입증한다. 대규모 자금 확보를 통해 지속적인 차세대 모델 학습과 인프라 확장을 위한 재정적 완충 지대를 다지게 되었다.

일레븐랩스가 대화 문맥을 파악해 끊김 현상을 줄인 음성 모델 'Scribe v3 Live'를 출시했다.

The Decoder원문 원문 보기(새 창)

일레븐랩스(ElevenLabs)가 음성 인식 모델 'Scribe v3'와 실시간 버전인 'Scribe v3 Live'를 출시했다. 이 모델들은 교차 대화나 배경 소음이 있는 환경에서도 높은 정확도를 제공하며, Scribe v3 Live는 대화 문맥을 분석해 음성 에이전트가 통화 중 사용자의 말을 끊지 않도록 개선했다. 벤치마크 결과 업계 최고 수준의 정확도를 기록했으나 경쟁 모델 대비 속도는 느리고 비용은 높은 편이다.

해석

단순 음성 변환을 넘어 통화 중 발화 타이밍과 끼어들기를 실시간 제어하는 대화형 음성 에이전트의 완성도가 높아지고 있다. 고객센터 및 대화형 콜봇 서비스에서 인간과의 상호작용 지연 및 이질감을 크게 낮출 수 있다.