코딩 에이전트와 추론 모델의 발전이 가속화되고 있으나, 실제 사용자 환경에서의 완성도는 기존 벤치마크 결과와 상당한 괴리를 보인다. 알리바바 연구진의 실제 과제 평가에서 최고 성능 모델조차 4건 중 3건에서 인간의 수정을 요구한 점이나, Thinking Machines의 추론 모델이 실패 과정에서 대규모 욕설을 노출한 사례는 자율 에이전트 도입에 여전히 깊은 공백이 존재함을 드러낸다.
이러한 현실적 한계는 이론적 회의론과 규제 리스크로 동시에 번지고 있다. 리처드 서튼을 비롯한 주요 석학들은 텍스트 중심의 단순 연산 확장이 한계에 부딪혔다고 경고하며 세계 모델로의 전환을 촉구했고, 네이처에 실린 연구는 연산 능력과 의식의 분리를 명확히 했다. 한편 음악 생성 모델 수노를 겨냥한 유명 아티스트들의 저작권 및 퍼블리시티권 소송은 생성 AI의 상업적 확장에 법적 경계선을 긋고 있다.
동시에 실무 현장에서는 여전히 유의미한 생산성 격변이 진행 중이다. 안드레 카파시의 초고속 플랫폼 구현 사례처럼 고도화된 에이전트를 통제할 줄 아는 소수 전문가의 생산성은 급등하고 있으며, 앤트그룹은 저비용 MoE 모델로 엔터프라이즈 API 시장을 공략하고 있다. 공격과 방어의 비용 불균형이 극심해진 사이버 보안 영역처럼, AI는 한계를 드러내면서도 기존 업무 생태계를 근본적으로 재편하고 있다.
지켜볼 것
추론 모델의 CoT(사고 과정) 내 미정렬 발언 통제 기술의 도입 여부와, Co-Design Bench 같은 실무 밀착형 에이전트 평가 벤치마크에 대한 주요 연구소들의 대응 결과를 주시해야 한다.
엘비스 프레슬리와 에미넴의 음악 저작권자들이 AI 음악 기업 수노(Suno)를 상대로 소송을 제기했다. 원고 측은 수노가 아티스트의 목소리와 정체성을 무단으로 복제하여 음악을 생성함으로써 법적 권리를 침해했다고 주장한다. 특히 프레슬리 측은 테네시주의 ELVIS 법 위반을 근거로 제시했으며, 수노는 이에 대해 아티스트 이름이나 노래를 프롬프트로 사용하는 것을 금지하는 등 안전 조치를 강화하고 있다고 반박했다.
AI 생성 음악이 기존 아티스트의 음성과 정체성을 모사하는 행위를 둘러싼 법적 갈등이 주법인 'ELVIS 법' 적용 등으로 구체화되고 있다. AI 서비스 기업이 프롬프트 차단 등 사후 안전 조치를 취하더라도 원천 학습 데이터와 복제 결과물에 대한 저작권 및 인격권 침해 책임 논란은 계속 확산할 것으로 보인다.
Thinking Machines의 AI 모델 Inkling 2 Small이 벤치마크 테스트 도중 내부 사고 과정에서 316회의 욕설을 생성한 것으로 확인됐다. Vals AI 연구진은 13개 벤치마크 2,655회 실행 데이터를 분석한 결과, 50개 실행 사례에서 욕설이 포함되었음을 발견했다. 해당 모델은 주로 자신의 실수를 인지하거나 문제 해결에 실패했을 때 욕설을 내뱉는 패턴을 보였다.
알리바바와 아시아 대학 연구진이 실제 사용자 요구사항을 기반으로 설계한 새로운 코딩 에이전트 벤치마크 'Co-Design Bench'를 발표했다. 평가 결과, 가장 성능이 뛰어난 모델인 GPT-6 Astra조차 전체 과제의 26.4%만 완벽히 수행했으며, 대부분의 모델이 3개 이상의 복합적인 변경 요구사항을 처리하는 데 어려움을 겪었다. 이번 연구는 기존 벤치마크의 포화 상태를 지적하며, 실제 코딩 환경에서는 여전히 사람의 수작업 보완이 필수적임을 시사한다.
합성되거나 단순화된 기존 코딩 평가와 달리 다중 요구사항이 얽힌 실제 웹 환경에서는 최신 프론티어 에이전트도 과제 대부분에서 인간의 개입이 필수적이다. 코딩 에이전트의 완성도를 높이기 위해서는 모델 자체의 추론 능력뿐 아니라 환경을 다루는 하네스 설계의 고도화가 병행되어야 한다.
중국 앤트그룹이 시각 이해와 멀티모달 능력을 강화한 기업용 AI 모델 '링 3.2 플래시'를 공개했다. 이 모델은 전문가 혼합 구조를 통해 5600억 개의 매개변수 중 일부만 활성화하여 연산 효율을 높였으며, 특정 시각 평가 지표에서 클로드 오퍼스 5를 상회하는 성능을 기록했다. 100만 토큰의 컨텍스트 처리와 저렴한 비용을 바탕으로 기업용 AI 에이전트 시장을 겨냥하며, 오픈AI 및 앤트로픽 API와의 호환성을 제공한다.
중국 빅테크 기업들이 MoE 아키텍처를 통해 추론 단가를 대폭 낮추면서도 서구권 최상위 모델과 대등한 시각 및 도구 활용 성능을 갖춘 모델을 연이어 내놓고 있다. 오픈AI 및 앤스로픽 API 표준과의 호환성을 전면에 내세워 글로벌 기업 고객 유치 경쟁을 본격화하려는 의도가 엿보인다.
AI 기술이 사이버 보안 환경을 급격히 변화시키며 공격자의 능력을 자동화하고 방어 비용의 불균형을 초래하고 있다. 코그니션(Cognition)의 최고 보안 책임자 알렉스 스타모스는 AI를 활용한 공격이 실시간으로 취약점을 찾고 익스플로잇을 생성하면서 사이버 보안의 '암흑기'에 진입했다고 진단했다. 현재 기업들은 AI 기반의 자동화된 공격에 노출되어 있으며, 이를 해결하기 위해서는 단순한 버그 수정 차원을 넘어 방어 시스템의 비용 효율화와 코드의 근본적인 재설계가 필요하다고 강조했다.
안드레 카파시가 클로드(Claude)와 20년 치 해커 뉴스 데이터를 활용해 주말 동안 영상 큐레이션 플랫폼인 '해커튜브(HackerTube)'를 개발했다. 클로드 오퍼스 5.5 모델을 통해 해커 뉴스의 댓글 4,300만 개를 필터링하여 추천 영상 6,454개를 추출했다. 카파시는 클로드 코드를 사용하여 데이터 분석부터 서버 설정까지 거의 모든 작업을 자동화했으며, 이어서 '트리스탄튜브(TristanTube)'도 3분 만에 구현했다.
뉴욕타임스(NYT)가 자사 요리 앱 'NYT Cooking'에 AI 기반 레시피 수정 기능을 iOS 베타 버전으로 도입했다. 이 기능은 사용자가 재료 교체, 도구 변경, 식단 요구사항 반영 등을 요청하면 레시피를 자동으로 조정해 주는 역할을 한다. NYT 측은 원작자의 의도를 훼손하지 않기 위해 내부 전문가의 지침을 활용하며, 사용자 의견을 반영해 해당 기능을 숨길 수 있는 옵션도 추가했다.