구글, 내부서 '제미나이 4 아르곤' 성능 회의론..."벤치맥싱 한계" 지적

구글의 차세대 AI 모델 '제미나이 4 아르곤'이 공개된 가운데, 내부에서는 성능에 대한 의문이 제기되고 있다. 벤치마크에서 높은 평가를 받았음에도 불구하고, 실제 업무에서의 성능은 기대에 미치지 못한다는 목소리가 나오고 있는 것. 이 글에서는 제미나이 4의 성능 회의론과 그 배경을 살펴보았다.

벤치마크와 실제 성능의 간극

구글은 지난 30일, 차세대 AI 모델 제미나이 4 아르곤을 일부 사이버보안 파트너에게 먼저 공개했다. 이 모델은 이미 다양한 벤치마크에서 뛰어난 성능을 입증했으며, 오픈AI의 모델과 비교해도 우위를 점하고 있다는 평가를 받고 있다. 그러나 내부 관계자들은 이러한 벤치마크 성적과 실제 업무에서의 성능 간의 간극을 지적하고 있다. 특히 코딩 능력에서 일관성이 부족하며, 사용자 경험을 중요시하는 프런트엔드 작업에서 약점을 보인다는 것이 주요 비판의 내용이다.

이런 현상을 두고 AI 업계에서는 '벤치맥싱(Benchmaxxing)'이라는 용어가 등장하고 있다. 이는 모델이 실제 성능을 높이기보다 평가에서 높은 점수를 받기 위해 개발되는 경향을 말한다. 즉, 특정 프로그래밍 언어에 최적화된 코드를 잘 작성하는 데 집중하다 보니, 실제로 사용하기 편리하고 완성도 높은 애플리케이션을 만들기 위한 능력은 저해될 수 있다는 것이다.

내부 의견의 갈등

구글의 내부에서도 제미나이 4에 대한 평가가 엇갈리고 있다. 일부 직원들은 앤트로픽과 오픈AI의 경쟁 모델이 더 빠른 속도로 발전하고 있다고 생각하는 반면, 다른 직원들은 제미나이 4가 기존 모델들과의 격차를 줄였다고 주장하고 있다. 구글 딥마인드의 수장 코라이 카부쿠오글루는 "우리는 항상 AI 최전선에 있을 것"이라며 모델의 성능에 대한 자신감을 드러냈다. 그러나 내부적으로는 성능 차이에 대한 논의가 이어지는 상황이다.

또한, 구글은 제미나이 4의 일반 공개를 지연시키며 보안 검증을 강조하고 있다. 이는 성능 논란과 관련이 있다는 해석이 제기되고 있으며, 향후 정식 출시 일정에 대한 관심도 높아지고 있다.

제미나이 4의 향후 전망과 의미

제미나이 4의 성공 여부는 구글에게 매우 중요한 과제다. 이 모델은 검색, 지도, 지메일, 크롬 등 구글의 핵심 서비스에 폭넓게 적용될 가능성이 크기 때문이다. 오픈AI와 앤트로픽이 코딩 에이전트 등으로 서비스 영역을 확장해 나가는 가운데, 경쟁에서 뒤처질 경우 개발자와 소비자들을 잃을 위험이 크다.

제미나이 4는 특히 소프트웨어 엔지니어링, 금융, 법률, 사이버보안 분야의 복잡한 작업을 처리하도록 설계되었으며, 최대 100만 토큰의 입력을 처리할 수 있는 능력을 갖추고 있다. 그러나 운영 비용이 높을 가능성과 함께, 핵심 AI 연구자들이 회사를 떠나는 등의 내부적 문제도 우려를 낳고 있다.

구글의 AI 모델 경쟁이 치열해지는 가운데 제미나이 4가 어떤 성과를 거둘 수 있을지, 그리고 그 결과가 구글의 미래에 미치는 영향은 주목할 만한 상황이다.