앤트로픽 "클로드 성능 저하는 '하네스' 때문...의도적으로 낮춘 적 없어"

앤트로픽, 클로드 성능 저하 논란의 진실 공개

최근 AI 모델 '클로드'의 성능 저하 문제가 개발자 커뮤니티에서 큰 논란을 일으키고 있다. 이와 관련해 앤트로픽은 공식 기술 보고서를 통해 문제를 인정하고, 그 원인과 해결책을 발표했다. 이번 사태는 특히 최신 모델인 '클로드 오퍼스 4.7'의 출시 이후 더욱 두드러지게 나타났으며, 많은 사용자들이 성능 저하와 관련된 우려를 제기해왔다.

하네스 변경이 원인

앤트로픽은 클로드의 성능 저하가 모델 자체의 문제가 아닌, 이를 둘러싼 제품 레이어의 변화, 즉 '하네스(harness)' 변경에서 비롯됐다고 설명했다. 개발팀은 "모델 성능을 의도적으로 낮춘 적은 없다"며, API 및 추론 계층에는 문제가 없음을 강조했다. 문제의 핵심은 기본 추론 강도의 설정 변경, 캐싱 로직의 버그, 응답 길이의 제한 세 가지로 압축된다.

우선, 기본 추론 강도 설정을 변경한 것이 주요 원인으로 지목됐다. 앤트로픽은 지난 3월 4일 UI의 지연 문제를 해결하기 위해 기본 추론 수준을 '높음'에서 '중간'으로 낮췄다. 이로 인해 복잡한 작업에서 성능이 저하되는 결과를 초래했다. 이어 3월 26일에는 캐싱 로직에서 발생한 버그로 인해 사고 기록이 잘못 처리되면서 모델이 단기 기억을 잃고 반복적이거나 맥락을 놓치는 문제가 발생했다. 마지막으로, 4월 16일 도입된 프롬프트 정책으로 응답 길이가 제한되면서 코딩 성능이 약 3% 감소하는 등 전반적인 품질 저하가 이어졌다.

문제 해결과 향후 계획

앤트로픽은 이러한 문제들을 모두 수정했다고 발표하며, 추론 강도 설정과 응답 길이 제한을 원상 복구했다. 또한, 캐싱 버그도 최신 버전에서 해결했다고 밝혔다. 이와 함께 이번 문제로 불편을 겪은 유료 사용자들에게는 사용 한도를 초기화하는 조치를 시행할 예정이다.

앤트로픽은 앞으로 유사한 문제가 발생하지 않도록 운영 체계를 강화할 계획이다. 이를 위해 내부 직원들이 실제 사용자와 유사한 환경에서 클로드를 사용하는 '도그푸딩(dogfooding)'을 확대하여 문제를 조기에 발견할 수 있도록 할 예정이다. 또한, 프롬프트 변경이 모델 성능에 미치는 영향을 정밀하게 검증하는 평가 시스템을 강화하고, 변경 사항을 추적하고 관리하는 도구도 개선할 방침이다.

개발자와의 소통 강화

앤트로픽은 이번 논란을 계기로 개발자 커뮤니티와의 소통을 더욱 강화하겠다고 밝혔다. X와 깃허브를 통해 제품 변경의 배경과 기술적 의사 결정을 보다 투명하게 공개할 예정이다. 앤트로픽은 "사용자들이 기대하는 수준의 성능을 제공하지 못한 점을 인정하며, 신뢰 회복에 집중하겠다"고 강조했다.

이번 사태는 AI 모델의 성능 저하가 단순한 기술적 결함에 그치지 않고, 사용자와의 신뢰 문제로까지 이어질 수 있음을 보여준다. 앤트로픽이 문제를 신속하고 투명하게 해결하고, 향후 개선점을 마련함으로써 사용자 신뢰를 회복할 수 있을지 주목된다. AI 기술이 발전함에 따라, 기업의 책임감 있는 대응이 더욱 중요해질 것으로 보인다.