달파, 오픈AI의 ‘MLE-벤치’서 글로벌 최고 수준 에이전트 성능 입증

AI 에이전트 전문 기업인 달파가 오픈AI의 성능 평가 지표인 'MLE-벤치'에서 글로벌 최고 수준의 성과를 거둔 소식이 전해졌다. 달파의 대표 김도균은 7일, 자사의 AI 에이전트 '코브라 에이전트'가 MLE-벤치에서 79.11%라는 높은 점수를 기록했다고 발표했다. 이는 구글의 'CAIR MARS+'가 기록한 62.67%와 바이두의 'FM-Agent'의 64.44%를 크게 초과하는 성과로, 달파의 기술력이 다시 한번 입증된 셈이다.

MLE-벤치란 무엇인가?

MLE-벤치는 오픈AI가 개발한 AI 에이전트 성능 평가 기준으로, 실제 비즈니스 과제를 기반으로 한 75개의 문제를 통해 AI 에이전트의 자율적 문제 해결 능력을 평가한다. 이 벤치마크는 데이터 전처리부터 모델 학습, 최적화에 이르기까지 머신러닝 엔지니어링의 모든 과정을 스스로 수행해야 하는 높은 난이도를 자랑한다. 따라서 MLE-벤치는 AI 에이전트의 실제 활용 가능성을 가늠하는 중요한 지표로 자리 잡고 있다.

달파의 코브라 에이전트는 이 벤치마크에서 단순히 높은 점수를 기록한 것뿐만 아니라, 일부 과제에서는 인간 참가자의 1위 성과를 초과하는 등 놀라운 실적을 보여주었다. 이러한 성과는 달파의 독자적인 에이전트 프레임워크인 '코브라(Cobra)'가 자율 탐색 및 자기 개선 능력을 갖추고 있음을 명확히 증명하는 결과로 해석된다.

월드 모델을 통한 혁신

달파는 특히 '월드 모델'이라는 방법론을 활용하여 에이전트의 성능을 극대화했다. 월드 모델은 환경과 모델 간의 상호작용을 시뮬레이션하고, 이를 통해 미래의 결과를 예측하는 방식이다. 이러한 접근은 코브라 에이전트가 복잡한 비즈니스 환경에서도 효과적으로 문제를 해결할 수 있도록 도와준다. 달파는 곧 이와 관련된 연구 논문을 공개할 예정이다.

이외에도 달파는 AI 기술을 소비재 브랜드를 위한 '에이전틱 OS'의 고도화에 활용하고 있다. 에이전틱 OS는 기업 내부의 파편화된 데이터를 통합하여 AI 에이전트가 신상품 기획, 물류 최적화, 마케팅 실행까지 모든 과정을 자율적으로 수행할 수 있도록 돕는 시스템이다. 이는 소비재 산업의 업무 혁신을 가져올 것으로 기대된다.

미래 전망

김도균 달파 대표는 "이번 성과는 달파의 AI 에이전트가 글로벌 빅테크와 비교해도 손색없는, 세계 최고 수준의 실무 성과를 낼 수 있음을 보여준다"며, "이를 실제 소비재 산업 현장의 업무 혁신으로 연결하는 데 집중하겠다"고 밝혔다. 이러한 달파의 행보는 향후 AI 기술이 비즈니스 현장에서 더욱 널리 활용될 수 있는 기반을 다지는 데 기여할 것으로 보인다. AI 에이전트의 성능이 지속적으로 향상됨에 따라, 다양한 산업에서의 변화가 기대된다.