알리바바그룹(NYSE:BABA)이 대규모 언어모델 학습 비용을 획기적으로 절감할 수 있는 '제로서치(ZEROSEARCH)' 프레임워크를 공개했다. 이는 AI 개발 비용 구조를 근본적으로 바꿀 수 있는 혁신적인 기술이다.
주요 내용 알리바바그룹은 소셜미디어 X를 통해 새로운 제로서치 기술로 AI 학습 비용을 최대 90%까지 절감할 수 있다고 발표했다. 이 프레임워크는 학습 과정에서 실제 검색엔진 API 호출 없이도 검색 행동을 시뮬레이션할 수 있게 한다.
알리바바의 기술 보고서에 따르면, 제로서치는 기존 검색 기반 AI 학습의 두 가지 주요 문제를 해결한다. 실제 검색엔진에서 나오는 문서 품질 통제 문제와, 수십만 건의 검색 요청이 필요한 강화학습 과정에서 발생하는 높은 API 비용 문제다.
이 프레임워크는 먼저 경량화된 지도 학습을 통해 대규모 언어모델을 유용한 문서와 노이즈 문서를 모두 생성하는 검색 모듈로 변환한다. 이후 강화학습 과정에서는 검색 시나리오의 난이도를 점진적으로 높이는 커............................................................................................................................................................................................................................................................................................................................................................................................................................................................................................................................................................