IBM, AI모델 성능 손실없이 33% 압축하는 `ZipNN` 공개

기술 대기업 IBM이 AI모델의 성능 저하 없이 저장 비용을 절감하고 전송 속도를 높일 수 있는 무료 오픈소스 도구 'ZipNN'을 출시했다. 기존의 모델 일부를 제거하거나 변경하는 방식과 달리, ZipNN은 무손실 압축 방식을 사용해 반복되는 패턴을 제거하고 필요할 때 정확히 복원한다. 컴퓨터의 ZIP 파일과 유사한 이 기술은 저장 비용을 33% 절감하고 전송 속도를 최대 150% 향상시킬 수 있어, 대규모 AI 모델을 저장하거나 이동해야 하는 기업과 연구자들에게 큰 이점이 될 전망이다.

MIT와 텔아비브 대학 등과 협력한 IBM 연구진은 AI 모델 데이터의 일부인 '지수(exponents)'가 예측 가능한 패턴을 따른다는 사실을 발견했다. 이 지수는 AI 모델에서 정보를 저장하는 데 사용되는 부동소수점 숫자의 일부다. 256개의 가능한 값 중 단 12개가 거의 모든 데이터를 구성한다는 점이 특징이다. ZipNN은 이러한 예측 가능한 지수를 더 무작위적인 부분과 분리하고 허프만 인코...............................................................................................................................................................................................................................................................................................................................................................................................................................................................................................................................................