엔비디아, GPT-4와 경쟁하기 위해 오픈소스 LLM 출시

엔비디아는 OpenAI, Anthropic, Meta, Google의 주요 독점 모델과 동등한 성능을 발휘하는 오픈소스 대규모 언어 모델(LLM) 출시를 발표했습니다.

이 새로운 모델은 720억 개의 매개변수를 갖는 NVLM-D-72B로 명명되었으며, Nvidia가 최근 출시한 대규모 NVLM 1.0 언어 모델 제품군의 일부입니다. NVLM 1.0은 본질적으로 시각 언어 작업에서 최첨단 결과를 달성하는 대규모의 경계선상의 다중 모드 언어 모델 제품군으로, 주요 독점 모델(예: GPT-4o) 및 오픈 액세스 모델과 경쟁합니다.

이 새로운 대규모 언어 모델 제품군은 다양한 시각적 및 언어 작업에서 탁월한 성능을 보이는 "산업용 멀티모달 기능"을 갖추고 있을 뿐만 아니라 텍스트 기반 피드백을 크게 개선한다고 합니다. 엔비디아 연구진은 성명을 통해 "이를 달성하기 위해 우리는 다중 모달 학습 프로세스에 고품질의 텍스트 전용 데이터 세트를 만들고 통합했으며, 대량의 다중 모달 수학 및 추론 데이터도 함께 통합했습니다. 그 결과 여러 모달리티에 걸쳐 향상된 수학 및 코딩 기능이 구현되었습니다."라고 설명했습니다.

그 결과, 밈이 왜 재밌는지 설명하는 것과 같은 간단한 작업부터 복잡한 수학 방정식까지 단계별로 수행할 수 있는 고성능 LLM이 탄생했습니다. 엔비디아는 또한 멀티모달 학습 스타일 덕분에 업계 벤치마크보다 평균 4.3포인트 높은 텍스트 전용 모델의 정확도를 달성했습니다.

엔비디아는 이 모델이 오픈 소스 이니셔티브의 최신 "오픈 소스" 정의를 충족하도록 하는 데 진지한 것으로 보입니다. 커뮤니티 검토를 위해 훈련 가중치를 공개할 뿐만 아니라 가까운 미래에 모델의 소스 코드를 공개하겠다고 약속했습니다. 이는 LLM 모델의 가중치와 소스 코드에 대한 세부 정보를 비공개로 유지하는 것에 대해 입을 다물고 있는 OpenAI와 Google과 같은 경쟁사의 접근 방식과 크게 다릅니다. 이를 통해 Nvidia는 NVLM을 ChatGPT-4o 및 Gemini 1.5 Pro의 직접적인 경쟁자로 포지셔닝하지 않고, 대신 타사 개발자가 자체 챗봇과 AI 애플리케이션을 구축할 수 있는 플랫폼으로 포지셔닝했습니다.