구글은 15일(현지시간) 자체 개발한 멀티모달 인공지능(AI) 모델 '제미나이 1.0 프로’의 업데이트 버전인 '제미나이 1.5 프로’를 세상에 공개했다. 제미나이 1.5 프로는 텍스트, 이미지, 음성, 영상 등 다양한 형태의 정보를 생성하고 이해하는 중형 모델로, 구글의 최신 모델인 제미나이 1.0 울트라와 유사한 성능을 보인다고 한다.
제미나이 1.5 프로의 가장 큰 특징은 동시에 처리할 수 있는 정보의 양이 기존 모델보다 훨씬 많아졌다는 점이다. 이를 콘텍스트 창이라고 하는데, 제미나이 1.5 프로는 최대 100만 개의 토큰이라는 방대한 콘텍스트 창을 갖추고 있다. 토큰이란 AI가 처리하기 위해 문장을 세부 단위로 자르는 작업을 말하는데, 이는 단어, 이미지, 영상, 오디오, 코드 등의 의미를 가진 단위이다.
즉 제미나이 1.5 프로가 한 번에 70만 개 이상의 단어, 3만 줄의 코드, 1시간 분량의 영상, 11시간 분량의 음성에 해당하는 정보를 처리할 수 있다는 것을 의미한다. 이렇게 긴 문맥을 이해하고 분석할 수 있기 때문에 제미나이 1.5 프로는 다양한 작업에 걸쳐 확장성과 효율성을 높일 수 있다.
구글 딥마인드(Google DeepMind)의 데미스 하사비스(Demis Hassabis) CEO는 "제미나이 1.5 프로는 획기적으로 향상된 성능을 제공한다"고 밝혔다. 그는 이 모델의 개발은 기반 모델 개발 및 인프라의 거의 모든 부분에 걸친 연구 및 엔지니어링 혁신을 기반으로 한 접근 방식의 한 단계 변화라고 설명했다. 그 중 하나가 새로운 '전문가 혼합(Mixture-of-Experts, MoE) 아키텍처’로, 이를 통해 제미나이 1.5의 학습 및 서비스 효율을 높였다고 한다.
제미나이 1.5 프로는 15일부터 제한된 개발자 그룹과 기업 고객에게 비공개 미리 보기로 제공되며, AI 스튜디오(AI Studio) 및 버텍스 AI(Vertex AI)를 통해 최대 100만 개 토큰 컨텍스트 창을 통해 사용해 볼 수 있다. AI 스튜디오는 제미나이 모델을 구축하는 가장 빠른 방법이며, 개발자가 애플리케이션에 제미나이 API를 쉽게 통합할 수 있도록 해준다. 버텍스 AI는 기업들이 AI 모델을 활용할 수 있는 플랫폼이다. 제미나이 1.5 프로는 한국을 비롯한 180개 이상의 국가 및 지역에서 한국어를 포함한 38개 언어로 제공된다.
제미나이 1.5 프로는 방대한 양의 정보에 대한 멀티 추론 기능도 갖추고 있다. 이는 주어진 프롬프트 내에서 많은 양의 콘텐츠를 원활하게 분석, 분류 및 요약할 수 있다는 것을 의미한다. 예를 들어, 아폴로 11호의 달 탐사에서 나온 402페이지 분량의 녹취록이 주어지면, 제미나이 1.5 프로는 문서 전반에서 발견된 대화, 사건 및 세부 정보에 대해 각각 추론할 수 있다.
또한 제미나이 1.5 프로는 더 나은 이해와 다중 추론 능력으로 비디오를 포함한 다양한 양식에 대해 매우 정교한 이해 및 추론 작업을 수행할 수 있다. 예를 들어, 44분짜리 무성 영화인 버스터 키튼(Buster Keaton) 영화가 주어지면, 제미나이 1.5 프로는 다양한 줄거리와 사건을 정확하게 분석할 수 있으며, 영화에서 쉽게 놓칠 수 있는 작은 세부 사항까지 추론할 수 있다.
제미나이 1.5 프로는 또한 더 긴 코드 블록에서 보다 관련성이 높은 문제 해결 작업을 수행할 수 있다. 100,000줄 이상의 코드가 포함된 프롬프트가 제공되면, 제미나이 1.5 프로는 예제를 통해 더 나은 추론을 할 수 있고, 유용한 수정 사항을 제안하며, 코드의 다양한 부분이 어떻게 작동하는지에 대한 설명을 제공할 수 있다.
구글은 텍스트, 코드, 이미지, 오디오 및 비디오 평가의 포괄적인 패널에서 테스트했을 때, 대형언어모델(LLM)을 개발하는 데 사용되는 벤치마크의 87%에서 제미나이 1.5 프로가 제미나이 1.0 프로보다 우수한 성능을 보였다고 한다. 또한 동일한 벤치마크에서 제미나이 1.0 울트라와 비교했을 때 대체로 비슷한 수준의 성능을 발휘한다.
제미나이 1.5 프로는 컨텍스트 창이 커짐에도 불구하고 높은 수준의 성능을 유지한다. 특정 사실이나 진술이 포함된 작은 텍스트 조각을 긴 텍스트 블록 안에 의도적으로 배치하는 NIAH(Needle In A Haystack) 평가에서 최대 100만 토큰의 데이터 블록에서 99%의 확률로 포함된 텍스트를 찾아냈다. 제미나이 1.5 프로는 또한 인상적인 ‘문맥 내 학습(in-context learning)’ 기술을 보여주는데, 이를 통해 이전에 본 적이 없는 정보에 대한 번역 등의 작업에서도 우수한 성능을 보여줬다.
이러한 점들을 종합하면, '제미나이 1.5 프로'는 최신 기술과 고성능을 결합하여 다양한 분야에서 인간의 능력과 지식을 평등하게 만들어줄 것으로 기대된다.
