Google의 새로운 Gemini 모델은 '거의 완벽한 재현율'을 달성했습니다.
회사는 Gemini 1.5 제품군에서 세 가지 실험 모델을 출시했습니다. 개선된 사항은 다음과 같습니다.
Google은 가장 강력한 AI 모델 제품군인 Gemini 1.5를 새로운 변형으로 확장하고 있습니다.
화요일에 Google AI Studio 제품 책임자인 Logan Kilpatrick은 회사가 Gemini의 세 가지 새로운 실험 버전을 출시했다고 X에서 공유했습니다. 더 작은 모델인 Gemini 1.5 Flash-8B; "더 강력해진" Gemini 1.5 Pro 모델; 그리고 "획기적으로 개선된" Gemini 1.5 Flash도 있습니다.
오늘 우리는 세 가지 실험 모델을 출시합니다.
- 새로운 소형 변형인 Gemini 1.5 Flash-8B
- 더 강력한 Gemini 1.5 Pro 모델(코딩 및 복잡한 프롬프트에 더 좋음)
- 크게 개선된 Gemini 1.5 플래시 모델
https://t.co/fBrh6UGKz7에서 사용해 보세요. 자세한 내용은 🧵
Kilpatrick은 Google이 "피드백을 수집하고 최신 업데이트를 개발자의 손에 제공하기 위해 실험적인 모델을 출시하고 있다"고 설명했습니다.
첫 번째 모델인 1.5 Flash-8B는 새로운 1.5 Flash 모델의 80억 매개변수 버전이며 "대용량 다중 모드 사용 사례부터 긴 컨텍스트 요약 작업까지 모든 것"에 사용할 수 있다고 Kilpatrick은 X 스레드에서 언급했습니다. .
Pro의 새 버전에는 수학, 복잡한 프롬프트 및 코딩이 개선되었으며, 새 Flash는 이제 특정 내부 벤치마크에서 더 나은 성능을 발휘합니다. Kilpatrick은 Gemini 1.5 Pro Exp 0827(출시일 8월 27일)이 마지막 출시 모델인 0801을 대체할 것이라고 말했습니다. 9월 3일부터 0801은 Gemini API에서 0827 모델로 경로가 변경됩니다.
출시 직후 최신 Gemini 1.5 Pro는 Chatbot Arena에서 전체 2위와 Flash 6위를 차지하여 각각 GPT-4o 및 GPT-4o mini와 맞먹는 수준을 유지했습니다. 두 모델은 Claude 3.5 Sonnet, Grok 2, Grok 2 mini 및 Llama 3.1을 이겼습니다.
Chatbot Arena 업데이트⚡!
최신 Gemini(Pro/Flash/Flash-9b) 결과가 이제 실시간으로 공개되었으며 20,000개가 넘는 커뮤니티 투표가 이루어졌습니다!
하이라이트:
- 새로운 Gemini-1.5-Flash(0827) 제작 큰 도약, 전체 23위에서 6위로 상승!
- 새로운 Gemini-1.5-Pro(0827)는 코딩, 수학 부문에서 강력한 향상을 보여줍니다… https://t.co/6j6EiSyy41 pic.twitter.com/ D3XpU0Xiw2
실험 모델은 매우 긴 컨텍스트 창을 처리하도록 고안된 Gemini 1.5 제품군에 합류합니다. 이달 초 기술 보고서에서 DeepMind 팀은 Gemini 1.5가 "전체 문서 모음, 여러 시간의 비디오 및 거의 5일간의 오디오입니다."
팀은 이러한 새로운 릴리스가 Claude 3.0의 200,000개 및 GPT-4 Turbo의 128,000개 토큰과 비교하여 "최소 1000만 개 토큰까지 거의 완벽에 가까운 검색(>99%)"이라는 모델의 추세를 이어가고 있다고 덧붙였습니다.
보고서는 또한 잠재적인 사용 사례를 언급하면서 전문가가 10가지 직업 범주에 걸쳐 작업에서 시간을 최대 75% 절약할 수 있도록 도와주는 Gemini 1.5의 능력과 놀라운 "프론티어" 기술 중 하나를 언급했습니다. 전 세계적으로 200명 미만의 사용자가 있는 언어를 사용하는 모델은 동일한 콘텐츠에서 배운 사람과 비슷한 수준으로 영어를 칼라망으로 번역하는 방법을 학습합니다."라고 보고서는 지적합니다.
그러나 실험 모델에 대한 반응은 엇갈렸습니다. 일부 사용자는 Google의 빠른 릴리스를 칭찬하는 반면 다른 사용자는 감동하지 않고 대신 Gemini 2.0 릴리스를 요청했습니다. 한 X 사용자가 벤치마크에 대해 물었을 때 Kilpatrick은 회사가 "앞으로 몇 주 내에 평가판과 함께 제공될" 프로덕션용 버전을 출시할 계획이라고 대답했습니다.
사용자는 오늘 Google AI Studio와 Gemini API에서 세 가지 모델을 모두 무료로 테스트할 수 있습니다.
