OpenAI, 개발자가 새로운 AI 앱을 잠금 해제할 수 있도록 Vision이 포함된 GPT-4 Turbo 제공
예를 들어 GPT-4와 같은 다중 모드 모델은 텍스트와 이미지를 결합하여 AI 챗봇과 기타 AI 애플리케이션을 새로운 차원으로 끌어올릴 수 있습니다.
OpenAI는 ChatGPT, Copilot 등 가장 인기 있는 AI 챗봇을 구동하는 데 사용되는 고급 LLM(대형 언어 모델)으로 가장 잘 알려져 있습니다. 다중 모드 모델은 새로운 범위의 시각적 애플리케이션을 구현하여 챗봇 기능을 새로운 차원으로 끌어올릴 수 있으며 OpenAI는 개발자에게 이를 제공했습니다.
화요일에 X(이전 Twitter) 게시물을 통해 OpenAI는 비전 기능을 갖춘 최신 GPT-4 Turbo 모델인 GPT-4 Turbo with Vision을 이제 OpenAI API를 통해 개발자가 일반적으로 사용할 수 있다고 발표했습니다.
이 최신 모델은 2023년 12월부터 GPT-4 Turbo의 128,000개 토큰 창과 지식 컷오프를 유지합니다. 가장 큰 차이점은 이미지와 시각적 콘텐츠를 이해할 수 있는 비전 기능입니다.
Vision이 포함된 GPT-4 Turbo가 출시되기 전에 개발자는 텍스트와 이미지에 대해 별도의 모델을 호출해야 했습니다. 이제 개발자는 두 가지를 모두 수행할 수 있는 하나의 모델을 호출하여 프로세스를 단순화하고 다양한 사용 사례에 대한 문을 열 수 있습니다.
OpenAI는 개발자가 이미 모델을 사용하고 있는 몇 가지 방법을 공유했는데, 그 방법은 매우 흥미로웠습니다.
예를 들어, AI 소프트웨어 엔지니어링 보조원인 Devin은 Vision과 함께 GPT-4 Turbo를 활용하여 코딩을 더 효과적으로 지원합니다. 건강 및 피트니스 앱인 Healthify는 Vision이 탑재된 GPT-4 Turbo를 사용하여 사용자의 식사 사진을 스캔하고 사진 인식을 통해 영양 정보를 제공합니다. 마지막으로 Make Real은 Vision이 포함된 GPT-4 Turbo를 사용하여 사용자의 그림을 작동하는 웹사이트로 변환합니다.
@tldraw가 구축한 Make Real을 사용하면 사용자는 화이트보드에 UI를 그릴 수 있으며 Vision과 함께 GPT-4 Turbo를 사용하여 실제 코드로 구동되는 작동하는 웹 사이트를 생성할 수 있습니다. pic.twitter.com/RYlbmfeNRZ
GPT-4 Turbo with Vision 모델은 아직 ChatGPT 내부나 일반 대중에게 제공되지 않지만 OpenAI는 곧 ChatGPT에서 사용할 수 있을 것이라고 밝혔습니다. OpenAI의 GPT-4 Turbo with Vision API를 시작하려는 개발자라면 여기에서 시작하는 방법을 알아볼 수 있습니다.
