새로운 Llama 3.1을 통해 오픈 소스 AI를 향한 메타 인치
Meta의 4,050억 매개변수 모델은 정말 오픈소스인가요? 누구에게 물어보느냐에 따라 다릅니다. 새로운 엔진을 직접 시험해 보는 방법은 다음과 같습니다.
페이스북의 모회사인 Meta는 Llama 3.1 405B라는 새로운 오픈소스 AI 프로그램을 발표했습니다. 프로그래머만이 좋아할 수 있는 이름 뒤에는 Meta의 많은 최종 사용자 프로그램에 내장된 Meta AI 도우미를 강화할 새롭고 더욱 강력한 대형 언어 모델(LLM)이 있습니다.
Meta CEO인 Mark Zuckerberg는 Threads의 게시물에서 Llama 3.1을 공개하며 "오픈 소스 AI가 앞으로 나아갈 길"이라고 선언했습니다. Rundown.ai와의 인터뷰에서 Zuckerberg는 다음과 같이 덧붙였습니다. "개방형 모델이 표준이 될 것이며 저는 이것이 세상에 도움이 될 것이라고 생각합니다. 자신이 믿는 기능을 구축할 때 약간 영혼이 무너지는 일입니다. 지역 사회에 좋은데 어떤 회사가 당신과 더 나은 경쟁을 할 수 있도록 당신을 상자에 넣기를 원하기 때문에 배송할 수 없다는 말을 듣게 됩니다."
이것은 Llama 3.1이 실제로 오픈 소스라는 것을 의미합니까? 대답이 중요합니다. Linux 개발자인 Neal Gompa는 Mastodon에 대해 다음과 같이 질문했습니다. "이것은 Llama 3가 이전 버전과 달리 OSI(Open Source Initiative) 승인 오픈 소스 라이선스를 따른다는 뜻인가요? 우리는 Llama 2를 Fedora에 출시할 수 없었습니다. OSI 승인 오픈 소스 라이센스가 부족합니다."
대답은 '아니요'입니다. 인터뷰에서 OSI 전무 이사인 Stefano Mafffulli는 "이론적으로 우리는 Zuck이 쓰고 말한 모든 것에 동의합니다. Meta의 라이센스만으로 제한 사항이 제거된다면 우리는 더욱 협력할 수 있을 것입니다."라고 말했습니다.
Maffulli는 "현재 상태로는 Llama는 모든 개발자에게 책임이 있습니다. 너무 불투명해서 안전하게 사용할 수 없으며 라이선스를 통해 궁극적으로 Meta가 혁신을 담당하게 됩니다."라고 말했습니다.
RedMonk 업계 분석가인 Stephen O'Grady도 이에 동의했습니다. "Meta가 Llama에 대한 일부 사용 제한을 해제했다는 것은 반가운 소식입니다. 하지만 새 라이선스처럼 소프트웨어를 사용할 수 있는 회사를 여전히 제한하는 한 이는 명백하고 틀림없이 오픈 소스가 아닙니다. 예를 들어 Linux의 경우 이 라이선스에 따라 출시되면 Meta는 이를 사용할 자격이 있지만 Amazon, Google, Microsoft와 같은 회사는 오픈 소스가 아니며 우리도 이를 받아들일 수 없습니다."
Zuckerberg에 따르면, 오픈 소스 문제를 넘어 기술로 이동하면서 새로운 모델은 이전 모델보다 더 효율적이고 강력하도록 설계되었습니다. 자연어 처리부터 복잡한 데이터 분석까지 다양한 애플리케이션에 향상된 기능을 제공합니다. 특히 그는 애플의 AI 접근 방식보다 메타 방식이 더 낫다고 믿는다.
새로운 Llama는 4,050억 개의 매개변수 모델을 자랑하며, 이는 현존하는 가장 정교한 AI 모델 중 하나입니다. 이는 1조 8천억 개의 매개변수를 포함하는 ChatGPT 4.0보다 여전히 훨씬 작습니다. 즉, 여전히 중요한 업그레이드입니다. 언어 번역, 콘텐츠 생성, 과학 연구 분야의 성능이 향상될 것으로 기대됩니다.
Zuckerberg는 Llama 3.1이 "일부 주요 폐쇄형 모델과 경쟁할 수 있으며 일부 영역에서는 심지어 앞서 있다"고 주장합니다. Meta의 벤치마킹에 따르면 Llama는 다양한 작업에서 GPT-4, GPT-4o 및 Claude 3.5 Sonnet을 포함한 주요 기반 모델과 경쟁력이 있는 것으로 나타났습니다. 그는 또한 "우리 추정에 따르면 405B 모델에 대해 직접 추론하는 것이 GPT-4보다 50% 더 저렴할 것"이라고 말했습니다.
새로운 모델은 현재 AWS, NVIDIA, Databricks, Groq, Dell, Azure 및 Google Cloud를 포함한 25개 이상의 파트너를 통해 제공됩니다. Meta는 또한 vLLM, TensorRT 및 PyTorch와 같은 널리 사용되는 AI 도구에 대한 지원을 제공하므로 개발자는 즉시 Llama 3.1 작업을 시작할 수 있다고 밝혔습니다.
새로운 엔진을 직접 사용해 볼 수 있습니다. 개발자는 여기에서 Llama 3.1을 직접 확인할 수 있습니다.