오픈 소스 AI가 나아갈 길

META, 오픈소스 AI 생태계 확산 가속화… Llama 3.1 모델 공개 Meta Platforms(META)가 AI 기술의 미래를 오픈소스에서 찾으며 관련 생태계 확장에 박차를 가하고 있습니다. 과거 고성능 컴퓨팅 분야에서 독점적인 유닉스(Unix) 운영체제가 오픈소스 리눅스(Linux)에 자리를 내줬던 것처럼, AI 분야에서도 오픈소스 모델이 빠르게 발전하며 업계 표준으로 자리 잡을 것이라는 전망입니다. Meta는 이러한 비전을 실현하기 위해 최첨단 오픈소스 AI 모델인 Llama 3.1 405B를 공개했습니다. 이는 업계 최고 수준의 성능을 갖춘 최초의 오픈소스 AI 모델로, 기존의 폐쇄형 모델과 비교했을 때 훨씬 뛰어난 비용 효율성을 제공합니다. 또한, Llama 3.1 70B 및 8B 모델도 새롭게 선보이며 다양한 규모의 AI 애플리케이션 개발을 지원합니다. Meta는 Llama 3.1 405B 모델의 오픈소스 공개가 미세 조정(fine-tuning) 및 소형 모델 추출(distilling) 작업에 최적의 선택이 될 것이라고 강조했습니다. 개발자들은 이 모델을 활용해 자체 데이터를 기반으로 모델을 추가 학습시키고, 특정 작업에 최적화된 크기의 모델로 변환할 수 있습니다. 이 과정에서 민감한 데이터가 외부로 유출될 우려가 없다는 점도 큰 장점입니다. Meta는 AI 생태계 확장을 위해 Amazon, Databricks, NVIDIA 등 주요 기업들과 협력하고 있습니다. 이들 기업은 개발자들이 자체 모델을 미세 조정하고 추출할 수 있도록 포괄적인 서비스를 제공할 예정입니다. 또한, Groq와 같은 혁신 기업들은 Llama 모델을 위한 저지연, 저비용 추론 서비스 구축에 나섰습니다. AWS, Azure, Google, Oracle 등 주요 클라우드 플랫폼에서도 Llama 모델을 사용할 수 있으며, Scale.AI, Dell, Deloitte 등은 기업들이 Llama를 도입하고 자체 데이터로 맞춤형 모델을 훈련하도록 지원할 계획입니다. Meta의 최고 AI 과학자인 얀 르쿤(Yann LeCun)은 오픈소스 AI가 개발자, Meta, 그리고 전 세계에 긍정적인 영향을 미칠 것이라고 확신했습니다. 개발자들에게 오픈소스 AI는 다음과 같은 이점을 제공합니다. 첫째, 자체 모델 훈련, 미세 조정, 추출의 자유를 얻습니다. 조직별로 요구되는 모델의 크기와 학습 데이터가 다르기 때문에, 오픈소스 모델은 이러한 맞춤형 요구를 충족시키는 데 유리합니다. 둘째, 특정 공급업체에 종속되지 않고 자체적인 기술적 운명을 통제할 수 있습니다. 폐쇄형 모델은 공급업체의 정책 변경이나 서비스 중단 위험에 노출될 수 있지만, 오픈소스는 다양한 기업들이 제공하는 호환 가능한 도구 체인을 통해 유연성을 확보할 수 있습니다. 셋째, 데이터 보안을 강화할 수 있습니다. 민감한 데이터를 다루는 조직들은 폐쇄형 모델에 데이터를 전송하는 것에 대한 우려가 있지만, 오픈소스 모델은 사용자가 원하는 환경에서 직접 실행할 수 있어 데이터 보안을 유지할 수 있습니다. 또한, 투명한 개발 과정을 거친 오픈소스 소프트웨어는 일반적으로 더 높은 보안성을 갖는 것으로 알려져 있습니다. 넷째, 효율적이고 합리적인 비용으로 모델을 운영할 수 있습니다. Llama 3.1 405B 모델은 폐쇄형 모델 대비 약 50% 저렴한 비용으로 자체 인프라에서 추론을 실행할 수 있어, 사용자 대면 및 오프라인 작업 모두에서 비용 효율성을 높입니다. 다섯째, 장기적으로 표준이 될 생태계에 투자할 수 있습니다. 오픈소스 AI가 폐쇄형 모델보다 빠르게 발전하고 있다는 점을 인지한 많은 기업들이 장기적인 이점을 위해 오픈소스 아키텍처 기반 시스템 구축에 나서고 있습니다. Meta에게 오픈소스 AI는 다음과 같은 전략적 이점을 제공합니다. Meta의 사업 모델은 최고의 경험과 서비스를 제공하는 데 중점을 두고 있으며, 이를 위해서는 경쟁사의 폐쇄형 생태계에 종속되지 않고 최신 기술에 접근할 수 있어야 합니다. 과거 Apple 플랫폼에서 서비스 개발에 제약을 받았던 경험을 바탕으로, Meta는 AI와 AR/VR 분야에서 개방형 생태계를 구축하는 것의 중요성을 강조합니다. Meta는 Llama 모델을 오픈소스로 공개함으로써 기술적 우위를 포기하는 것이 아니라, 오히려 Llama가 도구, 효율성 개선, 실리콘 최적화 등 포괄적인 생태계를 갖추도록 유도하여 장기적으로 최고의 기술에 접근할 수 있도록 한다는 입장입니다. 또한, AI 개발 경쟁이 치열해짐에 따라 특정 시점의 모델 공개가 압도적인 우위를 제공하지는 않을 것이며, Llama가 업계 표준으로 자리 잡기 위해서는 지속적으로 경쟁력 있고 효율적이며 개방적인 모델을 선보여야 한다고 보고 있습니다. Meta는 AI 모델 판매가 주력 사업 모델이 아니기 때문에, Llama의 오픈소스 공개가 매출이나 연구 투자 능력에 직접적인 타격을 주지 않는다는 점도 강점으로 꼽힙니다. 이는 일부 폐쇄형 모델 제공업체들이 정부를 상대로 오픈소스에 반대하는 로비를 벌이는 이유 중 하나라고 지적합니다. Meta는 과거 PyTorch, React 등 성공적인 오픈소스 프로젝트 경험을 통해 이러한 접근 방식이 장기적으로 효과적임을 입증해왔습니다. 전 세계적으로 오픈소스 AI는 긍정적인 미래를 위한 필수 요소로 인식되고 있습니다. AI는 생산성, 창의성, 삶의 질 향상뿐만 아니라 경제 성장과 의료 및 과학 연구 발전에 기여할 잠재력이 매우 큽니다. 오픈소스는 더 많은 사람들이 AI의 혜택을 누리고, 소수 기업에 권력이 집중되는 것을 방지하며, 기술이 사회 전반에 고르게 안전하게 배포될 수 있도록 보장합니다. 오픈소스 AI 모델의 안전성에 대한 논쟁이 있지만, Meta는 오픈소스 AI가 대안보다 더 안전할 것이라고 주장합니다. 정부 역시 오픈소스 지원이 세계를 더 번영하고 안전하게 만들 것이라는 점을 인지할 것이라는 전망입니다. AI 안전성은 의도치 않은 harm과 의도적인 harm이라는 두 가지 범주로 나눌 수 있습니다. 의도치 않은 harm은 AI 시스템이 의도와 달리 해를 끼치는 경우를 말하며, 의도적인 harm은 악의적인 사용자가 AI 모델을 악용하는 경우입니다. Meta는 오픈소스 AI가 더 투명하고 광범위하게 검토될 수 있기 때문에 의도치 않은 harm 측면에서 더 안전할 것이라고 봅니다. 또한, Llama Guard와 같은 안전 시스템을 갖춘 Llama 모델은 폐쇄형 모델보다 더 안전하고 보안성이 높을 것으로 기대됩니다. Meta는 모델 출시 전 엄격한 테스트와 레드팀(red-teaming)을 통해 잠재적 위험을 완화하고 있으며, 모델이 오픈소스이기 때문에 누구나 직접 테스트하고 검증할 수 있다는 점을 강조합니다.