Wheels Up, 델타 주도 신규 자금 조달과 함께 1분기 실적 발표

AI 스타트업 트웰브랩스, AWS 기반 영상 분석 기술로 '보물창고' 열어 자연어 처리로 영상 속 정보 검색 가능케 해… 미디어·스포츠 산업 혁신 기대 [라스베이거스] 아마존 웹 서비스(AWS)는 오늘, 멀티모달 인공지능(AI) 기술을 활용해 영상 콘텐츠에 인간과 유사한 수준의 이해력을 부여하는 스타트업 트웰브랩스(Twelve Labs)가 AWS를 기반으로 자체 파운데이션 모델을 구축하고 확장하고 있다고 발표했습니다. 트웰브랩스는 AWS 기술을 활용하여 자연어를 영상 속 내용(행동, 사물, 배경음 등)과 연결하는 파운데이션 모델 개발을 가속화할 예정입니다. 이를 통해 개발자들은 영상 검색, 장면 분류, 요약, 클립 분할 등의 기능을 갖춘 애플리케이션을 만들 수 있게 됩니다. AWS 마켓플레이스에서도 이용 가능한 트웰브랩스의 파운데이션 모델은 시맨틱 영상 검색 및 텍스트 생성 애플리케이션 개발을 지원하며, 미디어, 엔터테인먼트, 게임, 스포츠 등 방대한 영상 데이터를 다루는 다양한 산업 분야에 적용될 수 있습니다. 예를 들어, 스포츠 리그는 이 기술을 활용하여 방대한 경기 영상 라이브러리를 효율적으로 분류하고, 라이브 방송에 필요한 특정 장면을 쉽게 검색할 수 있습니다. 코치들은 선수의 스트로크 기술이나 스타팅 블록 자세를 분석하여 경기력 향상을 위한 조정을 할 수 있습니다. 또한, 미디어 및 엔터테인먼트 기업은 특정 배우가 등장하는 스릴러 시리즈의 모든 액션 장면을 모아 시청자 맞춤형 하이라이트 영상을 제작할 수 있습니다. 트웰브랩스의 공동 창립자 겸 CEO인 재 리(Jae Lee)는 "트웰브랩스는 개발자들이 멀티모달 지능을 애플리케이션에 통합할 수 있도록 돕겠다는 비전으로 설립되었습니다. 전 세계 데이터의 약 80%가 영상 형태이지만, 대부분 검색이 불가능한 상태입니다. 우리는 이제 이러한 문제를 해결하고, 인간이 세상을 보고 듣고 이해하는 방식과 유사하게 고도로 맥락화된 영상을 surfacing하여 경험을 생생하게 만들 수 있습니다."라고 말했습니다. 그는 이어 "AWS는 멀티모달 AI의 과제를 해결하고 영상을 더욱 접근 가능하게 만드는 데 필요한 컴퓨팅 성능과 지원을 제공했습니다. 앞으로도 혁신을 지속하고 글로벌 확장을 추진하면서 AWS와의 성공적인 협력을 기대합니다. 모델 학습을 가속화하고, 솔루션을 전 세계 수천 명의 개발자에게 안전하게 제공하며, 컴퓨팅 비용을 통제하는 동시에 생성형 AI를 활용한 영상 이해 및 생성의 경계를 넓혀갈 수 있습니다."라고 덧붙였습니다. 트웰브랩스의 마렝고(Marengo) 및 페가수스(Pegasus) 파운데이션 모델은 100개 이상의 언어로 텍스트 요약 및 오디오 번역을 제공할 뿐만 아니라, 말과 영상의 일치 여부 등 단어, 이미지, 소리가 서로 어떻게 관련되는지를 분석하는 혁신적인 영상 분석 기능을 제공합니다. 콘텐츠 제작자는 자연어 검색을 통해 쇼나 게임 내의 정확한 순간, 각도 또는 이벤트를 찾을 수 있습니다. 주요 스포츠 리그는 AWS 기반 트웰브랩스 기술을 활용하여 방대한 미디어 라이브러리에서 하이라이트 영상을 자동으로 신속하게 생성함으로써 시청 경험을 개선하고 팬 참여를 유도하고 있습니다. AWS의 스타트업 부문 글로벌 총괄 부사장인 존 존스(Jon Jones)는 "트웰브랩스는 클라우드 기술을 활용하여 방대한 멀티미디어 데이터를 접근 가능하고 유용한 콘텐츠로 전환하고 있으며, 이는 다양한 산업 분야의 발전을 이끌고 있습니다. 영상은 귀중한 정보의 보고이지만, 지금까지 대부분의 시청자에게는 접근이 불가능했습니다. AWS는 트웰브랩스가 더 나은 이해와 관련성 높은 콘텐츠의 신속한 생산에 필요한 도구를 구축하도록 지원했습니다."라고 말했습니다. 트웰브랩스는 파운데이션 모델 학습을 위해 아마존 세이지메이커 하이퍼포드(Amazon SageMaker HyperPod)를 사용합니다. 이 모델은 비디오, 이미지, 음성, 텍스트 등 다양한 데이터 형식을 동시에 이해할 수 있어, 단일 데이터 유형에 집중하는 다른 AI 모델보다 더 깊은 통찰력을 제공합니다. 학습 작업은 여러 AWS 컴퓨팅 인스턴스에 분산되어 병렬로 처리되므로, 트웰브랩스는 몇 주 또는 몇 달 동안 중단 없이 파운데이션 모델을 학습시킬 수 있습니다. 아마존 세이지메이커 하이퍼포드는 AI 모델의 신속한 학습, 성능 미세 조정, 운영 규모 확장을 위한 모든 것을 제공합니다. 또한, 3년간의 전략적 협력 계약(SCA)의 일환으로 트웰브랩스는 AWS와 협력하여 고급 영상 이해 파운데이션 모델을 새로운 산업에 배포하고 아마존 세이지메이커 하이퍼포드를 활용하여 모델 학습 역량을 강화할 예정입니다. 스타트업의 성장을 지원하는 프로그램인 AWS 액티베이트(AWS Activate)는 트웰브랩스가 생성형 AI 기술을 전 세계적으로 확장하고 수백 페타바이트의 영상 데이터에서 초당 정확도로 깊이 있는 통찰력을 확보하도록 지원했습니다. 여기에는 머신러닝 성능 최적화 및 시장 출시 전략 구현을 위한 실무 지원이 포함됩니다. 또한, AWS 마켓플레이스는 트웰브랩스가 혁신적인 영상 인텔리전스 서비스를 전 세계 고객 기반에 원활하게 제공할 수 있도록 합니다.