ARM, 셋톱박스에 레트로핏 적용

ARM, AI 기술로 홈 엔터테인먼트 혁신 이끈다 ARM은 인공지능(AI) 기술을 활용하여 고화질 및 일반 화질 영상의 품질을 자연스럽고 사실적으로 향상시키는 기술을 개발하고 있습니다. 이는 단순히 이미지를 확대하여 화질을 저하시키거나 주변 픽셀 정보를 이용해 흐릿하게 만드는 방식이 아닙니다. 대신, AI 알고리즘은 고해상도 영상과 의도적으로 화질을 저하시킨 영상을 비교 분석하여 손실된 데이터를 복원하는 방식으로 작동합니다. 이 기술은 시청 중인 영상에 적용되어 실제 촬영 당시 존재했을 법한 디테일을 복원해냅니다. 이러한 초고해상도 기술은 상당한 컴퓨팅 성능을 요구합니다. 디지털 TV(DTV)나 셋톱박스(STB)의 내부 추론 엔진은 수천 개의 샘플 데이터에 접근할 수 있어야 하며, 눈보라와 같은 화면 효과와 예술적인 페이드 아웃을 구분할 수 있어야 합니다. 또한, 팬 소음이 발생하지 않도록 실시간으로 이 모든 작업을 수행해야 합니다. 하지만 이러한 기술이 발전함에 따라 홈 엔터테인먼트 경험은 근본적으로 변화할 것으로 예상됩니다. ARM은 이러한 혁신적인 프로그래밍 기술이 소비자와 개발자, 제조업체가 STB를 바라보는 시각을 바꿀 것이라고 믿습니다. 매년 전 세계적으로 2억 대 이상의 DTV가 출하되며, 케이블 및 위성 방송 제공업체의 전통적인 셋톱박스부터 Roku Express와 같은 스트리밍 미디어 장치, 그리고 이 두 가지 기능을 모두 갖춘 장치까지 포함하는 STB 역시 이에 상응하는 규모로 출하됩니다. IDC에 따르면 스마트 TV와 스트리밍 장치만으로도 전 세계 스마트 기기 출하량의 3분의 1 이상을 차지합니다. 그럼에도 불구하고 STB는 종종 그저 존재하는 기기로 인식되며, 어떤 리모컨으로 제어해야 하는지 기억하기 어려울 때도 있습니다. 하지만 이러한 '익명의 알루미늄 상자' 속에 숨겨진 성능을 활용하면 STB는 새로운 애플리케이션과 서비스의 주요 플랫폼으로 거듭날 수 있습니다. 객체 기반 콘텐츠의 부상 IP(인터넷 프로토콜)가 주요 전송 채널로 자리 잡고 콘텐츠 제작 기술이 발전함에 따라 객체 기반 미디어의 발전 가능성이 열리고 있습니다. 객체 기반 미디어는 개별 소비자가 자막이나 오디오 트랙과 같은 일반적인 조정부터 '스스로 선택하는 모험'과 같은 분기형 스토리라인, 스포츠 경기에서의 다양한 카메라 각도, 개인화된 광고까지 다양한 맞춤형 프로그램을 이용할 수 있도록 합니다. 이러한 다양한 객체들은 클라우드, 기기 자체, 또는 이 둘의 조합을 통해 결합될 수 있습니다. 객체 기반 미디어 표준은 아직 발전 중이며, 앞으로 몇 년 안에 이 기술의 새로운 창의적인 활용 사례를 목격하게 될 것입니다. 또한, 가정이나 라이브 스포츠 경기장에서 객체 기반 프로그래밍을 경험할 수 있는 공공/민간의 경험이 될 것으로 예상됩니다. 스마트 카메라 지원 코로나19 팬데믹 기간 동안 재택근무가 일상화되면서 이전에는 사무실에서만 사용되던 화상 회의 애플리케이션이 가정에서도 자연스럽게 사용되기 시작했습니다. 가정 환경에서 이러한 애플리케이션은 거실에 매우 잘 어울립니다. 스마트 카메라는 손과 몸짓을 인식하고, 배경을 향상시키거나 흐리게 처리하며, 얼굴 추적을 통한 지능적인 초점 조절, 심지어 증강현실(AR) 필터까지 지원하는 몰입형 시각 효과를 제공합니다. 스마트폰, 태블릿, 노트북과 같은 다른 화면에는 오랫동안 카메라가 내장되어 왔지만, TV에 카메라 기능이 추가될 경우 사용자들은 적절한 수준의 보안과 개인 정보 보호 기술에 대한 확신을 가져야 합니다. ARM은 이 분야에서 적극적으로 노력하며 증가하는 보안 요구 사항을 충족시키고 있습니다. 게임 및 피트니스 애플리케이션 기존 게임 콘솔 외에도 다양한 게임 서비스가 STB를 통해 제공되고 있습니다. 이는 기기 자체에서 네이티브로 지원되거나, Google Stadia와 같은 클라우드 게임 제공업체 또는 중국 시장을 위한 Tencent Games를 통해 제공됩니다. 클라우드 게임은 STB가 비디오 및 명령 스트리밍과 저지연 기능을 지원해야 합니다. 반면, 네이티브 게임 플랫폼은 더 나은 게임 경험을 위해 훨씬 향상된 중앙 처리 장치(CPU)와 그래픽 처리 장치(GPU)를 갖춘 STB 장치를 필요로 하지만, 빠르고 안정적인 광대역 연결이 필요 없다는 장점이 있습니다. 최근 모바일 그래픽의 발전은 고성능 게임을 그 어느 때보다 쉽게 접근할 수 있도록 만들었습니다. 또한, 코로나19 팬데믹 기간 동안 관찰된 또 다른 추세는 집에서 운동하는 사람들의 증가입니다. 이러한 애플리케이션을 작동시키기 위해서는 신체 자세 추적을 위한 AI 알고리즘과 음성 명령 및 디지털 비서 기능을 위한 항상 켜져 있는 음성 서브시스템이 필요합니다. 항상 켜져 있는 음성 UI STB 장치에서 이러한 새로운 경험을 원활하게 즐기기 위해서는 항상 켜져 있는 음성 제어가 특히 중요한 기능이 될 것입니다. 오늘날 STB에서 이미 널리 사용되고 있는 음성 UI는 위에서 설명한 피트니스 애플리케이션과 같은 더 복잡한 애플리케이션 및 경험을 가능하게 하며, 향상된 사용자 경험(UX)을 위한 기본적인 음성 명령도 제공합니다. STB 장치의 더 큰 머신러닝(ML) 기능은 특히 CPU 및 GPU 전반에 걸쳐 중요할 수 있으며, 대기 모드에서 전력 소비를 최소화하고 반응성 있는 경험을 제공하기 위해 AI 기능을 발전시킬 것입니다. 향상된 보안 요구 사항 새로운 경험은 또한 불법 복제 및 공격의 위협을 증가시킬 것입니다. 칩셋 내의 더 많은 엔진에서 비디오가 처리됨에 따라, 전체 플랫폼에 걸쳐 모든 콘텐츠가 안전하게 유지되도록 보장하는 것이 큰 과제입니다. 이는 콘텐츠, 운영 체제, 애플리케이션 및 자산을 공격으로부터 보호하는 것을 의미합니다. 또한, STB의 새로운 애플리케이션으로 인해 소셜 미디어 계정, 결제 및 비디오를 위한 개인 정보 및 자산과 같은 사용자 데이터가 장치에 훨씬 더 많이 저장됩니다. 사용자 데이터를 보호하기 위한 더 발전된 보안 요구 사항이 있어야 하며, STB 제조업체는 장치 전반에 걸쳐 더 정교한 보안 보호를 모색하고 있습니다. 이는 오늘날 스마트폰에서 사용자 데이터를 보호하는 방식과 유사할 가능성이 높습니다. 진화하는 시장 DTV와 STB는 눈앞에 숨겨진 기회입니다. 현대 DTV의 넓은 시청 영역과 STB의 보편성은 하드웨어 설계자와 소프트웨어 개발자에게 스마트 홈을 위한 캔버스를 제공합니다. ARM은 우리가 곧 보게 될 고급 기능과 새로운 사용 사례를 가능하게 하는 데 필요한 IP와 솔루션을 제공하고 있습니다. 스마트 홈으로 향하는 길? 스마트 홈 시장에서 ARM의 참여에 대해 자세히 알아보세요.