여러 보고서에 따르면, 특정 스포츠, 특히 Z세대 사이에서 라이브 스포츠 시청 패턴이 위축되는 추세입니다. 이에 리그와 방송사들은 다양한 시청 경험, 통계, 분석 자료 등을 제공하며 스포츠 콘텐츠를 팬들에게 더욱 매력적으로 전달하는 방안을 모색하고 있습니다.
이러한 노력 중 하나가 바로 볼류메트릭 비디오 생성(volumetric video generation) 기술 활용입니다. 이 기술을 통해 사용자는 경기 장면을 다양한 각도에서 시청할 수 있어, 마치 비디오 게임 속을 직접 경험하는 듯한 몰입감을 제공합니다. 이 핵심 기술은 수많은 카메라로 영상을 3D로 포착하여, 관객 모두가 원하는 다양한 시점에서 영상을 관람할 수 있게 만듭니다. 캐나다에 본사를 둔 이 회사는 이 기술을 리그와 팀들이 부담 없이 활용할 수 있도록 하여 더 많은 방송사와 팬들에게 도달하는 것을 목표로 합니다.
Peripheral Labs는 2024년 Kelvin Cui와 Mustafa Khan에 의해 설립되었습니다. 두 사람은 토론토 대학교 팀의 자율주행차 프로젝트에 참여하여 여러 트로피를 수상한 경험이 있습니다. Khan은 화웨이(Huawei)에서 연구원으로, Cui는 테슬라(Tesla)에서 소프트웨어 엔지니어로 근무하며 섀시 시스템 관련 경험을 쌓았습니다.
Cui는 TechCrunch와의 통화에서 “저와 Mustafa 둘 다 열성적인 스포츠 팬입니다. 그는 아스널의 엄청난 팬이었고, 저는 일곱 살 때부터 밴쿠버 캐넉스를 보며 자랐습니다. Mustafa가 3D 재구성(3D reconstruction)에 관한 연구를 보여주었을 때, ‘하키를 이렇게 [자유롭고 다각적인 방식으로] 보는 건 정말 멋질 것 같았다’고 느꼈습니다. 이렇게 저희가 Peripheral Labs를 시작하게 된 것입니다.”라고 말했습니다.
이 회사는 볼륨 생성 아이디어 자체가 새로운 것은 아니라고 밝히면서도, 최신 AI 모델과 컴퓨터 비전 기술의 발전을 바탕으로 이 기술이 이제 대중화될 준비를 마쳤다고 자신감을 내비치고 있습니다.
두 창립자는 자율주행차 분야에서 얻은 경험을 활용하여 로봇 공학의 인식(perception) 개념과 3D 비전 개념을 스포츠 비디오의 3D 재구성에 접목하고 있습니다. Cui와 Khan에 따르면, 이 시스템은 카메라 요구 대수를 100개가 넘는 수준에서 32개 정도로 획기적으로 줄일 수 있어 비용 절감과 운영 간접비 감소에 큰 도움을 줍니다. 이 스타트업은 팀과 방송사들을 위해 하드웨어 비용을 최소화하는 것을 목표로 하며, 자체 플랫폼에 대한 다년 계약 체결을 추진하고 있습니다.
이 소프트웨어 플랫폼은 자체 센서 스택(sensor stack)을 이용해 선수들의 생체역학 데이터(biomechanical data)와 팀/리그의 통계를 제공합니다. 이 센서는 깊이(depth) 정보를 포착하는 자율주행차 센서와 유사합니다. 이 시스템은 사실적인(photorealistic) 3D 재구성 기술을 활용하여 방송사와 팬들이 경기 시청을 원하는 방식으로 제어할 수 있게 합니다. 예를 들어, 팬들이 공을 가진 특정 선수만 추적하도록 하거나, 파울이나 경기의 결정적인 순간을 다른 각도로 보기 위해 경기 중 특정 순간을 정지시키는 것이 가능합니다.
Cui는 “기성 카메라를 사용하지만, 로봇 공학 및 머신러닝(ML) 분야의 경험을 결합한 방식이 플랫폼 설계 측면과 더불어 작은 연습장부터 대규모 축구 및 풋볼 경기장까지 확장하는 측면에서 저희만의 독보적인 강점입니다.”라고 설명했습니다.
소프트웨어 측면에서 이 플랫폼은 선수들의 손가락 움직임을 포함한 여러 관절을 관찰하여 굴곡(flexion) 정도를 측정할 수 있습니다. 예를 들어, 축구(soccer) 경기를 하는 두 사람의 영상에서, 이 시스템은 무릎과 발목 등의 움직임을 포착합니다.
[시장 반응 및 투자 유치]
이러한 기술적 진보는 스포츠 미디어 시장에 혁신을 예고하며 높은 관심을 받고 있습니다. 특히 데이터를 기반으로 한 경기 하이라이트 및 리플레이 서비스의 개선 가능성은 방송사 및 스포츠 미디어 기업들에게 매력적인 투자 기회로 평가받고 있습니다. (이 부분은 기사 맥락에 따라 추가될 수 있는 예시입니다.)