핵심 정보
한 개발자가 MiniMax H3 및 LTX 2.5와 같은 AI 동영상 생성 모델을 사용하여 사실적인 경로 영상을 생성하는 맞춤형 가상 사이클링 애플리케이션을 만들었습니다. Mapillary의 거리 수준 이미지를 기준점으로 활용하여 시스템이 위치 간의 간격을 메우는 동영상 세그먼트를 생성함으로써, 사용자가 집에서 특정 실제 경로를 자전거로 달릴 수 있게 합니다.
이 소프트웨어는 스마트 트레이너를 통해 캡처된 사용자의 페달링 파워와 케이던스에 따라 동영상 재생 속도를 제어하는 방식으로 작동합니다. 부드러운 영상을 보장하기 위해 시스템은 광학 흐름(optical flow)을 사용하여 프레임별 진행 상황을 측정하고 이를 사진 간의 알려진 거리와 매핑합니다.
재생이 느려지면 시스템은 프레임 보간을 사용하여 시각적 일관성을 유지합니다. 이 설정은 FTMS 연결을 위해 Web Bluetooth를 사용하는 Chrome을 실행하는 PC가 필요하며, iOS 기기의 Safari와는 호환되지 않습니다.
개발자는 고해상도 동영상 생성에 시간이 걸릴 수 있다고 언급했으며, 현재 워크플로우는 실시간 생성에 의존하는 대신 라이딩 중 원활한 경험을 보장하기 위해 세그먼트를 미리 생성하는 방식을 취하고 있습니다. ROUVY나 VZFit과 같은 기존 플랫폼과 비교했을 때, 이 맞춤형 솔루션은 고품질 영상을 구하기 어려운 특정 사용자 정의 경로를 이용할 수 있게 해줍니다. 개발자는 뉴욕시와 일본의 지역 거리를 포함한 경로에서 시스템을 성공적으로 테스트했으며, 가상 라이딩 중에 스마트 트레이너가 미세한 경사도와 같은 지형 변화를 정확하게 반영한다고 언급했습니다.
