要点

ある開発者が、MiniMax H3やLTX 2.5といったAI動画生成モデルを活用し、リアルなルート映像を生成するカスタム仮想サイクリングアプリケーションを作成しました。 Mapillaryのストリートレベル画像を参照点として利用することで、システムは地点間のギャップを埋める動画セグメントを生成し、ユーザーが自宅から特定の現実世界のルートを自転車で走行できるようにします。

このソフトウェアは、スマートトレーナーを通じて取得したユーザーのペダリングパワーとケイデンスに基づいて動画の再生速度を制御することで機能します。 滑らかな映像を維持するため、システムはオプティカルフローを使用してフレームごとの進行状況を測定し、写真間の既知の距離と照らし合わせます。

再生が遅くなる場合は、フレーム補間を用いて視覚的な一貫性を保ちます。 このセットアップには、FTMS接続のためにWeb Bluetoothを利用するChromeを搭載したPCが必要であり、iOSデバイスのSafariとは互換性がありません。

開発者は高解像度動画の生成には時間がかかる可能性があると指摘しており、現在のワークフローではリアルタイム生成に頼るのではなく、走行中のシームレスな体験を確保するためにセグメントを事前生成する手法をとっています。 ROUVYやVZFitといった既存のプラットフォームと比較して、このカスタムソリューションでは、高品質な映像が手に入りにくい特定のユーザー定義ルートを走行することが可能です。 開発者はニューヨーク市や日本の地元の通りを含むルートでシステムを正常にテストし、仮想走行中にスマートトレーナーが微妙な勾配などの地形の変化を正確に反映していると述べています。

詳しい内容は原文をご確認ください。