日本語タイトル#
時空間混合および拡張現実体験の説明によるインタラクティブ再生
英文タイトル#
Spatio-Temporal Mixed and Augmented Reality Experience Description for Interactive Playback
日本語要約#
私たちは、時空間混合拡張現実体験説明（MAR-ED）を提案します。これは、ユーザーの現在の物理空間におけるインタラクティブで適応的な再生のために、過去のイベントの表現を標準化する新しいフレームワークです。現在の空間メディア技術は、コンテンツを静的資産としてキャプチャまたは再生することに主に焦点を当てており、視聴者の環境から切り離されているか、限られたインタラクティビティを提供していますが、体験の基礎となる意味論的およびインタラクティブな構造を説明する手段はまだ十分に探求されていません。私たちは、次の 3 つのコア原語に基づく MAR-ED という記述フレームワークを提案します：1）意味的シーングラフ表現のためのイベント原語、2）効率的かつ意味のあるデータアクセスのためのキーフレーム原語、3）ユーザー駆動の適応的インタラクティブ再生のための再生原語。提案された MAR-ED フレームワークの 3 段階プロセスのフローチャートは、再生中に記録された体験をユニークな適応 MAR 体験に変換し、その時空間構造が新しい環境に動的に適応し、その物語がリアルタイムのユーザー入力によって変更できることを示しています。このフレームワークに基づいて、個人のデジタル記憶や記録されたイベントは、受動的な 2D/3D ビデオを超えて、没入型で空間的に統合されたグループ体験に進化し、トレーニング、文化遺産、インタラクティブなストーリーテリングのための新しいパラダイムを開き、複雑なユーザーごとの適応レンダリングを必要としません。
英文要約#
We propose the Spatio-Temporal Mixed and Augmented Reality Experience Description (MAR-ED), a novel framework to standardize the representation of past events for interactive and adaptive playback in a user's present physical space. While current spatial media technologies have primarily focused on capturing or replaying content as static assets, often disconnected from the viewer's environment or offering limited interactivity, the means to describe an experience's underlying semantic and interactive structure remains underexplored. We propose a descriptive framework called MAR-ED based on three core primitives: 1) Event Primitives for semantic scene graph representation, 2) Keyframe Primitives for efficient and meaningful data access, and 3) Playback Primitives for user-driven adaptive interactive playback of recorded MAR experience. The proposed flowchart of the three-stage process of the proposed MAR-ED framework transforms a recorded experience into a unique adaptive MAR experience during playback, where its spatio-temporal structure dynamically conforms to a new environment and its narrative can be altered by live user input. Drawing on this framework, personal digital memories and recorded events can evolve beyond passive 2D/3D videos into immersive, spatially-integrated group experiences, opening new paradigms for training, cultural heritage, and interactive storytelling without requiring complex, per-user adaptive rendering.
文章ページ#
時空間混合および拡張現実体験の説明によるインタラクティブ再生
PDF 取得#
抖音でスキャンしてさらに素晴らしいコンテンツを見る