視線誘導による遮蔽オブジェクト選択手法

MR空間では、仮想ウィンドウなどの動的オブジェクトと現実世界の固定オブジェクトが重なり、ユーザの選択意図を正確に判断することが難しいという課題がある。特に遮蔽状態では、従来の視線操作では対象の特定が困難となる。本研究では、オブジェクトの動きと視線追跡を組み合わせた「Moving Pursuits」を提案し、視線による直感的かつハンズフリーな選択を実現する。動的オブジェクトを展開させることで視覚的干渉を解消し、視線の追従によって選択意図を推定することで、複雑なMR環境における選択精度と操作性の向上を目指す。

Keywords

Mixed Reality / 視線追跡 / オブジェクト選択

Methods / Technologies

• 視線追跡（Eye Tracking）による入力取得
• 動的オブジェクトの展開・分散制御
• 視線とオブジェクト運動の一致による選択判定（Pursuits拡張）
• Cone Castingによる選択候補群の抽出
• Meta Quest Pro を用いたMR実験環境
• 既存手法（Dwell, Outline Pursuits）との比較評価

Highlights

• 視線のみで「ポインティング＋確定」を統合した選択手法
• オブジェクトの重なり問題（遮蔽）を動的な展開によって解消
• 複雑なMR環境でも高い選択精度と直感的操作を実現
• 既存手法よりもユーザ体験（精度・使いやすさ）を総合的に改善

モビリティを介した異空間コミュニケーション

近年，オンラインやメタバースの普及により遠隔コミュニケーションは拡大している一方で，車椅子における介助者との対話のような「身体的な位置関係に基づくコミュニケーション」は失われつつある。本研究では，物理空間とサイバー空間をモビリティ（電動車椅子）を介して接続する「Mobility Link XR」を提案する。360度映像とアバターを用いて空間を共有し，介助関係や同席関係といった位置関係を再現することで，単なる映像通信では得られない臨場感や対話の質の向上を目指す。

Keywords

XR / テレプレゼンス / モビリティコミュニケーション

Methods / Technologies

• 360度カメラによる環境取得とVR提示
• MRデバイスによるアバター可視化（空間共有）
• 電動車椅子の遠隔操作（ROS + MQTT）
• Unity + Photon によるマルチユーザ同期
• 2つのコミュニケーションシナリオ設計
• 介助モード（前後関係）
• 同席モード（隣接関係）

Highlights

• 「移動×XR」による新しい異空間コミュニケーションの提案
• 身体的な位置関係（前後・横並び）を再現した設計
• アバターによる非言語表現がコミュニケーションを向上
• 同席（横並び）配置が特に高い臨場感と対話のしやすさを実現

[DICOMO2022 デモ紹介動画] はなれてたって僕らは一緒！車椅子のXRコミュニケーション

球体ディスプレイを用いた多拠点グループテレプレゼンス

遠隔コミュニケーションの発展により，複数拠点・多人数での同時接続が一般化しているが，従来のビデオ会議では拠点間の関係性や空間的な一体感が失われやすいという課題がある。特に多拠点環境では，情報の分断や注意の分散により，誰がどこにいるのか，どの拠点同士が関係しているのかが把握しづらい。本研究では，球体ディスプレイと360度映像を用いて複数拠点を一つの空間として統合するグループテレプレゼンス環境を提案する。さらに，逆パノラマ表現およびオーバーレイ表示を用いることで，拠点間の関係性や人物の存在を連続的に知覚できるよう設計し，多拠点コミュニケーションにおける空間的理解と相互作用の向上を目指す。

Keywords

グループテレプレゼンス / 球体ディスプレイ / 多拠点コミュニケーション

Methods / Technologies

• 球体ディスプレイによる全周囲表示（空間共有インタフェース）
• 360度映像のリアルタイム統合（複数拠点入力）
• 逆パノラマ（Inverse Panorama）による空間投影
• オーバーレイ合成による複数拠点の同時可視化
• 座標変換（極座標ベース）による視覚的一貫性の維持
• MetaPoを基盤とした多拠点接続・表示システム

Highlights

• 複数拠点を「分割」ではなく「統合」して提示する新しい設計
• 球体ディスプレイにより全方向的かつ対称的なコミュニケーションを実現
• 逆パノラマにより視覚的な連続性と空間的一貫性を向上
• 多人数・多拠点における存在感・関係性の知覚を強化

[SIGGRAPH2022 Poster] MetaPo: A Robotic Meta Portal for Interspace Communication