推定せず、本人が書く。
対面で「いま話しかけてよいか」を判断しやすくする MR システムです。人の意図を複合現実空間に配置します。
卒業研究として HMD 版と Web 版を実装しました。1 週間運用し、半構造化インタビューで評価しました。
話しかけてよいかを示す一文を、その人のそばの空間に置きます。HMD 版では見え方を、Web 版では入力と運用を調べています。
- 2種
- 試作（HMD 版・Web 版）
- 1週間
- Web 版の運用
- 6名
- 参加者
作りの要点
- 推定ではなく本人が書く
- 集中度や感情を推定して表示するのではなく、相手へのお願いを本人が書きます。
- 見たいときだけ見る
- 常に表示すると視界がうるさくなり、見られている不安も生まれます。そこでスキャンした瞬間だけ表示するようにしました。
- 誰の意図かを位置で示す
- 意図は書いた人のそばに置きます。名前を出さなくても、位置関係で誰のものか分かります。
- 実空間に合わせる
- HMD 版はパススルーで現実の映像を背景にし、文字を空間アンカーで固定しました。Web 版はスマートフォンの LiDAR で取った部屋のメッシュをブラウザに表示しています。
使い方の流れ
- 意図を書く
- 「話しかけてほしい」のような一文を入力します。Web 版ではテンプレートからも選べます。
- 空間に置く
- 自分の近くをタップして 3D 空間の位置に置き、データベースに保存します。
- 必要なときに見る
- 見る人は、知りたいときだけスキャンの操作をします。
- 重ねて表示する
- HMD 版ではその人の頭の上に、Web 版では部屋の 3D モデルの上に表示します。
- HMD 版
- Meta Quest 3 Unity 2022.3 Meta XR SDK Passthrough Spatial Anchors
- Web 版
- Next.js React Three Fiber Supabase Vercel
- 空間の取り込み
- スマートフォンの LiDAR