# エクステンデッドリアリティで働く：AR・VR と AI が変えるインターフェース

- 番組: [Data Skeptic](https://ai-curator.jp/podcasts/shows/cmv3z5c0c000g5o103lrxmz9d)（Kyle Polich）
- 元のタイトル: Working in Extended Reality
- 配信日: 2026年11月10日
- 長さ: 39分
- 要約作成日: 2026年11月10日
- トピック: [#XR](https://ai-curator.jp/topics/XR) [#AR/VR](https://ai-curator.jp/topics/AR%2FVR) [#HCI](https://ai-curator.jp/topics/HCI) [#適応型インターフェース](https://ai-curator.jp/topics/%E9%81%A9%E5%BF%9C%E5%9E%8B%E3%82%A4%E3%83%B3%E3%82%BF%E3%83%BC%E3%83%95%E3%82%A7%E3%83%BC%E3%82%B9) [#AI](https://ai-curator.jp/topics/AI) [#プライバシー](https://ai-curator.jp/topics/%E3%83%97%E3%83%A9%E3%82%A4%E3%83%90%E3%82%B7%E3%83%BC)
- URL: https://ai-curator.jp/podcasts/cmw9rgsnl00015e12p52ozxjw

## 要約

Data Skeptic の Kyle が、Virginia Tech の Doug Bowman 教授（3D Interaction Group 主宰）に、AR/VR と AI が人とコンピュータの関わり方をどう変えるかを聞いた回。現実を模倣しすぎない「魔法的」なインターフェース、日常用 AR グラス、AI による適応型 UI、プライバシーの課題が議論された。Bowman 氏は、表示領域が事実上無制限になる AR グラスが次の汎用コンピューティングになるという見方を示している。

## ポイント

- Bowman 氏の研究室はハードウェア開発をせず、市販の Meta Quest などで将来の体験を模擬し、ユーザー実験で検証している。
- 現実の手で掴む「自然な」操作は到達距離や手の追跡精度に限界があり、離れた物を指して選ぶような、現実の動作を拡張する「魔法的」なインターフェースが有効だと述べている。
- AI により、視線や頭の向きから意図を推定する支援的・自動的な操作が研究の焦点になりつつある。
- 場所ごとに最適な UI が違うため、設定を手動で変えさせず文脈に自動適応する UI が次の課題。Clippy の失敗を繰り返さない設計が求められる。
- プライバシーは技術・政策・社会的慣習の複合的対応が必要。プライバシー支援機能の実験では、自動処理と確認方式の好みが約半々に分かれた。
- PC、ノート PC、スマホと小型化・個人化が進む中で、AR グラスは表示領域が小さくならない点が特徴で、次の汎用コンピューティングになると予想している。

## 章立て

- [00:00] **VR の歴史とゲストの紹介** — 1968年の Sutherland の頭部装着ディスプレイから説き起こし、Bowman 氏と Virginia Tech の HCI センターの活動を紹介する。
- [03:04] **ハードウェアの現状と研究方針** — 研究室は市販機器を使い、Oculus Rift で価格が劇的に下がった経緯を語る。VR はほぼ成熟、日常用 AR グラスはまだ課題が多いとする。
- [08:28] **自然な操作より「魔法的」な操作** — 現実の動作の単純な模倣の限界と、3D の選択・操作・移動・システム制御という基本タスクを説明する。
- [14:13] **AI と XR の融合** — 視線や頭の姿勢から意図を推定する支援的・自動的な操作の例を紹介する。
- [16:57] **仮想ディスプレイで働く研究** — HoloLens 2 を持ち出してカフェや図書館で実作業をしてもらった研究と、Vision Pro との比較、場所をまたぐ移行の問題。
- [24:36] **適応型 UI とプライバシー** — 文脈に自動適応する UI の必要性と Clippy の教訓、プライバシー支援の実験結果、社会的慣習の変化を語る。
- [29:47] **AR グラスは次の汎用計算基盤か** — 計算機の小型化の流れと表示領域の観点から、終日着用する AR グラスが普及するという予測を述べる。
- [31:54] **学生へのアドバイスと評価手法、今後** — HCI への入口、質的・量的評価の使い分け、企業導入の見通し、今後の研究方針を語る。

## 解説記事

Data Skeptic の Kyle が、Virginia Tech のコンピュータサイエンス教授 Doug Bowman 氏を迎え、AR・VR と AI が切り開く次世代のインターフェースについて話を聞いた回である。Bowman 氏は 1999 年から 3D Interaction Group を率い、教科書『3D User Interfaces』の共著者でもある。

#### ハードウェアは「ほぼ解決」、残る課題は日常用グラス

番組は、1968年に Ivan Sutherland が作った初の頭部装着ディスプレイ「Sword of Damocles」の話から始まる。Bowman 氏によれば、Oculus Rift の開発キットは、同氏の研究室にあった 3 万ドルの研究用ヘッドセットと同等の視野角・解像度、場合によってはそれ以上の追跡性能を 300 ドルで提供し、消費者市場の形成が最適化と投資を加速させた。

同氏は、没入型の VR 機器は「ほぼ望む水準に達している」とみる。一方で、Apple Vision Pro 級の能力を眼鏡の形に収める「日常用 AR グラス」は、光学系、放熱、バッテリー、計算能力の面でまだ道のりが長いと述べている。研究室自体はハードウェア開発を行わず、市販機器で将来の体験を模擬してユーザー実験を行うのが基本方針だ。

#### 「自然な」操作がベストとは限らない

インターフェース設計について Bowman 氏は、仮想物体を現実と同じように手を伸ばして掴む設計は素朴だが、腕の届く範囲や現行のハンドトラッキングの精度に縛られると指摘する。そこで、現実の自然な動作を土台にしつつ能力を拡張する「魔法的」なインターフェースを推している。例は、遠くの物体を指差して選ぶ操作である。

また、ボタンやスライダーなど 2D UI の既存要素は、実績があるので 3D でも使えばよいとする。3D 特有の基本タスクとして、選択、操作、ナビゲーション、システム制御の四つを挙げ、前三者には専用の相互作用手法が研究されてきたと説明した。

#### AI が変える操作と、適応型 UI という次のフロンティア

キャリア前半の約 20 年は手動操作の効率化が中心だったが、今は AI による支援的・自動的な操作が焦点になっているという。例として、視線の固視から「クリックするつもりか」を高精度に予測し、クリックを自動化する研究を紹介した。

さらに Bowman 氏は、オフィス、飛行機内、移動中、自宅での娯楽では必要な UI が大きく異なるため、終日着用するなら設定を手動で切り替えるのは現実的でなく、UI が文脈に自動適応する必要があると述べる。ただし適応型 UI には Microsoft の Clippy のように失敗した歴史があり、必要な情報を必要なときに必要な形で出すのは「難題」だと認めている。研究室は「intelligent XR」に注力する方針だ。

#### 仮想ディスプレイで働くという用途

Bowman 氏は、XR をゲームや没入体験だけのものと見るのは誤解で、有望な用途は日常の知的作業だと強調する。物理ディスプレイは大きさや場所に縛られるが、AR/VR なら表示領域を任意の位置・大きさ・形で追加でき、「世界全体がディスプレイになる」。

研究では、光学シースルー型の HoloLens 2 をノート PC に接続し、カフェ、図書館、教室などで参加者に自分自身の実作業をしてもらった。参加者は機器自体（大きさ、見た目、電池、視野角）には満足していないが、将来の可能性には期待を示したという。Vision Pro は映像を取り込むパススルー型で視線操作が中心、HoloLens は手のジェスチャーが中心と方式が異なるが、仮想ディスプレイでの作業という点では大きな飛躍ではないとの見方だ。次に調べたいのは、場所を移動しながら作業を継続する際の「文脈間の遷移」である。

#### プライバシーと社会的受容

カメラ付きグラスについては、装着者本人と周囲の人の両方のプライバシーを解決しなければ市場は立ち上がらないと警告する。研究室の実験では、映像中の個人情報を検出してクラウド送信前にぼかす模擬アシスタントを、自動で処理する方式とユーザーに確認を求める方式で比較し、好みはほぼ半々に分かれた。技術だけでは不十分で、政策と社会的慣習も必要であり、スマートウォッチの通知確認が今では失礼と受け取られなくなった例を挙げた。

#### 次の汎用コンピューティングとなるか

メインフレームから PC、ノート PC、スマホへと、機器は小型・携帯・個人的になる一方、表示能力は小さくなってきた。AR グラスは小型で個人的でありながら、表示領域はほぼ無限にできるため「両方の良いところ」を得られ、ハードウェア課題が解決されれば終日着用のグラスが普及するというのが同氏の予想である。企業向けから普及するという見方には、HoloLens や Magic Leap の例に触れつつ、予測は難しいと慎重だった。

#### まとめ

本回の要点は、XR の課題がハードウェアから「文脈を理解する知的な UI」へ移りつつあるという点にある。日本の開発者や研究者にとっては、現実の模倣にこだわらない設計、視線などの信号を使った意図推定、プライバシー保護機能の自動化と確認のバランスが、具体的な検討課題になるだろう。また、実環境での質的評価と実験室での量的評価を目的に応じて使い分ける姿勢も参考になる。なお予測の多くは Bowman 氏個人の見解であり、AR グラスの普及時期は示されていない。

> この要約・解説記事は、元の音声の文字起こしをもとに AI（Claude）が日本語で作成したものです。出典: Data Skeptic「Working in Extended Reality」
