Course Name Year Term Period Faculty / Graduate School All Instructors Credits
11127:Virtual Reality (W) § 11128:Virtual Reality and Mixed Reality (W) 2023 Spring Wed2 College of Image Arts and Sciences OHSHIMA TOSHIKAZU 2

Campus

KIC

Class Venue

JUKOKAN JK001

Language

Japanese

Course Outline and Method

◆本授業は対面型です.
 ※一部オンデマンドの回があります.詳細は授業スケジュールを参照してください.
◆出席・欠席に関わらず,毎回小テストを1週間以内に提出する必要があります.
◆週単位の小テストを遅滞なく提出した上で,期末に小テストでレポートを提出します.
【授業内容の概略】
 バーチャルリアリティ(VR;人工現実感)の基礎と応用を学習する.前半では、その歴史と現状について概観した後,VRの技術要素について学習する.身体の位置と姿勢をセンシングするトラッキング技術やモーションキャプチャ,バーチャル環境とインタラクションするためのユーザインタフェース,バーチャル環境を体験するための様々な視覚ディスプレイ,力覚・触覚を提示するハプティック・インタフェースなどについて概観する,後半では,VR技術の応用と研究の現状,現実世界との連携について学ぶ.ミクストリアリティや拡張現実感,コンピュータビジョンに基づいた位置合わせ,コンピュータグラフィックス映像をより自然に見せるためのリアリティの追求など,最新の技術動向を学習する.
【授業の方法】
 本授業では,身体性と多感覚性を特長とするインタラクティブ映像メディア技術「バーチャルリアリティ(VR; Virtual Reality)」=「人工現実感」をテーマとし,VRの概念と人間の知覚メカニズム,バーチャル環境とVRシステムの構築,各要素技術,具体的な応用などに関して総合的に学ぶ.また,従来の人工現実感の概念を拡張した「ミクストリアリティ(Mixed Reality; MR)」=「複合現実感」や「拡張現実感」についても学ぶ.講義では,様々な機材やソフトウェアによるデモの提示も交え,また,関連するテーマを扱った映像作品の視聴も通して理解を深める.
 前半では,VRの基礎を学習する.発展の歴史とVRシステムの構成要素について概観した後,バーチャル環境を構築・体験するための要素技術,VRの応用について学習する.
 後半では,VRと現実世界との連携に着目し,テレプレゼンス/テレイグジスタンスと分散型バーチャル環境についても学習する.さらに,現実空間とバーチャル空間とをリアルタイムかつインタラクティブに融合するMRに関する技術と応用について学習する.
【キーワード】
VR; Virtual Reality, MR; Mixed Reality, AR; Augmented Reality, HMD; Head-Mounted Display
バーチャルリアリティ,人工現実感,ミクストリアリティ,複合現実感,拡張現実感

Student Attainment Objectives

▼受講生が以下のような能力を獲得することを到達目標とする.
〔関心・意欲・態度〕
◇発展を続けるデジタル映像技術に関心を持ち,社会への展開を探求する意欲を持つ .
◇学びを段階的に積み重ねる態度を持ち,体系的に思考・表現する意欲を持つ.
〔知識・理解〕
◇VRの歴史,技術的な原理や応用事例の知識を習得し,VRと人および社会との関わりを理解する.
〔思考・判断〕
◇VR技術の特長に基づいて,その効果的な利用方法や発展的な応用を考えることができる.
〔技能・表現〕
◇目的に応じてVRシステムの基本的な構成と実装に必要な主要技術・装置を挙げることができる.

Recommended Preparatory Course

Course Schedule

Lecture/Instructor(When there are multiple instructors) Theme
Keyword, References and Supplementary Information
第01回◆オンデマンド

◆授業ガイダンス
◆バーチャルリアリティへのイントロダクション
imageと人の知覚とVR,,人工現実感の意義と目的

▼授業ガイダンス
◇成績評価,出席要件,小テストについての説明
◇受講上の諸注意
▼バーチャルリアリティへのイントロダクション
▽imageと人の知覚とVR
◇映像と人の知覚をめぐる議論
◇感覚モダリティとVR
▽人工現実感の意義と目的
◇VRは抽出された現実
◇VRの3要素
◇VRの特長と応用
◇VRの道具としての役割:3C+3E
▼小テスト例:
「VRの三要素」について説明してください.

第02回◆対面型

◆光の物性と人の視覚

▼VRとは
◇VRは「抽出された現実」
◇VRの3要素
◇VRの利点と応用
◇VRの道具としての役割
▼光の物性と人の視覚
◇光の波長とスペクトル分布
◇眼の仕組み
◇色の知覚
◇視力と視野範囲
◇脳内での視覚処理
▼小テスト例:
「色を知覚する仕組みについて説明しなさい.」

第03回◆対面型

◆VRの発展史

▼VRの発展史~歴史的経過と技術的経緯の概観
◇VRの3要素(AIP)と技術の対応
◇VRの発展の文脈~技術発展と社会実装
◇VRに関わる多様な技術の進化
◇技術的発展の文脈
◇大衆文化的発展の文脈~大型映像、テーマパークアトラクション
◇応用的発展の文脈~シミュレータ
▼小テスト例:
「1986年,NASAで開発された「Virtual Environment Display System」について,所期の目的や用途について,その機能と併せて説明してください.」

第04回◆対面型

◆VR体験の実現

▼VR体験を実現する技術要素~バーチャル環境の構築とシステムの実装
VRシステムはどのように造られているのか
◇映像作品で分析するVR体験のアプローチ
◇VRシステムを構成する技術要素~A.I.P.
◇汎用VRシステムの典型的な構成
◇Autonomyの実現
◇Interactionの実現
◇Presenceの実現
◇VRコンテンツの実現
◇VRシステムの3つのサブシステム
◇基本的なシステム構成
▼小テスト例:
「Autonomy, Interaction, Presenceのそれぞれについて,具体的な実装の技術について説明してください.」

第05回◆対面型

◆映像空間への没入
~没入型ディスプレイとHMD

▼没入型ディスプレイとHMD
◇VR視覚体験の2つのアプローチ
◇(広視野スクリーン式)没入型ディスプレイの機能と特徴、構造
◇没入型ディスプレイとヘッドトラッキング
◇HMDの機能と特徴、構造
◇HMDとヘッドトラッキング
◇HMDでのステレオ立体視
▼小テスト例:
「没入型ディスプレイとHMDの原理と特徴を比較して説明しなさい.」

第06回◆対面型

◆立体映像の仕組み
~ステレオ立体表示方式

▼ステレオ立体表示方式
◇奥行き知覚の原理
◇二眼式(ステレオ)立体表示の仕組み
◇メガネ式ステレオ立体表示の原理~映像の多重化と分離
◇アナグリフ方式
◇偏光方式
◇分光方式
◇液晶シャッタ方式
▼小テスト例:
「偏光眼鏡方式と液晶シャッタ方式とで,それぞれの原理について述べた上で,特徴の違いについて説明してください.」
「奥行き知覚の仕組みを簡単に説明してください.」

第07回◆対面型

◆裸眼型ステレオ立体表示方式

▼裸眼型ステレオ立体表示方式
◇メガネ型から裸眼型へ
◇パララックスバリア方式
◇レンチキュラ方式
◇二眼式から多眼式へ
◇多眼式から超多眼へ
◇マルチプロジェクション方式
▼小テスト例:
「裸眼式立体映像について,二眼型,多眼型,超多眼型の各方式がユーザに提供する機能について,特に観察位置の自由度の観点から比較して説明しなさい.」

第08回◆対面型

◆3次元立体映像
~超多眼立体映像から3次元空間の立体映像へ
インテグラルフォトグラフィ、ホログラフィ

▼3次元立体映像
◇「3次元立体映像」とは?
◇主な3次元映像のアプローチ
◇インテグラルフォトグラフィ
◇波面再生方式(ホログラフィ)
▼小テスト例:
「超多眼方式からインテグラルフォトグラフィへの変遷について,技術的に何が違うのか,それによってどのような利点が得られることになったのか,について説明してください.」

第09回◆対面型

◆物理的な立体映像
◆光学的な空中像

▼物理的な立体映像
◇2次元ディスプレイの3次元拡張
◇実体型ディスプレイの原理と特徴
◇体積走査型ディスプレイの原理と特徴
▼光学的な空中像
◇光学的な原理で空中に映像を提示する仕組み
◇空中像と立体映像の意味の違い
◇虚像型空中像(ハーフミラー方式)
▼小テスト例:
「実体型ディスプレイと体積走査ディスプレイの利点や効果の違いについて説明せよ.」

第10回◆対面型

◆光学的な空中像~実像型空中像
◆身体動作のセンシング

▼実像型空中像
◇半透過スクリーンによる投影型空中像
◇実像による空中結像方式
▼身体動作のセンシング~ヘッドトラッキング
◇現実環境のセンシングの対象
◇身体動作をセンシングすることの意味
◇位置姿勢とヘッドトラッキング
◇モーションキャプチャの基本理論
▼小テスト例:
「ペッパーズゴースト方式と結像型空中像のそれぞれの特長に基づき,「映像と実空間との合成」という観点で比較して説明しなさい.」

第11回◆対面型

◆位置姿勢のセンシング
◆身体動作のセンシング

▼身体動作のセンシング~モーションキャプチャ
◇モーションキャプチャの基本原理
◇機械式位置姿勢計測装置
◇磁気式位置姿勢センサ
◇慣性センサ方式
◇光学式の基本原理:単眼式と多眼式
▼小テスト例:
「機械式と磁気式の特長を比較して説明してください.」

第12回◆対面型

◆身体動作のセンシング
◆現実環境のセンシング

▼身体動作のセンシング~光学式モーションキャプチャ
◇光学式モーションキャプチャ
◇レーザ走査式トラッカー
▼現実環境のセンシング
◇ビジョンベースの現実環境センシング
◇アクティブステレオ法による距離計測とモーションキャプチャ
◇Time-of-Flight法による環境計測
◇ステレオ法による距離計測
▼小テスト例:
「アクティブステレオ法による空間構造計測の原理と特徴について説明して下さい」

第13回◆対面型

◆身体へのフィードバック

▼身体へのフィードバック~触覚、力覚、歩行感覚
◇力触覚とは~ハプティックインタフェース
◇力覚の知覚メカニズム
◇力覚ディスプレイの諸方式
◇触覚の知覚メカニズム
◇触覚ディスプレイの諸方式
◇方向感覚の提示~ロコモーションインタフェース
▼小テスト例:
「力覚ディスプレイを装着形態の観点から分類し,それらによる体験を比較して説明して下さい.」

第14回◆対面型

 ◆リアルとバーチャルとの融合

▼現実環境とバーチャル環境との融合
◇VR、MR、AR、WC
◇整合性に関わる4つの技術課題
◇MRを実現する2つの表示方式
◇幾何学的整合性の実現~レジストレーション
▼小テスト例:
「光学シースルー方式とビデオシースルー方式について,特長と利用面での効果を比較して述べなさい.」
「MRのレジストレーションとVRのヘッドトラッキングについて,類似点と相違点を述べなさい.」

第15回◆対面型

◆VR/MRの発展的な技術と応用
◆総括:バーチャルリアリティとは?

▼リアルとバーチャルとの往還
◇幾何学的整合性の実現~レジストレーション
◇応用~医療の事例
◇テレプレゼンス
◇多視点画像群による現実環境推定(幾何形状と光学特性)
▼小テスト例:
「テレプレゼンスの原理と応用上の効果について説明してください.」

Class Format

BCP停止の場合は、BCPレベル0~2の記載どおりに授業が行われます。
During the suspension period of BCP, classes will be as described in BCP levels 0-2.

【BCP レベルが 1 または 2 の場合】
◆第 1 はオンデマンドで実施します. 
◆第 2 〜 15 回 を対面型にて実施します.
※一部オンデマンドの回があります.

【感染拡大によりBCP レベルが 3 または 4 に変更された場合】
*第 1 〜 15 回 をオンデマンド型にて実施します.

Recommendations for Private Study

◆本授業では,各授業回の学習内容・方法・資料を事前に manaba+R で公開しており,予習・復習・時間外学習ができるよう配慮をおこなっています.
・授業外では,配布する資料と併せて,manaba+Rのコンテンツや参考図書も参照し,予習と復習や,各自の興味関心に沿った学習を深めてください.授業外学習の成果は,manaba+Rのオプションレポートなどで任意に提出できる仕組みとしており,授業内外で適宜フィードバックを得られる仕組みとします.1授業時間以外に,追加の1時間程度の授業外学習で理解を深めることを推奨します.

Grade Evaluation Method

Kind Percentage Grading Criteria etc.
Final Examination (Written) 0

Report Examination
(A report to be submitted by the unified deadline)
0

Exams and/or Reports other than those stated above, and Continuous Assessment 
(Evaluation of Everyday Performance in Class)
100

◆以下の2項目を成績評価の前提要件とする.
1)3分の2(10回)以上の回に出席すること.
2)すべての回で,課題小テストを各回の期限内に提出していること(欠席した場合なども例外なく適用)
3)期末に小テストで設定するレポートを提出すること
◆上記2項目の前提要件を満たしたうえで,各回の課題,期末レポートの内容により,達成度を総合的に評価する.
▼評価の着眼点
◇VRの歴史,技術的な原理や応用事例の知識を習得し,VRと人および社会との関わりを理解したか.
◇VR技術の特長に基づいて,その効果的な利用方法や発展的な応用を考えることができたか.
◇目的に応じてVRシステムの基本的な構成と実装に必要な主要技術・装置を挙げることができたか.

▼補足事項
◆併せて「成績評価方法(備考)」を熟読してください.
◆本シラバスに記載の備考を含む成績評価方法を確認しなかったことに起因する事象は各自の責に帰します.
◆本成績評価方法を確認せず,ルールを看過したことによる状況に対して,回復措置はありません.
◆毎回の課題と,期末レポートは,manaba+Rのオンライン小テストで実施します.
◆各回の小テストは,週単位で締め切るので,複数まとめて提出することはできません.
 回答期限が終了している小テストには回答できません.

Grade Evaluation Method (Note)

◆本シラバスに記載の本備考を含む成績評価方法を確認しなかったことに起因する事象は各自の責に帰します.
▽
◆20分以内の遅刻は0.5回の出席とカウントされます.
◆20分を越える遅刻は欠席と判断されます.
▼出席カードの提出:
◆各授業回で学習開始後速やかにmanaba+Rで出席カードを提出する必要があります.
*授業形態に関わらず、出席カードは必ず提出してください.
▽
▼小テストの提出★必須:
◆全授業回で、manaba+R の小テストを課題として提出する必要があります.
◆欠席した場合も出席と同様に、必ず小テストを提出する必要があります.
★欠席した場合には,manaba+Rのオンラインコンテンツで示す当該授業回の学習手順にしたがって,
 指定する教材で学習した上で,設定された期限内に小テストに取り組み提出してください.
*各授業回の学習内容については、欠席のためのみならず、予習・復習・授業外学習用として
 manaba+Rのオンラインコンテンツで公開します.
◆評価要件として期末レポートを提出するには,全ての課題を各回の期限内に提出している必要があります.
◆各回の小テストは,週単位で締め切るので,最後にまとめて提出することはできません.
◆回答期限が終了している小テストには回答できません.
▽
▼小テストについての注意:
*各小テストの説明と回答期限を確認した上で,準備を整えてから回答をスタートしてください.
*自動採点機能により,システム上提出が受理された場合「合格」と自動表示されますが,教員による回答内容の評価結果ではありません.
 誤記・誤答があってもシステム上は受理され,教員がその内容で評価します.
*一旦提出が受理されると,再提出ができません.提出前に間違いがないか十分に確認してください.
 また提出後も確実に提出できたことをポートフォリオ機能などで確認してください.確認漏れや誤提出・未提出は本人の責に帰します.
*不具合・不明な点などがあった場合,当該時点で速やかに申し出てください.回答期間を過ぎてからの問い合わせは受け付けかねます.

Advice to Students on Study and Research Methods

人工現実感は,総合的な技術であり周辺領域が幅広いものです.日進月歩の技術に対するアンテナを磨き,最新の学術論文も調査するなどの自発的な学習を心がけることが重要です.また,技術情報だけでなく様々な応用分野にも興味を持つことを推奨します.また,当然のことながら,授業で配布するレジュメは,理解を深める補助資料であって,詳細な補足・参考情報を豊富に提供する一方で,講義の内容をそのまま記載するものではありません.講義をよく視聴し,要点のノートをとることを推奨します.

Textbooks

Textbooks (Frequency of Use, Note)

教科書は指定せず,適宜講義内容のレジュメ,関連資料等を配布する.
併せて,manaba+Rにて資料を公開するので,指示に従い活用すること.

Reference Books

Title Author Publisher ISBN Code Comment
バーチャルリアリティ学 監:舘 暲,佐藤 誠,広瀬 通孝,編:日本バーチャルリアリティ学会 コロナ社 4904490053 ★準教科書・授業内で適宜参照
3Dユーザインタフェース 著:Doug A. Bowman, Jr.,Joseph J. LaViola, Ernst Kruijff, Ivan Poupyrev,訳:松田 晃一,由谷 哲夫,細部 博史 丸善出版 4621076205 ★授業外(専門・工学・ユーザインタフェース)
Designing Virtual Reality Systems: The Structured Approach Gerard Kim Springer 1852339586 授業外(専門・工学・システム構築)
Developing Virtual Reality Applications: Foundations of Effective Design Alan Craig, William R. Sherman, Jeffrey D. Will Morgan Kaufmann Publishers 0123749433 授業外(専門・工学・アプリケーション)
なぜコンピュータの画像はリアルに見えるのか―視覚とCGをめぐる冒険 梅津 信幸 エヌティティ出版 4757102690 授業外(教養・基礎・全般)
SF映画で学ぶインタフェースデザイン アイデアと想像力を鍛え上げるための141のレッスン 著:Nathan Shedroff‎, Christopher Noessel,監・訳:安藤 幸央,訳:赤羽 太郎,飯塚 重善,飯尾 淳 丸善出版 462108836X 授業外(専門・インタフェースデザイン・映像作品)
視覚世界の謎に迫る―脳と視覚の実験心理学 山口 真美 講談社 4062575019 授業外(教養・知覚心理学)
だまされる脳―バーチャルリアリティと知覚心理学入門 日本バーチャルリアリティ学会VR心理学研究委員会 講談社 4062575299 授業外(教養・知覚心理学)
ARの教科書 著:Dieter Schmarlstieg, Tobias Hollerer,訳・編:池田 聖, 他 マイナビ 4839965366 ★授業外(専門・工学・AR技術)
AR技術の基礎・発展・実践 監:蔵田 武志,清川 清,編:大隈 隆史 科学情報出版 4904774396 授業外(専門・工学・AR技術)
VR実践講座~HMDを超える4つのキーテクノロジー 岩田 洋夫 科学情報出版 4904774604 授業外(専門・工学・VR技術)
トコトンやさしいVRの本 (今日からモノ知りシリーズ) 監修:廣瀬 通孝,東京大学バーチャルリアリティ教育研究センター編 日刊工業新聞社 4526079421 ★授業外(教養・VR)
コンピュータグラフィックス(改訂新版) 画像情報教育振興協会 画像情報教育振興協会 4903474496 ★授業外(専門・工学・CG)

Reference Books (Frequency of Use, Note)

備考欄の「授業外」は,授業外学習のための参考図書であることを示します.授業内では,関連するテーマの回において当該図書について紹介します.また,括弧内のキーワードは,関連するテーマやジャンル,レベルなどを表します.★印は,VR/AR/MRとその関連分野を深く学ぶ良書として特に推薦する図書です.

Web Pages for Reference

学会関連URL
日本バーチャルリアリティ学会 http://www.vrsj.org
IVRC 国際学生対抗バーチャルリアリティコンテスト http://ivrc.net
Laval Virtual http://www.laval-virtual.org/en/
ACM SIGGRAPH http://www.siggraph.org
ヒューマンインタフェース学会 http://www.his.gr.jp

How to Communicate with the Instructor In and Out of Class(Including Instructor Contact Information)

Communication Paper,Learning Management System (manaba+R),Talk with Students

Other Comments

【科目ナンバリング・カリキュラムマップはこちらから/Click here to see the Curriculum-Map and Course-Numbering】
URL:https://secure.ritsumei.ac.jp/students/pathways-future/course/curriculum.html/