21_Kometani_Note の編集

* 研究の概要 [#w6de4ca1]
（一番簡単に研究のことを自己紹介できるまとめ場所。このテキストはコピーした先では書かなくてOK）

** 研究タイトル [#j4132eea]
バーチャルリアリティによる先行体験

**研究キーワード [#pfe3873a]
（研究の特色の伝わるキーワード。６〜１０くらい）
-VR
--身体所有感
--振動モーター
--アバター
--Arduino
**研究は何を目指すものか（目標） [#o293498d]

聴覚の拡張

**この研究がうまくいけば何が実現するのか（将来、可能性、応用など） [#if72b70f]

仮装する時に見た目だけではなく、機能も仮装することができるかもしれない。

**この研究の新規性・新奇性 [#j560a5f5]
振動モーターを用いることで疑似耳に対して、身体所有感を感じることができる。

**この研究の有用性 [#v4581b34]
--イヤホンを用いることで、2つの動画や音楽を同時に聞くことができる。

**目指すシステムの形（どういう入力でどういう出力があるか。何ができるか。） [#g862eeab]
ソフトウェアはUnity、ハードウェアはVRゴーグル、VRグローブ、Arduino、ペルチェ素子を用いて、VR環境を構築し、作成したVR空間を基に被験者の反応を記録する。完成した物はVRゴーグルとVRグローブを装着した被験者に何らかの行動を先行させる動作をさせ、それが入力となり、その動作の完了後の様子を表示する。具体的には、手を伸ばしたらドアが開いて、その先の光景が目に映る。つまり、透視のようになる。時にはArduinoで制御するペルチェ素子を用いて熱を被験者に与える出力（反応）。

**システムのターゲットユーザ [#wd1e2254]

2つ同時に音楽を聴きたい人など。

**システムの活用シーン [#iddfed73]
動作完了後に起こるであろうことを予測、体験するというこのシステムは目標としてきたゲームへ応用する。火事などの災害の体験。

* 研究トピック（議題）整頓 [#wc86f10c]
（概要よりももう少し詳しく、いくつかのトピックを箇条書きして、たまに書き直す部分。このテキストはコピーした先では書かなくてOK）

*技術動向調査 [#ad58aa2b]
・ハードウェア調査&br;
+「[[サーモグローブ:http://lab.yoneyone.net/php/pukiwiki/?21_Kometani_Surveys#qda3a74f]]」&br;
実世界における「温もり・冷たさ」といった温熱感覚を伝える装着型のインタフェース。　（慶應義塾大学理工学部 桂 誠一郎 准教授開発）&br;
+「[[VIVE Pro:https://www.vive.com/jp/product/vive-pro-full-kit/]]」&br;
解像度が片目あたり1440 x 1600ピクセル、視野角が110度など高性能であるが、その分パソコンも高性能であることが要求され、GPUはNVIDIA® GeForce® GTX 1060もしくはAMD Radeon™ RX 480 の同等品以上が必要である。&br;

・ソフトウェア調査
+「Unity」&br;
ゲームエンジンとして正式に採用されており、C#やJavaScriptでプログラムを設計する。マルチプラットフォームに対応している。（具体的にはPC,スマートフォン,ゲーム機）&br;
ゲームを作る際にはプログラミング言語の習得だけではなく、ライブラリの使い方や数学の知識、エフェクト、CG、素材、グラフィックスやサウンド、メニュー遷移なども必要だが、Unityが代わって助けてくれる。&br;
+「Unreal Engine」&br;
プログラマーはC++を用い、デザイナーはBluePrintを用いることが多く、「UE」と略される。UNREAL ENGINEはEpic Games社が提供しているゲーム開発プラットフォームであり、現在でも多くの企業が利用している。特徴として、映画製作にも使われるほどの高品質で美麗なグラフィックが制作できる。
&br;
+「DirectX」&br;
ソフトウェア (主にゲーム) がビデオおよびオーディオハードウェアを直接操作できるようにする Windows の一連のコンポーネントであり、Microsoftが開発したWindowsなどに搭載されているAPIのこと。主にパソコンゲームなどで活用されている。&br;
+「OpenGL 」&br;
3DCG関連の演算機能をソフトウェアから呼び出すための規約を定めたAPI。様々な機種やハードウェア、OSなどに対応した汎用のグラフィックスライブラリで、2DCG、3DCGを描画するための豊富な機能が用意されている。対応言語はC、C++など。&br;
+「Vulkan」&br;
主にゲームエンジンまたはゲームのアプリケーションに使用されるグラフィックスAPI。性能低下の一因となりやすいドライバのオーバーヘッドを軽減できるため、ハードウェアの性能を最大限に発揮し、描画速度と描画パフォーマンスが向上するというのが特徴。&br;

・参考資料

+[[VIVEとUnityを用いたVRソフトの作成について:http://tech.eng.okayama-u.ac.jp/annual_report/2020/2020_1-4.pdf]] &br;
+[[VR活用でアレルギーやカロリーを気にせずに食事ができる時代へ！:https://cookbiz.jp/soken/news/projectnourished/]] &br;

* 研究ノート [#l209c850]

（自分が日々とる、ゼミのログ、ランチミーティングで気になったことのメモなどを書く。このテキストはコピーした先では書かなくてOK）

・日本語音声認識　Julius~
　音声認識システムの開発・研究のためのオープンソースの高性能な汎用大語彙連続音声認識エンジン。~
　言語モデルとして単語N-gram，記述文法，ならびに単語辞書を用いることができ、音響モデルとしてトライフォンのGMM-HMMおよびDNN-HMMを用いたリアルタイム認識を行うことができ、DNN-HMMの出力計算にnumpyを用いた外部モジュールを利用することも可能。

・[[Aruduino:http://lab.yoneyone.net/php/pukiwiki/?21_Kometani_Surveys]]

・[[先行リアリティ:https://www.ipsj.or.jp/magazine/hakase/2018/HCI03.html]]
https://m-repo.lib.meiji.ac.jp/dspace/bitstream/10291/20260/1/saito_2019_sentansuri.pdf

茶道における精神世界観の集中状態の再現～五感の視野拡張バーチャルリアリティ～ &br;
http://www.res.kutc.kansai-u.ac.jp/~yone/research/pdf_graduate_thesis/201403g_ISHIKAWA_Nanase.pdf

仮想現実感に向けた足底部の触覚刺激による地面テクスチャ再現手法の提案 &br;
http://www.res.kutc.kansai-u.ac.jp/~yone/research/pdf_graduate_thesis/201803g_HUANG_Xunda.pdf

主観熱唱度に応じて盛り上がりを見せるVR観客表現システム &br;
http://www.res.kutc.kansai-u.ac.jp/~yone/research/pdf_graduate_thesis/201803g_ANDO_Keisuke.pdf

* 冬課題 [#b022d7db]

#ref(冬課題.txt)

ゲームの面白さとしてテトリスを用いて簡単な隠しコマンドを作りました。

* 2022年度春課題 [#t4ea3392]

#ref(進捗状況2.pdf)

前回の課題を解決した部分もありますが、新たに増えた課題もあります。

* 卒論関係 [#q4fbfb2a]
・[[卒論スケルトン:https://docs.google.com/document/d/1XVAl9LQg2U0fY_BbHCRGsvYijx1Yj5aF/edit?usp=sharing&ouid=116641860744569427013&rtpof=true&sd=true]]~
・[[実験計画書:https://docs.google.com/document/d/1IyLqdBpBI5-KS-S3qPDl__SVuLjx8KSW/edit?usp=sharing&ouid=116641860744569427013&rtpof=true&sd=true]]
** [[卒論概要:https://docs.google.com/document/d/1F3by10BsW4aADsDOffDUk502E2X-qdUO/edit?usp=share_link&ouid=116641860744569427013&rtpof=true&sd=true]] [#h6fdfff5]

・[[スプレッドシート:https://docs.google.com/spreadsheets/d/1sSSGkR8m6bhHLz03h1bTn9s39xS_WyhWqLOPls58k9U/edit?usp=sharing]]

#hr

[[21_Sample]]に戻る

タイムスタンプを変更しない