ユーザーと親密な関係を築けるアシスタントシステム。また、その有用性の検証。
簡潔にまとめると、siriみたいなシステムをもっとフレンドリーにしたい。
(最も伝わりやすい研究の魅力の詰まった50字以内のタイトル。)
未定。上記の研究概要とほとんど大差なし。
(研究の特色の伝わるキーワード。6〜10くらい)
根幹的には柳さん(http://lab.yoneyone.net/php/pukiwiki/?22_Yanagi)と同じく、
コンピュータ上での人格再現が一番大きな目標。
少なくとも、3回~4回までの研究はこれの踏み台。
従来のシステムよりも生産性向上ができると予想している。
ユーザーからシステムに対しての感情や
ユーザーの個人的な情報(個人情報を含む広義的な意味)を
パラメータとしてシステムに与える
上記を満たすことで、従来のシステムではできなかったタスクを実行できるようになる
課題設定
冬休み課題はUnityを使ってユーザの声を音声認識でテキストにして、
VOICEROID2に入力&再生してオウム返しをしてもらうソフトを作ることです。
余裕があれば、そのテキストを引数にしてPythonのメソッドの返り値を
Unityが受け取るところまでやりたいです。
それができれば、Pythonが得意なテキストマイニングに
面倒な部分を丸投げできるので。
2022/12/15時点の進捗
音声認識の部分はおおよそ完成しました。
残りは外部ソフト操作の実装です。
進捗度合いは5割くらいです。
2022/12/19時点の進捗
音声認識まわりのUIを調整しました。
外部ソフトの操作がうまくいかないため、
当初は基本的な部分はUnityで制作する予定でしたが、
Pythonで試してみたいと思います。
進捗度合いは8割くらいです。
2022/12/19時点の進捗2
完成しました。
以降はUIの改善やPythonでテキストマイニングを行いたいと思います。
進捗度合いは10割くらいです。
冬休み後の進捗
Pythonを使って、入力テキストに含まれている
名詞の一つを似た名詞に入れ替えるという機能を実装しました
課題設定
前回の冬休み課題でオウム返しソフトを制作できたため、
それを基に、対話システムを作ることが目標
結果
最初は自分でモデルを作ることにこだわっていましたが、
ChatGPTのAPIを組み込むことで、それなりのクオリティで作れました。
実際に動かしている動画
https://drive.google.com/file/d/1opp-3PtwQuJMdhwLDF7BY39FEuUPeVjc/view?usp=sharing
詳細は研究動画を参照してください。
(概要よりももう少し詳しく、いくつかのトピックを箇条書きして、たまに書き直す部分。このテキストはコピーした先では書かなくてOK)
(自分が日々とる、ゼミのログ、ランチミーティングで気になったことのメモなどを書く。このテキストはコピーした先では書かなくてOK)
(自分が日々読む、論文や書籍の記録を取る。GoogleDocsのSheets機能を活用し、閲覧可能にしておいてリンクをここに貼るのもOK。このテキストはコピーした先では書かなくてOK)
| 著者 | タイトル | 発表場所や出版社 | 掲載ページ 23〜56など(もしくは全体ページ数) | 発行年 | 内容の簡潔なまとめ | 内容の詳細メモ | 自分の研究との関連性のメモ | URL |
| Matthew B. Hoy | Alexa, Siri, Cortana, and More: An Introduction to Voice Assistants | MEDICAL REFERENCE SERVICES QUARTERLY | 全8ページ | 2018年 | ボイスアシスタントの現在の在り方と展望 | 展望の内容は気にする必要なし(古いため) | 自分の作りたいシステムの基礎の内容がまとめられている | https://www.tandfonline.com/doi/epdf/10.1080/02763869.2018.1404391?needAccess=true&role=button |
| 清水 共 | 投影ディスプレイ環境の構築 | 香川高等専門学校研究紀要 4(2013) | 全5ページ | 2013年 | 球体投影ディスプレイ環境とアミッド・スクリーンについて | 球体投影ディスプレイに関しては読んでいない。アミッド・スクリーンの推奨設備と環境について | アミッド・スクリーンは必須の技術ではないが、安価で応用が簡単なため試してみたい | https://www.kagawa-nct.ac.jp/libraryI/kagawakiyou/4/4-135.pdf |
| 木原 諒子, 柴崎 弘之介, 宮本 友樹, 片上 大輔 | アンドロイドを用いた言語的配慮を行う音声対話システムとスピーチレベルシフトの効果 | HAIシンポジウム 2023 | 全16ページ | 2023年 | ユーザとの関係性に応じた会話エージェントの提案 | まさにHAIという感じの論文 | 自身の研究にチャットボットの要素が必要なため、その参考になる。 | https://hai-conference.net/symp2023/proceedings/pdf/G-7.pdf |
| 石川 拓海, 岡藤 勇希, 松村 耕平, 馬場 惇, 中西 惇也 | ロボットの擬似的な食事行動がユーザの購買行動に与える影響の検証 | HAIシンポジウム 2023 | 全10ページ | 2023年 | 食事しているロボットを客が見て購買意欲が上がるか | 結論:上がる | 興味を引かれて読んだが研究との関連なし(後々、ページから削除予定) | https://hai-conference.net/symp2023/proceedings/pdf/P-6.pdf |
| 柳 朋輝, 米澤 朋子 | 仮想エージェントにおけるヤンデレの実装 | HAIシンポジウム 2023 | 全4ページ | 2023年 | 未記入 | 未記入 | 未読ですが、絶対に読むため仮置き | https://hai-conference.net/symp2023/proceedings/html/paper/paper-P-60.html |
同期や先輩(特に卒業生)の研究をwikiで追いかけるのって、つらくないですか?
それを解決するためにできるだけ区切りごとに進捗をまとめた動画を制作&共有します。
だいたいの流れは理解できるようになっていると思います。
コミカル度合いは反応しだいで変更します。
https://drive.google.com/drive/folders/16QtXU6dF89ql-15xOr579df4qeKqAVYa?usp=sharing
2023/04/06 ページ作成(未記入あり)
2023/05/04 文献ノート更新
23_Sampleに戻る