22_Yanagi_Note の履歴(No.2)

• 履歴一覧
• 差分 を表示
• 現在との差分 を表示
• ソース を表示
• 22_Yanagi_Note へ行く。
  • 1 (2022-01-06 (木) 23:01:32)
  • 2 (2022-04-07 (木) 02:00:24)
  • 3 (2022-04-28 (木) 02:08:13)
  • 4 (2022-04-28 (木) 02:20:43)
  • 5 (2022-05-10 (火) 03:20:30)
  • 6 (2022-05-19 (木) 02:12:34)
  • 7 (2022-06-02 (木) 02:13:24)
  • 8 (2022-06-12 (日) 18:27:13)
  • 9 (2022-07-04 (月) 06:40:07)
  • 10 (2022-07-04 (月) 09:35:56)
  • 11 (2022-07-14 (木) 02:38:21)
  • 12 (2022-09-23 (金) 08:04:55)
  • 13 (2022-11-22 (火) 05:38:47)
  • 14 (2023-04-09 (日) 06:28:54)

---

22_Yanagi

研究の概要†

カゲロウプロジェクトに登場するエネやDoki Doki Literature Clubに登場するMonikaのような
生きている（ような）仮想エージェントの外見を構築する

研究タイトル†

0/1の世界に住む自分だけの相方を

研究キーワード†

（研究の特色の伝わるキーワード。６〜１０くらい）

• 仮想エージェント
  • 人型
  • イラストチック（非リアル）
  • 感情・葛藤
• 現実と非現実の融合
  • AR・VR
• パートナー

研究は何を目指すものか（目標）†

外見や印象など個性を生む技術を構築し、そこに既存のAR/VR技術を内包することで
利便性と独自性を融合した仮想エージェントを生みだすこと

この研究がうまくいけば何が実現するのか（将来、可能性、応用など）†

AR/VR技術がより親しみやすくなり技術の普及や発展に繋がる
また仮想エージェントだけではなく現実のエージェントにも適応させることで
SFなどに登場するオートマタの誕生に寄与する…かもしれない

この研究の新規性・新奇性†

生きているような外見や言語処理を可能とする技術は存在しているが
それらを複合的かつ自動的に行うシステムは成熟しておらず新規性はあると考える

この研究の有用性†

技術の発展や普及の土台となる
またストレスや孤独死などの精神面から生じる問題のケアにも活用できるのではないか

目指すシステムの形（どういう入力でどういう出力があるか。何ができるか。）†

PCやスマートフォンの画面を仮想空間としてそこを自由に動き回るアバターを表示
ソフトやアプリにアクセスしたりすることも可能
その他のシステムは内蔵する技術によって多岐にわたると思われる
入力は音声とカメラ映像を想定している

システムのターゲットユーザ†

未定

システムの活用シーン†

未定

研究トピック（議題）整頓†

• インプット・アウトプットに関して
  • 「生きているように表現するにはどうするのか」「感情をどのように表現するか」
  • 「どのようにこちらの言葉を理解させるか」「リアルの状況をいかにして伝えるか]…etc

• 思考プロセスに関して
  • 機械的な思考＋人間的な思考→エージェント特有の葛藤を生み出す(?)

• エージェントの外見に関して
  • 「萌え」をいい感じ（？）にイラストに落とし込んだのが理想
    当面は2DでL2Dとかで動かすことを目標に。感情とパーツの動きを連動とかできると良き
    練習頑張る。参考にしたい絵師さんは整理して添付しておく

研究ノート†

• エージェント（（仮））を作ってみた[＋合成音声に挑戦してみたけど無理だった]（2022春課題）
  〇立ち絵を作ってアニメーションを作る
  kritaでpsdを作成→Anime Effectで取り込んでコマ打ちして作成
  ・neutral.gif
  ・smile.gif
  （gif添付…したいけどやりかたがわからない…）
  コマ打ちは全て手動で設定。自身なりに生きているような表現を頑張ってみた
  大まかな動きは移動・回転・拡縮で、髪や腕の細かい動きはボーンとメッシュを組み込んで表現
  Anime Effectはボーンの設定が大雑把すぎて細かい表現（手先とか関節とか）ができない
  

  #ref(): File not found: "作業風景3-4.png" at page "22_Yanagi_Note"

  L2Dのようなメッシュ自体を動かしてアニメーションを制作するか
  プログラム側で自動的に動かす方法を用いるほうがいいかも
  
  △プログラム上でアニメーションを再生してあるアクションを条件に切り替える
  アクションがない場合はneutralを、何らかのアクションが実行された場合はsmileを表示しようとした
  neutralを連番pngにして配列に放り込んで表示することはできたが
  アクションによる分岐をどのように組み込めばいいかわからなかったので後回し中…
  

  #ref(): File not found: "作業風景5.png" at page "22_Yanagi_Note"

  (matplotlibでこういったイラストgifを動かすのが間違っている気がしなくもない…)
  tkinterを用いてGUI内にmatplotlibのグラフを表示する手段はあるのでそれを応用できるかもしれない
  pythonの実行方法はメモの方にだらだら書いていたUbuntu(Linux)経由のやつ
  合成音声＋言語処理を使わない限りpythonにこだわる必要もないのでprocessingで再挑戦する
  
  ×合成音声をつかってしゃべらせる
  python上で実行可能なライブラリ（つくよみちゃんトークソフト）を使おうと思っていたけど
  環境構築もそうだしrequirementsでライブラリをインストールしても正常に起動しなかった
  そもそも仕組みがよくわからない
  使おうと思っていたライブラリ:https://github.com/shirowanisan/tsukuyomichan-talksoft
  

文献ノート†

（自分が日々読む、論文や書籍の記録を取る。GoogleDocsのSheets機能を活用し、閲覧可能にしておいてリンクをここに貼るのもOK。このテキストはコピーした先では書かなくてOK）

---

22_Yanagiに戻る