![[PukiWiki]](image/pukiwiki.png "[PukiWiki]")
舞踊の上達、理解に役立つ機能
ダンス上達促進システム。 現在考えているのは、AR等を使ってダンサーの動きに合わせてダンサーの見やすい位置に見本を見せるシステム など
振り付けなどを覚えやすくしたり、どこを改善すれば良いかがわかり、舞踊の上達が早くなる。
振り付けを一人でも覚えることがたやすくなる。
OpenPoseなど姿勢推定ができるものを使ってみる
・冬課題 サンプルを参考に、背景の色やサイズを変更した。
OpenPoseを使うためにインターネットで見つけたインストール手順で実行しようとしたものの、必須ソフトのバージョンが違うと機能しない、古いバージョンは有料など、無料で使用する方法は見つけられなかった。
画像のみだが、無料で姿勢推定ができるサイトを2つ見つけた。
[1]姿勢推定AI - 骨格推定機能を無料提供
https://humanpose-ai.userlocal.jp/human_pose?msclkid=cb6ac5a9b1c311ec9f81484274e55fe6
[2]VisionPose | 姿勢推定AIエンジン無料解析デモ
https://trial.visionpose.com/?msclkid=cb6b674db1c311ec84e716597ad57c4b
・春課題
1．顔認識のプログラミング。カメラから眉、目、鼻、口、顔の輪郭を読み取り同時にそのパーツの輪郭に位置・大きさを合わせて線を表示する。
2．顔に自動でスタンプを表示するプログラミング。目、鼻の位置・大きさを認識し、同時に画像を鼻の位置、額（ひたい）付近に動物の耳・鼻のスタンプを表示する。
3．表情認識をし、その表情に合ったスタンプを表示するプログラミング。喜び、悲しみのスタンプの位置、デザインをサンプルから変更。
参考サイト：
表情認識で SNOW 的なアプリ - こくぶん研究室 (kkblab.com)
https://kkblab.com/make/javascript/face.html?msclkid=f2233d1cb3ea11ec880512a5c73a3607#step2
（自分が日々読む、論文や書籍の記録を取る。GoogleDocsのSheets機能を活用し、閲覧可能にしておいてリンクをここに貼るのもOK。このテキストはコピーした先では書かなくてOK）
| 番号 | 著者 | タイトル | 発表場所や出版社 | URL | 掲載ページ 23〜56など（もしくは全体ページ数） | 発行年 | 内容の簡潔なまとめ | 内容の詳細メモ | 自分の研究との関連性のメモ |
| 1 | 森 鈴果, 田中 哉汰, 橋田 光代, 藤井 叙人, 片寄 晴弘 | 恋ダンスの達人：ポーズ推定を利用したダンスの「キレ度」採点システム | エンタテインメントコンピューティングシンポジウム2020論文集 | https://ipsj.ixsq.nii.ac.jp/ej/?action=pages_view_main&active_action=repository_view_main_item_detail&item_id=206540&item_no=1&page_id=13&block_id=8 | 113 - 114 | 2020 | 恋ダンスを対象にダンス動画から取得した時系列ポーズデータとそれに対応するキレ評価結果の組みから深層学習を用いてダンス動作のキレ度を推定するモデルの構築。 | キレは緩急の差と定義。Openposeでダンサーの骨格を取得する。ダンスのキレではフレーム前後の位置座標の変化が重要となり、位置座標のデータで最も精度が高かったとのこと。 | ダンスのキレという感性的な表現を機械で骨格の動きを判定し、採点もできる点は、ダンスの上達に役立つと感じた。 |
| 2 | 稲田健太郎, 石川孝明, 渡辺裕 | OpenPoseを用いた複数人のダンスの一致度評価 | 第80回全国大会講演論文集 | https://ipsj.ixsq.nii.ac.jp/ej/?action=pages_view_main&active_action=repository_view_main_item_detail&item_id=188922&item_no=1&page_id=13&block_id=8 | 257 - 258 | 2018 | Openposeで各部位の位置を読み取り、複数人のダンスの一致度を評価する。 | 首・両肩・両肘・両手首・両尻・両膝・両足首の13点が処理対象。タイミングのずれの許容時間を0.1秒とし、それ以上ずれている場合と同じピークがある人物が過半数に満たない場合を不正解とし、各座標で各人物の正解数から不正回数を引いた物を点数として一致度を評価。 | タイミングがどれほど合っているかという他の人との一体感を測定するもので、これを応用し、見本とどのくらいずれているかを判定すればダンスの上達に役立つと思われる。 |
| 3 | |||||||||
| 4 | |||||||||
| 5 |
22_Sumiに戻る
