![[PukiWiki]](image/pukiwiki.png "[PukiWiki]")
#author("2021-05-27T11:24:40+09:00","","") #author("2021-05-27T11:52:16+09:00;2021-05-27T11:24:40+09:00","","") * 研究の概要 [#w6de4ca1] 周波数（音の高さ）や音量、リズム、歌詞情報などの音楽情報を総合的に視覚表現する研究をしています。 ** 研究タイトル [#j4132eea] 音楽を可視化したミュージックビデオを作成するシステムの研究 **研究キーワード [#pfe3873a] 音楽、映像、可視化、オーディオビジュアライズ、PureData、Processing -主要なキーワード１ --音楽 --映像 --歌詞情報 --可視化 -それに関係する追加キーワード --MV --Pure Data --Processing --テキストマイニング(Python) **研究は何を目指すものか（目標） [#o293498d] 音楽情報を視覚情報にまとめて表現する。 **この研究がうまくいけば何が実現するのか（将来、可能性、応用など） [#if72b70f] 新しい音楽の楽しみ方を提案できる。 **この研究の新規性・新奇性 [#j560a5f5] MVという形式であることや、歌詞情報やアーティスト情報までを含めて視覚化すること。 **この研究の有用性 [#v4581b34] 視覚だけでも音楽として楽しむことができる。 **目指すシステムの形（どういう入力でどういう出力があるか。何ができるか。） [#g862eeab] 周波数、音量、リズム、歌詞情報、アーティスト画像を出力し、MV(音楽情報と数値的に関連性の高い映像)として出力 **システムのターゲットユーザ [#wd1e2254] 音楽が好きな人、聴覚障害者 **システムの活用シーン [#iddfed73] 音楽表現の幅を広げることによって、聴覚にとどまらない楽しみ方ができる。 * 研究トピック（議題）整頓 [#wc86f10c] --PureDataで周波数を数値化 --Processingで音量を数値化 --OSCでPureDataとProcessingを統合 --テキストマイニングによる歌詞情報の分析 * 研究ノート [#l209c850] **最近の計画 [#o8fbfdc7] ***ゼミ合宿の目標[#ee52a4be] リズム(BPM)の入力方法の模索 ***冬休みの課題目標[#ve308d58] 数値化した音楽情報の出力方法を確立する ***後期終了時の課題目標（１月まで）[#hc600b51] テキストマイニングによる歌詞情報の抽出・入力・出力 **ゼミのログ [#w5bf922b] ログの分量が多すぎるので後でまとめます。 **卒論ドラフト [#w5bf922b] [[卒論ドラフト Ver.1:https://docs.google.com/document/d/147MDkdRykenq64T5P3bM7plMEGXUFC5y6L0JghIyrL8/edit?usp=sharing]] **Reserch Question [#fd80dd97] -音楽とその音楽の視覚化映像を同時表示することで新しい音楽体験を作ることができるか(1層目) --新しい音楽体験を作り出すために必要な視覚化の要素は何か(2層目) ---音量に関連性を持つ視覚化なのか(3層目) ---音高に関連性を持つ視覚化なのか ---歌詞と歌詞に合わせた背景色の視覚化なのか ---メタ情報に基づいた画像表示の視覚化なのか~ &br; -どのリサーチクエスチョンに答えるためにどういうシステムを提案・実装したのか --2層目のRQに答えるために、音楽に関連性を持つ4種類の映像表現が可能な音楽視覚化システム -どのリサーチクエスチョンに答えるような実験をするつもりか --3層目ののRQに答える実験をする予定 **実験計画書 [#w5bf922b] [[実験計画書1:https://docs.google.com/document/d/1iyW37FMvTb6p1PIsZTdO1cYcr1BqeIZelWEuoda5V54/edit?usp=sharing]] **ポスター [#w5bf922b] [[ポスター:https://drive.google.com/file/d/1wEWoyE7ozyCl81zyrbioMipUBFMkEXfi/view?usp=sharing]] * 文献ノート [#k60eb404] |著者 |タイトル |発表場所や出版社 |掲載ページ 23〜56など（もしくは全体ページ数） |発行年| 内容の簡潔なまとめ| 内容の詳細メモ| 自分の研究との関連性のメモ| |伊藤 貴之 |[[ユーザインタフェースとしての音楽情報可視化:http://itolab.is.ocha.ac.jp/~itot/paper/ItotAJ15.pdf]] |可視化情報学会誌特集・連載記事原稿見本 |5 | 2015 年 35 巻 136 号 p. 3-7| グラデーション画像でプレイリストを表現| 視覚化・ビジュアル音楽推薦| 音楽の特徴を視覚的に表現するところ| |M-ON! MUSIC編集部(アレクサンダー・チェン) |[[グーグルのクリエイティブディレクターが「音」を視覚化するとこうなった:https://www.m-on-music.jp/0000004031/]] |https://www.m-on-music.jp/0000004031/ |1 |2015/09/05| 数学的に関連性の高い音楽と映像表現| 自分の作りたいものの理想のビジュアルに近い| 音楽を目で感じ取ることができる| |平賀 瑠美、宮崎 麗子、藤代 一成 |[[演奏可視化-その意義と例:https://www.ieice.org/publications/conference-FIT-DVDs/FIT2002/pdf/G/G_1.PDF]] |FIT（情報科学技術フォーラム） |2 |2002| 演奏を可視化して視覚での楽しみ方を作る| 視覚化で新しい視点を獲得するのが目的だった| 研究の目標として新視点を獲得する、というのは同じだった| |松原 正樹 |[[音楽情報可視化による多面的視点の獲得:https://www.jstage.jst.go.jp/article/jvs/35/136/35_8/_pdf/-char/ja]] |可視化情報 Vol.35 No.136 |5 |2015/1| 音楽における多面的視点を可視化によって認知する| 騙し絵のようにうさぎに見えたり、鳥に見えたりする画像がある。それと同様に音楽にもそういった特性があることを特に楽譜における視覚化で認知しようという内容| 多面的視点は音楽においても存在することがわかる| |上原 美咲、伊藤 貴之 |[[コード進行・メタ情報・楽曲特徴量に基づく音楽可視化:https://db-event.jpn.org/deim2015/paper/85.pdf]] |DEIM Forum |5 |2001| 3つの情報を統合して視覚化し、曲の相対性を示す研究| 楽曲特徴量、コード進行、メタ情報の3つを統合して視覚化する内容。ユーザの音楽嗜好性の理解や、曲同士の相対性を観察することが目的だった| 視覚化する要素は私の研究に似ている部分が多いが、視覚化した情報を相対的に3軸のグラフに表現するところは違った| ~ ~ ~ ~ ~ ~ #hr [[20_Nishino]]に戻る
