NIME04 Rencon 開催報告と 次回への課題 ○ 野池賢二(さきがけ研究21) 橋田光代(和歌山大学,さきがけ研究21) 平田圭二( NTT CS 研) 片寄晴弘(関西学院大学,さきがけ研究21) 平賀瑠美(文教大学)

Slides:



Advertisements
Similar presentations
「 DTM と職業」に関する調査と DTM 楽曲の制作 北海道情報大学 情報メディア学 部 情報メディア学科 新井山ゼミ 宮本 拓美.
Advertisements

提示順と判定基準が レレバンス判定に与える影響 安形 輝(亜細亜大学)
生物統計学・第 5 回 比べる準備をする 標準偏差、標準誤差、標準化 2013 年 11 月 7 日 生命環境科学域 応用生命科学 類 尾形 善之.
六角大王による 3DCG の作成 北海道情報大学 情報メディア学 部 情報メディア学科 新井山ゼミ 田中 聡.
DTM を使った楽曲制作 DTM を扱う職業などの調査 北海道情報大学 情報メディア学 部 情報メディア学科 新井山ゼミ 宮本 拓美.
DTM を使った楽曲制作 DTM を扱う職業などの調査 北海道情報大学 情報メディア学 部 情報メディア学科 新井山ゼミ 宮本 拓美.
MusicXML(4R) 形式について 野池賢二 2006 年 6 月 2 日. 目次 MusicXML と MusicXML(4R) の違い 表情情報つきの MusicXML の作り方 Rencon キットについて.
DTM を使った楽曲制作 DTM を扱う職業などの調査 北海道情報大学 情報メディア学 部 情報メディア学科 新井山ゼミ 宮本 拓美.
本当はすごい 「トムとジェリ ー」 Yozik. トムとジェリーとは (1) ネコのトムとネズミのジェリーが繰り広げるドタバタコメディアニ メーション。
情報モラルと著作権 道徳・特別活動・総合的な学習の時間. 目次  情報モラル 情報モラル  著作権 著作権  関連する Web ページの紹介 関連する Web ページの紹介.
DTM を使った楽曲制作 DTM を扱う職業などの調査 北海道情報大学 情報メディア学 部 情報メディア学科 新井山ゼミ 宮本 拓美.
DTM を使った楽曲制作 DTM を扱う職業などの調査 北海道情報大学 情報メディア学 部 情報メディア学科 新井山ゼミ 宮本 拓美.
片寄 晴弘 関西学院大学 情報科学科・文学研究科 さきがけ研究21
小学校におけるICTを使った 音楽科教材開発
組織の経営学 第1章 ニモ・クルー・からあげ.
DTMを使用した楽曲制作 楽曲紹介のWebサイト制作
インターネットで楽しく学ぼう! 「みて、きいて、わかる 画像処理」 「画像」の基礎知識 マイクロソフト株式会社.
Java I 第2回 (4/18)
資料1-4 平成27年度 第1回技術委員会 2015年度技術委員会の目標と 検討項目(案)
神戸大学大学院国際文化学研究科 外国語教育論講座外国語教育コンテンツ論コース 神戸 花子
DTMを使った楽曲制作 DTMを扱う職業などの調査
-心理的時間を共創するシステム- 三 宅 美 博 東京工業大学 大学院総合理工学研究科
5.電子成果品のチェック方法について.
Linked e-Stat インディゴ株式会社 STAT DASH グランプリ 2016 行政サービス開拓部門 2016/3/5
XMLについて 蔡柏東.
モーツァルトの手法に着想を得た ランダム作曲法
東京大学保健社会学同窓会シンポジウム 「保健社会学の発想と方法」 2005年12月10日 聖路加看護大学 中山和弘
母分散が既知あるいは大標本の 平均に関する統計的検定
U40(アンダー40) 「文化魅力育成プロジェクト」
~認知科学とコンピュータサイエンスの融合~
環境情報学部3年 所属KG:mao ログイン名:wakutin
クラシック音楽普及プロジェクト KG:mao B3 wakutin.
聴き比べに特化した 音楽の鑑賞と知識学習のための Webアプリケーション
「情報セキュアド ネット講座」 のご案内 (法人コース向け)
「教育工学をはじめよう」  第2章     学会発表に向けて     プロポーザルを書く 発表 菊池 陵  皂 智樹.
Criterionの利用について (2017年度版)
1.保有データを自治体Webサイトで公開しよう①
spring ushers in life everywhere;
平成29年度 地域内や観光地における電動小型低速車の 活用に向けた実証実験の企画募集 企画提案書
音高による音色変化に着目した 音源同定手法
On the Move参加報告.
コードクローンに含まれるメソッド呼び出しの 変更度合の分析
ドビュッシーと音楽における印象主義 A Study on the Relationship Between Debussy and Impressionism in Music 1DS04189P 田丸藍子 指導教員 太田昇一教授.
広瀬啓吉 研究室 4.音声認識における適応手法の開発 1.劣条件下での複数音源分離 5.音声認識のための韻律的特徴の利用
システム演習B課題演習報告 森山了一(鈴木研究室)
音高による音色変化に着目した音源同定に関する研究
遺伝子導入効率No.1を目指す ナノ・ニードル基板デバイスの開発
Specmurtを利用した調波構造行列による 混合楽音解析の検討
2004年11月22日卒業論文中間発表 「Webの読みやすさ 実験ツールの開発」
Basis vectors generation
NMF と基底モデルを用いた多重楽音解析 2-P-10 中鹿亘 ・ 滝口哲也 ・ 有木康雄 (神戸大) 概要 従来手法の問題点 提案手法
1.保有データを自治体Webサイトで公開しよう①
プログラミングコンテストシステムへの 提出履歴データとその分析
情報技術演習Ⅰ 人文学研究のための情報技術入門 2017/06/08
学修する科目やプログラムの内容 世界の留学生と交流学習プログラム in New York
確率と統計2009 第12日目(A).
コードクローン分類の詳細化に基づく 集約パターンの提案と評価
Designing Robots in the Wild
資料2-2 平成26年度 第2回技術委員会資料 次年度検討テーマ案
BSJ特別セッション(2001、甲子園大学) 「人間科学データの蓄積と利用」 指定討論2 林 篤裕 (大学入試センター)
法数学のための 機械学習の基礎 京大(医) 統計遺伝学分野 山田 亮 2017/04/15.
「アルゴリズムとプログラム」 結果を統計的に正しく判断 三学期 第7回 袖高の生徒ってどうよ調査(3)
平成17年度鈴木研究室ゼミ発表 2005/8/7 教育情報システム学講座4年 :継田 優子 2019年5月5日(日)
重みつきノルム基準によるF0周波数選択を用いた Specmurtによる多重音解析
情報教育論 最終課題 「授業計画書の作成」 2001.1.22
富岳3776景 防災 減災 少子 高齢 産業 創出 富岳3776景 誕生の キッカケ 富岳3776景 でこう 変わった!
第2回実務者会議の議論を受けた検討(データWG関係)
図表:NZGOALの審査および公開プロセスに関するフローチャート
1.保有データを自治体Webサイトで公開しよう①
第2回実務者会議の議論を受けた検討 資料14 1 第2回実務者会議での議論の概要 (○:有識者意見、●:関係府省意見) 1
Presentation transcript:

NIME04 Rencon 開催報告と 次回への課題 ○ 野池賢二(さきがけ研究21) 橋田光代(和歌山大学,さきがけ研究21) 平田圭二( NTT CS 研) 片寄晴弘(関西学院大学,さきがけ研究21) 平賀瑠美(文教大学)

演奏表情付けシステムの歴史 –1980 年代 アドホックな表情付けルールの作成と適用 –1990 年代 学習型システムの出現 認知的構造理論への留意 –2000 年代 評価方法の問題 すごい !? ちょっと 変? 公平な評価の方法は 定量的な評価の方法 は?

Rencon 発足 演奏生成システムを,演奏コンテストによっ て評価するプロジェクト “Rencon” を 2000 年 に発足 ( Rencon : Performance Rendering Contest ) 表情付けシステムに限らず,生成系システム の評価方法のひとつの切り口 公平な評価方法,定量的な評価方法の確立を 目指す

Rencon ロードマップ ↑ 現在このあたり

Rencon 開催の歴史 ICAD2002 Rencon ( 京都) –Performance Rendering Systems: Today and Tomorrow FIT2002 Rencon 東京) –Toward the Number One Pianist in the World IJCAI-03 Rencon アカプルコ) –on methods for automatic music performance and their applications in a public rendering contest NIME04 Rencon 浜松) – Turing Test for Musical Expression

NIME04 Rencon NIME(New Interfaces for Musical Expression) 「音楽/芸術表現のための新インタフェース」 国際会議 のデモセッションとして開催 日程 : 2004 年 6 月 3 日(木)~ 5 日(土) 開催地:静岡文化芸術大学(浜松)

開催プログラム 3 日 ( 木 ) 13: :00 ( 演奏と生成システムとの対応を伏せた状態での聴き比べ投票 ) 4 日 ( 金 ) 13: :00 ( 演奏と生成システムとの対応を伏せた状態での聴き比べ投票 ) 15: :20 研究発表,, 表彰 Rumi Hiraga, Roberto Bresin, Keiji Hirata, Haruhiro Katayose: Rencon 2004: Turing Test for Musical Expression Haruhiro Katayose, Keita Okudaira: Using an Expressive Performance Template in a Music Conducting Interface Hideki Kawahara, Hideki Banno, Masanori Morise: Acappella synthesis demonstrations using RWC music database 5 日 ( 土 ) 13: :00 オープン聴き比べコンテスト ( 演奏と生成システムとの対応がわかる状態での聴き比べ ) ブラインド聴き比べコンテスト ブラインド聴き比べコンテスト 聴き比べ結果の発表 統計的 分析

コンテスト実施要綱 規定部門 : ショパン作曲の小品聴き比べ – 提出形式 : SMF – 聴き比べ音源 : Nemesys GIGA Piano – 評価項目 : 演奏の人間らしさ,演奏の好み (それぞれ 5 段階評 価) 自由部門 : ジャンル,楽曲,楽器等に規定のない聴き比 べ – 提出形式 : 任意 – 聴き比べ音源 : 任意 – 評価項目 : 演奏の好み ( 5 段階評価) – 今回は,特に歌声生成を集めた 逆チューリングテスト ( ): 演奏の機械らしさの聴き 比べ – 提出形式 : SMF – 聴き比べ音源 : Nemesys GIGA Piano – 評価項目 : 演奏の機械らしさ,演奏の好み (それぞれ 5 段階評 価) Gnirut

コンテスト実施 総エントリ数: 18 エントリ(演奏時間 30 分 弱) → 2 時間のセッションで 4 回の聴き比べ ブラウザを利用した聴き比べシステム NIME04 参加者の多くが参加 – 少人数ずつではあるが, 3 日間を通して途切れるこ とがほとんどなかった 熱心な投票者が多い 有効投票数 51 票

The Director Musices Program : Roberto Bresin (KTH) –Prelude Op.28 No.7 Ha-Hi-Hun : 平賀瑠美(文教大), 平田圭二( NTT CS Lab ) –Etude Op.10, Nr.3 “Chanson de L‘Adieu” (人間の演奏): はるか(ピアノ教師) –Etude Op.10, Nr.3 “Chanson de L‘Adieu” COPER : 野池賢二( PRESTO/JST ), 豊田健一(関学), 片寄晴弘( PRESTO/JST, 関 学) –Etude Op.10, Nr.3 “Chanson de L‘Adieu” Kagurame Phase-II : 鈴木泰山(株式会社デュオシステムズ) –Etude Op.10, Nr.3 “Chanson de L‘Adieu” (人間の演奏): はるか(ピアノ教師) –Valse Op.64, Nr.1 WALTS (後の PopE ): 橋田光代( PRESTO/JST, 和歌山大), 片寄晴弘 ( PRESTO/JST, 関学) –Impromptu, Op.66 “Fantasie-Impromptu” – (表情なし, テンプレート適用, テンプレート適用 +2 小節目第 4 拍目手動調節) 規定部門エントリ 同じ楽曲,同じ音源での聴き比べ(学習データなどは異 なる)

自由部門 SuperConductor TM : – 黒澤 隆 ( フロンティアKインターナショナル株式会社 ), Manfred Clynes, –J. S. Bach, Brandenburg Concerto No.5, D Major, 3rd Movement RUBATO : Guerino Mazzola, Joachim Stange-Elbe (University of Zurich) –J. S. Bach, The Art of Fugue, Contrapunctus III WONDER HORN : 青野裕司 (NTT サイバースペース研究所 ) – 森山直太朗, さくら(独唱) HMM-based singing voice synthesis system : 酒向慎司 ( 東京大学大学院 ) – しあわせなら手をたたこう STRAIGHT : 河原 英紀, 坂野秀樹, 森勢将雅 ( 和歌山大 ) – 武満 徹, Small Sky (参考出品) Vocaloid : YAMAHA, Zero-G, (データ作成: 池淵 隆(大 阪芸大)) –John Bettis / Richard Carpenter, ``Yesterday Once More'‘ 歌声生成の聴き比べ

逆チューリング部門( Gnirut ) The Director Musices Program : Roberto Bresin (KTH) –J. S. Bach, The Well-Tempered Clavier, Prelude I, BWV 846 (人間の演奏) : はるか(ピアノ教師) –J. S. Bach, The Well-Tempered Clavier, Prelude I, BWV 846 (人間の演奏): はるか(ピアノ教師) –J. S. Bach, Invention I, C Major 同じ楽曲,同じ音源での聴き 比べ

規定部門「演奏の人間らしさ」投票結果 有意水準 5% で標本平均に有意な差がある境界 3 グループに分かれる 同じ楽曲,同じ音 源

規定部門「演奏の好み」投票結果 人間らしさの結果と逆 有意水準 5% での境界

自由部門「演奏の好み」投票結果 歌声生成

逆チューリング部門「演奏の機械らしさ」投票結 果 同じ楽曲,同じ音 源

逆チューリング部門「演奏の好み」投票結果 同じ楽曲,同じ音 源

全部門「演奏の好み」投票結果 すぐ上との間には有意差がないので,二つ上との有意差を調べた

研究発表セッションの様子 Rumi Hiraga, Roberto Bresin, Keiji Hirata, Haruhiro Katayose:  Rencon 2004: Turing Test for Musical Expression Haruhiro Katayose, Keita Okudaira:  Using an Expressive Performance Template in a Music Conducting Interface Hideki Kawahara, Hideki Banno, Masanori Morise:  Acappella synthesis demonstrations using RWC music database

Rencon Award 規定部門 –WALTS (テンプレート適用): 橋田光代( PRESTO/JST, 和歌山大), 片寄晴弘( PRESTO/JST, 関 学) Impromptu, Op.66 “Fantasie-Impromptu” 自由部門 –SuperConductor TM : 黒澤 隆 ( フロンティアKインターナショナル株式会社 ), Manfred Clynes, J. S. Bach, Brandenburg Concerto No.5, D Major, 3rd Movement 逆チューリング部門 –The Director Musices Program : Roberto Bresin (KTH) J. S. Bach, The Well-Tempered Clavier, Prelude I, BWV 846

聴き比べコンテスト実施上の検討項目 聴き比べ用音源の仕様公開 – ペダリング不自然さの解消 – 聴き比べ時の音源のコントロールデータなどの仕様を,できるだけ詳細に公開 する – エントリ希望者に音源を貸与する – エントリ者が聴き比べ時の音響データを実際に確認できる「試し聴きシステ ム」を提供する 投票者の負担への対処 – 投票者自身へのフィードバックが必要 – チューリングテスト方式の場合は,答え合わせができるように する – 自分の投票による結果の変化をその場で見せる – かつての聴取実験に照らし,被験者の聞き方タイプの分析結果 をフィードバックする, – インターネットを利用した Rencon 実施 共通学習データセット,評価データの準備 –MusicXML(4R) 形式でのデータセットの準備が進行中

評価方式の考慮 公平な評価,評価結果の信頼性の向上,生成に 関しての恣意性の排除 – 「人手の介入度合い」の考慮が必要 – フィギュアスケートの採点のような,技術点評価の 導入

エントリ楽曲の著作権 現状 – エントリ者側で解決してもらう –Rencon 配布 CD には収録しない 今後,考慮していくべきこと –RWC コーパスの活用 – エントリ楽曲の著作権についてのチェック

まとめ 第4回 Rencon 「 NIME04 Rencon 」を開催した エントリに人間の演奏を含め,チューリングテス ト方式を実施した 自由部門を設置し,歌声生成の聴き比べを行った 投票結果について,簡単な統計的分析を行った 2005 年は, ICMC にて開催できるよう準備が進行 中 Rencon Web サイト: –