第5章:特徴の評価とベイズ誤り確率 5・3:ベイズ誤り確率とは

Slides:



Advertisements
Similar presentations
北海道大学 Hokkaido University 1 情報理論 講義資料 2016/06/22 情報エレクトロニクス学科共通科目・2年次・第 1 学期〔必修 科目〕 講義「情報理論」第 5 回 第 3 章 情報源のモデル [ 後半 ] 3.5 情報源のエントロピー.
Advertisements

はじめてのパターン認識 第1章 第4グループ 平田翔暉. パターン認識 パターン認識 o 観測されたパターンを、あらかじめ定められ たクラスに分類すること クラス o 硬貨: 1 円玉、 5 円玉、 10 円玉、 50 円玉、 100 円玉、 500 円玉 o アルファベット: 26 種類 o 数字:
「 R 入門」 第6章:リストとデータフレーム 6.3 データフレーム 発表日:10月30日 担当者:脇坂恭志郎.
『わかりやすいパターン認 識』 第 5 章 特徴の評価とベイズ誤り確率 5.4 ベイズ誤り確率と最近傍決定則 発表日: 5 月 23 日(金) 発表者:時田 陽一.
潜在クラス分析入門 山口和範. 内容 条件付独立 シンプソンのパラドックス 対数線形モデルにおける表現 局所独立 潜在変数モデル Lem 入門.
ベイズの定理と ベイズ統計学 東京工業大学大学院 社会理工学研究科 前川眞一. 2 Coffe or Tea 珈琲と紅茶のどちらが好きかと聞いた場合、 Star Trek のファンの 60% が紅茶を好む。 Star Wars のファンの 95% が珈琲を好む。 ある人が紅茶を好むと分かったとき、その人が.
第1回 確率変数、確率分布 確率・統計Ⅰ ここです! 確率変数と確率分布 確率変数の同時分布、独立性 確率変数の平均 確率変数の分散
高度情報演習1A “テーマC” 実践 画像処理プログラミング 〜画像認識とCGによる画像生成〜 第四回 演習課題 画像中からの物体抽出処理(背景情報を手がかりとして) 芝浦工業大学 工学部 情報工学科 青木 義満 2006/05/15.
「わかりやすいパターン認識」 第1章:パターン認識とは
分散分析マスターへの道.
国内線で新千歳空港を利用している航空会社はどこですか?
最適間接税.
Pattern Recognition and Machine Learning 1.5 決定理論
プログラミング基礎I(再) 山元進.
Reed-Solomon 符号と擬似ランダム性
「データ学習アルゴリズム」 第3章 複雑な学習モデル 3.1 関数近似モデル ….. … 3層パーセプトロン
上坂吉則 尾関和彦 文一総合出版 宮崎大輔2003年6月28日(土)
データ構造と アルゴリズム 第二回 知能情報学部 新田直也.
群別・男女別の平均.
人工知能概論 第6章 確率とベイズ理論の基礎.
「データ学習アルゴリズム」 第2章 学習と統計的推測 報告者 佐々木 稔 2003年5月21日 2.1 データと学習
【小暮研究会2】 「ベイズのアルゴリズム」:序章 【1,2:計量経済分析と統計分析】 【 3:ベイズ定理】
analysis of survey data 第3回 香川大学経済学部 堀 啓造
第4章 線形識別モデル 修士2年 松村草也.
発表日:平成15年4月25日 担当者:時田 陽一 担当箇所:第3章 誤差評価に基づく学習 3.1 Widrow-Hoffの学習規則
パターン認識とニューラルネットワーク 栗田多喜夫 2018/11/8 早稲田大学大学院理工学研究科講義.
サポートベクターマシン によるパターン認識
6.大人数クラスの運営法 ゲーム理論 出席の取り方 まわし方(4通り) →出席表を2回まわす 1回目10:50~ 2回目11:20~
3. 可制御性・可観測性.
画像認識レポート課題 ガイダンス.
7. 音声の認識:高度な音響モデル 7.1 実際の音響モデル 7.2 識別的学習 7.3 深層学習.
第9章 混合モデルとEM 修士2年 北川直樹.
混合ガウスモデルによる回帰分析および 逆解析 Gaussian Mixture Regression GMR
人工知能特論 9.パーセプトロン 北陸先端科学技術大学院大学 鶴岡 慶雅.
モデルの逆解析 明治大学 理工学部 応用化学科 データ化学工学研究室 金子 弘昌.
音響伝達特性を用いた単一マイクロホンによる話者の頭部方向の推定
第5章 特徴の評価とベイズ誤り確率 5.5 ベイズ誤り確率の推定法 [1] 誤識別率の偏りと分散 [2] ベイズ誤り確率の上限および下限
第6章 特徴空間の変換 6.1 特徴選択と特徴空間の変換 6.2 特徴量の正規化 平成15年5月23日(金) 発表者 藤井 丈明
訓練データとテストデータが 異なる分布に従う場合の学習
音色空間の音高依存性を考慮した 楽器音の音源同定
第7章 疎な解を持つカーネルマシン 修士2年 山川佳洋.
予測に用いる数学 2004/05/07 ide.
Minoのブロック配置のデータ構造 K.Yonezawa.
プログラミング基礎a 第7回 C言語によるプログラミング入門 ファイル入出力
2009年12月4日 ○ 前田康成(北見工業大学) 吉田秀樹(北見工業大学) 鈴木正清(北見工業大学) 松嶋敏泰(早稲田大学)
Data Clustering: A Review
東北大学 大学院情報科学研究科 応用情報科学専攻 田中 和之(Kazuyuki Tanaka)
母音[i]のF1, F2平均値の分析.
パターン認識特論 担当:和田 俊和 部屋 A513 主成分分析
様々な情報源(4章).
決定木-II 学習目標 1.○与えられた事例集合から,指定された属性選択基準に基づいて決定木を生成 できる 利得 利得比
分散分析、判別分析、因子分析.
パターン認識とニューラルネットワーク 栗田多喜夫 2019/4/26 早稲田大学大学院理工学研究科講義.
プログラムの基本構造と 構造化チャート(PAD)
不完全な定点観測から 真の不正ホストの分布が分かるか?
第4章 識別部の設計 4-5 識別部の最適化 発表日:2003年5月16日 発表者:時田 陽一
「データ学習アルゴリズム」 第3章 複雑な学習モデル 報告者 佐々木 稔 2003年6月25日 3.1 関数近似モデル
わかりやすいパターン認識 第7章:部分空間法  7.1 部分空間法の基本  7.2 CLAFIC法                  6月13日(金)                  大城 亜里沙.
楽器音を対象とした音源同定: 音高による音色変化を考慮する識別手法の検討
第3章 線形回帰モデル 修士1年 山田 孝太郎.
クロス表とχ2検定.
第9章 学習アルゴリズムとベイズ決定側 〔3〕最小2乗法とベイズ決定側 発表:2003年7月4日 時田 陽一
音色空間の音高依存性を考慮した 楽器音の音源同定
わかりやすいパターン認識 第3章 誤差評価に基づく学習 3.3 誤差逆伝播法.
わかりやすいパターン認識 第6章 特徴空間の変換 6.5 KL展開の適用法 〔1〕 KL展開と線形判別法 〔2〕 KL展開と学習パターン数
「データ学習アルゴリズム」 第3章 複雑な学習モデル 報告者 佐々木 稔 2003年8月1日 3.2 競合学習
プログラミング基礎a 第7回 C言語によるプログラミング入門 ファイル入出力
Fourier 変換 Mellin変換 演習課題
雑音環境下における Sparse Coding声質変換 3-P-49d
混合ガウスモデル Gaussian Mixture Model GMM
Presentation transcript:

第5章:特徴の評価とベイズ誤り確率 5・3:ベイズ誤り確率とは 「わかりやすいパターン認識」 第5章:特徴の評価とベイズ誤り確率 5・3:ベイズ誤り確率とは

男女の性別判定問題 男女の特徴の違いには様々な物がある。 それらの特徴を用いても男女の判別が正しく行われ事は難しい。 例)男女の身長の平均は男性のほうが高いが、必ず男性が女性より高いとは限らない →特徴そのものの不完全さ

2クラス問題の定式化 =男、  =女、特徴ベクトル

誤り確率 入力 に対する誤り確率は 起こりうる全ての に対する誤り確率

ベイズ決定則  を最小にするには以下の判定方法を取る これは事後確率      を最大にする  を結果として出力する。 →ベイズ決定則

ベイズ誤り確率    の最小値を   で表す。 同様に  の最小値を  で表す。   →条件付ベイズ誤り確率 →ベイズ誤り確率

多クラスの場合 ベイズ決定則  ※以下のどちらでもよい ベイズ誤り確率

識別関数 ベイズ決定則の式より     が識別関数として使用できる。 →ベイズ識別関数

Coffee break:エントロピー(1) エントロピー:不確定度(曖昧さ)  の観測前のエントロピー  の観測後のエントロピー によってもたらされる情報量

Coffee break:エントロピー(2)  を観測することにより確率の偏りが出来、これがエントロピーの減少つまり情報となって現れる。 ベイズの定理は事前確率を事後確率に変換する式だと考えることが出来る。