mi-8. 自然言語処理 人工知能を演習で学ぶシリーズ(8)

Slides:



Advertisements
Similar presentations
1 課題の洗い出し. 2 1.本日の日程 ①開会の挨拶 日程説明 ( 5 分) ②自己点検 ( 10分) ③情報モラル指導の必要性(プレゼン) (20分 ) ④課題の洗い出し ( 10分) ⑤全体計画についての協議Ⅰ (15 分) ⑥全体計画についての協議Ⅱ (20 分) ⑦全体計画についての協議Ⅲ.
Advertisements

情報処理3 アプリケーション プログラミング 今井孝明.
プログラミングとは Q.プログラムとは何か? A.コンピュータを制御するための,コンピュータに対する命令(指示)の集まり.
自然言語処理:第3回 1.前回の確認 2.構文解析 3.格文法.
言語モデル(200億文のGoogle日本語Nグラムから計算)
Java I 第2回 (4/18)
知識情報演習Ⅲ(後半第1回) 辻 慶太(水)
情報学類 吉田光男 アドバイザー教官: 山本幹雄 先生
人工知能概論 第12回 言語と論理(1) 自然言語処理
実験 関数・記号付き文型パターンを用いた機械翻訳の試作と評価 石上真理子 水田理夫 徳久雅人 村上仁一 池原悟 (鳥取大) ◎評価方法1
2 プログラムの基本 本時のねらい 「① プロラムのはたらきを知ろう。」 「② 仕事の流れを図に表そう。」
東京工科大学 コンピュータサイエンス学部 亀田弘之
テキストマイニング, データマイニングと 社会活動のトレース
1.自然言語処理システム 2.単語と形態素 3.文節と係り受け
プログラミングとは Q.プログラムとは何か? A.コンピュータを制御するための,コンピュータに対する命令(指示)の集まり.
4Y-4 印象に残りやすい日本語パスワードの合成法
形態素解析および係り受け解析・主語を判別
情報工学科 二宮 洋・鈴木 誠 小林 学・高畠俊徳 火曜日 1コマ目
動詞の共起パターンを用いた 動作性名詞の述語項構造解析
1月19日 辞書 自然言語処理における辞書の役割 機械辞書設計の要点 辞書の種類と用途.
4 Macintoshの基本操作(4) 4.1 TextEdit(テキストエディット)の使用 新規作成
検索エンジンを利用した Covert Channelの検出
【プログラミング応用】 必修2単位 通年 30週 授業形態:演習.
HTTPとHTML 技術領域専攻 3回 中川 晃.
大規模データによる未知語処理を統合した頑健な統計的仮名漢字変換
識別子の命名支援を目的とした動詞-目的語関係の辞書構築
ChaIME: 大規模コーパスを 用いた統計的仮名漢字変換
人工知能を動かしてみる(Keras を用いたニューラルネットワークの定義,コンパイル,学習,評価,予測)
ai-1. 人工知能を演習と実践で学ぶ シリーズ
大規模データによる未知語処理を統合したスケーラブルな仮名漢字変換
単語登録(1) ◎MS-IMEの「単語登録」に、単語、語句、記号など自分がよく使うものを登録しておくと、便利である。
深層学習を用いた音声認識システム 工学部 電気電子工学科 白井研究室 T213069 林健吉.
長崎市① 長崎市における平和学習スポット (社)長崎県観光連盟.
OpenCV について OpenCV とは OpenCV の Python プログラム例 配列 画像の B, G, R の 3成分
テキストマイニング, データマイニングと 社会活動のトレース
ブラウザを快適に操作するツールの開発 藤村研究室 1DS04179M 阪上 翔伍.
東京工科大学 コンピュータサイエンス学部 亀田弘之
東京工科大学 コンピュータサイエンス学部 亀田弘之
Pp-10. Python の numpy Python を演習と実践で学ぶシリーズ 金子邦彦.
Pp-12. Python の numpy Python を演習と実践で学ぶシリーズ 金子邦彦.
ai-5. 人工知能の Python パッケージ TensorFlow と Keras の動作確認
発表32 レポート評価支援について (剽窃部分と指導箇所の検出)
東京工科大学 コンピュータサイエンス学部 亀田弘之
東京工科大学 コンピュータサイエンス学部 亀田弘之
コンピュータ リテラシー 担当教官  河中.
自然言語処理2015 Natural Language Processing 2015
pf-7. データ構造とアルゴリズム (Python プログラミング基礎を演習で学ぶシリーズ)
vc-1. Visual Studio C++ の基本操作 (Visual Studio C++ の実用知識を学ぶシリーズ)
pf-5. 関数呼び出し,スコープ (Python プログラミング基礎を演習で学ぶシリーズ)
pf-4. 式の抽象化と関数 (Python プログラミング基礎を演習で学ぶシリーズ)
pf-6. スタック (Python プログラミング基礎を演習で学ぶシリーズ)
ex-11. データの入力規則 (Excel を演習で学ぶシリーズ)
ex-8. 平均と標準偏差 (Excel を演習で学ぶシリーズ)
or-9. 資金計画と投資効率 (オペレーションズリサーチを Excel で実習するシリーズ)
第6回放送授業.
情報とコンピュータ 静岡大学工学部 安藤和敏
第7回 Q&A メール講座 Next Stage:翻訳力アップ自己トレ(1)
シソーラス情報を用いた童話文章登場人物の 感情情報読み取りシステム
pp-1. Python を演習と実践で学ぶ シリーズ
ニューラルネットワークの仕組み (Raspberry PI 演習で学ぶ) AI DATA VASSEL 資料
Microsoft Cognitive Services の概要
pf-2. 条件分岐 (Python プログラミング基礎を演習で学ぶシリーズ)
形態素解析と構文解析 金子邦彦.
自然言語処理2016 Natural Language Processing 2016
単語登録(1) ◎MS-IMEの「単語登録」に、単語、語句、記号など自分がよく使うものを登録しておくと、便利である。
mi-5. プロダクションシステム 人工知能を演習で学ぶシリーズ(5)
1.2 言語処理の諸観点 (1)言語処理の利用分野
ns-3. Cloud FireStore で JSON を扱う (NoSQL データベースを学ぶシリーズ)
東京工科大学 コンピュータサイエンス学部 亀田弘之
第1章 文字の表示と計算 printfと演算子をやります.
Presentation transcript:

mi-8. 自然言語処理 人工知能を演習で学ぶシリーズ(8) https://www.kkaneko.jp/dblab/intro/m/index.html 金子邦彦

アウトライン 8-1 自然言語処理 8-2 機械翻訳 8-3 合成,パターン認識

8-1. 自然言語処理

自然言語処理 人間のことば(日本語や英語など)を,コン ピュータが処理することを,自然言語処理と いう

自然言語処理の技術 文を単語に分割(単語の切り出し) 単語の種類(品詞)の判定 係り受けの関係などの分析(構文解析) 意味解析

単語の切り出しと品詞の判定の例 白い雲と青い空が美しい 単語ごとの読み仮名,品詞などが, コンピュータにより得られる

⑥ 次のコマンドを入れる python ⑦ 次のプログラムを入れる.結果を確認 import sys import MeCab m = MeCab.Tagger ("-Ochasen") print(m.parse ("海は広い"))

プログラムを入れるとき MobaXTermの 右クリックメニューで Webブラウザの 貼り付ける(Paste) 右クリックメニューで 確認表示には OK Webブラウザの 右クリックメニューで コピー

⑧ 引き続き,次のプログラムを入れる.結果を確認 print(m.parse ("白い雲と青い空が美しい"))

⑨ ネットの記事や文書など,1文,コピーして, 試すことを数回行いなさい print(m.parse ("あなたの文章"))

構文解析の例 構文解析 KNP のデモサイト http://lotus.kuee.kyoto-u.ac.jp/nl-resource/cgi-bin/knp.cgi

意味解析の例 それぞれの言葉の意味を,コンピュータが理 解しながら,他の言葉の意味を判断するなど 駅前のコンビニは,油を売っていた あの人は,仕事中に,油を売っていた

単語の切り出し,品詞の判定  → 辞書との照合により,ある程度可能 構文解析,意味解析  → コンピュータは,前もって,大量の文書を用    いて事前学習を行う.

自然言語処理の用途 スマホやパソコンでのかな漢字変換,予測変換 機械翻訳 「Google 翻訳」など 対話システム 「Siri」,「Amazon Echo」など

まとめ 単語 単一の意味のまとまり 品詞 単語の種別 係り受け 主語,述語,修飾語などの,単語間の 関係の分析 単語 単一の意味のまとまり 品詞 単語の種別 係り受け 主語,述語,修飾語などの,単語間の 関係の分析 意味解析 語句の意味の特定などを行うこと

8-2. 機械翻訳

機械翻訳システム ある自然言語 別の自然言語 言語 理解 言語 生成

機械翻訳の例

機械翻訳の例 ワード,パワーポイントファイルの中から, 文字を読み取ることもできるように