音読評価項目とその関係に関する研究 日米評価者の評価比較 関東甲信越英語教育学会第33回埼玉大会 2009年8月22日・23日 獨協大学

Slides:



Advertisements
Similar presentations
マルチレベル共分散構造分析 清水裕士 大阪大学大学院人間科学研究科日本学術振興会. 本発表の概要・目的 個人 - 集団データの階層性 個人 - 集団データの階層性 階層的データは従来の方法では十分な分析が できない 階層的データは従来の方法では十分な分析が できない 従来の方法は何が不十分なのか?
Advertisements

グラフィカル多変量解析 ----目で見る共分散構造分析----
心理的ストレスに対する心臓血管反応 ー認知的評価の導入ー 社会精神生理学への招待 日本大学大学院理工学研究科 山田クリス孝介
寺尾 敦 青山学院大学社会情報学部 社会統計 第13回 重回帰分析(第11章後半) 寺尾 敦 青山学院大学社会情報学部
外国語教育メディア学会(LET)関東支部130 回(2013 年度)研究大会
音読評価と音声分析の関係 飯野 厚(法政大学) 籔田由己子(清泉女学院短期大学)
非正規雇用が心理的ストレス反応に及ぼす影響: 全国規模のコホート研究
リメディアル教育における 音声指導を中心にした英語授業実践
分散分析マスターへの道.
多変量解析 -重回帰分析- 発表者:時田 陽一 発表日:11月20日.
英語学習についての信念 ―現職教員研修のための基礎研究
機能実現期間の測定による プログラマ能力の実験的評価
日本語教育における 発音指導の到達目標を考える
実証分析の手順 経済データ解析 2011年度.
Toshihiko SHIOTSU 塩津敏彦
英語の母音の長さを測定する(2).
市場調査の手順 問題の設定 調査方法の決定 データ収集方法の決定 データ収集の実行 データ分析と解釈 データ入力 データ分析 報告書の作成.
データ分析2 1.平均値の比較のタイプ 2.対応のあるt検定 3.対応のないt検定 4.3つの以上のグループの差を調べる 5.参考文献
突然ですが、 金政分析へのコメント 大阪大学大学院人間科学研究科 平井 啓 2017年3月13日(月)
音声からの心的状態の推定における 生理心理学的アプローチの導入
分布の非正規性を利用した行動遺伝モデル開発
土木計画学 第5回(11月2日) 調査データの統計処理と分析3 担当:榊原 弘之.
Features (概要).
4.「血液透析看護共通転院サマリーVer.2」 の説明
第6章 2つの平均値を比較する 2つの平均値を比較する方法の説明    独立な2群の平均値差の検定   対応のある2群の平均値差の検定.
応用言語学研究論A:SPSS宿題 Spring 2016 R.Nishida, Ph.D..
タレントの魅力測定とその分析.
因子分析や3相因子分析による分析の問題点を整理する 狩野裕+原田章(行動工学講座)
「データ学習アルゴリズム」 第2章 学習と統計的推測 報告者 佐々木 稔 2003年5月21日 2.1 データと学習
12月4日 伊藤 早紀 重回帰分析.
子どものコミュニケーションチェックリスト(CCC-2) 日本語版の標準化:定型就学前児
Webで恋愛の類型を測り集計しレポートにまとめる
鈴木 政浩(西武文理大学) 阿久津 仁史(聖学院大学) 飛田ルミ(足利工業大学)
疫学概論 測定の信頼性 Lesson 20. 評価の要件 §B. 測定の信頼性 S.Harano, MD,PhD,MPH.
? ? ? ? ? ? ? ? 多変量解析とは? 問題となっている現象 ●問題の発生原因がわからない(因果関係)
大学における 英語基礎学力保障のための 音読指導 (コンピュータ・ネットワークを利用した指導実践事例)
学習意欲と自信の回復を目指す一連の音読指導
離婚が出生数に与える影響 -都道府県データを用いた計量分析
相関分析.
情報管理論 2018/11/9 情報分析の道具 2018/11/9 情報分析の道具 情報分析の道具.
GDPに反映される教育の成果について 減少していく教育の産出について考える
英語絵本と読み聞かせ -読み聞かせ体験の有効性-
4章までのまとめ ー 計量経済学 ー.
第4日目第3時限の学習目標 検査の信頼性(続き)を学ぶ。 妥当性について学ぶ。 (1)構成概念妥当性とは? (2)内容妥当性とは?
スピーキングタスクの繰り返しの効果 ―タスクの実施間隔の影響―
音読練習の方法が 音読の熟達度に及ぼす影響
コードクローンに含まれるメソッド呼び出しの 変更度合の分析
コードクローンに含まれるメソッド呼び出しの 変更度合の調査
高校における英語の授業は英語でがベストか
Rコマンダーで2元配置ANOVA 「理学療法」Vol28(8)のデータ
音読能力のスコア化と 英語学力との相関に関する研究
多母集団の同時分析 豊本満喜子 大阪大学人間科学部.
指標の数と信頼性・ 内容的妥当性 指標の数は多いほうがよい.
数量分析 第2回 データ解析技法とソフトウェア
尺度化について 狩野 裕 大阪大学人間科学部.
疫学概論 測定の信頼性 Lesson 20. 評価の要件 §B. 測定の信頼性 S.Harano, MD,PhD,MPH.
母音[i]のF1, F2平均値の分析.
統計学の入門講義における 達成動機,自己効力感,およびテスト成績の関連
部分的最小二乗回帰 Partial Least Squares Regression PLS
対応のある共分散分散行列の同時分析 ーー 震災ストレスデータの同時分析 ーー
日本の高校における英語の授業は英語でがベストか?
データの型 量的データ 質的データ 数字で表現されるデータ 身長、年収、得点 カテゴリで表現されるデータ 性別、職種、学歴
1.因子分析とは 2.因子分析を行う前に確認すべきこと 3.因子分析の手順 4.因子分析後の分析 5.参考文献 6.課題11
「アルゴリズムとプログラム」 結果を統計的に正しく判断 三学期 第7回 袖高の生徒ってどうよ調査(3)
クロス表とχ2検定.
疫学概論 測定の妥当性 Lesson 20. 評価の要件 §A. 測定の妥当性 S.Harano, MD,PhD,MPH.
Speakを使った 音読指導 鈴木政浩(西武文理大学) 学習者の意欲を高める音読指導の一事例.
回帰分析入門 経済データ解析 2011年度.
学習指導要領の改訂 全国連合小学校長会 会長 大橋 明.
Presentation transcript:

音読評価項目とその関係に関する研究 日米評価者の評価比較 関東甲信越英語教育学会第33回埼玉大会 2009年8月22日・23日 獨協大学 関東甲信越英語教育学会第33回埼玉大会 2009年8月22日・23日 獨協大学 音読評価項目とその関係に関する研究 日米評価者の評価比較 鈴木政浩(西武文理大学) 阿久津仁史(聖学院大学)

問題と目的(国内の研究1) 英語音読能力は熟達度を反映する(経験的知見) 財団法人語学教育研究所編著(1988:26-31)     「生徒の理解度を判断できる」 田垣(1990: 150)     「英語力判定の基準になりうると考えられている」 伊藤他(1995:81-85)     「音読を録音したテープを提出させ、指導する」 石井編(1970: 94-98) 「読みぶりは理解度を示す」・・・しかし 主観的評価 → 評価における、信頼性・妥当性の問題 音読の評価(小川, 1982) a. 読める語彙の習得度 b. 発音 c. 句切り方 d. 小さな語句の読み方 e. 感情をこめているか f. 適度な声か g. 同じところを繰り返していないか h. 頭を不自然に動かしていないか i. 逐語読みになっていないか j. 余計な語句の挿入、省略 k. 句読点を無視していないか l. あて推量でないか m. 緊張で声が不自然でないか n. 姿勢が悪くないか o. 指さしながら読んでいないか p. 読む箇所を見失っていないか 「1クラス分のある程度の長さの英文をすべて評価するのは、ただでさえ主観的になりがちなものを、いっそう主観的にしてしまい、信頼性も妥当性も満たされない」

問題と目的(国内の研究2) 英語音読の評価方法 人間が音声を聞いて判断する方法 京堂(1989) 鈴木(1998) 宮迫(2002) など 人間が音声を聞いて判断する方法 京堂(1989)  鈴木(1998)  宮迫(2002) など 小川編(1982: 421-423)  16項目の評価基準 宮迫(2002)における評価基準 音読能力の測定基準(日本人教師2名の評価者) 1. 発音 2. イントネーション 3. ポーズ 4. 内容の伝達(5点ずつの20点満点) 5. 内容理解 6. 音読速度(wpm)

問題と目的(評価基準) Kuhn & Stahl(2003); Klauda & Guthrie(2008) の概観する評価基準 Accuracy, speed, fluency Appropriate expression (pitch, pause, phrasing, the tonal and rhythmic characteristics) Rasinski (2003: 156-176) One-Minute Reading Probe for Assessing Word Recognition Percent Accuracy: words read correctly in the minute (WCPM) / words covered in the minute Error marking

問題と目的(音読のモデル) 海外の研究 モデルの目的:音読評価項目と熟達度との因果関係 Coltheart et al. (2001:214):Dual-route Cascaded Model Perry et al.(2007:280):CDP+ Model →文字入力から音声出力までの流れを説明したモデル モデルの目的:音読評価項目と熟達度との因果関係 宮迫(2002) : 2変数の回帰分析による検証 評価項目同士の相関が高い → 多重共線性の問題

研究の経過

日米評価者の評価における違い 表1. 日米評価者の評価平均 記述統計量 表2. 日米評価者 平均の差の検定 鈴木他(2009)より 表1. 日米評価者の評価平均 記述統計量 評価者情報 N Mean SD イントネーション 日本人評価者 32 14.63 3.50 アメリカ人評価者 16.72 3.72 ポーズ 14.88 3.51 17.16 4.19 ストレス 14.44 3.13 17.31 3.39 6件法の得点4人分を合計 (24点満点) 平均の差を検定 (独立したサンプルのt検定) 表2. 日米評価者 平均の差の検定 平均値の差 t df p イントネーション 2.10 * -2.32 62 0.024 ポーズ 2.28 * -2.36 0.021 ストレス 2.88 ** -3.52 0.001 ** p < .01 * p < .05   n=32 若干ではあるが、3項目すべてで、日本人評価者の評価得点の方が有意に低い(厳しい)という結果となった。 鈴木他(2009)より

モデル検証の視点 Decoding skills→(automaticity)→Fluency →Expression, prosody Chall (1996) ストレスとイントネーション  → 内容理解度を反映 ポーズ   → 統語能力を反映   予測 1. ストレスとイントネーションは縦列では並ばないのではないか 2. ポーズとストレス・イントネーションは性質が異なるのではないか 3. イントネーションは表現に関わるため、他の評価項目よりも後に配置すべきではないか 評価項目の並列モデル

評価項目と音読速度からなる英語音読並列モデル .94 .65*** ストレス イントネーション e1 宮迫(2002)の通り、多重共線性が高かったため、複数変数の .94*** .33*** .68 ポーズ 音読速度 e2 .82*** 適合指標 GFI =.980 AGFI = .899 RMSEA = .000 *** p < .0001 図1. 評価3項目と音読速度からなる英語音読並列モデル 鈴木他(2009)より

モデルの解釈 ストレス イントネーション ポーズ 音読速度 .94 .65*** .91*** .33*** .68 .82*** ストレスとポーズは極めて高い正の相関(共線性あり) ストレスとポーズで、イントネーションの94%を説明 ポーズよりも、ストレスの方が、イントネーションに寄与(共線性はあるが、影響は異なる要素あり) .94 .65*** ストレス イントネーション .91*** ストレスは音読速度に寄与していない ポーズは、音読速度の68%を説明 .33*** .68 ポーズ 音読速度 .82*** ポーズは、イントネーションよりも、音読速度に寄与

音読精度・速度・プロソディー・熟達度からなる音読モデル 鈴木・阿久津(2009)より 音読精度 .33* .71 .50 .71*** プロソディー 熟達度 .73** .57*** 音読速度 * P < .05 ** p < .01 *** p < .001 適合指標  GFI =.988 AGFI = . 940 RMSEA = .000 図2. 音読精度・速度・プロソディー・熟達度からなる音読モデル モデルの解釈 音読精度よりも音読速度の方がプロソディーに寄与する 音読精度と音読速度で、プロソディーの71%程度を説明する プロソディーは熟達度の50%程度を説明する 音読速度・音読精度はプロソディーを経過しないと熟達度に寄与しない

研究1 日米評価者における音読評価得点の 相関を検証すること

方法(実施期間と対象者・手順) 2008年11月から2009年2月 関東近県の私立大学生32名(男子26名・女子6名) 事前テストを実施し、対象者の熟達度を測定 (英検3級2006年度第3回) 初見のテキスト(英検準2級二次試験問題、62 words)を対象者に音読させ、その音声を録音 音声データを日本人評価者4名、アメリカ人評価者4名が評価し、評価者間信頼係数を算出

評価項目 1) 音読精度:単語の読みの正確さ 2) 音読速度 読み終わるまでにかかった時間を計測し、wpmに換算 3) イントネーション Rasinski (2003: 159-160)による読み間違いの判定基準 2) 音読速度 読み終わるまでにかかった時間を計測し、wpmに換算 3) イントネーション 4) ポーズ 5) ストレス 3)~5)は6件法による プロソディー

結果 日米評価者の評価の差と相関 極めて高い正の相関 表3. 相関係数 (日米評価者の評価項目ごとの相関) 音読精度(J) 結果 日米評価者の評価の差と相関 極めて高い正の相関 表3. 相関係数 (日米評価者の評価項目ごとの相関) 音読精度(J) イントネーション(J) ポーズ(J) ストレス(J) 音読精度(A) .913(**) .641(**) .704(**) .649(**) イントネーション(A) .724(**) .882(**) .890(**) .856(**) ポーズ(A) .812(**) .853(**) .892(**) .828(**) ストレス(A) .605(**) .798(**) .816(**) .810(**) ** p < .01           J: 日本人評価者 A: アメリカ人評価者      信頼性係数 (α = .86)    (α = .84)

研究2 目的 熟達度と音読評価項目の関係において、日米評者の間で差があるかどうかを検証すること 方法(実施期間と対象者・手順) 研究1と同じ  方法(実施期間と対象者・手順)     研究1と同じ   (データは研究1で得たものを流用)

結果 音読評価項目と音読速度からなるモデルにおける違い 結果 音読評価項目と音読速度からなるモデルにおける違い ※上段は日本人評価者、下段(  )内はアメリカ人評価者 パス係数の差に統計的な有意差なし .94 (.88) .65*** (.33**) ストレス イントネーション .94*** (.80***) .33* (.65***) .68 (.80) ポーズ 音読速度 .82*** (.90***) * p < .05 ** p < .01 *** p < .001 適合指標 GFI= .987,  AGFI= .935,  RMSEA= .000 図3. 音読速度・プロソディーからなる並列型音読モデル (日米評価者の評価をグループ化変数としたパス係数の差)

パス係数には若干の違いが見られたが、統計的に有意な差ではなかった 結果 ※上段はアメリカ人評価者、下段(  )内は日本人評価者 .33* (.27*) 音読精度 .71 (.78) .50 (.46) .71*** (.68***) プロソディー 熟達度 .73** (.73**) .57*** (.67***) 音読速度 * p < .05 ** p < .01 *** p < .001 適合指標 GFI =.988 AGFI = . 940 RMSEA = .000 図4. 音読精度・速度・プロソディー・熟達度からなる音読モデル (日米評価者の評価をグループ化変数としたパス係数の差) パス係数には若干の違いが見られたが、統計的に有意な差ではなかった

考察 評価者の評価における信頼性係数はきわめて高い 日米評価者の評価における相関はきわめて高い。 モデルにおいても両者のパス係数に有意な差は認められない 日本人評価者の評価のみで音読能力の測定は可能である。 日本人評価者の評価における、信頼性と妥当性が検証できた

本研究の限界と課題 アメリカ人以外の評価者でも同様の結果が得られるかどうか 熟達度のレベルが変わっても評価の信頼性と妥当性が検証できるか。 難易度の異なるテキストを音読した場合でも同様の結果が導き出せるか。 熟達度のレベルが英検準2級以上もしくは4級以下の学習者に関してもモデルが適合するか。する場合、パス係数や標準化偏回帰係数は有意な違いをもつのかどうか。

引用文献 Chall, J.S. (1996). Stages of reading development (2nd ed.). Fort Worth, TX: Harcourt-Brace. Coltheart M, Rastle K, Perry C, Langdon R, & Ziegler J. (2001) DRC: a Dual Route Cascaded Model of Visual Word Recognition and Reading Aloud. Psychological Review. 108(1):204-256. 石井正之助編 (1970). 「講座・英語教授法第5巻読む領域の指導」 研究社. 伊藤健三他 (1995). 「英語の新しい学習指導」 リーベル出版. Klauda, S. L.& Guthrie, T. (2008). Relationships of Three Components of Reading Fluency to Reading Comprehension. Journal of Educational Psychology. 100(2), 310-321. Kuhn, M. R. & Stahl, S. A. (2003). Fluency: A review of developmental and remedial practices. Journal of Educational Psychology. 95(1). 3-21. 京堂政美 (1989). 「Reading Aloudと言語能力の相関について―言語能力の測定としてのReading Aloud」 STEP Bulletin, 1, 117-129. 財団法人日本英語検定協会. 宮迫靖瀞 (2002). 「高校生の音読と英語力は関係があるか?」 STEP Bulletin, 14, 14-25. 財団法人日本英語検定協会. 小川芳男編 (1982). 「英語教授法辞典新版」 三省堂 近江誠 (1997) 英語力を高める音読時事英語研究9月号 研究社 Perry, C., Ziegler, J.C., & Zorzi, M. (2007). Nested Incremental Modeling in the Development of Computational Theories: The CDP+ Model of Reading Aloud. Psychological Review. 114, 273-315. Rasinski, T.V. (2003). The Fluent Reader. Scholastic Inc. 田垣正義(1990).「落ちこぼれのない英語教育―誤答分析の視点から」南雲堂. 鈴木寿一 (1998).「音読指導再評価-音読指導の効果に関する実証的研究」 『LLA(語学ラボラトリ-学会)関西支部研究集録』 7, 13-28.  鈴木政浩・阿久津仁史 (2009). 「英語音読評価と熟達度の関係に関する研究-プロソディー、音読速度および精度からなる音読モデルの検証」全国英語教育学会鳥取研究大会予稿集 136-137. 鈴木政浩・阿久津仁史・飛田ルミ (2009). 「英語音読評価に影響する要因-日米評価者の評価比較- A Comparison of Evaluation of Reading Aloud Performances Between Japanese and American Informants」大学英語教育学会(JACET)第3回関東支部大会(青山学院大学)要綱 27-28.  財団法人語学教育研究所編著 (1988). 「英語指導技術再検討」 大修館書店.

今日のプレゼン資料のダウンロードが可能です。 音読指導研究会HP http://suzukimasahiro.web.fc2.com/ 今日のプレゼン資料のダウンロードが可能です。

評価者について 女性・25 歳 私立中高教員(修士修了) 女性・34歳 大学教員(修士修了) 男性・45歳 中学教員・大学非常勤(修士修了) 補足資料 評価者について 性別・年齢(日本滞在年数) 職業 日本人評価者 女性・25 歳 私立中高教員(修士修了) 女性・34歳 大学教員(修士修了) 男性・45歳 中学教員・大学非常勤(修士修了) 男性・47歳 アメリカ人評価者 男性・28歳(1.5年) 大学教員 男性・25歳(2年) ALT 男性・29歳(1年) 男性・31歳(6年)

考察1 日本人評価者の評価は、アメリカ人評価者の評価と同等と考えて差し支えない。 音読を聞けば熟達度がある程度わかることが検証できた。 リスニングとの相関は、イントネーション・ポーズ・ストレスがわずかに高い。 リーディングとの相関は、音読速度がわずかに高い。 音読の役割を、近江(1997)における英語学力形成に限定するのであれば、イントネーションは評価項目からはずすことも可能か。

結果(日米評価者の評価相関) 表. 相関係数 (日米評価者の評価項目ごとの相関) 音読精度(J) イントネーション(J) ポーズ(J) 音読精度(A) .913(**) .641(**) .704(**) .649(**) イントネーション(A) .724(**) .882(**) .890(**) .856(**) ポーズ(A) .812(**) .853(**) .892(**) .828(**) ストレス(A) .605(**) .798(**) .816(**) .810(**) ** p < .01           J: 日本人評価者 A: アメリカ人評価者 評価者間信頼係数 : 日本人評価者   α= .86  アメリカ人評価者 α= .84