| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2008-12-09 16:00 音声認識システムの満足度評価におけるユーザモデル ○原 直・北岡教英・武田一哉（名大）  NLC2008-34 SP2008-89 |
|
| 抄録 | （和） | 楽曲検索音声対話システムを用いたフィールドテストによるデータを用いて 音声対話システムのユーザ満足度を推測する数学的モデルについて検討を行った． 本研究ではユーザ満足度の背景となる心理尺度として， ユーザの主観に基づく体感認識精度を導入する． 体感認識精度は満足度の指標や様々なユーザプロファイルとともに フィールドテストの事後アンケートを通じて収集した． まず，体感認識精度が対話データの書き起こしに基づいた客観認識精度指標よりも 満足度指標と関係が高いことを示す． 続いて，体感・客観認識精度の同時分布に対するトップダウンクラスタリングによって ユーザのグループを認識精度に対する鋭敏さという観点により分類を行う． 体感認識精度を与えうる客観認識精度の下限についてもこの同時分布を用いて 計算を行う． 最後に，ユーザプロファイルや環境条件を用いてユーザ満足度指標を推測するための グラフモデルを構築し， 分散の約13\%に相当するユーザ満足度分布の不確かさを削減することを示す． |
| （英） | A mathematical model for predicting the user satisfaction of a speech dialogue systems is studied based on a field trial of a voice-navigated music retrieval system. The {\em Subjective} Word Accuracy (\sWA), of the user is introduced as a background psychometrics for the satisfaction. In the field test, \sWA is collected through questionnaires together with satisfactory indexes and various user profiles. First we show that the \sWA is more significant to the user satisfactory than ({\em Objective}) Word Accuracy (\oWA), which is calculated using the manually given transcriptions for the recorded dialogue. Then through top-down clustering of the joint distribution of {\it subjective}- and {\it objective}-WAs, we show that the user population can be grouped into several sub-groups in terms of sensitivity to recognition accuracy. The lower bound of the \oWA for the given \sWA is also calculated from the joint distribution. Finally, a graphical model is build that predicts the user satisfactory index from user profiles and reduces the distribution uncertainty of user satisfaction by 13\% of its variance. |
|
| キーワード | （和） | システム評価 / 性能指標 / ユーザプロファイル / フィールドテスト / / / / |
| （英） | System Evaluation / Performance Measure / User Profile / Field Test / / / / | |
| 文献情報 | 信学技報, vol. 108, no. 338, SP2008-89, pp. 61-66, 2008年12月. | |
| 資料番号 | SP2008-89 | |
| 発行日 | 2008-12-02 (NLC, SP) | |
| ISSN | Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | NLC2008-34 SP2008-89 |
|
| 研究会情報 | |
| 研究会 | SP NLC |
| 開催期間 | 2008-12-09 - 2008-12-10 |
| 開催地（和） | 早稲田大学（小野記念講堂） |
| 開催地（英） | Waseda Univ. |
| テーマ（和） | 第10回 音声言語シンポジウム （SP/NLC/SLP共催） |
| テーマ（英） | |
| 講演論文情報の詳細 | |
| 申込み研究会 | SP |
| 会議コード | 2008-12-SP-NLC |
| 本文の言語 | 日本語 |
| タイトル（和） | 音声認識システムの満足度評価におけるユーザモデル |
| サブタイトル（和） | |
| タイトル（英） | User modeling for a satisfaction evaluation of a speech recognition system |
| サブタイトル（英） | |
| キーワード(1)（和/英） | システム評価 / System Evaluation |
| キーワード(2)（和/英） | 性能指標 / Performance Measure |
| キーワード(3)（和/英） | ユーザプロファイル / User Profile |
| キーワード(4)（和/英） | フィールドテスト / Field Test |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 原 直 / Sunao Hara / ハラ スナオ |
| 第1著者 所属（和/英） | 名古屋大学 (略称： 名大) Nagoya Unibersity (略称： Nagoya Univ.) |
| 第2著者 氏名（和/英/ヨミ） | 北岡 教英 / Norihide Kitaoka / キタオカ ノリヒデ |
| 第2著者 所属（和/英） | 名古屋大学 (略称： 名大) Nagoya Unibersity (略称： Nagoya Univ.) |
| 第3著者 氏名（和/英/ヨミ） | 武田 一哉 / Kazuya Takeda / タケダ カズヤ |
| 第3著者 所属（和/英） | 名古屋大学 (略称： 名大) Nagoya Unibersity (略称： Nagoya Univ.) |
| 講演者 | 第1著者 |
| 発表日時 | 2008-12-09 16:00:00 |
| 発表時間 | 25分 |
| 申込先研究会 | SP |
| 資料番号 | NLC2008-34, SP2008-89 |
| 巻番号（vol） | vol.108 |
| 号番号（no） | no.337(NLC), no.338(SP) |
| ページ範囲 | pp.61-66 |
| ページ数 | 6 |
| 発行日 | 2008-12-02 (NLC, SP) |
[研究会発表申込システムのトップページに戻る]