| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2023-09-21 15:25 クラウドソーシングにおけるラベル付け難易度を考慮したタスク割当手法 ○城所祥太・鈴木 優（岐阜大）  DE2023-15 |
|
| 抄録 | （和） | 本研究ではクラウドソーシングにおけるラベル付け品質向上のために，ワーカのラベル付け精度とタスクのラベル付け難易度を考慮したタスク割当手法を提案する．クラウドソーシングには，ラベル付け難易度の低いタスクやラベル付け難易度の高いタスクなど様々なタスクが存在する．また，ワーカごとのラベル付け精度にはばらつきがある．ワーカが難易度の低いタスクのラベル付けを行う時，ラベル付け精度が向上するようにワーカのラベル付け精度はラベル付け難易度によって向上したり，低下したりする．このラベル付け難易度によるラベル付け精度の変動はワーカごとに異なると考える．そこで我々は，ラベル付け難易度の低いタスクをラベル付け精度の低いワーカに割り当て，難易度の高いタスクをラベル付け精度の高いワーカに割り当てる方法を考えた．この方法により，ランダムでタスクを割り当てる時と比べ，難易度の低いタスクの正答率をあまり下げずに，難易度の高いタスクの正答率を上げることができるため，タスク全体の平均正答率が上がると考えた．手法の有効性を確かめるために実験を行った．実験の結果，提案手法を用いることにより，ラベル付け品質が向上した． |
| （英） | Improving the overall labeling quality of tasks in crowdsourcing is an important issue. Our study aims to improve the quality of labeling. Therefore, we propose task assignment methods considering the accuracy of labeling for workers and the difficulty of labeling for each task. Crowdsourcing involves variation tasks, some difficult to label and others easier. There is also variation in the accuracy of labeling for each worker. The worker's labeling accuracy improves or decreases depending on the labeling difficulty, just as the worker's labeling accuracy improves when labeling less difficult tasks. We consider that this variation in labeling accuracy due to labeling difficulty varies from worker to worker. We consider assigning easy labeling tasks to workers with a low percentage of correct answers and difficulty labeling tasks to workers with a high percentage of correct answers. These assignment methods allow us to increase the percentage of correct answers to difficulty tasks without decreasing the percentage of correct answers to easy tasks much, compared to when tasks are assigned randomly. Therefore, we believe the average percentage of correct answers for the overall task will increase. Assuming that we use the task given the difficulty of labeling in advance, we employ these assignment methods and conduct an experiment to check its validity. The experimental results show the effectiveness of our proposed methods in improving the overall labeling quality of tasks. | |
| キーワード | （和） | クラウドソーシング / ラベル付け難易度 / タスク割当手法 / / / / / |
| （英） | Crowdsourcing / Difficulties of tasks / Assignment methods / / / / / | |
| 文献情報 | 信学技報, vol. 123, no. 192, DE2023-15, pp. 25-30, 2023年9月. | |
| 資料番号 | DE2023-15 | |
| 発行日 | 2023-09-14 (DE) | |
| ISSN | Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | DE2023-15 |
|
| 研究会情報 | |
| 研究会 | DE IPSJ-DBS IPSJ-IFAT |
| 開催期間 | 2023-09-21 - 2023-09-22 |
| 開催地（和） | 北九州国際会議場 |
| 開催地（英） | Kitakyushu International Conference Center |
| テーマ（和） | ビッグデータを対象とした管理・情報検索・知識獲得および一般 |
| テーマ（英） | Bigdata management, information retrieval, knowledge discovery, etc. |
| 講演論文情報の詳細 | |
| 申込み研究会 | DE |
| 会議コード | 2023-09-DE-DBS-IFAT |
| 本文の言語 | 日本語 |
| タイトル（和） | クラウドソーシングにおけるラベル付け難易度を考慮したタスク割当手法 |
| サブタイトル（和） | |
| タイトル（英） | Assignment Methods of Crowdsourcing Workers based on Difficulties of Tasks |
| サブタイトル（英） | |
| キーワード(1)（和/英） | クラウドソーシング / Crowdsourcing |
| キーワード(2)（和/英） | ラベル付け難易度 / Difficulties of tasks |
| キーワード(3)（和/英） | タスク割当手法 / Assignment methods |
| キーワード(4)（和/英） | / |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 城所 祥太 / Shota Kidokoro / キドコロ ショウタ |
| 第1著者 所属（和/英） | 岐阜大学 (略称： 岐阜大) Gifu University (略称： Gifu Univ) |
| 第2著者 氏名（和/英/ヨミ） | 鈴木 優 / Yu Suzuki / スズキ ユウ |
| 第2著者 所属（和/英） | 岐阜大学 (略称： 岐阜大) Gifu University (略称： Gifu Univ) |
| 講演者 | 第1著者 |
| 発表日時 | 2023-09-21 15:25:00 |
| 発表時間 | 25分 |
| 申込先研究会 | DE |
| 資料番号 | DE2023-15 |
| 巻番号（vol） | vol.123 |
| 号番号（no） | no.192 |
| ページ範囲 | pp.25-30 |
| ページ数 | 6 |
| 発行日 | 2023-09-14 (DE) |
[研究会発表申込システムのトップページに戻る]