| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2026-07-14 09:40 マルチモーダル動画要約に関する一検討 ～ BoF特徴に基づく列選択問題としての定式化 ～ ○西 菜都子・新見道治（九工大）  ISEC2026-30 SITE2026-26 BioX2026-53 HWS2026-26 ICSS2026-45 EMM2026-37 |
|
| 抄録 | （和） | 動画共有・配信サービスの普及により，長時間の動画から効率的に内容を把握するための動画要約技術の重要性が高まっている．近年では深層学習を用いた動画要約手法が多く提案されている一方で，大量の学習データを必要とする点や，動画内容の違いへの適用の難しさが課題として指摘されている．これに対し，学習データに依存しない教師なし動画要約手法として，動画像の1フレームの特徴を行列の一つの列方向に配置し，要約を列選択問題として扱う手法がある．この手法を活用し，画像特徴量に加えて音響特徴量を統合したマルチモーダルな特徴表現を導入し，要約結果に与える影響を検討した．実験では，コンテンツの異なる複数の動画に対して，要約動画の主観的評価，音響特徴量の影響，および動画内容の違いによる影響を調査した．その結果，数理的評価と主観的評価の間には一定の対応関係が見られる一方で，必ずしも一致しない場合があることが確認された．また，音響特徴量の導入により，発話や環境音を含む区間が要約に反映され，視聴時の内容理解に影響を与えることが示された． |
| （英） | Video summarization techniques have become increasingly important for efficiently understanding the content of long videos due to the widespread use of video sharing and streaming services. In recent years, many video summarization methods based on deep learning have been proposed; however, these methods often require large amounts of training data and may have difficulty adapting to different types of video content. As an alternative approach that does not rely on training data, there is a method that video is described as a feature matrix, where the features of each frame are arranged as a column of the matrix, and the summarization task as a Column Subset Selection Problem. By developing of the method, we introduce a multimodal feature representation that integrates audio features in addition to visual features and investigate its effect on the summarization results. In the experiments, multiple videos with different types of content were analyzed to evaluate the subjective quality of the generated summaries, the influence of audio features, and the effect of differences in video content. The results show that although there is some correspondence between mathematical evaluation and subjective evaluation, they do not always coincide. In addition, the incorporation of audio features allowed segments containing speech and environmental sounds to be reflected in the summaries, which influenced the understanding of the video content during viewing. | |
| キーワード | （和） | 動画要約 / 列選択問題 / マルチモーダル情報 / 音響特徴量 / / / / |
| （英） | Video Summarization / Column Subset Selection Problem / Multimodal Information / Audio Features / / / / | |
| 文献情報 | 信学技報, vol. 126, no. 112, EMM2026-37, pp. 123-128, 2026年7月. | |
| 資料番号 | EMM2026-37 | |
| 発行日 | 2026-07-06 (ISEC, SITE, BioX, HWS, ICSS, EMM) | |
| ISSN | Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | ISEC2026-30 SITE2026-26 BioX2026-53 HWS2026-26 ICSS2026-45 EMM2026-37 |
|
| 研究会情報 | |
| 研究会 | BioX HWS ISEC SITE ICSS EMM IPSJ-CSEC IPSJ-SPT |
| 開催期間 | 2026-07-13 - 2026-07-15 |
| 開催地（和） | 札幌コンベンションセンター |
| 開催地（英） | Sapporo Convention Center |
| テーマ（和） | セキュリティ、一般 （セキュリティサマーサミット2026） |
| テーマ（英） | |
| 講演論文情報の詳細 | |
| 申込み研究会 | EMM |
| 会議コード | 2026-07-BioX-HWS-ISEC-SITE-ICSS-EMM-CSEC-SPT-SEC |
| 本文の言語 | 日本語 |
| タイトル（和） | マルチモーダル動画要約に関する一検討 |
| サブタイトル（和） | BoF特徴に基づく列選択問題としての定式化 |
| タイトル（英） | A Study on Multimodal Video Summarization |
| サブタイトル（英） | Formulation as a Column Subset Selection Problem Based on BoF Features |
| キーワード(1)（和/英） | 動画要約 / Video Summarization |
| キーワード(2)（和/英） | 列選択問題 / Column Subset Selection Problem |
| キーワード(3)（和/英） | マルチモーダル情報 / Multimodal Information |
| キーワード(4)（和/英） | 音響特徴量 / Audio Features |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 西 菜都子 / Natsuko Nishi / ニシ ナツコ |
| 第1著者 所属（和/英） | 九州工業大学 (略称： 九工大) Kyushu Institute of Technology (略称： KIT) |
| 第2著者 氏名（和/英/ヨミ） | 新見 道治 / Michiharu Niimi / ニイミ ミチハル |
| 第2著者 所属（和/英） | 九州工業大学 (略称： 九工大) Kyushu Institute of Technology (略称： KIT) |
| 講演者 | 第1著者 |
| 発表日時 | 2026-07-14 09:40:00 |
| 発表時間 | 25分 |
| 申込先研究会 | EMM |
| 資料番号 | ISEC2026-30, SITE2026-26, BioX2026-53, HWS2026-26, ICSS2026-45, EMM2026-37 |
| 巻番号（vol） | vol.126 |
| 号番号（no） | no.107(ISEC), no.108(SITE), no.109(BioX), no.110(HWS), no.111(ICSS), no.112(EMM) |
| ページ範囲 | pp.123-128 |
| ページ数 | 6 |
| 発行日 | 2026-07-06 (ISEC, SITE, BioX, HWS, ICSS, EMM) |
[研究会発表申込システムのトップページに戻る]