| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2025-01-22 10:00 視点依存のデータ軽量化によるボリュメトリックビデオのライブ配信 ○井上翔太・藤本忠博・中谷直司（岩手大）  EMM2024-112 |
|
| 抄録 | （和） | 動的なシーンや物体をRGB-Dカメラで撮影して取得されたRGB-Dデータ等から生成される色付き３次元点群データをボリュメトリックビデオと呼ぶ．本研究では，複数のRGB-Dカメラによるシーンの撮影から遠隔地のPC上での自由視点映像の生成までをリアルタイムで行うライブ処理のため，ボリュメトリックビデオを自由視点に依存して軽量化し，効率的に配信(ストリーミング)する手法を提案する．自由視点に依存した軽量化を考えた場合，遠隔地間のライブ配信ではデータ転送による時間遅れが生じる可能性が大きく，その場合でもユーザーが要求する自由視点にリアルタイムで合わせた自由視点映像を生成する必要がある．そこで，本手法では，まず，撮影(サーバー)側において，時間遅れの間の自由視点の移動の範囲を考慮して複数の拡張自由視点を新たに設け，自由視点と各拡張自由視点に対して，全てのRGB-Dカメラにより取得された点群データから生成されるメッシュをレンダリングする．そして，各視点のバッファ内に得られたRGB-Dデータを用いた，自由視点に対するDepth Peeling手法を拡張したレンダリングにより生成された多層RGB-Dデータを視点依存ボリュメトリックビデオとし，従来のビデオ圧縮を適用してユーザー(クライアント)側に転送する． |
| （英） | Colored 3D point cloud data generated from RGB-D data, etc. acquired by capturing dynamic scenes or objects with RGB-D cameras is called volumetric video. In this study, we propose a method to reduce the weight of the volumetric video depending on the free viewpoint and to efficiently distribute (stream) the volumetric video for live processing in real time, from capturing scenes with multiple RGB-D cameras to generating free viewpoint video on a remote PC. In the case of lightweighting depending on the free viewpoint, there is a large possibility of time delay due to data transfer in live transmission between remote locations, and even in such cases, it is necessary to generate a free viewpoint video that matches the free viewpoint requested by the user in real time. In our method, we first create multiple extended free viewpoints on the camera (server) side, taking into account the range of free viewpoint movement during the time delay, and render a mesh generated from point cloud data acquired by all RGB-D cameras for the free viewpoints and each extended free viewpoint. The multi-layer RGB-D data generated by rendering with the extended Depth Peeling method for the free viewpoints, using the RGB-D data obtained in the buffer of each viewpoint, is converted into viewpoint-dependent volumetric video and transferred to the user (client) side by applying conventional video compression. | |
| キーワード | （和） | 画像処理 / コンピュータグラフィックス / ボリュームレンダリング / 自由視点映像 / / / / |
| （英） | Image processing / Computer graphics / Volume rendering / Free viewpoint video / / / / | |
| 文献情報 | 信学技報, vol. 124, no. 338, EMM2024-112, pp. 55-60, 2025年1月. | |
| 資料番号 | EMM2024-112 | |
| 発行日 | 2025-01-14 (EMM) | |
| ISSN | Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | EMM2024-112 |
|
| 研究会情報 | |
| 研究会 | EMM |
| 開催期間 | 2025-01-21 - 2025-01-22 |
| 開催地（和） | 東北大学 電気通信研究所 本館1階オープンセミナー室 |
| 開催地（英） | Tohoku Univ. |
| テーマ（和） | 臨場感生成，ユニバーサルメディア，ディジタルエンタテインメント，一般 |
| テーマ（英） | Sense of Presence, Universal Media, Digital Entertainment, etc. |
| 講演論文情報の詳細 | |
| 申込み研究会 | EMM |
| 会議コード | 2025-01-EMM |
| 本文の言語 | 日本語 |
| タイトル（和） | 視点依存のデータ軽量化によるボリュメトリックビデオのライブ配信 |
| サブタイトル（和） | |
| タイトル（英） | Live Streaming of Volumetric Video by View-dependent Data Reduction |
| サブタイトル（英） | |
| キーワード(1)（和/英） | 画像処理 / Image processing |
| キーワード(2)（和/英） | コンピュータグラフィックス / Computer graphics |
| キーワード(3)（和/英） | ボリュームレンダリング / Volume rendering |
| キーワード(4)（和/英） | 自由視点映像 / Free viewpoint video |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 井上 翔太 / Shota Inoue / イノウエ ショウタ |
| 第1著者 所属（和/英） | 岩手大学 (略称： 岩手大) Iwate University (略称： Iwate Univ.) |
| 第2著者 氏名（和/英/ヨミ） | 藤本 忠博 / Tadahiro Fujimoto / フジモト タダヒロ |
| 第2著者 所属（和/英） | 岩手大学 (略称： 岩手大) Iwate University (略称： Iwate Univ.) |
| 第3著者 氏名（和/英/ヨミ） | 中谷 直司 / Naoshi Nakaya / ナカヤ ナオシ |
| 第3著者 所属（和/英） | 岩手大学 (略称： 岩手大) Iwate University (略称： Iwate Univ.) |
| 講演者 | 第1著者 |
| 発表日時 | 2025-01-22 10:00:00 |
| 発表時間 | 30分 |
| 申込先研究会 | EMM |
| 資料番号 | EMM2024-112 |
| 巻番号（vol） | vol.124 |
| 号番号（no） | no.338 |
| ページ範囲 | pp.55-60 |
| ページ数 | 6 |
| 発行日 | 2025-01-14 (EMM) |
[研究会発表申込システムのトップページに戻る]