| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2023-09-12 14:55 セミマルコフモデルを導入したイベント駆動型強化学習による空調制御の安定性実現 ○中条隼人・荒井幸代（千葉大）  AI2023-16 |
|
| 抄録 | （和） | 本研究では，ヒーターを用いて室温を最適化する空調制御を扱う．室温は人間の生産性を左右するため，空調には省エネルギーとともに快適性を損なわない制御が求められる．また，従来の第一原理に基づく制御理論には限界があるため，近年は強化学習を用いた空調制御の最適化に関する研究が進んでいる．最新の研究として，セミマルコフ決定過程（SMDP）を用いたイベント駆動型の強化学習による制御がある．しかし，SMDPでは初期値の設定が，学習初期の性能に悪影響を及ぼすことを確認した．そこで本研究では，マルコフ決定過程（MDP）を学習初期に採用し，探索が進んだ段階でSMDPに切り替える複合型の強化学習手法を提案する．この手法によって，MDPとSMDPを単独で用いる場合より，効率的な学習と性能の向上を実現する． |
| （英） | This study deals with air conditioning control that optimizes room temperature by switching heaters on/off. The control to achieve both room comfort and energy conservation is complex and has been conducted using reinforcement learning. Existing studies include event-driven control using semi-Markov decision processes (SMDP). However, in SMDP, the initial settings harmed the performance in the early stages of learning. In this study, we propose a combined method that employs Markov decision processes (MDP) in the early stages of learning and switches to SMDP at the advanced exploration stage. This method improves the performance compared to using MDP and SMDP independently. | |
| キーワード | （和） | セミマルコフ決定過程 / イベント駆動型強化学習 / イベント駆動型制御 / 空調制御 / / / / |
| （英） | Semi-Markov decision process / Event-triggered reinforcement learning / Event-triggered control / HVAC control / / / / | |
| 文献情報 | 信学技報, vol. 123, no. 190, AI2023-16, pp. 83-86, 2023年9月. | |
| 資料番号 | AI2023-16 | |
| 発行日 | 2023-09-05 (AI) | |
| ISSN | Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | AI2023-16 |
|
| 研究会情報 | |
| 研究会 | AI |
| 開催期間 | 2023-09-12 - 2023-09-13 |
| 開催地（和） | 登別グランドホテル |
| 開催地（英） | |
| テーマ（和） | 合同エージェントワークショップ＆シンポジウム2023 (JAWS2023) |
| テーマ（英） | |
| 講演論文情報の詳細 | |
| 申込み研究会 | AI |
| 会議コード | 2023-09-AI |
| 本文の言語 | 日本語 |
| タイトル（和） | セミマルコフモデルを導入したイベント駆動型強化学習による空調制御の安定性実現 |
| サブタイトル（和） | |
| タイトル（英） | Event-Driven Reinforcement Learning with Semi Markov Models for Stable Air-Conditioning Control |
| サブタイトル（英） | |
| キーワード(1)（和/英） | セミマルコフ決定過程 / Semi-Markov decision process |
| キーワード(2)（和/英） | イベント駆動型強化学習 / Event-triggered reinforcement learning |
| キーワード(3)（和/英） | イベント駆動型制御 / Event-triggered control |
| キーワード(4)（和/英） | 空調制御 / HVAC control |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 中条 隼人 / Hayato Chujo / チュウジョウ ハヤト |
| 第1著者 所属（和/英） | 千葉大学 (略称： 千葉大) Chiba University (略称： Chiba Univ) |
| 第2著者 氏名（和/英/ヨミ） | 荒井 幸代 / Arai Sachiyo / アライ サチヨ |
| 第2著者 所属（和/英） | 千葉大学 (略称： 千葉大) Chiba University (略称： Chiba Univ) |
| 講演者 | 第1著者 |
| 発表日時 | 2023-09-12 14:55:00 |
| 発表時間 | 20分 |
| 申込先研究会 | AI |
| 資料番号 | AI2023-16 |
| 巻番号（vol） | vol.123 |
| 号番号（no） | no.190 |
| ページ範囲 | pp.83-86 |
| ページ数 | 4 |
| 発行日 | 2023-09-05 (AI) |
[研究会発表申込システムのトップページに戻る]