トンネル事故に対する強化学習を用いたエンドツーエンドの緊急対応プロトコル
Hafiz Muhammad Raza Ur Rehman1, M Junaid Gul1, Rabbiya Younas1
1Department of Information and Communication Engineering, Yeungnam University, Gyeongsan, 38541, Republic of Korea.
Scientific reports
|January 26, 2026
まとめ
自律型無人航空機(UAV)はトンネル事故対応を強化する。灰色オオカミ最適化を伴うマルチエージェント強化学習は、複雑な環境でのより迅速で効率的な緊急救助を可能にする。
科学分野:
- ロボット工学と人工知能
- 災害管理と緊急対応
- 自律システムナビゲーション
背景:
- 自律型無人航空機(UAV)は、危険な環境に対して費用効果の高いソリューションを提供します。
- 動的なトンネルインフラストラクチャにおけるUAVのリアルタイム経路計画は、視界とナビゲーション信号の制限により困難です。
- 既存のナビゲーション方法は、トンネル内の予測不可能な事故シナリオでは失敗することがよくあります。
研究 の 目的:
- マルチエージェント強化学習(MARL)を使用したトンネル事故のエンドツーエンドの緊急対応フレームワークを提案すること。
- 閉鎖的で動的なトンネル環境における自律型UAVのナビゲーションと意思決定を強化すること。
- トンネルインフラストラクチャにおける緊急対応運用の速度と効率を改善すること。
主な方法:
- マルチエージェント強化学習(MARL)を利用したエンドツーエンドの緊急対応フレームワークの実装。
- 各UAVは、リアルタイムの意思決定のために独立したQ学習を使用して独立したエージェントとして動作します。
- 探索における早期収束と局所最適性の問題を軽減するために、灰色オオカミ最適化(GWO)を統合しました。
- 犠牲者の発見を優先し、安全でない/冗長なアクションにペナルティを与えるカスタマイズされた報酬関数の開発。
主要な成果:
- 提案されたMARLフレームワークは、GWOベースの探索およびランダム検索と比較して、より高速な目標発見を示しました。
- シミュレートされたトンネル環境において、地図カバレッジの改善と全体的な救助時間の短縮を達成しました。
- 緊急対応における自律型UAVのための軽量MARLベースの調整の有効性を検証しました。
結論:
- 開発されたMARLフレームワークは、トンネル事故における自律型UAV支援緊急対応の効果的なソリューションを提供します。
- GWOとカスタマイズされた報酬関数の統合は、探索と意思決定の機能を強化します。
- このアプローチは、トンネル救助の重要なシナリオにおける状況認識と運用効率を改善する大きな可能性を示しています。
関連する概念動画
Applications of GIS: Disaster Management and Emergency Response
500
Geographic Information System (GIS) technology is essential for risk identification, action prioritization, and resource optimization in critical situations like flooding and earthquakes. By integrating spatial and demographic data, GIS provides a comprehensive framework for emergency response.GIS integrates data layers, like rainfall intensity, topography, elevation profiles, and river levels, to model high-risk flood zones. These layers assess areas susceptible to flooding based on their...
500
Reinforcement
901
Positive and negative reinforcement are key concepts in operant conditioning, a learning process where the consequences of a behavior affect the likelihood of that behavior being repeated.
Positive reinforcement occurs when a behavior is followed by the presentation of a rewarding stimulus, increasing the frequency of that behavior. For example:
Positive reinforcement occurs when a behavior is followed by the presentation of a rewarding stimulus, increasing the frequency of that behavior. For example:
901
Emerging Adulthood
656
Jeffrey Arnett's concept of emerging adulthood offers a framework to understand the unique developmental stage between adolescence and full-fledged adulthood, generally from ages 18 to 25. This period is marked by extensive exploration and shifts in identity, relationships, and career choices, a process known in psychology as role experimentation. Emerging adulthood reflects the evolving cultural expectations surrounding adulthood and the dynamic process of personal transformation during...
656
Corrosion of Reinforcement
567
The corrosion of steel reinforcement within concrete is a process influenced by the material's inherent properties and external factors. The high pH level of around 13, provided by calcium hydroxide present in concrete, initially protects the steel reinforcement by promoting the formation of a passive iron oxide layer on its surface.
However, over time and under certain conditions like carbonation, chloride ingress, and cracking this protective state can be compromised. Steel has areas with...
However, over time and under certain conditions like carbonation, chloride ingress, and cracking this protective state can be compromised. Steel has areas with...
567
Reinforcement Schedules
494
Positive reinforcement is a powerful method for teaching new behaviors to both animals and humans. B.F. Skinner demonstrated this with his experiments using rats in a Skinner box. When a rat pressed a lever, it received a food pellet. This immediate reward encouraged the rat to repeat the behavior. This method, where a reward follows every instance of the behavior, is known as continuous reinforcement. It is highly effective for establishing new behaviors quickly.
Once a behavior is learned,...
Once a behavior is learned,...
494
Reinforcements in Concrete
461
Reinforced concrete is a composite material used extensively in construction, combining the compressive strength of concrete with the tensile strength of steel. This synergy is essential as concrete, while excellent at resisting compression, is weak under tension. Steel bars, or rebars, are embedded in the concrete to handle these tensile forces. The choice of steel is strategic; it shares a similar coefficient of thermal expansion with concrete, which ensures uniformity in response to...
461


