後方二重確率的再帰的最適制御問題に対する動的計画法の原理と確率的ハミルトン・ヤコビ・ベルマン方程式のソボレフ弱解
Yunhong Li1, Anis Matoussi2, Lifeng Wei3,4
1Department of Applied Mathematics, The Hong Kong Polytechnic University, Hong Kong, China.
本研究は、新しい後方二重確率的再帰的最適制御フレームワークを導入する。価値関数は、確率的ハミルトン・ヤコビ・ベルマン方程式のユニークなソボレフ弱解であることが証明される。
科学分野:
- 確率解析
- 最適制御理論
- 偏微分方程式
背景:
- 後方二重確率微分方程式(BDSDE)は、前方および後方の両方のランダム性を持つシステムをモデル化するために重要である。
- 再帰的効用関数は、長期的な意思決定をモデル化するために金融および経済学において不可欠である。
- 最適制御問題は、時間とともに与えられた目的関数を最小化または最大化するための最良の戦略を見つけることを含む。
研究 の 目的:
- 後方二重確率的再帰的最適制御問題を調査する。
- このクラスの問題に対する動的計画法の原理を確立する。
- 価値関数と確率的ハミルトン・ヤコビ・ベルマン方程式との関連性を示す。
主な方法:
- 後方二重確率微分方程式を用いた最適制御問題の定式化。
- 動的計画法の原理の開発と適用。
- ソボレフ弱解としての価値関数の性質の解析。
主要な成果:
- 後方二重確率的再帰的最適制御のための動的計画法の原理を提示する。
- 価値関数は、関連する確率的ハミルトン・ヤコビ・ベルマン方程式のユニークなソボレフ弱解であることが示される。
- 本研究は、複雑なクラスの制御問題に対する厳密な数学的フレームワークを提供する。
結論:
- 本研究は、ユニークなコスト関数定式化を持つ挑戦的な最適制御問題にうまく対処する。
- 本研究の結果は、様々な応用におけるそのような問題を理解し解決するための理論的基盤を提供する。
- 確率的ハミルトン・ヤコビ・ベルマン方程式との確立された関連性は、さらなる研究と数値手法への道を開く。
さらに関連する動画
06:45Design and Application of a Fault Detection Method Based on Adaptive Filters and Rotational Speed Estimation for an Electro-Hydrostatic Actuator
Published on: October 28, 2022
06:04Experimental Investigation of the Hierarchical Control in DC Microgrids Using a Real-time Simulator
Published on: February 14, 2025
関連する概念動画
Bernoulli's Equation: Problem Solving
The first step is to compute the cross-sectional areas of the pipe and the Venturi throat to analyze the pressure difference indicated by the pressure gauge. Next, the continuity equation is...
Time-Domain Interpretation of PD Control
Consider the example of control of motor torque. Initially, a positive...
Statically Indeterminate Problem Solving
Open and closed-loop control systems
An open-loop control system operates without feedback from the output. It consists of two primary elements: the controller and the controlled process. The controller receives an input signal...
Mechanistic Models: Compartment Models in Algorithms for Numerical Problem Solving
In individual population analyses, different algorithms are employed, such as Cauchy's method, which uses a...
BIBO stability of continuous and discrete -time systems
To determine the BIBO stability, the convolution integral is utilized when a bounded continuous-time input is applied to a Linear Time-Invariant (LTI) system....
