Непрерывная процедура стохастической оптимизации с полумарковскими переключениями в схеме диффузионной аппроксимации

Abstract

Розглянуто неперервну процедуру стохастичної оптимізації з напівмарковськими переключеннями в схемі дифузійної апроксимації з умовами балансу на сингулярне збурення функції регресії. Для функції регресії, що залежить від рівномірно ергодичного напівмарковського процесу, встановлено достатні умови збіжності через властивості компенсуючого оператора розширеного процесу марковського відновлення процедури та його асимптотичне представлення на збуреній функції Ляпунова.

We consider the continuous stochastic optimization procedure with semi-Markov switching in the diffusion approximation scheme with the balance condition imposed on singular perturbation of the regression function. The sufficient convergence conditions are established for the regression function, which depends on the uniform ergodic semi-Markov process, by using the properties of extended compensating operator of the Markov renewal of the procedure and its asymptotic representation of perturbed Lyapunov function.