随机网络优化学习 Lyapnovo

相关主题 队列稳定性理论 背压机制,最大权重和虚拟队列方法 针对非凸随机利用率最大化的对偶方法 对于任意采样路径的全局优化 近似随机调度理论 更新系统和马尔可夫决策系统的优化

相关主题

  • 队列稳定性理论

  • 背压机制,最大权重和虚拟队列方法

  • 针对非凸随机利用率最大化的对偶方法

  • 对于任意采样路径的全局优化

  • 近似随机调度理论

  • 更新系统和马尔可夫决策系统的优化

背景知识

  • 基本的概率概念

  • 马尔可夫链

  • 标准优化

李雅普诺夫漂移(LYAPUNOV DRIFT)与李雅普诺夫优化

STEP 1:找出要解决的问题的限制

STEP 2:构造虚构队列帮助达到这些限制

STEP 3:定义李雅普诺夫函数(Lyapunov function)来描述所有在时隙t的虚拟队列的积压的平方。(网络拥塞的标量测度)

STEP 4:定义两个时隙间李雅普诺夫函数的变化:

\Delta(t)=L(t+1)-L(t)

STEP 5:最小化每个时隙的李雅普诺夫函数的变化,又称最小化李雅普诺夫漂移:

如果目标函数可以被映射到适当的惩罚函数,则可以在每个时隙t贪婪地最小化漂移加惩罚(drift-plus-penalty):

\Delta(t) + V*penalty(t)

pdf内容比较丰富,这个理论非常适合用于建模延迟和质量共同优化 保证队列稳定性的视频传输场景:

Neely_2010_Stochastic network optimization with application to communication and queueing.pdf

LICENSED UNDER CC BY-NC-SA 4.0
Comment