百科问答小站 logo
百科问答小站 font logo



反馈控制理论在优化、机器学习等领域有哪些应用? 第1页

  

user avatar   shuang-wu-8 网友的相关建议: 
      

算法收敛性的证明。


很多优化算法,以及机器学习算法都可以抽象成

或者如果数据带有噪音,再加入一个Martingale过程的扰动

前者是确定性动态系统,而后者是随机动态系统。算法的收敛就取决于寻找对应的李雅普诺夫函数了。


具体例子,比如TCP协议重的congestion control(堵塞控制)。congestion control的目标可以看作是受约束的用户utility maximization(效用最大化)。而congestion control的过程就可以看作是用算法寻找utility maximization的问题的最优点。


一篇比较新的paper:

A second order primal-dual method for nonsmooth convex composite optimization

以及比较早的

The O.D.E. Method for Convergence of Stochastic Approximation and Reinforcement Learning

Stability of primal–dual gradient dynamics and applications to network optimization




  

相关话题

  机器学习中的机器是如何分辨哪些是有用的知识,哪些是没用的信息呢? 
  如何看待「机器学习不需要数学,很多算法封装好了,调个包就行」这种说法? 
  有哪些比较好的元学习(meta learning)领域的学习资源? 
  如何看待End-to-End Object Detection with Transformers? 
  为什么nn的较大问题是会陷入局部最优时,不选用凸函数作为激活函数? 
  医学生学习机器学习该如何入门? 
  请问有哪些最优化算法可以做全局优化? 
  人工智能和自动控制能在一起擦出什么样的火花? 
  深度学习的多个loss如何平衡? 
  f(x,y)->(x,y),是定义在一个2维空间开集上的 一一映射函数,f连续,它的象是否一定是开集? 

前一个讨论
波士顿和纽约的生活方式有什么不同?
下一个讨论
如何下载symbolic工具箱,在mathwork官网?





© 2025-05-16 - tinynew.org. All Rights Reserved.
© 2025-05-16 - tinynew.org. 保留所有权利