梯度法简述.pdf
梯度法是一类求解优化问题的一阶方法.梯度法形式简单、计算开销小,在大规模问题的求解中得到了广泛应用.系统地介绍了光滑无约束问题梯度法的迭代格式、理论框架.梯度法中最重要的参数是步长,步长的选取直接决定了梯度法的收敛性质与收敛速度.从线搜索框架、近似技巧、随机技巧和交替重复步长四方面介绍了梯度步长的构造思想及相应梯度法的收敛性结果,还对非光滑及约束问题的梯度法、梯度法加速技巧和随机梯度法等扩展方向做了简要介绍.
作者：孙聪张亚
作者单位：北京邮电大学理学院,北京100876
母体文献：中国运筹学会第十一次会员代表大会暨学术交流会论文集
会议名称：中国运筹学会第十一次会员代表大会暨学术交流会
会议时间：2021年10月15日
会议地点：合肥
主办单位：中国运筹学会
语种：chi
分类号：
关键词：梯度法 线搜索框架 近似技巧 随机技巧 交替重复步长
在线出版日期：2022年4月21日
基金项目：
相似文献
相关博文
- 文件大小:
- 756.71 KB
- 下载次数:
- 60
-
高速下载
|
|
