-
内容大纲
德梅萃·P.博塞克斯(Dimitri P.Bertsekas)教授是国际运筹优化与控制领域的著名学者,其系列经典教材被清华大学、麻省理工学院等国内外高校广泛使用。本书构建了近似动态规划和强化学习的新的理论框架,简洁但雄心勃勃。这一框架以离线训练和在线学习这两类算法为中心,彼此独立又通过牛顿法有机融合。当今新一代人工智能技术发展绚丽多彩,在看似纷繁复杂的数据与算法表象之下,其实蕴藏着简洁而美妙的规律。通过本书的学习,读者将能体会经典优化控制理论在分析和理解当代强化学习算法性能中的强大威力,更能领悟到以阿尔法零为代表的新一代算法浪潮为经典理论提供的新的发展机遇。本书适合作为普通高等学校信息科学技术领域研究生、本科生高年级教材,也可供本领域科研人员自学参考。 -
作者介绍
-
目录
第1章 阿尔法零、离线训练和在线学习
1.1 离线训练和策略迭代
1.2 在线学习与值空间近似——截断滚动
1.3 阿尔法零的经验
1.4 强化学习的一种新概念框架
1.5 注释与参考文献
第2章 确定性和随机的动态规划
2.1 无限时段上的最优控制
2.2 值空间近似
2.3 注释与参考文献
第3章 强化学习的抽象视角
3.1 贝尔曼算子
3.2 值空间近似和牛顿法
3.3 稳定域
3.4 策略迭代、滚动和牛顿法
3.5 在线对弈对于离线训练过程有多敏感?
3.6 何不直接训练策略网络并在使用时摒弃在线对弈呢?
3.7 多智能体问题和多智能体滚动
3.8 在线简化策略迭代
3.9 例外情形
3.10 注释与参考文献
第4章 线性二次型情形——例证
4.1 最优解
4.2 稳定线性策略的费用函数
4.3 值迭代
4.4 单步和多步前瞻——牛顿步的解释
4.5 灵敏度问题
4.6 滚动和策略迭代
4.7 截断滚动——前瞻长度问题
4.8 线性二次型问题中的例外行为
4.9 注释与参考文献
第5章 自适应和模型预测控制
5.1 具有未知参数的系统——鲁棒和PID控制
5.2 值空间近似、滚动和自适应控制
5.3 值空间近似、滚动和模型预测控制
5.4 末端费用近似——稳定性问题
5.5 注释与参考文献
第6章 有限时段确定性问题——离散优化
6.1 确定性离散空间有限时段问题
6.2 一般离散优化问题
6.3 值空间近似
6.4 离散优化的滚动算法
6.5 采用多步前瞻的滚动——截断滚动
6.6 约束形式的滚动算法
6.7 使用部分可观马尔可夫决策问题模型滚动的自适应控制
6.8 极小化极大控制的滚动
6.9 小阶段费用与长时段——连续时间滚动
6.10 结语
附录A 不动点问题的牛顿法
A.1 可微不动点问题的牛顿法
A.2 无须贝尔曼算子可微性的牛顿法
参考文献
同类热销排行榜
- C语言与程序设计教程(高等学校计算机类十二五规划教材)16
- 电机与拖动基础(教育部高等学校自动化专业教学指导分委员会规划工程应用型自动化专业系列教材)13.48
- 传感器与检测技术(第2版高职高专电子信息类系列教材)13.6
- ASP.NET项目开发实战(高职高专计算机项目任务驱动模式教材)15.2
- Access数据库实用教程(第2版十二五职业教育国家规划教材)14.72
- 信号与系统(第3版下普通高等教育九五国家级重点教材)15.08
- 电气控制与PLC(普通高等教育十二五电气信息类规划教材)17.2
- 数字电子技术基础(第2版)17.36
- VB程序设计及应用(第3版十二五职业教育国家规划教材)14.32
- Java Web从入门到精通(附光盘)/软件开发视频大讲堂27.92
推荐书目
-
孩子你慢慢来/人生三书 华人世界率性犀利的一枝笔,龙应台独家授权《孩子你慢慢来》20周年经典新版。她的《...
-
时间简史(插图版) 相对论、黑洞、弯曲空间……这些词给我们的感觉是艰深、晦涩、难以理解而且与我们的...
-
本质(精) 改革开放40年,恰如一部四部曲的年代大戏。技术突变、产品迭代、产业升级、资本对接...