-
内容大纲
随着人工智能技术的广泛应用,网络智能化近年来受到广泛的关注,已经成为下一代移动通信与未来网络的重要技术。阿尔法围棋(AlphaGo)之后,深度强化学习不断推陈出新,为网络中的决策问题提供了有效的潜在解决方案。本书系统介绍了网络智能化中深度强化学习的基本理论、算法及应用场景。全书共8章,针对互联网、移动通信网、边缘网络、数据中心等典型网络,阐述了网络管理、网络控制、任务调度等决策需求,深入论述了深度强化学习的模型构建与应用技术。第1章介绍了网络智能的需求与挑战;第2章介绍了先进的深度强化学习模型与方法;第3~6章论述了无线接入优化、网络管理、网络控制与任务调度等普遍网络管控任务中,深度强化学习技术的应用方法;第7章和第8章论述了深度强化学习在流媒体控制以及自组织网络等典型场景中的新研究进展。
本书可为高等院校计算机和通信相关专业的本科生、研究生提供参考,也可供对网络智能化与深度强化学习领域感兴趣的研究人员和工程技术人员参考。 -
作者介绍
-
目录
第1章 网络智能概述
1.1 概述
1.1.1 网络架构的持续演进
1.1.2 网络管理与控制的挑战
1.1.3 网络智能的兴起
1.2 网络智能的基础
1.2.1 大数据
1.2.2 算力支持
1.2.3 集中式控制
1.3 网络智能的现状
1.3.1 意图网络
1.3.2 自动驾驶网络
1.3.3 知识定义网络
1.3.4 标准化工作
1.4 网络智能的实现途径
1.4.1 监督学习
1.4.2 无监督学习
1.4.3 强化学习
1.5 网络智能的愿景与挑战
1.5.1 网络智能的愿景
1.5.2 网络智能的挑战
参考文献
第2章 深度强化学习方法
2.1 强化学习方法概述
2.1.1 马尔可夫决策过程
2.1.2 多臂赌博机
2.1.3 蒙特卡洛树搜索与时间差分方法
2.1.4 值迭代与策略迭代
2.2 深度强化学习
2.2.1 深度Q网络
2.2.2 策略梯度方法
2.2.3 策略梯度单调提升优化算法
2.2.4 最大熵算法
2.3 多智能体强化学习
2.3.1 独立强化学习及其涌现行为分析
2.3.2 多智能体通信
2.3.3 多智能体合作机制
2.3.4 多智能体建模与策略推断
2.4 分层强化学习
2.5 迁移强化学习
2.5.1 迁移强化学习框架
2.5.2 根据迁移设置的分类
2.5.3 根据迁移知识类型的分类
2.5.4 根据迁移目标的分类
2.6 多任务强化学习
2.6.1 多任务学习基本概念
2.6.2 多任务强化学习
2.6.3 基于多任务学习的迁移强化学习
2.7 逆强化学习
2.8 分布式强化学习
参考文献
第3章 基于强化学习的无线接入优化
3.1 多信道无线接入
3.1.1 多信道无线接入概述
3.1.2 基于DRL的动态多信道无线接入
3.1.3 异构无线网络的多信道接入
3.2 异构无线网络的调制和编码
3.2.1 调制和编码问题概述
3.2.2 基于DRL的调制和编码
3.3 基站自适应能量控制
3.3.1 基站自适应能量控制内容概述
3.3.2 基站自适应能量控制问题引入
3.3.3 基于DRL的自适应能量控制
参考文献
第4章 基于强化学习的网络管理
4.1 智能服务编排
4.1.1 NFV的资源配置
4.1.2 服务功能链映射
4.1.3 服务功能链选路
4.1.4 无线网络VNF的资源编排
4.2 智能网络切片
4.2.1 网络切片的需求与概念
4.2.2 网络切片的资源管理
4.2.3 无线接入网切片
4.2.4 核心网切片
参考文献
第5章 基于强化学习的网络控制
5.1 智能路由控制
5.1.1 时间相关QoS的路由控制
5.1.2 边缘网络路由控制
5.1.3 带缓存的DCN路由控制
5.2 智能拥塞控制
5.2.1 多路径TCP控制
5.2.2 智能拥塞控制模型Aurora
5.3 智能流量调度
5.3.1 流量工程概述
5.3.2 智能流量调度
5.3.3 分布式流量调度
参考文献
第6章 基于强化学习的任务调度
6.1 并行计算的任务调度
6.1.1 问题定义
6.1.2 基于RL的并行任务调度方法
6.1.3 基于DRL的并行任务调度方法
6.2 基于有向无环图的任务调度
6.2.1 分布式系统任务模型
6.2.2 边缘计算任务调度
6.2.3 云计算的任务调度
6.2.4 数据处理集群的任务调度
6.3 混合任务调度
6.3.1 多类型任务调度
6.3.2 任务调度相关的联合优化
参考文献
第7章 基于强化学习的流媒体控制
7.1 超低时延的流媒体传输
7.1.1 超低时延的流媒体传输框架
7.1.2 码率自适应算法
7.1.3 基于强化学习的超低时延传输算法
7.2 个性化的流媒体传输
7.2.1 个性化用户体验
7.2.2 基于强化学习的个性化QoE设计
7.3 新场景下的流媒体传输展望
参考文献
第8章 基于强化学习的自组织网络
8.1 网联自动驾驶
8.1.1 车载通信任务
8.1.2 车载资源分配
8.2 无人机网络概述
8.2.1 无人机通信资源调度
8.2.2 无人机公平效率覆盖
8.2.3 无人机传感数据收集
参考文献
名词索引
同类热销排行榜
- C语言与程序设计教程(高等学校计算机类十二五规划教材)16
- 电机与拖动基础(教育部高等学校自动化专业教学指导分委员会规划工程应用型自动化专业系列教材)13.48
- 传感器与检测技术(第2版高职高专电子信息类系列教材)13.6
- ASP.NET项目开发实战(高职高专计算机项目任务驱动模式教材)15.2
- Access数据库实用教程(第2版十二五职业教育国家规划教材)14.72
- 信号与系统(第3版下普通高等教育九五国家级重点教材)15.08
- 电气控制与PLC(普通高等教育十二五电气信息类规划教材)17.2
- 数字电子技术基础(第2版)17.36
- VB程序设计及应用(第3版十二五职业教育国家规划教材)14.32
- Java Web从入门到精通(附光盘)/软件开发视频大讲堂27.92
推荐书目
-
孩子你慢慢来/人生三书 华人世界率性犀利的一枝笔,龙应台独家授权《孩子你慢慢来》20周年经典新版。她的《...
-
时间简史(插图版) 相对论、黑洞、弯曲空间……这些词给我们的感觉是艰深、晦涩、难以理解而且与我们的...
-
本质(精) 改革开放40年,恰如一部四部曲的年代大戏。技术突变、产品迭代、产业升级、资本对接...