强化学实战 强化学在阿里的技术演进和业务创新 网络技术 笪庆,曾安祥
举报
网络技术 新华书店全新正版书籍
-
作者:
笪庆,曾安祥
-
出版社:
电子工业出版社
-
ISBN:
9787121338984
-
出版时间:
2018-10
-
版次:
1
-
装帧:
平装
-
开本:
16开
-
页数:
217页
-
字数:
226千字
-
作者:
笪庆,曾安祥
-
出版社:
电子工业出版社
-
ISBN:
9787121338984
-
出版时间:
2018-10
-
版次:
1
-
装帧:
平装
-
开本:
16开
-
页数:
217页
-
字数:
226千字
售价
￥
46.35
5.2折
定价
￥89.00
品相
全新品相描述
上书时间2021-12-04
卖家超过10天未登录
手机购买
![]()
微信扫码访问
-
-
商品描述：
-
目录：
章强化学基础1
1.1引言2
1.2起源和发展3
1.3问题建模5
1.4常见强化学算8
1.4.1基于值函数的方9
1.4.2基于直接策略搜索的方12
1.5结14
第2章基于强化学的实时搜索排序策略调控15
2.1研究背景16
2.2问题建模17
2.2.1状态定义17
2.2.2奖赏函数设计18
2.3算设计19
2.3.1策略函数19
2.3.2策略梯度20
2.3.3值函数的学21
2.4奖赏塑形22
2.5实验效果25
2.6ddpg与梯度融合27
2.7结与展望28
第3章延迟奖赏在搜索排序场景中的作用分析30
3.1研究背景31
3.2搜索交互建模31
3.3数据统计分析33
3.4搜索排序问题形式化36
3.4.1搜索排序问题建模36
3.4.2搜索会话马尔可夫决策过程38
3.4.3奖赏函数39
3.5理论分析40
3.5.1马尔可夫质40
3.5.2折扣率41
3.6算设计44
3.7实验与分析48
3.7.1模拟实验48
3.7.2搜索排序应用51
第4章基于多智能体强化学的多场景联合优化54
4.1研究背景55
4.2问题建模57
4.2.1相关背景简介57
4.2.2建模方58
4.3算应用65
4.3.1搜索与电商台65
4.3.2多排序场景协同优化66
4.4实验与分析69
4.4.1实验设置69
4.4.2对比基准70
4.4.3实验结果70
4.4.4在线示例73
4.5结与展望75
第5章虚拟76
5.1研究背景77
5.2问题描述79
5.3虚拟化80
5.3.1用户生成策略81
5.3.2用户模仿策略83
5.4实验与分析85
5.4.1实验设置85
5.4.2虚拟与真实对比85
5.4.3虚拟中的强化学87
5.5结与展望90
第6章组合优化视角下基于强化学的定向
广告ocpc业务优化92
6.1研究背景93
6.2问题建模94
6.2.1奖赏设计94
6.2.2动作定义94
6.2.3状态定义95
6.3模型选择100
6.4探索学102
6.5业务实战103
6.5.1系统设计103
6.5.2奖赏设计105
6.5.3实验效果106
6.6结与展望106
第7章策略优化方在搜索广告排序和竞价机制中的应用108
7.1研究背景109
7.2数学模型和优化方110
7.3排序公式设计112
7.4系统简介113
7.4.1离线仿真模块114
7.4.2离线训练初始化114
7.5在线策略优化117
7.6实验与分析118
7.7结与展望120
第8章taskbot――阿里小蜜的任务型问答技术121
8.1研究背景122
8.2模型设计123
8.2.1意图网络123
8.2.2信念跟踪124
8.2.3策略网络124
8.3业务应用126
8.4结与展望127
第9章drl导购――阿里小蜜的多轮标签技术128
9.1研究背景129
9.2算框架130
9.3深度强化学模型133
9.3.1强化学模块133
9.3.2模型融合134
9.4业务应用135
9.5结与展望136
0章robustdqn在锦囊系统中的应用137
10.1研究背景138
10.2robustdqn算140
10.2.1分层采样方140
10.2.2基于分层采样的经验池141
10.2.3近似遗憾奖赏142
10.2.4robustdqn算143
10.3robustdqn算在锦囊上的应用144
10.3.1系统架构144
10.3.2问题建模145
10.4实验与分析147
10.4.1实验设置148
10.4.2实验结果148
10.5结与展望152
1章基于上下文因子选择的商业搜索引擎能优化153
11.1研究背景154
11.2排序因子和排序函数156
11.3相关工作157
11.4排序中基于上下文的因子选择158
11.5rankcfs：一种强化学方162
11.5.1cfs问题的?mdp建模162
11.5.2状态与奖赏的设计163
11.5.3策略的学165
11.6实验与分析166
11.6.1离线对比167
11.6.2在线运行环境的评价170
11.6.3评价171
11.7结与展望172
2章基于深度强化学求解一类新型三维装箱问题173
12.1研究背景174
12.2问题建模175
12.3深度强化学方177
12.3.1网络结构178
12.3.2基于策略的强化学方179
12.3.3基准值的更新180
12.3.4采样与集束搜索180
12.4实验与分析181
12.5小结182
3章基于强化学的分层流量调控183
13.1研究背景184
13.2基于动态动作区间的ddpg算186
13.3实验效果189
13.4结与展望189
4章风险商品流量调控190
14.1研究背景191
14.2基于强化学的问题建模192
14.2.1状态空间的定义192
14.2.2动作空间的定义193
14.2.3奖赏函数的定义193
14.2.4模型选择194
14.2.5奖赏函数归一化196
14.3流量调控系统架构196
14.4实验效果197
14.5结与展望197
参文献199
内容简介：
本书汇集了阿里巴巴一线算工程师在强化学应用方面的经验和心得，覆盖了搜索事业部、阿里妈妈事业部、计算台事业部以及智能服务事业部等多条业务线，界先发售系统地披露了强化学在互联网级别的应用上使用的技术细节，其中更包含了阿里巴巴的算工程师对强化学的深入理解、思和创新。本书主要面向算工程师，强化学方向的研究人员以及所有机器学爱好者。作为算工程师，你将了解强化学在实际应用中的建模方，常见的问题以及对应的解决思路，提高建模和解决业务问题的能力；作为强化学方向的研究人员，你将了解到在游戏之外更多实际的强化学问题以及对应的解决方案，扩宽研究视野；作为机器学爱好者，你将了解到阿里巴巴的一线机器学算工程师是如何发现问题，定义问题和解决问题的，激发研究兴趣以及提升专业素养。
作者简介：
笪庆，花名达卿，阿里巴巴不错算专家，硕士于大学机器学与数据挖掘研究所，增多次获得靠前外数据挖掘/人工智能类竞赛优选，发表多篇领域顶会。在阿里主要从事搜索算排序的工作，并率先在集团内开展强化学在电商业务中的应用，实现了线上决策引擎的智能化决策升级。曾安祥，花名仁重，阿里巴巴算专家。于2009年加入阿里巴巴，作为搜索的创始人之一，先后参与组建了query分析团队和排序团队等算团队，和伙伴们一起创造了靠前的商品搜索技术。专注于大规模机器学在线学、深度学及强化学等技术在电商环境中的大规模实际应用。发表了多篇顶会，申请了多个靠前外。
![]()
孔网啦啦啦啦啦纺织女工火锅店第三课
开播时间：09月02日 10:30
即将开播，去预约
直播中，去观看
占位居中
