深度强化学习理论及其在机器人运动控制中的应用实践

本书源于斯坦福大学的相关课程，主要介绍不确定状态下的决策算法，涵盖基本的数学问题和求解算法。本书共分为五个部分：首先解决在单个时间点上简单决策的不确定性和目标的推理问题；然后介绍随机环境中的序列决策问题；接着讨论模型不确定性，包括基于模型的方法和无模型的方法；之后讨论状态不确定性，包括精确信念状态规划、离线信念状态规划、在线信念状态规划等；最后讨论多智能体系统，涉及多智能体推理和协作智能体等。本书

《细说机器学习：从理论到实践》从数学知识入手，详尽细致地阐述机器学习各方面的理论知识、常用算法与流行框架，并以大量代码示例进行实践。本书内容分为三篇：第一篇为基础知识，包括机器学习概述、开发环境和常用模块、特征工程、模型评估、降维方法等内容。本篇详细而友好地介绍机器学习的核心概念与原理，并结合大量示例帮助读者轻松入门。第二篇为算法应用，涵盖机器学习最重要与高频使用的模型，包括K-Means聚类、K

本书深入剖析了互联网主导下的数字广告系统，详细阐述了如何通过数据驱动的产品技术、计算算法和动态定价模型来推进广告主的数字营销，并使其在广告领域与技术广告体系全面融合。同时，本书还探讨了数字化升级对广告业流程的影响，包括市场研究、内容匹配、定制化广告、广告竞投以及消费者沉浸式互动和用户忠诚度提升等营销职能。这些内容共同构建了数字化和智能化广告发展的综合知识体系。全书分为三篇（共10章）：第一篇为基础

本书以理论为基础，以应用为导向，用大量的实例对WPS文字处理、电子表格、演示文档三大板块进行全面讲解。全书共12章，主要内容包括WPS综合应用基础、PDF文件的查看及处理、常规文档的创建和编辑、长文档的高效编排、文档的校对与批量处理、WPS制表入门操作、公式与函数的应用、图形和图表的应用、对数据进行处理与分析、基本演示文稿的创建、动态交互式演示文稿的创建、演示文稿的放映与输出等。知识点全面覆盖《全

测试设计思想是本书的主题。针对测试的两个基本目的和五个基本问题，本书归纳了八类测试设计思想，即系统的思想、枚举的思想、准则化的思想、多样化的思想、统计的思想、冗余的思想、推理的思想、控制的思想。围绕每一类思想，本书深入讲解来自不同领域的测试设计方法、实践及理念，借此剖析如何依据该思想缓解测试的基本问题。了解这些思想，有助于读者奠定扎实的测试理论基础，适应当代研发生产活动多学科交叉、多领域融合的发展

本书比较全面、系统地介绍了深度强化学习的理论和算法，并配有大量的案例和编程实现。全书核心内容可以分为3部分，第一部分为经典强化学习，包括第2、3、4章，主要内容有动态规划法，蒙特卡洛法、时序差分法；第二部分为深度强化学习，包括第6、7、8章，主要内容有值函数近似法、策略梯度法、策略梯度法进阶；第三部分重点介绍了深度强化学习的经典应用——AlphaGo系列算法。另外，作为理论和算法的辅助，第1章介绍

在区块链、人工智能、3D、AR等底层技术的支持下，Web3.0高速发展，获得了更多的关注。从Web1.0到Web3.0，互联网由中心化走向去中心化，由以平台为中心转向以用户为中心，经济由实体经济转向数字经济。可以说，Web3.0正在全方位赋能数字时代科技发展，重构商业模式。本书以Web3.0如何重构数字时代科技与商业新生态为切入点，面向互联网领域的创业者、从业者、企业家与投资人等。读者可以

在物联网及大数据被广泛应用的时代背景下，计算机网络在人们的日常生产生活中的应用比重越来越大，并潜移默化地改变着人们的生产生活方式。在计算机网络中，应用最广泛的是局域网。本书对局域网的组建、管理与维护进行全面剖析，向读者揭开局域网的神秘面纱，在熟悉局域网知识要点的同时，重点培养读者的动手能力和专业思维能力。全书共9章，内容包括局域网概述、局域网基础技术、局域网网络设备、无线局域网的组建、局域网规划与

本书系统的介绍了Vue框架基础、框架应用、生态组成、项目实战、框架演进、Vue原理剖析及Vue框架的原理实现。全书共分为8章：第1章为行业发展介绍，第2章为Vue2.x的开发基础，第3章为Vue2.x的组件开发，第4章为VueCLI开发完全指南，第5章为VueCLI项目实战，第6章为Vite+Vue3完全开发指南，第7章为Vue3.x项目实战，第8章为实现原理介绍。书中主要内容包括：W