本书详细介绍了强化学习的理论推导、算法细节。全书共12章，包括强化学习概述、马尔可夫决策过程、退化的强化学习问题、环境已知的强化学习问题、基于价值的强化学习算法、基于策略的强化学习算法、AC型算法、基于模型的强化学习算法等相关知识。本书系统性强、概念清晰，内容简明通俗。除了侧重于理论推导，本书还提供了许多便于读者理解的例子，以及大量被实践证明有效的算法技巧，旨在帮助读者进一步了解强化学习领域的相关知识，提升其现实中的工程能力。本书可作为高等院校数学、计算机、人工智能等相关专业的强化学习教材，但需

本书是以工程实践项目为导向的"新工科”C语言教材，采用案例模式，全面、细致地介绍了C语言的语法知识和简单应用。全书分为7章，以"成绩管理系统”实践项目为主线，主要内容包括C语言与软件工程概述、成绩管理系统项目综述、成绩处理子系统实现、查询统计子系统实现、后台管理子系统实现、查询统计子系统动态实现和文件管理子系统实现等。 本书在设计上针对的是计算机语言初学者，内容浅显易懂，实例丰富。本书既可作为高等院校计算机科学与技术相关专业C语言的教材或辅导用书，也可供计算机语言爱好者或其他专业的学生使用。

本书系统地介绍了计算机网络的基础知识和实用技术，包括计算机网络概述、数据通信基础、计算机网络体系结构、局域网技术、网络管理与安全、交换与路由技术和综合实训。本书结合新知识、新技术、新方法，体现科学性、实用性，正确处理了理论知识和技能实践的关系，注重培养学生的分析能力、应用能力和自学能力。本书内容丰富、结构清晰，既可作为中等职业学校计算机应用专业的课程教材，也可供广大计算机爱好者参考使用。

本书以当前流行MATLAB R2021a为平台，比较系统地介绍MATLAB环境、MATLAB数值计算、MATLAB符号计算、MATLAB计算的可视化和GUI设计、MATLAB程序设计、线性控制系统分析与设计、Simulink仿真环境等。本书内容主要分为实用教程、习题、实训、附录和网络文档等，各部分深入浅出，相互配合，层次清晰。实用教程部分先讲解基础知识，后开展实例操作；习题部分系统练习基本内容；实训部分先引导操作，后展开思考练习；附录部分包括程序的调试、Publish发布、曲线拟合与插值，网络文

本书在系统介绍了机器学习的基础上详细讲解了神经网络和深度神经网络的结构原理、模型训练与优化方法，重点针对典型工作任务，详细讲解了卷积神经网络(ＣＮＮ)和循环神经网络(ＲＮＮ)的基本结构和主要操作。全书共分为七个模块。模块一主要介绍了人工智能与机器学习；模块二主要介绍了人工智能的开发工具及开发环境；模块三介绍了机器学习相关的数学基础知识；模块四对典型的机器学习算法进行了介绍；模块五对神经网络的结构和基本原理进行了剖析；模块六对卷积神经网络(ＣＮＮ)的结构和模型训练优化进行了详细的分析说明

本书主要介绍西门子S7-1200 PLC的基础知识及其编程与应用，通过多个实例和案例比较详尽地讲解了S7-1200 PLC中的基本指令、功能指令、程序结构、工艺指令和通信指令，有助于读者对知识点的理解和掌握。

本书共10个模块，模块1-3介绍HTML知识，包括文件结构、开发环境和常用元素，如图像、音频、视频、超链接、表格、表单等元素的用法，完成了网页内容的设计。模块4-6介绍CSS基础知识，包括CSS语法、选择器和元素基本样式，重点介绍了元素的框模型和背景样式，基于图像背景和背景起点属性实现了图像精灵，完成了网页样式的初步设计。模块7-9介绍CSS3知识，包括定位、过渡、动画和布局的知识，基于定位、过渡和动画技术设计了轮播图像、菜单和幽灵按钮等典型网页效果，基于布局技术设计了常用网页布局，包

本教程针对应用型本科院校软件测试课程教学需要，内容包括：软件质量保证与测试的重要性和意义、原则和局限性；软件缺陷和测试模型；静态测试和动态测试；黑盒测试和白盒测试；人工测试和自动化测试；测试过程和环节；软件质量和质量模型；开发者测试和Web测试；以及国家信创战略下快速发展的信创测试等。

本书分为7个项目，项目1Photoshop概述，包括Photoshop的几种启动和退出方式；项目2图像文件的基本操作，包括图像文件的打开、保存和调整方法；项目3工具的使用，包括常用工具的使用技巧；项目4浮动控制面板，包括图层的使用技巧和蒙版的处理技巧；项目5平面与美学艺术，包括平面构成方法；项目6数码图像的处理，包括几种数码图像的处理方法；项目7案例实战，包括平面设计几种常用典型案例的制作技巧。

本书主要介绍了数制和码制、逻辑代数基础、逻辑门电路、组合逻辑电路、触发器、时序逻辑电路、脉冲波形的产生和整形和数/模和模/数转换器、半导体存储器和可编程逻辑器件、硬件描述语言等，都是信息与通信、自动化和计算机科学技术相关专业了解有关数字电路与数字逻辑基础及应用的主体内容。