Home

2022
AI工程工具链

Maven 基本流程

摘要: 本文首先介绍了 Maven 的基本信息和安装，然后通过 HelloWorld 介绍基本流程。 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings Maven 基本信息Maven 不是 Java 领

编程Java

Java核心技术1-接口

摘要: 本文是《Java核心技术 10th》中接口的要点总结 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 本文是《Java核心技术1》第10版 Chap6 中关于【接口】的要点总结。 接口（int

编程Java

泛型数组列表ArrayList

摘要: 本文是《Java核心技术 10th》中泛型数组列表 ArrayList 及其周边知识点的要点总结 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 本文是《Java核心技术1》第10版 【Cha

编程Java

Java核心技术1-反射

摘要: 本文是《Java核心技术 10th》中反射的要点总结 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 一个类的相关信息是通过一个 Class 对象来表示的。位于 java.lang 包 在 j

编程Java

Java核心技术1-Object类

摘要: 本文是《Java核心技术 10th》中 Object 类的要点总结 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 本文是《Java核心技术1》第10版 【Chap5 继承】中关于 Objec

编程Java

Java核心技术1-继承

摘要: 本文是《Java核心技术 10th》中继承的要点总结 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 本文是《Java核心技术1》第10版 【Chap5 继承】 的要点总结。由于此前在 C++

编程Java

Java操作集锦

摘要: 本文记录实践中遇到的 Java 中的操作和小功能，持续更新 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings JAVA_HOME 查看与设置首先 which java 得到的是软链接 /usr/

编程Java

Java核心技术1-对象与类

摘要: 本文是《Java核心技术 10th》中对象与类的要点总结 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 本文是《Java核心技术1》第10版 【Chap4 类和对象】 的要点总结。由于此前在

编程Shell

Shell操作集锦

摘要: 本文记录 Shell 中常见的操作，持续更新 【对数据分析、人工智能、金融科技、风控服务感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：潮汐朝夕我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 不断从终端读取用户输入的正数，返回相加的和1234567891011121314

编程Shell

shell 的 break 和 continue

摘要: 本文简单了解一下在 shell 脚本中的 continue 和 break 与 C++/Java/Python 中的不同 【对数据分析、人工智能、金融科技、风控服务感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：潮汐朝夕我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 在 C

编程Shell

Bash脚本中的set命令

摘要: 本文简单了解一下在 shell 脚本中 set 命令的作用和用法 【对数据分析、人工智能、金融科技、风控服务感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：潮汐朝夕我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings Bash 脚本执行时，会创建一个子 Shell。 1bash

编程Shell

Bash-Shell速查表

摘要: 本文记录 Bash Shell 中常见的概念和操作 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 参考链接: https://devhints.io/bash 基本操作条件执行12git

编程C++

C++操作集锦

摘要: 本文记录常见的 C++ 中的操作，持续更新 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings string 转 char*1234string str = "hello";const char

算法字符串

字符串哈希的哈希函数

摘要: 字符串哈希的哈希函数 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 在文章 字符串哈希 中，我们探讨了字符串哈希，及其在字符串相关的经典问题中的应用。 字符串哈希是哈希中最常见的形式，在搜索

AI模型机器学习

频率派和贝叶斯派

摘要: 频率派和贝叶斯派的区别和联系。 【对数据分析、人工智能、金融科技、风控服务感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：潮汐朝夕我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 在机器学习中，我们把概率引入进来是比较自然的事情，本文我们探讨一下频率派和贝叶斯派的区别和联系

AI模型机器学习

机器学习资料汇总

摘要: 机器学习的一些经典资料 【对数据分析、人工智能、金融科技、风控服务感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：潮汐朝夕我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 资料的侧重点 频率派: 统计机器学习 贝叶斯派: 概率图模型 书小蓝书微信读书 侧重点是频率派的统

任意门连载合集

【合集】马昱春组合数学

摘要: 这是马昱春组合数学公开课的笔记合集。2020 年写的。 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 其它已完结的合集参见 合集栏 组合数学1-排列组合 组合数学2-母函数,递推关系 组合

AI模型计算机视觉

OpenCV操作集锦

摘要: 本文整理 OpenCV 中常见的操作和小功能，持续更新 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings bytes 与 cv2 互相转换bytes 转 cv2。 12img_buffer_np

AI工程工具链

Jupyter-Notebook操作集锦

摘要: Jupyter Notebook 的基础知识和操作集锦 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings Jupyter 基础Jupyter 项目中的主要组件就是 notebook，这是一种交互

AI工程工具链

conda和pip操作集锦

摘要: 记录一些实践中用到的额 conda 和 pip 的一些操作 【对数据分析、人工智能、金融科技、风控服务感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：潮汐朝夕我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings Conda查看当前镜像源1conda config --show-

AI模型机器学习

几份机器学习入门材料的知识点索引

摘要: CS229、小蓝书、西瓜书三份学习资料 【对数据分析、人工智能、金融科技、风控服务感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：潮汐朝夕我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings CS229线性回归 平方损失 + 最小二乘 梯度下降 更新方式： 批梯度下降 vs.

AI工程工具链

回炉-vim实用技巧-vim模式

摘要: 本文是《vim实用技术》读书笔记的第 2 部分: vim 模式。 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 《vim使用技巧》 【vim模式】部分，一共 4 个模式 31 个技巧 C

算法算法设计

算法导论第四版

摘要: 算法导论第四版介绍 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 本文介绍一下算法导论第四版。本书的第四版是去年出来的，新增了机器学习算法等内容，还是有不少更新的。本书完整下载链接如下

AI模型机器学习

构建机器学习项目的一些经验

摘要: 构建机器学习项目的一些经验 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings Andrew Ng 《构建机器学习项目》手写笔记。共 8 页。 1 Why ML Strategy 得到初版模型

算法编译原理

编译原理-词法分析笔记

摘要: 词法分析 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 一个编译程序，往往有以下这几部分，这些都是编译原理要研究的内容： 词法分析器 语法分析器 语义分析 中间代码生成 优化 目标

AI工程系统运维

通过浏览器访问云服务器上的资源

摘要: 本文记录通过浏览器访问云服务器上的资源的详细步骤 【对数据分析、人工智能、金融科技、风控服务感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：潮汐朝夕我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 假设有一台云服务器，公网 IP 为 39.105.154.142。服务器中有

数代数

考研数学常见方法与公式-线性代数

摘要: 考研数学方法与公式，线性代数部分 【对数据分析、人工智能、金融科技、风控服务感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：潮汐朝夕我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 总览 n阶方阵行列式 数字型行列式计算 证明行列式为 0 的方法 代数余子式求和 n阶方阵

数分析

考研数学常见方法与公式-高等数学

摘要: 考研数学方法与公式，线性代数部分 【对数据分析、人工智能、金融科技、风控服务感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：潮汐朝夕我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 总览 有界、无界的充分条件 等价无穷小 带皮亚诺余项的泰勒公式 洛必达法则使用条件 求函数极

数代数

考研线性代数笔记

摘要: 2014 年考研线性代数笔记 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 2014 年考研线性代数笔记。共 55 页。主要内容如下： 行列式 矩阵 n 维向量与线性方程组 线性空间 欧式

数分析

考研高等数学常考概念及其充分条件,必要条件

摘要: 高等数学常见概念和公式速查 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 常见概念及其充分条件、必要条件 有界性 数列的极限 函数极限 无穷小 无穷大 无穷小的阶 连续 间断点

AI模型强化学习

通过含参数函数实现策略-策略梯度

摘要: 策略梯度：通过含参数函数实现策略 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 在文章 在Q学习中应用含参数函数实现价值近似 中，我们学习了如何在 Q 学习中应用含参数函数实现价值近似。具体

任意门连载合集

【合集】C++Primer-总览

摘要: 这是《C++ Primer 5th》的笔记合集。2017 年写的。 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 其它已完结的合集参见 合集栏 《C++ Primer 5th》 C++ P

编程C++

C++Primer-高级主题

摘要: 《C++ Primer》回炉，高级主题 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 内容总览 标准库特殊设施 tuple bitset regex random io 用于大型程序的工

编程C++

C++Primer-类设计者的工具

摘要: 《C++ Primer》回炉，类设计者的工具 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 内容总览 拷贝控制 拷贝、赋值与销毁 拷贝构造函数 拷贝赋值运算符 析构函数 三/五法则 使用=d

编程C++

C++Primer-C++11新特性

摘要: 《C++ Primer》回炉，C++11 新特性 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings long long type List initialization nullptr lit

编程C++

C++Primer-速查表:关键字,操作符替代名,运算符优先级

摘要: 《C++ Primer》回炉，关键字、操作符替代名、运算符优先级 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings C++关键字 C++操作符替代名 C++运算符优先级

编程C++

C++Primer-标准库

摘要: 《C++ Primer》回炉，标准库 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 内容总览 IO库 IO类 IO对象无拷贝或赋值 条件状态 管理输出缓冲 文件输入输出 使用文件流对象

编程C++

C++Primer-基础

摘要: 《C++ Primer》回炉，基础 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 内容总览 变量和基本类型 基本内置类型 算术类型 类型转换 字面值常量 变量 变量定义 变量声明和定义的

算法leetcode

【逆向思维】力扣780-到达终点

摘要: 逆向思维 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 本文我们看一个逆向思维解决的问题。在文章 逆向思维 中，我们汇总了一些逆向思维的问题，可以参考。 $1 题目 780. 到达终点 给

AI工程系统运维

将可执行文件转换为Linux服务

摘要: 可执行文件转换为 Linux 服务的过程记录 【对数据分析、人工智能、金融科技、风控服务感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：潮汐朝夕我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 假设我们有一个可执行文件，可能是 c++ 经过编译链接后形成的，也可能是一个 s

算法疑难杂症

分治-逆序对个数

摘要: 分治法解逆序对个数问题 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 在文章 分治 中，我们详细总结了分治法的内容，分治法有一个重要应用是归并排序。关于归并排序的算法细节和代码模板，可以参考

AI模型强化学习

将深度学习用于价值近似-DQN

摘要: DQN 初探 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 在文章 在Q学习中应用含参数函数实现价值近似 中，我们学习了如何在 Q 学习中应用含参数函数实现价值近似。具体地，我们根据 使用神

任意门软技能

金融科技风控人才的各项能力

摘要: 本文介绍传统的胜任力模型，以及针对金融科技和风控人才的各项能力 【对数据分析、人工智能、金融科技、风控服务感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：潮汐朝夕我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 胜任力模型胜任力模型（competence model）就是针

AI模型强化学习

在Q学习中应用含参数函数实现价值近似

摘要: 在 Q 学习中应用含参数函数实现价值近似 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 前面我们系统学习了强化学习的各种基础算法，总结可以参考文章 强化学习方法的分类总结。 其中 Q 学习、

AI模型强化学习

极简神经网络-深度强化学习预备知识

摘要: 极简神经网络知识 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 本文我们极简地过一下神经网络的必要知识。虽然是深度学习的内容，但是本文主要是为【使用神经网络实现强化学习的框架】铺垫必要的神经

AI模型强化学习

使用神经网络实现强化学习的框架

摘要: 用神经网络实现强化学习的框架 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 写在前面在文章 强化学习方法的分类总结 中，我们总结了强化学习的各种学习方式，其中我们详细研究了 Q 学习、蒙特

AI模型强化学习

强化学习方法的分类总结

摘要: 无模型方法总结，神经网络的引入 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 各种主流的无模型方法之前我们系统学习了通过自己行动获得经验来指定行动计划的无模型方法。 在利用经验时，需要注意以

AI模型强化学习

组合使用基于价值和基于策略 -- Actor Critic 学习模式

摘要: Actor Critic 学习模式 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 在文章 强化学习环境框架-从一个迷宫环境看MDP的要点 中，我们总结了强化学习的基本概念，以及作为强化学习机

AI模型强化学习

经验用于更新价值还是更新策略 -- Q学习与SARSA

摘要: Q 学习与 SARSA 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 在文章 强化学习环境框架-从一个迷宫环境看MDP的要点 中，我们总结了强化学习的基本概念，以及作为强化学习机制的 MDP

AI模型强化学习

时序差分与蒙特卡洛方法, Q学习

摘要: 蒙特卡洛方法与时序差分 【对算法，数学，计算机感兴趣的同学，欢迎关注我哈，阅读更多原创文章】我的网站：潮汐朝夕的生活实验室我的公众号：算法题刷刷我的知乎：潮汐朝夕我的github：FennelDumplings我的leetcode：FennelDumplings 在文章 强化学习环境框架-从一个迷宫环境看MDP的要点 中，我们总结了强化学习的基本概念，以及作为强化学习机制的 MDP