第1节是简介。第2节是对受控马尔可夫链的简要介绍:随机控制问题的离散空间和时间设置。第3节随机差异方程的基础知识是下面的必要读数。第4节介绍了Bellman原理 /动态编程原则,Bellman PDE / Hamilton – Jacobi – Jacobi -Bellman PDE进行了受控的分歧。这是第一组工具,可用于解决涉及受控分散的控制问题。第5节将第4节扩展到了跳跃局的情况(没有提供证明),然后专注于算法交易和市场营销中的某些应用。第6节通过计算目标功能W.R.T.的导数来建立“第一阶条件”,以“变化的计算”方法来解决控制问题。控制中的扰动。这被称为随机最大原理或Pontryagin的最大或最佳原理。第4节和第6节在彼此之间彼此独立,因为提供了两种独立的解决控制问题的方式。