TRPO

一种基于信赖域方法的策略梯度优化算法，通过约束优化保证策略更新的安全性，但需要计算昂贵的二阶导数，计算复杂度高于PPO