模仿学习是强化学习中的一种特定方法，其中代理通过观察专家代理的行为而不是通过传统的试错方法来学习执行任务。在此框架中，学习过程是通过模仿专家的动作而不是独立探索动作空间来驱动的。这在通过探索收集奖励困难、昂贵或耗时的环境中尤其有用，例如在自主驾驶或机器人控制任务中。
模仿学习中使用的一种常见技术称为行为克隆。在行为克隆中，在由从专家演示收集的状态-动作对组成的数据集上训练代理。例如，如果任务是驾驶汽车，则专业驾驶员将演示各种驾驶操纵，诸如加速、制动和转弯。然后，该数据用于训练神经网络，该神经网络将汽车的状况 (状态) 映射到适当的动作 (专家采取的动作)。经过培训后，代理可以在类似情况下有效地模仿专家的行为。
模仿学习中的另一种方法称为逆强化学习 (IRL)。IRL不是直接模仿行为，而是根据专家观察到的行为来推断专家似乎正在优化的奖励函数。一旦估计了奖励函数，代理就可以采用强化学习技术来根据学习到的奖励结构优化其动作。这种方法是有益的，因为它允许代理不仅模仿专家的行为，而且在没有专家监督的情况下随着时间的推移适应和改进。因此，模仿学习是开发智能代理的有力工具，尤其是在可能缺乏明确奖励信号的复杂环境中。