摘要：为了研究仿人、能量高效的双足机器人步行，研制了由MACCEPA（mechanically adjustable compliance and controllable equilibrium position actuator）柔性驱动器驱动的半被动双足机器人，并实现了其动力学仿真系统。提出一种基于再励学习的步行控制方法。该方法首先采用Q-学习方法学习机器人在理想环境中的稳定步行步态及其控制策略，然后将此步态和控制策略作为模糊优胜学习方法的参考步态和参考控制策略并在线学习模糊网络的优胜值参数。仿真结果表明：利用学习训练的结果控制柔性驱动器在步行相转换时的动作，机器人可以实现稳定动态步行。

关键词：机器人 双足机器人 被动动态步行 再励学习 

单位：清华大学计算机科学与技术系 智能技术与系统国家重点实验室 北京100084