针对情景记忆算法中记忆池中的样本利用率低的问题,提出了一种基于情景记忆和值函数分解框架相结合的合作型多智能体强化学习算法,即情景记忆值分解(episodic memory value decomposition,EMVD)算法。EMVD算法在情景记忆部分以时间差分...针对情景记忆算法中记忆池中的样本利用率低的问题,提出了一种基于情景记忆和值函数分解框架相结合的合作型多智能体强化学习算法,即情景记忆值分解(episodic memory value decomposition,EMVD)算法。EMVD算法在情景记忆部分以时间差分误差平方为依据来更新记忆池,使记忆池中一直保留对学习效果提升更重要的情景记忆样本,并将情景记忆算法与神经网络相结合,提高了算法的收敛速度。为了将EMVD算法应用于机器人协作运输任务中,设定机器人和运输目标的位置为状态,并且设计了回报函数。仿真结果表明,EMVD算法可以探索出机器人协作运输任务的最优策略,提高了算法的收敛速度。展开更多
This article presents the research and development of an electric vehicle(EV) in Department of Human-Robotics Saitama Institute of Technology,Japan.Electric mobile systems developed in our laboratory include a conve...This article presents the research and development of an electric vehicle(EV) in Department of Human-Robotics Saitama Institute of Technology,Japan.Electric mobile systems developed in our laboratory include a converted electric automobile,electric wheelchair and personal mobile robot.These mobile systems contribute to realize clean transportation since energy sources and devices from all vehicles,i.e.,batteries and electric motors,does not deteriorate the environment.To drive motors for vehicle traveling,robotic technologies were applied.展开更多
在机器人搬运场景中,经常会出现货物实际姿态与预期不一致的情况,这时往往需要人工协作进行调整,工作效率和节拍因此受到影响。为解决以上问题,设计了一种自主移动运输机器人,可全向移动且具有新型摩擦轮-夹爪复合式取物结构及货物姿态...在机器人搬运场景中,经常会出现货物实际姿态与预期不一致的情况,这时往往需要人工协作进行调整,工作效率和节拍因此受到影响。为解决以上问题,设计了一种自主移动运输机器人,可全向移动且具有新型摩擦轮-夹爪复合式取物结构及货物姿态调整结构,其控制系统采用同步定位与建图(Simultaneous Localization And Mapping,SLAM)等技术。通过pitch轴和yaw轴货物姿态调整实验确定了关键工作参数的最优值。最后进行了自主导航实验,结果表明该机器人在室内环境可实现自主导航。展开更多
文摘针对情景记忆算法中记忆池中的样本利用率低的问题,提出了一种基于情景记忆和值函数分解框架相结合的合作型多智能体强化学习算法,即情景记忆值分解(episodic memory value decomposition,EMVD)算法。EMVD算法在情景记忆部分以时间差分误差平方为依据来更新记忆池,使记忆池中一直保留对学习效果提升更重要的情景记忆样本,并将情景记忆算法与神经网络相结合,提高了算法的收敛速度。为了将EMVD算法应用于机器人协作运输任务中,设定机器人和运输目标的位置为状态,并且设计了回报函数。仿真结果表明,EMVD算法可以探索出机器人协作运输任务的最优策略,提高了算法的收敛速度。
文摘This article presents the research and development of an electric vehicle(EV) in Department of Human-Robotics Saitama Institute of Technology,Japan.Electric mobile systems developed in our laboratory include a converted electric automobile,electric wheelchair and personal mobile robot.These mobile systems contribute to realize clean transportation since energy sources and devices from all vehicles,i.e.,batteries and electric motors,does not deteriorate the environment.To drive motors for vehicle traveling,robotic technologies were applied.
文摘在机器人搬运场景中,经常会出现货物实际姿态与预期不一致的情况,这时往往需要人工协作进行调整,工作效率和节拍因此受到影响。为解决以上问题,设计了一种自主移动运输机器人,可全向移动且具有新型摩擦轮-夹爪复合式取物结构及货物姿态调整结构,其控制系统采用同步定位与建图(Simultaneous Localization And Mapping,SLAM)等技术。通过pitch轴和yaw轴货物姿态调整实验确定了关键工作参数的最优值。最后进行了自主导航实验,结果表明该机器人在室内环境可实现自主导航。