| 成果基本信息 | ||||||
| 关键词: | 视觉语义导航 | |||||
| 成果类别: | 应用技术 | 技术成熟度: | 初期阶段 | |||
| 体现形式(基础理论类): | 其他 | 体现形式(应用技术类): | 新技术 | |||
| 成果登记号: | 资源采集日期: | |||||
| 研究情况 | |||||
| 单位名称: | 武汉理工大学 | 技术水平: | 未评价 | ||
| 评价证书号: | 评价单位: | ||||
| 评价日期: | 评价证书号: | ||||
| 转化情况 | |||||
| 转让范围: | 合作开发 | 推广形式: | 合作开发 | ||
| 已转让企业数(个): | |||||
| 联系方式 | |||||
| 联系人(平台): | 孵化基地 | 联系人(平台)电话: | 0771-3394012 | ||
| *成果单位详细联系方式请登录会员;还不是会员,马上注册! | |||||
| 成果简介 | |||||
本发明涉及机器人导航技术领域,公开了一种机器人视觉语义导航方法,包括以下步骤:建立场景图像集以及语音指令集;标注所述场景图像集中每一场景图像的图像特征,标注所述语音指令集中每一语音指令的语音特征;结合同一时间的图像特征和语音特征构建语义图谱,得到语义图谱集,标注所述语义图谱集中每一语义图谱的语义特征;融合同一时间的图像特征、语音特征以及语义特征构建状态向量,得到状态向量集;标注所述状态向量集中每一状态向量对应的动作序列,以所述状态向量集作为训练样本对对深度强化学习模型进行训练,得到导航模型;根据所述导航模型对机器人进行导航控制。本发明能够实现不在机器人视野范围内物体的导航 |