首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种基于视觉语言模型的自动导引车导航方法及装置 

申请/专利权人:浙江大学湖州研究院

申请日:2024-05-29

公开(公告)日:2024-06-28

公开(公告)号:CN118258406A

主分类号:G01C21/20

分类号:G01C21/20;G06V20/58;G06Q10/0835;G06Q10/0832;G06Q10/047;G06V10/46;G06V10/75;G06V10/74;B60P9/00

优先权:

专利状态码:在审-公开

法律状态:2024.06.28#公开

摘要:本申请属于物流管理技术领域,公开了一种基于视觉语言模型的自动导引车导航方法及装置,通过利用视觉语言模型根据用户输入的货物指令以及场景图像,预测出相应的场景描述信息,以结合该场景描述信息生成可移动至货物所在区域的第一导航路径,以及可移动至目标货物附近的第二导航路径,无需划定固定路线以及点位即可进行自动导航,极大降低了人工工作量以及部署成本;其次还可通过检测货物底部是否存在托盘,进一步确定目标货物所对应的搬运方式,进而有效保障货物的搬运效率。

主权项:1.一种基于视觉语言模型的自动导引车导航方法,其特征在于,包括:当处于指定工作区域时,将包含货物类型的货物指令以及与所述指定工作区域对应的场景图像输入至视觉语言模型,得到所述指定工作区域的场景描述信息;其中,所述视觉语言模型由至少两组指令文本样本、与每组所述指令文本样本对应的样本图像以及描述文本样本训练得到;基于所述场景图像中的货物区域以及所述场景描述信息,生成第一导航路径,并按照所述第一导航路径移动至所述货物区域;其中,所述货物区域包含与所述货物类型对应的至少两种待识别货物;在所述货物区域获取包含所有所述待识别货物的货物图像,并在所述货物图像中确定出任意一个所述待识别货物为目标货物时,根据所述目标货物所对应的预设堆放规则、所述货物图像以及所述场景描述信息生成第二导航路径;按照所述第二导航路径进行移动处理,并当检测到所述目标货物的底部存在托盘时,根据所述托盘的位姿信息对所述托盘进行叉取处理。

全文数据:

权利要求:

百度查询: 浙江大学湖州研究院 一种基于视觉语言模型的自动导引车导航方法及装置

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。