首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明公布】基于神经渲染的高清三维重建方法_杭州倚澜科技有限公司_202310941807.4 

申请/专利权人:杭州倚澜科技有限公司

申请日:2023-07-28

公开(公告)日:2024-06-21

公开(公告)号:CN118229916A

主分类号:G06T17/20

分类号:G06T17/20;G06T15/00;G06T15/20;G06T15/60

优先权:

专利状态码:在审-公开

法律状态:2024.06.21#公开

摘要:本发明涉及三维重建技术领域,公开了一种基于神经渲染的高清三维重建方法,包括:获取物体三维面片进行裁剪,泊松融合修补表面空洞,再将该面片导入到渲染引擎中;渲染引擎与相机连接获取场景图片,检测出平面的法向以及位置,计算物体应该被摆放的位置,将该物体的面片摆放到此位置;将该位置传入到Nerf模块中进行坐标系转换,计算出等效相机内外参,渲染出模糊图片;对模糊图片进行增强;增强完成后,将图片返回给渲染引擎,根据平面位置和法向以及物体面片信息,计算出像素中处于阴影的位置。本发明提供的方法,结合UE引擎,通过阴影渲染技术,渲染出符合真实场景的阴影效果,提升重建真实度,解决三维重建成本高,推广性差的问题。

主权项:1.一种基于神经渲染的高清三维重建方法,其特征在于,包括以下步骤:步骤S1,训练好Nerf模块后,通过marchingcubes手段获取物体三维面片,对面片进行裁剪,泊松融合修补表面空洞,再将该面片导入到渲染引擎中;步骤S2,渲染引擎与相机连接,获取场景图片后,传入到平面检测模块检测出平面的法向以及位置,根据平面的法向以及位置计算出物体应该被摆放的位置,并将该物体的面片摆放到此位置;步骤S3,将该位置传入到Nerf模块中进行坐标系转换,将Nerf模块与渲染引擎中面片的屏幕空间对齐,计算出等效相机内外参,渲染出模糊图片;步骤S4,对所述模糊图片进行增强,以得到重建的高清图片;步骤S5,增强完成后,将增强后的图片返回给渲染引擎,渲染引擎根据平面位置和法向以及物体面片信息,计算出像素中处于阴影的位置。

全文数据:

权利要求:

百度查询: 杭州倚澜科技有限公司 基于神经渲染的高清三维重建方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。