在科技部「数字经济技术创新研发与应用」项目下，清华大学电机信息学院和iStaging爱实境合作，完成「智慧全景3D重建」研究，透过AI只要单张全景影像，就能重建出室内3D格局模型，未来可应用在房仲业，提供更具空间感的在线或VR沈浸看房体验，旅宿服务平台上也能让消费者订房前，预先观看不同房间格局。这项研究凝聚产学资源完成，由爱实境提供2500张室内全景图片，结合清大电机信息学院研究团队开发的智慧全景3D重建技术，标榜不需要价格昂贵的专业全景相机，只要一般智能型手机拍摄的单张室内全景影像，透过机器学习模型，不需要人工处理，就能重建室内3D格局模型。清大研究团队今年6月将赴美国加州，准备在国际计算机视觉与图形辨识研讨会(CVPR)上发表。清华大学电机工程学系副教授孙民表示，传统室内全景浏览服务仰赖人工处理，在室内的定点拍摄全景影像，用户只能浏览该定点的室内全景，虽然可结合多张全景影像，例如客厅、卧室、厨房等室内全景影像，让用户看到更多室内样貌，但使用者在不同室内定点间切换，无法让用户在3D模型的虚空间中移动观看。

他解释智慧全景3D重建技术，就像小朋友折纸组合成立体的房屋一样，研究人员先以人工标注方式，为2500张室内全景图片标注天花板与墙壁、墙壁与墙壁、墙壁与地板，室内不同角落的折线，2500张全景影像中的8成标注图片用于训练机器学习模型，另2成用于测试模型辨识的准确度，如此便能训练系统辨识室内全景影像，重建出室内3D格局模型。而透过这项智慧全景3D室内重建格局技术，只要单张室内全景影像，在视线没有遮蔽的条件下就能重建室内3D模型，除了可以计算机在室内3D格局模型内移动，若搭配VR头戴及控制装置，还能带来更沈浸的视觉体验。传统室内3D建模需使用昂贵的Lidar测距装置，以获得室内的深度信息，由人工方式完成室内3D模型建模，而清大的智慧全景3D重建技术强调只要一般智能型手机拍摄单张室内全景，就能透过机器学习技术，重建室内3D场景。内容来源至：http://www.www.cafes.org.tw/info.asp
不过，这项技术仅能以没有视线遮蔽的单张室内全景影像，重建出室内场景的3D模型，例如客厅室内3D格局模型，无法重建被墙壁阻隔的卧室、阳台等3D格局，清大也和台科大合作，研究拼接多张室内全景影像，如客厅、卧室、厨房等多张全景影像，重建出更完整的室内3D格局。孙民表示，现在单张室内全景影像，经过人工标注训练、测试后，和LayoutNet的技术相比，准确度提高将近15%。目前正在进行多室内全景影像重建，以重建出更完整的室内3D格局模型，未来还要让室内的对象如桌椅、电视或家具，让用户能自由挪动，更全面3D体验。清大研究团队和爱实境的合作，未来也能透过爱实境的AR、VR内容平台，将这项技术扩展至海外市场。

转载于:https://blog.51cto.com/13373212/2395674

清大正式发表全景3D重建技术 AI让单张全景影像重建相关推荐

  1. 云从科技3D人体重建技术刷新3项纪录！仅凭照片即可生成精细模型

    3 月 19 日,根据官方消息,云从科技基于单帧图像的 3D 人体重建技术同时在 Human3.6M.Surreal 和 UP-3D 三大数据集上创造了最新的世界纪录,将原有最低误差记录大幅降低 30 ...

  2. 正雅GS颌位重建技术为隐形正畸打开新篇章

    正雅作为国内隐形矫正行业的领军企业,长期以来都专注于隐形正畸技术的研发创新.2019年,正雅联合沈刚正畸团队基于国人的颌面特点和临床操作痛点,在沈刚教授正畸团队十几年的钻研之上,倾力推出正雅颌位重建技 ...

  3. 新的3D地图制图技术改变了全球定位的游戏规则

    有人说:一个人从1岁活到80岁很平凡,但如果从80岁倒着活,那么一半以上的人都可能不凡. 生活没有捷径,我们踩过的坑都成为了生活的经验,这些经验越早知道,你要走的弯路就会越少. 在人类技术发展的历史长 ...

  4. echart 三维可视化地图_揭秘720°三维全景3D实景地图制作技术

    近两年来三维全景3D实景地图在三维虚拟现实领域中占有相当大的地位.目前的三维720°线上三维实景展示基本都是通过商迪3D三维全景建模与3d全景地图技术制作.例如:VR游戏.智慧城市规划项目.智慧房地产 ...

  5. 多视角3D重建技术市场现状研究分析报告-

    辰宇信息咨询市场调研公司最近发布-<2022-2028中国多视角3D重建技术市场现状研究分析与发展前景预测报告> 内容摘要 本文研究中国市场多视角3D重建技术现状及未来发展趋势,侧重分析在 ...

  6. VR全景看车：基于Web3D和3D建模技术的融合

    VR全景看车虚拟线上展示销售新模式是运用三维虚拟现实技术的基础,将现实世界中汽车产品通过互联网进行虚拟的三维立体展示并可互动浏览操作的一种虚拟现实技术.商迪3D运用VR全景技术.3D建模技术和三维虚拟 ...

  7. 科普| 3D视觉技术正在改变我们的生活

    点击上方"小白学视觉",选择加"星标"或"置顶" 重磅干货,第一时间送达 用双眼观察世界是人类与生俱来的.最为核心的生物功能之一,也是人类认 ...

  8. 罗永浩将举办“老人与海”黑科技发布会；京东正式宣告：全面向技术转型；英特尔因CPU短缺向PC厂商道歉 | EA周报...

    EA周报 2019年11月22日 每个星期7分钟,元宝带你喝一杯IT人的浓缩咖啡,了解天下事.掌握IT核心技术. 热点大事件 微软:已获得美国商务部批准,可以向华为出口软件 当地时间 11 月 20 ...

  9. 3D立体显示技术原理与游戏应用历程简介 【转】

    本文来自 中关村ZOL 「3D 立体显示」可说是近来娱乐产业相当热门的话题,不但有好莱坞推出<阿凡达>等卖座 3D 立体电影,全球各大家电厂商也积极布局准备推出一系列支持 3D 立体显示的 ...

最新文章

  1. mysql常见增量恢复方式_MySQL 全备份与增量备份 全恢复与增量恢复
  2. linux命令ifconfig
  3. iOS自动化探索（四）自动化测试框架pytest - 安装和使用
  4. FPGA异步时钟设计中的同步策略
  5. AVL树----java
  6. vue怎么改logo_vue全家桶项目构建教程
  7. leetcode312. 戳气球（动态规划）
  8. 深度linux安装好上不了网,Deepin Linux 无法上网
  9. springboot整合使用rocketMq
  10. iOS 国际化多语言设置 xcode7
  11. IT人终于把自己熬成了民工
  12. 日系P2P原理探究(二) — Winny, 日本崛起
  13. raid数据恢复案例之：服务器Raid5磁盘阵列数据恢复过程
  14. IDEA中修改项目与Moudle名称方法总结
  15. 基于51单片机的四位共阴数码管秒表proteus仿真
  16. 学信网的头像下载下来太小的处理方法
  17. 电信联通提高手机补贴
  18. html语言如何排版,html语言,使用table排版.docx
  19. 【论文写作】LaTeX学习笔记：一文入门LaTeX（超详细）
  20. 2021Unity学习教程：本地下载的Unity项目怎么打开？

热门文章

  1. 第七课 渐变工具和油漆桶工具
  2. 12864液晶串口图片显示
  3. 校园招聘面试精典博文java
  4. 双核CPU是怎么工作的？
  5. freemarker报错：Tip: If the failing expression is known to be legally null/missing, either specify a de
  6. 微信朋友圈是访问腾讯服务器吗,微信朋友圈疑似增加“来访”新功能？网友：再也不看朋友圈了！...
  7. absolute 元素完全居中的两种方法
  8. 三星s系列和note系列记录
  9. 计算机组成原理--动态链接
  10. ubuntu14.04安装GTX 1080 ti显卡驱动以及遇到黑屏问题