尼泊尔发生了本世纪陆地第五次八级大地震,加德满都12座世界遗产建筑被不同程度损毁,尼泊尔专家称能工巧匠需要用大约10年时间才可修复这些古迹。在他们实现这一目标之前,百度拿出了一个快速解决方案:基于照片游技术,号召全球网友上传加德满都相关景点照片,尝试用技术在虚拟世界对被损毁的景点进行360°还原。这听上去是一个巨大的“拼图”工程,好在有一项名为“照片游”的技术,而这项技术未来甚至有望取代街景车,做到真正还原世界每一个时刻的每一个角落。

照片游技术收集和还原真实世界

百度地图还原加德满都的计划,使用被称为照片游的核心技术。这个技术并不难解释清楚:首先,百度收集用户手里海量的关于某个景点不同角度、不同时间、不同特征的风景照片;其次,通过图像技术对海量照片进行筛选和三维建模,把平面还原成空间;再次,通过智能游览路径规划算法,生成一条最佳游览路径模拟真人游览;最后,利用照片渲染技术,对某些缺失的角落进行修补插入虚拟照片。

照片游技术所以来的四项基本技术,每一个都已被应用在成熟应用之中。

百度、Google地图很早就有UGC景点相册功能,用户可选定一个地点上传对应照片,只不过主要目的是分享给其他用户。基于平面图像的3D建模,是街景应用的核心技术,只不过它的照片素材是街景车等专业取景器拍摄而来。

智能路径游览规划算法主要是利用大数据分析和图像识别算法,分析出哪些角度更受用户亲睐,哪些位置的人流最多,进而得出景点最合适的虚拟游览路线,百度地图热力图便是基于人群特征的地图技术。照片渲染技术在《返老还童》《速度与激情7》已在大量电影中被应用,一些照相馆提供的照片修复服务所使用的软件同样应用了这个技术。

基于UGC的照片游技术已经被应用在Google地图和百度地图之中。百度与Google最核心的不同是智能路径规划算法和图片渲染这两部分,百度除了在空间上还原之外,还可以让用户看到不同时间状态下古迹的不同姿态(阴晴、白天傍晚、雨雪等),这主要基于对用户上传照片的光线强度分析。此前百度照片游技术已上线22个景点的街景,笔者体验感觉还不错。

上述所有技术都离不开关键的几个基础技术:大数据、机器视觉和人工智能。用户上传的海量照片与街景车的规范照片比杂乱数倍,需要剔除无用、重复照片,筛选对于还原有效的照片,这需要图像识别和大数据技术;在还原时不可能人工去拼接需要机器自动还原为3D,路径规划和图片渲染则需要基于图像素材情况进行自动的规划,这需要人工智能技术。当然,机器视觉本身是基于大数据和人工智能技术。

照片游技术还有哪些使用场景?

照片游技术还在探索阶段,目前仅仅用于少部分景点的虚拟街景生成。随着图像识别技术、图像渲染技术、三维建模技术和人工智能技术的发展,它将不断成熟,具有巨大的应用潜力,我甚至认为照片游技术可以与街景技术、电子地图技术并列,成为未来的核心地图技术之一,因为它可以低成本、高效率、无死角地帮助人类把物理世界映射到虚拟世界,而这是从地图第一天诞生其人类一直都有的愿望,并且今天愈发强烈。

典型场景1:还原世界的每个时刻

在加德满都被毁之后,基于街景车的专业取景已无可能,只有基于旧照片进行还原,利用互联网的UGC能力可收集到全球海量照片,照片游技术则可以实现还原。尽管在加德满都被损毁之后,其他重要旅游经典应该会有意识加快街景建设。不过别忘了,有目的的街景建设都只能还原某个时刻的街景,比如杭州西湖春夏秋冬各不相同,只有通过照片游才可还原不同时间点的街景。

还有,除了加德满都,世界上还有大量景色已经无法还原,且存在可观数量的照片,比如三峡工程蓄水后被淹没的沿线城市、沿线风景。哪怕是你所生活的城市,几年之后你再回头来看,恐怕都会面目全非,人类建设大跃进正在淹没一代又一代记忆。不过这个星球每时每刻都在被不同的人从不同角度拍摄进去,从室内到室外,海量照片未来都可能成为“照片游”还原的素材。而这些还原后的结果则可以被应用到景区导览、人文社科研究、用户还旧寻幽探古,等等。

典型场景2:更低成本的街景制作

街景技术已经出现近十年了,不过你会发现你所在地区可能并不在街景地图之中,就算在可能已是两年前的数据,店铺、路段什么的可能都已经认不出来了,相对于电子地图而言,街景地图不论是在覆盖范围还是更新频率上,都差距甚大。原因很简单:街景制作成本太高了。最典型的数据收集设备是街景车,此外还有自行车、头戴式、背包式的街景拍摄器。不过它们都需要大量专业人力,并且收集速度是非常慢的。

照片游技术可以部分取代现在的街景制作技术,它成本更低,更重要的是,速度更快,每个具有拍照设备的人都成为街景收集器,只要他们愿意贡献数据——现在是主动上传,未来或许是对海量云端相册照片进行去隐私处理后的利用。总而言之,照片游是更低成本、更高效率的众包街景制作技术。

典型场景3:室内街景从点到面

过去的街景几乎都是室外部分,并不是室内街景没需求,相反室内虚拟游览、室内导航的需求可能更甚,比如商场和博物馆。

室内街景没怎么做,我想主要有两个原因:室内诸多街景采集设备都失效了,街景车跑步起来,头上戴个街景采集器估计会被打。室内更容易触犯用户隐私,室外距离远人群密度低尚出现过Google 街景拍摄到换衣服女人遭起诉事件,室内就更容易出现这样的事件了。尽管Google、百度在过去做过博物馆、艺术馆的内部街景浏览,不过都非常少,并且为此付出了巨大的数据采集成本。

而照片游技术基于用户拍摄的照片,因此并不存在街景车跑不起来的限制。隐私问题在机器视觉技术成熟到一定成熟完全可以对人脸进行自动马赛克处理。而室内定位技术的成熟也给室内街景虚拟路径规划提供了更大的可能,百度已投资芬兰室内导航公司IndoorAtlas,iBeacon等室内定位技术正高速发展。总之,未来我们世界打开手机地图查看商场虚拟导航,并不是吃人说梦——这些导航都是基于用户上传的室内照片生成。未来互联网公司则可基于室内街景开展O2O体验式购物、O2O体验式公民博物馆,虚拟历史教育等等。

照片游技术未来还有哪些发展方向?

照片游技术才刚刚开始,它的未来不只是一个更低成本更高效率的街景工具,与以下技术有着巨大的结合空间:

1、视频技术。图像识别技术只是机器视觉技术的一种,随着人工智能、大数据和深度学习技术的发展,随着机器计算能力的爆发式增长,视频识别技术正在日益成熟。百度现任首席科学家、前Google X实验室负责人吴恩达让机器自动从海量YouTuBe视频识别猫就是视频识别的应用。未来照片游可升级为视频游,实际上视频数据量更大,因为它无时不刻、不知疲劳地地记录着世界,而这些记录的“眼睛”遍布在我们的周围且越来越多。

2、云摄像头。百度上马了百度公园,记录几十个景区的实时视频,未来都可以成为街景还原的数据。不只是百度,不少用户已经开始购买云摄像头,以便通过云实时查看某个地方的视频,这些视频被存放在某个云空间,或者被公开分享,未来它们可以成为照片游街景的数据来源。另外一个分支是运动摄像头,GoPro为代表,国内现在抄得很厉害,未来运动摄像头拍摄的海量运动照片和视频,则可以成为运动圣地,比如珠穆拉玛峰的虚拟实景还原的素材,能够登顶珠峰的人太少,不过想要体验登顶感觉的普通人太多了。

3、虚拟现实。VR设备,Oculus是其中最出名的应用,你带上一个眼镜之后就可以进入一个虚拟世界,它可以给你声音、环境诸多维度的感觉,能够感知你的动作、声音、情绪。而这些虚拟现实设备都缺乏应用和内容,未来基于照片游技术可以为它们创造大量的与现实环境紧密结合的内容。记得去美国大峡谷游玩时在峡谷边看了场平面电影,以后再去可能就是直接带着眼镜去体验滑翔、跳伞等探险项目了;去三亚则可以带着眼镜等设备学习潜水、体验深潜……

4、无人机航拍。DJI(大疆)的声名鹊起说明了一个趋势:航拍太火了。过去人们都是站在地上看这个世界,却很少有机会通过“上帝视角”来了解这个世界。有了俯瞰式的航拍影像数据,人们可以真正实现360度建模世界、还原世界——Google Earth的卫星云图实在太模糊了。航拍技术的普及让Google Earth一下进入了史前时代。从覆盖范围来看,无人机航拍更多还是一个补充,不过它更有用。

总结:百度还原加德满都采用照片游技术,只不过呈现了冰山一角的能力,照片游未来还有巨大空间,当然,一切的前提是人工智能、机器视觉和大数据技术要更加成熟。

微博@互联网阿超 微信 罗超(luochaotmt)

照片游技术会取代街景车吗?相关推荐

  1. 澳门惊现Google地图街景车

    <script type=text/javascript></script> <script src="http://pagead2.googlesyndica ...

  2. [推荐] 一个 Node.js 技术选型案例:使用 CARMEN 作为卡牌手游技术栈

    作者 @超人张宝胜 ,原文地址:https://zhuanlan.zhihu.com/p/103724412,如需转载请联系作者授权. 前言 本文介绍了在资金.人员.时间上全面告急.云服务提供商不确定 ...

  3. Google街景车在台湾香港出现

    据世纪奥美公关报道,Google街景车12月起开始在台湾进行街景信息收集,民众将会看到顶端设有专属相机.车身有Google logo的Google街景车穿梭于台湾各地的街道,拍摄各地的地标.建筑物和公 ...

  4. 基于Adobe Flash平台的3D页游技术剖析

    基于Adobe Flash平台的3D页游技术剖析 写在前面 从黑暗之光,佛本是道,大战神的有插件3D页游.再到如今的魔龙之戒. 足以证明,3D无插件正在引领页游技术的潮流. 目前,要做到3D引擎,有以 ...

  5. 开启灯光就是近光吗_保时捷Macan大灯改装技术,东莞专业豪车灯光改装修复。保时捷改LED大灯...

    保时捷Macan大灯改装技术,东莞专业豪车灯光改装修复.保时捷改LED大灯 好马配好鞍.好车搭好灯,如果把车辆前杠比作"脸"的话,大灯就是"眼睛",而灯光就是这 ...

  6. eSIM技术必将取代SIM卡 一文读懂eSIM技术优势!

    eSIM技术必将取代SIM卡 一文读懂eSIM技术优势! 未来某一天,当我们纪念Apple Watch 3,不要忘了正是因为它的出现eSIM技术才会流行起来. 众所周知,手机离不开SIM卡.如果没有安 ...

  7. ReCap 360 photo照片建模技术的又一个例子

    这是我做的又一个利用Autodesk ReCap 360 照片建模技术做的一个例子.你可以下载模型自己把玩,或者下载原始照片自己试一试. 拍摄工具: 小米手机 照片数量:约120张 后期处理工具: p ...

  8. 基于照片扫描技术的游戏网格贴图制作的相关(上篇)

    参考来源: Agisoft PhototScna User Manual http://www.agisoft.com/pdf/photoscan-pro_1_4_en.pdf Unite 2018| ...

  9. 精灵学院 - 经典口袋宝贝战斗手游 技术支持

    游戏名称:精灵学院 - 经典口袋宝贝战斗手游 技术支持邮箱地址:565047553@qq.com

最新文章

  1. Linux下支持rz/sz上传下载文件
  2. Linux修改主机名的两种方法
  3. 用Mysql创建设备管理信息系统数据库(图解)
  4. 不停机上线服务_【必看】10月25日本市增值税发票管理系统停机前,这些事一定要办...
  5. 微信小程序需要https后台的创业机会思考
  6. HDOJ2035 人见人爱A^B
  7. matlab分布式平台
  8. mysql monitor用户_Mysql的用户基本操作
  9. 码匠编程:零基础从前端入门到前端开发工程师路线
  10. PHP连接不上MySQL解决方案总结
  11. shiro-cas------搭建基础cas服务器
  12. 在Mac上Topaz Gigapixel AI作为Photoshop插件未显示在“文件”->“自动”中的解决方法
  13. mf4350d驱动下载linux,佳能MF4350d打印机驱动
  14. linux登陆端口号和协议,linux iso镜像下载 协议号与端口号大全
  15. Excel 怎么把多个excel工作表合并在一起
  16. React Native重启APP
  17. 银行面试常考。手把手带你高质量刷题(答案+解析)
  18. Power Pivot数据建模与数据汇总分析
  19. 视频特效如何制作?快把这些方法收好
  20. 污水处理成本高怎么办?智能网关+云平台提供你完美解决方案

热门文章

  1. 问题解决 Cannot calibrate from current position
  2. Vue + element-ui 背景图片设置
  3. 基于华为eNSP的局域网搭建
  4. Linux中pdb文件生成dssp文件
  5. 赞不绝口!仅靠阿里P9分享的 Redis 工作手册,拿到60W年薪Offer
  6. 人生如梦,我总失眠,人生如戏,我总笑场
  7. 品读张爱玲的一生的“母女劫”
  8. vscode中主题背景文字的设置
  9. Vue项目快速输出到小程序、H5
  10. linux反汇编uboot,转一篇UBOOT调试的