地图|谷歌发布地图“时光机”:100年前,你家街道长啥样?
_原题为 谷歌发布地图“时光机”:100年前 , 你家街道长啥样?
鱼羊 发自 凹非寺
量子位 报道 | 公众号 QbitAI
10年前 , 乃至100年前 , 你长大的那条街道长什么样?
文章图片
△大谷Spitzer
现在 , 除了用AI修复老影像资料 , 谷歌还发布了新的「时光旅行」方案 。
就像这样 , 用3D视角 , 一览1890年到1970年曼哈顿切尔西区的建筑变化 。
文章图片
是不是有点历史更迭内味儿了?
这样一台「时光机器」的引擎 , 是谷歌推出的基于浏览器的工具集r?(音return) , 主要由3部分组成:
一个众包平台 。 用户可以上传城市历史地图 , 将其与现实世界的坐标进行匹配 , 完成地理修正 , 并将其矢量化 。
一个时空地图服务器 。 能显示城市地图是如何随时间变化的 。
一个3D体验平台 。 运行在r?地图服务器之上 , 利用深度学习 , 根据有限的历史图片和地图数据重建3D建筑 , 创造3D体验 。
以众包方式打造
重现城市的过去 , 最大的难点就在于数据:可用的图像很少 , 从图像中获取的元数据比之现代地图自然也少得多 。
为了应对这一挑战 , 谷歌的工程师们用上了基于Google Cloud和Kubernnetes运行的开源工具r? 。
其作用在于 , 采用众包的方式 , 让用户们共同打造一个具有时间维度的地图服务器 。
文章图片
具体而言 , 用户可以通过浏览器上传各个年代纸质版地图的扫描件 , 对其进行地理校正 , 使历史地图与现实世界的坐标相匹配 。
然后 , 通过追踪地理特征 , 比如标志性建筑、道路等 , 将历史地图转换成OSM矢量格式 。
这些矢量地图经过图块服务器(tile server)的渲染之后 , 就会变成通常在谷歌地图上看到的 , 可以放大和平移的滑块地图(slippy map) 。
文章图片
重建3D模型
接下来 , 就是利用这些图像和地图数据 , 重建曾经在历史上出现过的建筑们的3D结构了 。
这里的难点在于 , 大多数情况下 , 一个建筑的历史图像很可能只有一张 。 为此 , 谷歌工程师们开发了一套由粗到细的识别重建算法 。
文章图片
如图中所示 , 首先 , 根据众包注释或自动检测算法识别地图标记和历史图像中的建筑立面 , 为其生成粗略的3D结构 。
与此同时 , 算法会识别建筑立面上所有窗户、入口、楼梯这样的独立组件 , 并根据其类别分别重建精细的3D结构 。
两者相结合 , 就得到了最终的3D网格 。 这一结果会被存储在3D资源库中 , 为下一步渲染做好准备 。
该算法涉及的SOTA深度学习模型包括:
用窗户、入口、楼梯这样的立面组件注释训练的RCNN , 用于定位历史图像中的边框级实例 。
语义分割模型DeepLab , 提供每个语义类的像素级标签 。
专门设计的神经网络 , 用以确保一个立面上生成的窗户之间间距相等、形状一致 。 同时也保证不同语义类 , 比如楼梯和窗户之间的一致性 , 使这些组件被放置到合理的位置上 。
文章图片
还原全球城镇 , 还有《微软模拟飞行》
在此之前 , 微软也和AI初创公司Blackshark.ai合作 , 上线了全球最大仿真游戏《微软模拟飞行2020》 , 通过机器学习2D转3D的模式 , 还原了全球200万个城镇、15亿座建筑物和3.7万个机场 。
文章图片
游戏一上线 , 知名游戏测评媒体IGN就给它打出了满分10分 。
并且 , Blackshark还透露 , 这样的技术未来或将用于自动驾驶 。
那么 , 谷歌这次推出的怀旧项目你又觉得可不可呢?
如果你感兴趣 , 也不妨加入其中 , 谷歌表示 , 历史数据集和源代码均将开源~
传送门
官方博客:
https://ai.googleblog.com/2020/10/recreating-historical-streetscapes.html
R?工具集:
https://re.city/#14.25/40.74094/-73.98798
— 完 —
本文系网易新闻?网易号特色内容激励计划签约账号【量子位】原创内容 , 未经账号授权 , 禁止随意转载 。
_原题为 《谷歌发布地图「时光机」:100年前 , 你家街道长啥样?》
推荐阅读
- 家政|58同城到家精选发布《双11家政消费报告》
- 疾病|泰康在线发布行业首个疾病管理体系 探索服务+控费双赢新路径
- 广告|链博科技联合少城视井打造的区块链原创音乐平台正式发布!
- 拉萨|“西藏游”旅游信息平台发布会在拉萨举行
- FORTE|柬埔寨《柬华日报》:柬埔寨卫生部发布入境新规
- 作业|刚刚,辽宁省教育厅发布重要通知!教师必须亲自批改作业!
- 考试|广州中考科目考试实施方案发布 体育从60分提到70分
- 战报|京东物流发布11.11超级战报:个人快递单量增长164% 京东云仓单量增长138%
- oneAPI|英特尔加速实现XPU愿景:发布oneAPI Gold版本和英特尔服务器GPU
- 武汉发布|又一“中心”落户武汉,已有巨头“盯上”这些领域
