Google Lens:用手机镜头连接现实与AR的未来



去年,Google Lens首次亮相谷歌I/O开发者大会时,就引起了媒体和大众的广泛关注。


在今年的谷歌I/O开发者大会上,谷歌针对Google Lens发布了几大更新。除了功能上的更新,谷歌还宣布,此前仅限自家 Pixel手机使用的Google Lens,将向LG、摩托罗拉、小米、索尼、Nokia、TCL、一加和华硕这些第三方手机品牌开放。



Google Lens不是一个硬件,而是软件的内部功能,并应用在相机程序中。Google Lens将AR、AI和计算机视觉技术相结合,可以识别图像和文本;实时分析图像;并迅速检索出相关的信息。例如,当把摄像头对准一朵花时,它会告诉你花的品种;指向一本书时,可以立马获取这本书的作者信息;指向餐厅时,能够看到这家餐厅的菜品评价和价格信息。简单来说,用户用手机相机对准现实世界中的物体,即可获取相关的文字信息,而无需手动搜索。


本次I/O大会上,谷歌介绍了Google Lens的三项新功能,具体如下:



1. 智能文本选择


Google Lens新增了智能文本选择功能。新功能可以识别画面中的文字,比如菜单、食谱、或是Wi-Fi密码,使用者可以选取其中的一个字或一整段文字,进行查询或复制、粘贴到手机上。


举例来说,如果使用者到餐厅用餐,却不知道其中某几道菜名的意思,就可以开启相机应用把镜头对准一份菜单,然后在手机上点选屏幕上的菜名,Google Lens就会显示相关讯息,比如那道菜的图片、做法或是YouTube教学影片等。此外,Google Lens支持Google翻译功能,当用户选取Google Lens上显示的一段文字时,即可实时翻译。不只如此,用户在读书时,看到优美的段落想要分享时,还可以用Google Lens将其粘贴到手机中。


谷歌VR/AR副总裁Chennapragada表示:“通过智能文本选择,用户现在可以将所看到的文字与需要的信息联系起来。也就是说,可以直接将现实世界中的对象“复制和粘贴”到手机中,比如图片或文字。



2. 实时搜索


另一大亮点就是新增了实时搜索功能。过去,用户想要使用谷歌的图片搜索功能时,需要先拍摄照片并保存到相册中,而现在,用户直接将相机指向物体,即可同步识别。这项新功能通过Cloud TPU(谷歌为执行TensorFlow框架以加速机器学习运算作业而设计的硬体加速器),可以在1秒内将画面中的物体比对资料库里的几亿个字、地点和物品等,然后显示出比对结果,以提供相关讯息。比如,用户拿手机对着一本书,Google Lens就会实时显示该书的相关信息,包括作者、出版时间等。


Google Lens的下一个方向是图像识别功能。举例来说,借助AR,最终Google Lens将能识别音乐会海报并播放相关的MV——苹果在ARKit 1.5版本的更新中,也为开发人员提供了这项功能。



3. 商品推荐


Google Lens还新增了一项名为“Style Match(穿搭比对)”的功能,它可以识别出街拍造型中用到的服饰配件,并向用户推荐类似的穿搭风格。


如果你对服装店内模特儿所穿的衣服、所拿的包包感兴趣,打开Google Lens,即可快速查找到类似风格的单品。Google Lens同样也支持快速订购,分分钟帮你找到流行单品!


除了服饰,用户还可以通过Lens查看家居装饰等产品,以了解有关这些产品的更多信息,从而找到与其相匹配的相似款式的产品。




其实,早在Google Now(Google Assistant前身)推出的时候,就已经有类似Google Lens的功能了,只是,要先打开相机,然后长按Home键,让Google Now识别取景器中的物体或文字,其原理与Google Lens几乎是一样的。还有更早的Google Goggles,也算是被整合进了Google Lens之中。


但Google Lens不管是响应的速度还是识别能力都要比当年的Google Now和Google Goggles快了许多,大量的数据处理能力和机器学习的功劳是必不可少的。但是,它就和Google Assistant一样,如何让用户更高频率的去使用它,依然是一个待解决的问题。



【资讯编译自:.wired

87870编译文章,转载须注明来源及链接,否则将追究其法律责任!


相关推荐

开发者将Google Lens AR文本翻译应用于VR场景中

借助Google Lens,你只需将手机摄像头指向真实世界对象即可进行搜索,或者是进行文本翻译。但根据推文用户Phasedragon发布的演示,这种视觉查找功能同样支持虚拟现实。

谷歌AR工具Google Lens登陆全球Google Go市场,带来更好的理解能力

谷歌在今年五月举行的I/O大会宣布将视觉AR工具Lens纳入至Google Go。但Google Go最初只支持Android Go设备,并且只登陆了特定市场的Google Play。然而,谷歌已于最近将这一工具带到全球范围内的Play Store。

谷歌Lens新增AR滤镜“作业” 可帮助解决数学难题

谷歌一直在为学生及其父母提供一些有用的工具,使在家学习变得更加容易。今年5月,谷歌在搜索中添加了AR功能,允许用户可视化3D解剖模型和细胞结构。现在,这家科技巨头希望通过一个“作业”滤镜来帮助学生解决数学问题,学生只需使用Google Lens拍照即可获得分步答案解析。

谷歌I/O 2019:增强现实正融合进谷歌业务的方方面面

“我们的使命是整理全球的信息,让全世界的人都能接触和使用它们”,这是谷歌21年来不变的公司使命,也是谷歌CEO皮查伊在今年谷歌I/O大会上的开场白。

谷歌Lens即将搜索文字和图片的组合

谷歌正在更新其视觉搜索工具GoogleLens,加入新的人工智能驱动的语言功能。这次更新将让用户使用文字进一步缩小搜索范围。因此,举例来说,如果你拍了一张佩斯利衬衫的照片,以便使用GoogleLens在网上找到类似的物品。

Google最新计划 将手机变成页游控制手柄

Google Chrome 近日推出了一个有趣的实验功能,将如今几乎人人持有的智慧型手机转变为游戏手把!持有手机或平板电脑的玩家仅需透过十分简单的连线设定,即可轻松在电脑荧幕上与好友们共同游玩网页游戏,一同享受在“Chrome 云端运动大会”竞技的乐趣。  进行游戏的方式相当简单,玩家只要能在手机上安装 Google 旗下的 Chrome 浏览器,并输入指定网址及代码,即可与 Chrome 伺服器连线,在手机上进行选择人物及游戏的动作。

Google 搜寻出现《斯普拉遁》彩蛋 在网页上来场「漆弹大作战」!

Google 智慧型手机 Pixel 7 和 Pixel 7 Pro 开放预购 建议售价新台币 1 万 8990 元起

Google Play 商店服务异常 《Fate/Grand Order》《原神》等游戏发布储值异常公告

Google 旗下 Android 系统商店平台 Google Play 今日发生服务异常,包含《Fate/Grand Order》、《原神》在内的热门手机游戏皆发布公告,表示由於 Google Play 服务异常,因此玩家们可能遭遇到储值异常的问题。无法取得此篇推文,可能推文已移除或更改隐私设定。...

Google 将於 10/6 晚间举办硬体发表会 带来 Pixel 7、Google Pixel Watch 等新产品情报

Google 宣布将於美国东部时间 10 月 6 日上午 10:00举办硬体发表会,将发表智慧型手机「Pixel 7」「Pixel 7 Pro」、智慧型手表「Google Pixel Watch」及「Nest」系列智慧型居家装置的新产品。发表会上将深入介绍早在今年 5 月 Google I/O 开发...

盒子游戏,游戏玩家专属个性阅读社区


©CopyRight 2010- 2020 BOXUU.COM Inc All Rights Reserved

鄂公网安备 35020302000061号- 鄂ICP备2020015574号-1