Snapchat AR更新:增加了语音命令,可共享AR内容,植物扫描仪

上周SnapChat举行了年度开发者活动,在AR方面展示了一个新相机以及对Lens Studio和Snapchat应用程序进行大量更新,进一步扩展了平台上现有的突破性AR内容,目前每天有超过1.7亿用户在该平台上访问这些AR内容。

关于AR方面的更新包括语音激活的UI导航,可跨越多个城市街区的共享AR镜头,能够识别狗和植物品种的新型扫描仪,以及新加入的机器学习功能。

语音交互

随着Snapchat上的AR内容越来越多,搜索相关的AR内容变得越来越困难。随着语音扫描的推出,用户现在可以准确告诉应用程序你想要搜索的AR内容。

只需按住相机选择屏幕,然后对智能手机麦克风讲话即可。然后,Snapchat会根据你的描述提取相关结果。语音扫描是启动时的一项纯粹的便捷功能。将来可能会发生变化:理论上可以扩展为AI助手。反过来,这可能会成为AR眼镜品牌Snap的重要组成部分。

共享AR内容

借助AR功能“地标”,Snapchat 以非凡的AR效果扩展了诸如艾菲尔铁塔和勃兰登堡门等景点。借助AR功能Local Lenses,Snap可以更进一步,并允许开发人员和用户在传统环境下玩AR游戏。AR扩展基于真实位置的3D重建,Snap借助Snapchat用户的360度快照和快照创建了这些扩展。借助自动3D映射,Snapchat摄像头可以将自己精确地定位在房间中,知道建筑物的比例和空间位置,因此可以向其中添加AR效果。它们对多个用户同时可见,并永久保留在世界上。

Snap借助Local Lenses,朝着AR云迈出了第一步,并紧跟Google,Facebook,Apple,Magic Leap和Niantic。

对象识别

Snapchat的AR应用程序平台“ Scan”最初于2019年推出,它使用Snapchat摄像头识别现实世界中的对象并访问相关信息。通过与特定公司合作,Snap可以极大地扩展Scan的功能,无论是通过Shazam识别特定音乐还是通过Photomath解决数学问题。

Snap本周宣布了两个新的Scan合作伙伴:PlantSnap和Dog Scanner。PlantSnap现在可用,它使Snapchat使用者可以使用Snap相机识别所有已知植物和树木中高达90%的部分。与PlantSnap相似,Dog Scanner使用Snapchat相机识别400多种犬科动物。其他即将到来的合作伙伴包括Nutrition Scanner(对包装食品成分的质量进行评分),以及包括Louis Vuitton在内的多个品牌合作伙伴。

Lens Studio和SnapML

除了上述对Snapchat应用程序的更新之外,Snap的Lens Studio创建者工具还以SnapML的形式获得了一定的好评,这是一项令人兴奋的新功能,允许创建者将自定义机器学习模型导入其项目中,从而进一步扩展了Snapchat的AR功能镜片。Snap已经宣布与Wannaby,Prisma,CV2020以及其他众多致力于SnapML持续开发的官方镜头创作者建立合作伙伴关系。

Lens Studio的其他更新包括通过“人脸地标”和“人脸表情”,“手势”模板,简化的用户界面以及Wannaby使用SnapML设计的新的“脚部跟踪”模板(可实现AR脚部交互)改进的面部跟踪。

举报
评论 0