Facebook欲借AR在現實世界開辟一
Facebook欲借AR在现实世界开辟一个新的空间
艺术家Heather Day在Facebook园区的增强现实艺术作品
《大西洋月刊》(the Atlantic)撰文称,Facebook新的AI Camera团队想要在现实世界中开辟出一个新的空间在围绕摄像头的争夺战中,该团队将会整合过去十年最重要的一些技术进展,如神经络、机器人、相机系统和社交络数据在不远的未来,你的摄像头将会理解它所在的位置,辨认取景框内的人,无缝地强化你所看到的现实
以下是文章主要内容:
在Instagram故事功能中给闪闪发光的生日蛋糕蜡烛拍个视频,然后点击贴纸按钮在列表最上方,你就会看到蛋糕
这是小玩意,这类简单的伎俩其实不使人惊叹,也没有什么神奇之处但它是某种变革性的东西的开端智能已改变了大多数人拍照的方式硅谷的最新寻求是重新想象摄像头,将近年来人工智能的进步应用于让你的变得能够轻松理解现实世界,就像谷歌理解整个络那样
坐拥20亿用户的Facebook已经将负责Instagram、Facebook和Messenger的相机软件编程的数个团队重组成一个名为AI Camera的新部门该部门去年成立的时候,只有一个成员如今,它已经扩大到60人当中包括曾在微软从事Photosynth工作的里克(Rick Szeliski)和迈克尔科恩(Michael Cohen)AI Camera团队还能够利用在公司其它部门的顶级神经络研究者的专业知识,比如大名鼎鼎的雅恩乐昆(Yann LeCu)和贾扬清
AI Camera团队负责赋予这些运用内的摄像头理解你让它们对准的东西的能力在不远的未来,你的摄像头将会理解它所在的位置,辨认取景框内的人,无缝地强化你所看到的现实
目前,该团队都是推出小的成果,比如那个生日蛋糕贴纸伎俩但那只是一个想要改变你使用摄像头方式的开发项目的开始
AI Camera结合利用过去数十年众多最重要的技术进步:神经络、机器人、相机系统和社交络数据这些底层技术正在共同构成智能的照片拍摄和显示功能
也许这听上去很荒谬但人类捕捉、理解和分享现实世界的照片的欲望已被证明几乎无法满足,正因为此,Facebook、苹果、谷歌、三星、Snapchat、微软等大型科技公司悉数进军该领域
Facebook的项目也让人联想到了其它科技巨头的动作阅后即焚通讯应用Snapchat母公司Snap自称是相机公司,其在镜头上的应用可谓Pokmon Go之外增强现实的最好诠释在谷歌今年5月的开发者大会上,桑达尔皮查伊(Sundar Pichai)展现了Google Lens(谷歌镜头),该软件能够检测摄像头在对准甚么东西,还能够利用这一信息提供其它的功能,如输入密码和辨认花朵
在Snap的刺激下,科技巨头们纷纭开始拼合能够通过智能这一完全的成像和显示系统能够完成的东西摄像头被使用的每毫秒,所产生的数据都能够被捕捉、处理、理解和回送给用户查看
空间化Facebook
我们实质上是在探究我们需要哪些技术来打造使人惊叹的增强现实产品AI Camera团队产品经理约翰巴内特(John Barnett)指出
他说,试想一下,在现实世界上叠加一个持久稳固的可分享社交层,一个逃出信息流的空间化Facebook
当初每一个人都为只是叠加一层东西的Pokmon Go感到非常兴奋要是有1000层那样的东西呢巴内特问道,所有的这些信息层都会出现在情境空间里,跟你关心的东西密切相关
这跟我们所熟知的那个Facebook全然不同虽然它已从桌面端转向移动端,但它鲜少跟你握持所在的物理空间进行交互
在现有的Facebook结构中,我们给你出现世界上正在产生的一切事情,通过折叠空间来给予你时间巴内特说道,而AI Camera则是要折叠时间来给予你空间
也就是说,Facebook在同时处理两种模式:动态消息(News Feed),实时向你展现你关心的东西;空间化的Facebook,告知你这里正在产生什么你可以观察这种世界,也可以提供反溃最少,你可以对你的世界这么做
增强现实的一个愿景
在Facebook门洛帕克园区的其中一个楼层上,眺望南海湾的泥滩,你会看到一个平平无奇的角落上面铺设了管道监控摄像头在东向的墙壁上透过肉眼,你看不出该面墙跟Facebook园区数百面其它的墙有甚么区分
但是,掏出一部装有Facebook正在开发的一款应用的,将它对准该面墙,你会看到一个漂亮的艺术作品该作品主要由旧金山艺术家Heather Day创作而成它在Facebook CEO马克扎克伯格(Mark Zuckerberg)在F8开发者大会发表主旨演讲时曾短暂亮相
管道下,鲜蓝色,蓝绿色,青绿色,各种色彩汇集在墙壁上太酷了,它就是悬浮在空中
关闭该运用,再将它打开,再一次将对准那个角落,那个艺术品再一次出现绕着它来回走,穿过它,Heather Day的画作仍旧在那里要是全球各地都不计其数个像这样的东西,会怎样呢然后旁边是墨西哥卷饼的推荐信息,跑步和骑行记录运用Strava的分段记录项,你的朋友在镜头前摆拍
这是增强现实的一个愿景增强现实是指将数字信息叠加在现实世界的图像上面在苹果推出旨在让开发者将AR引入运用的框架ARKit以后,AR近几个月迎来了很多的发展动力开发者们最近一直在展示那些AR应用,谷歌前不久也发布了一套类似(尽管没有取得广泛的赞誉)的工具:ARCore
不管怎样,AR对智能来说是一项极其复杂的任务阿尔瓦罗科列特(Alvaro Collet)是来自卡内基梅隆大学的计算机视觉专业博士,从微软加盟Facebook,加入AI Camera团队他站在我旁边,看着那面墙这实际上是一个很有挑战性的场景,由于它非常平整科列特告诉我
即时定位与地图构建
这类基本的任务让人想到了机器人数十年来要做的事情研究人员将其称作SLAM(即时定位与地图构建)
SLAM的理论和实践在过去30年里形成,源自多位机器人研究者,比如SRI的兰德尔史密斯(Randall Smith)和彼得奇斯曼(Peter Cheeseman)、悉尼大学的休杜兰特-怀特(Hugh Durrant-Whyte)、塞巴斯蒂安特伦(Sebastian Thrun)、来自卡内基梅隆大学的科列特导师马夏尔赫伯特(Martial Hebert)这些研究者大多数都研究真实的机器人,主要是装有各类传感器的自动化车辆但随着智能开始兴起,研究人员意识到,他们的系统可能将能够触及数亿人,而不是数十人
SLAM的问题在于,你需要给机器人(或)所在的世界构建地图,但机器人(或者)和世界的位置都是不确定的
如果你知道已经是3D的世界的所有特征,那摆正摄像头的位置会很容易相反,如果你有所有的摄像头位置信息,那给世界构建3D地图会很容易科列特说道,SLAM的问题在于,开始展开工作的时候,你没有3D地图,你不知道摄像头在哪里那是即时定位方面的工作
有很多的方法解决该存在于不同算法当中的问题每一种方法都需要作出折衷有的可提供很高的精准度,但计算方面本钱高昂
有的可能没那末广泛地斟酌来自一个传感器的图象,但运行快速,不需要太多的计算工作
开发挑战
Facebook同时为iOS和Android平台开发产品,这给它带来了不少的挑战当然,Facebook的优势在于它无与伦比的规模:20亿用户,而且这一数字还在不断增加但要利用好这类规模,Facebook必须要让AR同时适用于五花八门的,而不只是适用于像Pixel 2、三星Galaxy Note 8和iPhone X这样的高端机型那意味着他们实际上要部署多个算法来实施SLAM在低端的上,运算会更加艰苦,因此他们得提升运行速度高端会有更好的表现,由于它们有足够强大的处理能力
对低端机型,AI Camera团队必须要斟酌各种隐藏的硬件问题在内部,有个摄像头,但还有个可用来了解运转情况的惯性丈量单元(IMU)该单元包含陀螺仪和加速计低端装备上的所有这些零部件都必须要进行校准它们的时钟必须要同步化由于制造质量较低,每台设备比较iPhone可能都会表现出不同程度的差异
在所有的电子工作完成,知道它自己大概在哪个位置和场景的几何结构以后,接着要解决的下一层技术是:深度神经络该神经部份意味着,这类软件需要经过训练,而不是通过传统规则来程序化在取得大量的标记数据后,神经络能够根据它看到的东西标记新的数据深度部份是指神经络的层数,这与数据集的功能复杂性相关
在过去5年里,这类机器学习系统改变了图像识别等功能的处理方式谷歌图片让你寻觅名片或山脉或人的图片的功能,就是借助了深度神经络的威力
不过,想象一下,下一步的进展:不只是辨认艺术品,能够识别存在于它已构建的场景模型内的物体那在过去一年里才变得可行
这是我们第一次能够在上同时运行SLAM和深度络科列特说道,我们有两个大型团队:SLAM几何团队和深度络团队目标是,这两样东西发生融会
那是你实现Facebook所想象的那种增强现实的唯一方式到那时候,他们将只需要让人们去填充所有的那些空间信息层
我们很想要做到的一点是,也许一两年后,让平常用户仅通过上的工具就能够重现艺术家Heather Day那样的场景科列特表示
任何有Facebook账号的人都可以创作媒体作品和将它固定在世界上的某个地方未来将会有悬浮在空中的食品推荐、婚纱照和画作,未来到处都将会看到艺术作品和墨西哥卷饼
滥用问题
但从各个社交平台的发展史来看,我们可以确定的一点是:人们将会用自己的方式来利用那些工具他们将会发现全新的用途,无法预料的用途,和滥用的方式空间化Facebook将会带来意想不到的后果
有的后果或许是可以预见的现在就已有空间化信息,只是不是以AI Camera想象或者通过Facebook运作的方式出现出来例如,餐馆点评站Yelp一直以来都备受流氓评论困扰十年来,餐馆一直都无法处理粉丝和黑子在它们的门口附上数字看板
另一个有警示意义的例子来自Pokmon Go奥马里艾其尔(Omari Akil)曾发表帖子描述他作为黑人玩该游戏的经历他更多的时间不是花在游戏本身上面,而是在担心其他人会否觉得他行动可疑并将他带到警察局当我的大脑开始一边在担心在美国作为黑人可能会遭遇的问题,一边参与到Pokmon Go游戏带来的现实世界探索的时候,我只想到了一样东西他写道,那就是,我继续玩下去的话,我可能会死掉
美国的种族和性别轻视问题在互联上已突出,在空间化的增强现实中它们恐怕将会被进一步放大并不是每一个人都能够一样轻松地访问同样的地方
2016年,Waze在巴西推出了一项犯罪多发地区提醒功能,帮助人们穿行治安不好的街区微软也曾由于2012年的一项关于类似功能的专利陷入了麻烦当中,专利里所说的功能被人称作避开贫民区功能
即便是在比较良性的例子里,空间信息如果不适合叠加在某个现实空间上面,也会引发问题
并不是说Facebook能够或应当解决流氓和美国反黑人方面所有的问题,和将数字信息叠加到现实世界的所有复杂问题但在开发增强现实产品的时候,他们可以想一想这些问题
AI Camera项目内部也面临类似的困难为了让系统兼容全球各地五花八门千奇百怪的,计算机视觉技术专家科列特描写了种种他们必须要做的工作,比如校准、算法、系统的故障耐受性
除实体部件的现状以外,他们也应当应对好增强现实在伦理和行动方面的问题考虑系统的滥用和偏见需要花费更多的心思,但现在就考虑这些问题会让该系统日后变得更加强大
如果AI Camera团队获得成功的话,那他们将会在陆地上面开辟出一个无边无际的新空间未决的问题在于,那会给这类新的数字层底下的地方带来甚么影响(乐邦)
宝宝积食拉肚子的症状
小孩脾胃虚弱怎么办
吃什么可以补肾气
青海治疗精囊炎方法张家界治疗宫颈炎方法
昆明复美白癜风医院排行怎么样
-
活下来的团购网站将是未来的骨干力量
大数据 | 2019-07-16
-
晶科电子高密度倒装芯片焊工艺欲摘封装器件
大数据 | 2019-07-15
-
用区块链物联网重新定义供应链
大数据 | 2019-07-15