1. 创业头条
  2. 前沿领域
  3. 人工智能
  4. 正文

FACEBOOK神经渲染实现AR穿戴新里程,微美全息AI视觉场景高仿真拼接

 2020-05-25 14:48  来源:互联网  我来投稿 撤稿纠错

  【推荐】海外独服/站群服务器/高防

Facebook Reality Labs(FRL)致力于构建一个现实世界和虚拟世界能够自由混合,同时提升我们日常生活体验,增加效率和加强彼此之间联结的未来。续航是迈向所述愿景的挑战之一。为了能够实现能够长时间(包括一整天)舒适穿戴的虚拟现实头显和增强现实眼镜,我们必须优化设备的功耗。作为朝构建下一阶段AR/VR系统的一步,这家实验室正努力开发不影响图像质量的情况下显著降低功耗的图形系统。

DeepFovea是FRL为应对这一挑战而开发的数种基于神经网络的方法之一。DeepFovea这个渲染系统利用了最近发明的生成对抗网络(Generative Adversarial Network;GAN)人工智能概念来模拟人类在日常生活中的外围视觉,利用这种感知匹配架构来提供前所未有的图形效率。在测试中,DeepFovea可以将渲染所需的计算资源量减少多达10-14倍,而人眼依然无法注意到任何图像差异。DeepFovea的神经渲染远远超出了目前Oculus产品中的传统注视点渲染系统,能够生成感知上与全分辨率图像别无二致的图像,而需要渲染的像素不到10%。现有的注视点渲染方法需要渲染全分辨率图像一半的像素,所以DeepFovea在渲染需求的数量级进步代表了感知渲染的一个全新里程碑。

FRL最初在2019年11月的SIGGRAPH Asia展示了DeepFovea,而今天,团队公开了关于DeepFovea存储库的完整演示,从而帮助图形研究社区深化对先进感知渲染的探索。

FRL的最终目标是将实时注视点渲染带给能够全天候穿戴的轻便高能效AR/VR设备。DeepFovea演示了其能够渲染比传统渲染器少10%的像素,同时没有出现感知质量损失。这为感知渲染的效率设定一个全新的标准,并标志着朝着前述目标迈出了重要的一步。这种方法不取决于硬件,亦即DeepFovea能够兼容各种AR/VR研究系统。

尽管DeepFovea为AR和VR中的高效绘图提供了一种重要的方法,但这只是超低功耗感知探索的开始。除了研究论文之外,FRL同时发布了DeepFovea演示内容。团队表示,希望这能给志在为感知与神经渲染技术的进步做出贡献的图形与视觉科学研究人员提供一个有用的框架。

而在国内,微美全息(WIMI.US)拥有国内领先的AR全息应用平台。据Frost & Sullivan称,从2017年的总收入来看,微美全息云已是中国领先的全息AR应用平台。此外,根据Frost & Sullivan的数据,2018年,微美在国内所有全息AR解决方案提供商中建立了全面、多元化的全息AR内容库,在收入、客户数量、全息AR内容以及全息AR专利和软件著作权数量方面,微美全息云在中国全息AR行业排名第一。2018年全年,微美全息云拥有大约4654个AR全息内容、106软件版权和219个技术专利。微美全息云致力于使用全息技术来满足客户和最终用户的娱乐和业务需求。根据Frost&Sullivan的说法,微美全息云目前运营的全息AR应用平台涵盖了中国最广泛的全息AR产品类型。微美全息云的综合平台应用是微美全息云区别于竞争对手的一个关键因素。

全息黑科技那么出彩,微美全息(WIMI.US)专注于计算机视觉全息云服务。据介绍,微美全息覆盖从全息计算机视觉AI合成、全息视觉呈现、全息互动软件开发、全息AR线上及线下广告投放、全息ARSDK支付、5G全息通讯软件开发、全息人脸识别开发、全息AI换脸开发等全息AR技术的多个环节,是一家全息云综合技术方案提供商。其商业应用场景主要聚集在家用娱乐、光场影院、演艺系统、商业发布系统及广告展示系统等五大专业领域。

全息投影技术的应用已经广泛普及,在技术上也越来越的成熟,融合了多媒体、互联网等多项技术,从而可以增加远程控制和远程的传输与连接,它的清晰度和展架自由组合等都是一种不小的创新。当前,裸眼全息投影技术的运用十分广泛,涉及各个领域。在军事领域,全息投影技术可模拟战场环境,从而提供分析决策与行动的支持,真实且便携;在教育领域,可以突破时间和空间的限制,用动态的、具有时间性和故事性的虚拟影像来展现历史,真正达到学生参与体验,实现寓教于乐;在影视领域,全息影像技术能使人有更强的真实感,在超大屏幕的影院中,无需带上特制的眼镜,借助超大立体画面配合环绕立体声音效就能使观众有身临其境的感觉;在舞台效果上,能使观众直接看到舞台上立体的虚拟人物和景物,从而营造出亦幻亦真的视觉氛围,具有超级强烈的视觉冲击力。

微美全息(WIMI.US)领先的全息AR内容制作功能围绕图像采集、对象识别、自动图像处理和计算机视觉技术而构建。微美的软件工程团队和可视化设计团队紧密合作,不断推进这些可视化相关技术,并利用它们设计和生产创新的全息AR内容。通过提供精确姿态估计的实时计算机视觉算法,能够在几秒钟内执行场景识别和跟踪。这种尖端算法还允许微美以像素为基础执行照片级真实高分辨率渲染的可视化。Frost&Sullivan表示,虽然大多数同行公司可能会识别并捕获特定空间单位内的40到50块图像数据,微美可以收集的数据块数量达到500到550;微美的图像处理速度比行业平均水平提高了80%,从而提高了运营效率。在场景重建过程中,微美的自动图像处理工具可以对最初拍摄的图像进行噪声清除和特征增强,从而能够创建具有业界领先模拟度的同类最佳全息AR设计。

全息技术也称虚拟成像技术,是利用干涉和衍射原理记录并再现物体真实的三维影像的记录和再现的技术。是一种用相干光干涉得到物体全部信息的的三维成像技术。微美全息(WIMI.US)是增强现实的一种内容提供方式,就是让你看到现实中不存在的物体和现实世界融合在一起的立体影像并与其交互,通过投射装置,将手机或电脑上的影像投影到其他介质上。微美全息(WIMI.US)中最具商业价值的就是全息技术。全息技术所记录的不是影像,而是光场。应用场景广,行业成长性高。

与国内同行相比,微美已经建立了一个全面的全息AR内容库,全息AR内容的格式涵盖从3D模型到全息短视频。截至2018年12月31日,共拥有4,654个即用型AR全息内容,可用于微美的全息AR产品和解决方案,涵盖范围广泛的类别,包括动物,卡通人物,车辆和食品。其中,2,961个用于教育场景,851个用于旅游,739个用于艺术和娱乐,103个用于科普。此外,微美的内容库还通过从第三方获得许可的受版权保护的内容进行了丰富。微美与各种内容所有者合作,包括品牌方、电影制片人和人才代理商,以将高质量IP转化为AR形式。

由于5G通信网络带宽的变化,高端全息应用逐渐应用于于社交媒体、通信、导航、家庭应用和其他应用场景。微美全息(WIMI.US)的计划是通过5G通信网络,在两个核心技术:即全息人工智能面部识别技术和全息人工智能面部修改技术的基础上,提供全息云平台服务。

随着科技的发展以及5G的大力部署,全息通讯产业爆发在即,“AR+AI”全息成为全息技术的突破点。以往科幻电影中出现的全息视频通话或将在5G时代实现全面落地。

申请创业报道,分享创业好点子。点击此处,共同探讨创业新机遇!

相关文章

  • 具身智能潮起、巨头环伺之下,优必选如何撑起资本期待?

    AI大模型风口之下,作为“具身智能”最佳载体,人形机器人似乎即将迎来“觉醒元年”。前有马斯克巨大影响力加持之下的人形机器人Optimus亮相,后有OpenAI联合人形机器人初创公司Figure推出令人惊艳的Figure01。可以看出,AI软件和机器人硬件的结合,已经是当下科技界一大风口。乘着这样的东

  • 360 AI员工“红衣”入职事业部 承担多项安全运营工作

    近日,科技巨头360公司宣布,其全新AI员工“红衣”正式入职事业部,标志着公司向智能化、自动化方向迈出了坚实的一步。据悉,“红衣”由360安全大模型支持,具备高度智能化和自主学习能力,能够在多个领域提供高效、精准的服务。“红衣”是首位正式入职的数字安全专家,由360安全大模型支持,在安全运营工作中,

    标签:
    大模型
  • 今天起,ChatGPT无需注册就能用了!

    关注卢松松,会经常给你分享一些我的经验和观点。OpenAI宣布:从今天起,ChatGPT打开即用,无需再注册帐号和登录了!不过,免登录无法享受一些高级功能,比如分享聊天记录、自定义指令等等。松松刚测试了一下:使用ChatGPT还是需要注册登录的,但是免去了手机号验证码的环节。而且OpenAI实际开放

    标签:
    chatgpt
  • 清华学霸引爆“长文本”大战,大模型的应用前景清晰了吗?

    文|智能相对论作者|沈浪Long-LLM(长文本大模型)时代似乎来得有些突然,而引爆这场热潮的,竟是一家由清华学霸牵头的本土AI初创企业。前不久,月之暗面(MoonshotAI)公司宣布旗下对话式AI助理产品Kimi应用现已支持200万字无损上下文输入。对比去年10月份Kimi上线时仅支持的20万字

  • 不止于大模型 英特尔CPU引领智算新高度

    在算力新时代,从通用计算到智算,CPU可以做更多,价值也更加凸显。作为一种基于人工智能(AI)技术的计算方式,其含义既包含了AI,还包含了对高性能算力的要求。拥抱大模型不容易ChatGPT的横空出世拉开了AI大模型的新时代,而近期的文生视频模型SORA又让业界为之激动不已。据了解,Sora所需tok

  • AI大模型博鳌破局:端云结合,驱动新质生产力

    在“博鳌时刻”,vivo蓝心大模型等被明确定调为,是打造“新质生产力”的孕育沃土。作者|杨铭编辑|刘珊珊海阔风清,椰林葱郁中,风口上的AI大模型,站上博鳌亚洲论坛2024年年会多个主题分论坛的C位。“未来是属于AI大模型的,千行百业将被重塑或被革新挑战。”众多嘉宾、参会人士在博鳌的激昂热情,再次明确

    标签:
    大模型
  • 开发者怎么拥抱智能化浪潮?昇腾AI给出了“通关指南”

    在大模型代表的新一轮技术浪潮下,智能化转型已然是毋庸置疑的趋势,科技大厂们纷纷给出了智能化的“道法术”,大大小小的企业也开始更新认知,想要从创新中挖掘出驱动增长的新质生产力。但现实和智能化的美好愿景之间,仍然横亘着一片鲜有人涉足的“荒海”,脚下还没有坚实的路。3月23日在天津举办的昇腾AI开发者创享

    标签:
    ai技术
    ai智能
  • 8款AI视频生成产品实测,谁将成为中国Sora?

    ©自象限原创作者丨罗辑、苏奕编辑丨程心2024年开年,科技圈没有什么比Sora的出现更让人兴奋。如同ChatGPT在2023年初带来的LLM创业潮,Sora的发布也同样将视频生成模型推到了风口浪尖。科技巨头猛推产品,创业公司则乘风而上。3月13日,AI视频大模型公司爱诗科技完成亿元级人民币A1轮融资

    标签:
    ai技术
    ai智能
  • AI业务收入盈利双增,但百融云没有止步

    当为科学技术巡游一方的神,行至人工智能的篇章,中国公司的2023年报里,写着AIGC的前世今生。翻开科技进步的编年史,每一次技术革命都有这样一条铁律:技术革命的最大受益者,通常不是率先做出突破的开疆派,而是率先将其发扬光大的技术流。靠着工业革命超越日不落的美利坚,把同样的故事,转载到了50年代的半导

  • AI手机需要新故事

    言必称AI的时代,已经来了,尤其是随着sora等的震撼发布,以及Google、微软和国内大厂等在AI研发、大模型等方面的日新月异。就手机行业而言,在存量时代出货量连年不及预期的情况下,如何刺激用户换机,成了一道摆在所有手机厂商面前的共同命题。从三星到国内的一些手机厂商,实际上已先行一步打出了“AI手

    标签:
    ai技术

编辑推荐