1. 創(chuàng)業(yè)頭條
  2. 前沿領(lǐng)域
  3. 人工智能
  4. 正文

FACEBOOK神經(jīng)渲染實(shí)現(xiàn)AR穿戴新里程,微美全息AI視覺(jué)場(chǎng)景高仿真拼接

 2020-05-25 14:48  來(lái)源:互聯(lián)網(wǎng)  我來(lái)投稿 撤稿糾錯(cuò)

  域名預(yù)訂/競(jìng)價(jià),好“米”不錯(cuò)過(guò)

Facebook Reality Labs(FRL)致力于構(gòu)建一個(gè)現(xiàn)實(shí)世界和虛擬世界能夠自由混合,同時(shí)提升我們?nèi)粘I铙w驗(yàn),增加效率和加強(qiáng)彼此之間聯(lián)結(jié)的未來(lái)。續(xù)航是邁向所述愿景的挑戰(zhàn)之一。為了能夠?qū)崿F(xiàn)能夠長(zhǎng)時(shí)間(包括一整天)舒適穿戴的虛擬現(xiàn)實(shí)頭顯和增強(qiáng)現(xiàn)實(shí)眼鏡,我們必須優(yōu)化設(shè)備的功耗。作為朝構(gòu)建下一階段AR/VR系統(tǒng)的一步,這家實(shí)驗(yàn)室正努力開(kāi)發(fā)不影響圖像質(zhì)量的情況下顯著降低功耗的圖形系統(tǒng)。

DeepFovea是FRL為應(yīng)對(duì)這一挑戰(zhàn)而開(kāi)發(fā)的數(shù)種基于神經(jīng)網(wǎng)絡(luò)的方法之一。DeepFovea這個(gè)渲染系統(tǒng)利用了最近發(fā)明的生成對(duì)抗網(wǎng)絡(luò)(Generative Adversarial Network;GAN)人工智能概念來(lái)模擬人類(lèi)在日常生活中的外圍視覺(jué),利用這種感知匹配架構(gòu)來(lái)提供前所未有的圖形效率。在測(cè)試中,DeepFovea可以將渲染所需的計(jì)算資源量減少多達(dá)10-14倍,而人眼依然無(wú)法注意到任何圖像差異。DeepFovea的神經(jīng)渲染遠(yuǎn)遠(yuǎn)超出了目前Oculus產(chǎn)品中的傳統(tǒng)注視點(diǎn)渲染系統(tǒng),能夠生成感知上與全分辨率圖像別無(wú)二致的圖像,而需要渲染的像素不到10%。現(xiàn)有的注視點(diǎn)渲染方法需要渲染全分辨率圖像一半的像素,所以DeepFovea在渲染需求的數(shù)量級(jí)進(jìn)步代表了感知渲染的一個(gè)全新里程碑。

FRL最初在2019年11月的SIGGRAPH Asia展示了DeepFovea,而今天,團(tuán)隊(duì)公開(kāi)了關(guān)于DeepFovea存儲(chǔ)庫(kù)的完整演示,從而幫助圖形研究社區(qū)深化對(duì)先進(jìn)感知渲染的探索。

FRL的最終目標(biāo)是將實(shí)時(shí)注視點(diǎn)渲染帶給能夠全天候穿戴的輕便高能效AR/VR設(shè)備。DeepFovea演示了其能夠渲染比傳統(tǒng)渲染器少10%的像素,同時(shí)沒(méi)有出現(xiàn)感知質(zhì)量損失。這為感知渲染的效率設(shè)定一個(gè)全新的標(biāo)準(zhǔn),并標(biāo)志著朝著前述目標(biāo)邁出了重要的一步。這種方法不取決于硬件,亦即DeepFovea能夠兼容各種AR/VR研究系統(tǒng)。

盡管DeepFovea為AR和VR中的高效繪圖提供了一種重要的方法,但這只是超低功耗感知探索的開(kāi)始。除了研究論文之外,F(xiàn)RL同時(shí)發(fā)布了DeepFovea演示內(nèi)容。團(tuán)隊(duì)表示,希望這能給志在為感知與神經(jīng)渲染技術(shù)的進(jìn)步做出貢獻(xiàn)的圖形與視覺(jué)科學(xué)研究人員提供一個(gè)有用的框架。

而在國(guó)內(nèi),微美全息(WIMI.US)擁有國(guó)內(nèi)領(lǐng)先的AR全息應(yīng)用平臺(tái)。據(jù)Frost & Sullivan稱(chēng),從2017年的總收入來(lái)看,微美全息云已是中國(guó)領(lǐng)先的全息AR應(yīng)用平臺(tái)。此外,根據(jù)Frost & Sullivan的數(shù)據(jù),2018年,微美在國(guó)內(nèi)所有全息AR解決方案提供商中建立了全面、多元化的全息AR內(nèi)容庫(kù),在收入、客戶數(shù)量、全息AR內(nèi)容以及全息AR專(zhuān)利和軟件著作權(quán)數(shù)量方面,微美全息云在中國(guó)全息AR行業(yè)排名第一。2018年全年,微美全息云擁有大約4654個(gè)AR全息內(nèi)容、106軟件版權(quán)和219個(gè)技術(shù)專(zhuān)利。微美全息云致力于使用全息技術(shù)來(lái)滿足客戶和最終用戶的娛樂(lè)和業(yè)務(wù)需求。根據(jù)Frost&Sullivan的說(shuō)法,微美全息云目前運(yùn)營(yíng)的全息AR應(yīng)用平臺(tái)涵蓋了中國(guó)最廣泛的全息AR產(chǎn)品類(lèi)型。微美全息云的綜合平臺(tái)應(yīng)用是微美全息云區(qū)別于競(jìng)爭(zhēng)對(duì)手的一個(gè)關(guān)鍵因素。

全息黑科技那么出彩,微美全息(WIMI.US)專(zhuān)注于計(jì)算機(jī)視覺(jué)全息云服務(wù)。據(jù)介紹,微美全息覆蓋從全息計(jì)算機(jī)視覺(jué)AI合成、全息視覺(jué)呈現(xiàn)、全息互動(dòng)軟件開(kāi)發(fā)、全息AR線上及線下廣告投放、全息ARSDK支付、5G全息通訊軟件開(kāi)發(fā)、全息人臉識(shí)別開(kāi)發(fā)、全息AI換臉開(kāi)發(fā)等全息AR技術(shù)的多個(gè)環(huán)節(jié),是一家全息云綜合技術(shù)方案提供商。其商業(yè)應(yīng)用場(chǎng)景主要聚集在家用娛樂(lè)、光場(chǎng)影院、演藝系統(tǒng)、商業(yè)發(fā)布系統(tǒng)及廣告展示系統(tǒng)等五大專(zhuān)業(yè)領(lǐng)域。

全息投影技術(shù)的應(yīng)用已經(jīng)廣泛普及,在技術(shù)上也越來(lái)越的成熟,融合了多媒體、互聯(lián)網(wǎng)等多項(xiàng)技術(shù),從而可以增加遠(yuǎn)程控制和遠(yuǎn)程的傳輸與連接,它的清晰度和展架自由組合等都是一種不小的創(chuàng)新。當(dāng)前,裸眼全息投影技術(shù)的運(yùn)用十分廣泛,涉及各個(gè)領(lǐng)域。在軍事領(lǐng)域,全息投影技術(shù)可模擬戰(zhàn)場(chǎng)環(huán)境,從而提供分析決策與行動(dòng)的支持,真實(shí)且便攜;在教育領(lǐng)域,可以突破時(shí)間和空間的限制,用動(dòng)態(tài)的、具有時(shí)間性和故事性的虛擬影像來(lái)展現(xiàn)歷史,真正達(dá)到學(xué)生參與體驗(yàn),實(shí)現(xiàn)寓教于樂(lè);在影視領(lǐng)域,全息影像技術(shù)能使人有更強(qiáng)的真實(shí)感,在超大屏幕的影院中,無(wú)需帶上特制的眼鏡,借助超大立體畫(huà)面配合環(huán)繞立體聲音效就能使觀眾有身臨其境的感覺(jué);在舞臺(tái)效果上,能使觀眾直接看到舞臺(tái)上立體的虛擬人物和景物,從而營(yíng)造出亦幻亦真的視覺(jué)氛圍,具有超級(jí)強(qiáng)烈的視覺(jué)沖擊力。

微美全息(WIMI.US)領(lǐng)先的全息AR內(nèi)容制作功能?chē)@圖像采集、對(duì)象識(shí)別、自動(dòng)圖像處理和計(jì)算機(jī)視覺(jué)技術(shù)而構(gòu)建。微美的軟件工程團(tuán)隊(duì)和可視化設(shè)計(jì)團(tuán)隊(duì)緊密合作,不斷推進(jìn)這些可視化相關(guān)技術(shù),并利用它們?cè)O(shè)計(jì)和生產(chǎn)創(chuàng)新的全息AR內(nèi)容。通過(guò)提供精確姿態(tài)估計(jì)的實(shí)時(shí)計(jì)算機(jī)視覺(jué)算法,能夠在幾秒鐘內(nèi)執(zhí)行場(chǎng)景識(shí)別和跟蹤。這種尖端算法還允許微美以像素為基礎(chǔ)執(zhí)行照片級(jí)真實(shí)高分辨率渲染的可視化。Frost&Sullivan表示,雖然大多數(shù)同行公司可能會(huì)識(shí)別并捕獲特定空間單位內(nèi)的40到50塊圖像數(shù)據(jù),微美可以收集的數(shù)據(jù)塊數(shù)量達(dá)到500到550;微美的圖像處理速度比行業(yè)平均水平提高了80%,從而提高了運(yùn)營(yíng)效率。在場(chǎng)景重建過(guò)程中,微美的自動(dòng)圖像處理工具可以對(duì)最初拍攝的圖像進(jìn)行噪聲清除和特征增強(qiáng),從而能夠創(chuàng)建具有業(yè)界領(lǐng)先模擬度的同類(lèi)最佳全息AR設(shè)計(jì)。

全息技術(shù)也稱(chēng)虛擬成像技術(shù),是利用干涉和衍射原理記錄并再現(xiàn)物體真實(shí)的三維影像的記錄和再現(xiàn)的技術(shù)。是一種用相干光干涉得到物體全部信息的的三維成像技術(shù)。微美全息(WIMI.US)是增強(qiáng)現(xiàn)實(shí)的一種內(nèi)容提供方式,就是讓你看到現(xiàn)實(shí)中不存在的物體和現(xiàn)實(shí)世界融合在一起的立體影像并與其交互,通過(guò)投射裝置,將手機(jī)或電腦上的影像投影到其他介質(zhì)上。微美全息(WIMI.US)中最具商業(yè)價(jià)值的就是全息技術(shù)。全息技術(shù)所記錄的不是影像,而是光場(chǎng)。應(yīng)用場(chǎng)景廣,行業(yè)成長(zhǎng)性高。

與國(guó)內(nèi)同行相比,微美已經(jīng)建立了一個(gè)全面的全息AR內(nèi)容庫(kù),全息AR內(nèi)容的格式涵蓋從3D模型到全息短視頻。截至2018年12月31日,共擁有4,654個(gè)即用型AR全息內(nèi)容,可用于微美的全息AR產(chǎn)品和解決方案,涵蓋范圍廣泛的類(lèi)別,包括動(dòng)物,卡通人物,車(chē)輛和食品。其中,2,961個(gè)用于教育場(chǎng)景,851個(gè)用于旅游,739個(gè)用于藝術(shù)和娛樂(lè),103個(gè)用于科普。此外,微美的內(nèi)容庫(kù)還通過(guò)從第三方獲得許可的受版權(quán)保護(hù)的內(nèi)容進(jìn)行了豐富。微美與各種內(nèi)容所有者合作,包括品牌方、電影制片人和人才代理商,以將高質(zhì)量IP轉(zhuǎn)化為AR形式。

由于5G通信網(wǎng)絡(luò)帶寬的變化,高端全息應(yīng)用逐漸應(yīng)用于于社交媒體、通信、導(dǎo)航、家庭應(yīng)用和其他應(yīng)用場(chǎng)景。微美全息(WIMI.US)的計(jì)劃是通過(guò)5G通信網(wǎng)絡(luò),在兩個(gè)核心技術(shù):即全息人工智能面部識(shí)別技術(shù)和全息人工智能面部修改技術(shù)的基礎(chǔ)上,提供全息云平臺(tái)服務(wù)。

隨著科技的發(fā)展以及5G的大力部署,全息通訊產(chǎn)業(yè)爆發(fā)在即,“AR+AI”全息成為全息技術(shù)的突破點(diǎn)。以往科幻電影中出現(xiàn)的全息視頻通話或?qū)⒃?G時(shí)代實(shí)現(xiàn)全面落地。

申請(qǐng)創(chuàng)業(yè)報(bào)道,分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處,共同探討創(chuàng)業(yè)新機(jī)遇!

相關(guān)文章

  • 庫(kù)克已納投名狀:蘋(píng)果AI沒(méi)得選,只能選百度

    蘋(píng)果16弄了兩個(gè)版本,一個(gè)是專(zhuān)門(mén)給中國(guó)人用的,準(zhǔn)備用百度的AI,還要交錢(qián)。第二個(gè)是全世界都可以用的,用了ChatGPT,包括臺(tái)灣、香港、澳門(mén)都可以用。以后都這樣了。好,問(wèn)題就出在這,蘋(píng)果和百度的合作出現(xiàn)問(wèn)題了,新聞連起來(lái)看,才能明白其中含義。新聞一:蘋(píng)果正在和騰訊、字節(jié)初步接洽,考慮將二者的AI模型

  • AI加速時(shí)代的“進(jìn)度條”,我們撥動(dòng)了百分之幾?

    “技術(shù)日新月異,人類(lèi)生活方式正在快速轉(zhuǎn)變,這一切給人類(lèi)歷史帶來(lái)了一系列不可思議的奇點(diǎn)。我們?cè)?jīng)熟悉的一切,都開(kāi)始變得陌生?!庇?jì)算機(jī)之父約翰·馮·諾依曼曾這樣說(shuō)到。

    標(biāo)簽:
    ai智能
  • AI視頻賽道,要變天了

    “毀滅你,與你何干?”,這是在劉慈欣的科幻小說(shuō)《三體》里用來(lái)形容人類(lèi)與三體人之間的戰(zhàn)爭(zhēng)的一句話。

    標(biāo)簽:
    ai智能
  • “創(chuàng)造市場(chǎng)”與“算法進(jìn)化”,中美AI競(jìng)速的岔路口

    “人工智能的商業(yè)模式,是要?jiǎng)?chuàng)造一個(gè)市場(chǎng),而非一個(gè)算法”。這是世界AI泰斗MichaelI.Jordan的觀點(diǎn)。而當(dāng)前的全球AI市場(chǎng),占據(jù)主導(dǎo)地位的中美雙方,卻也走出了兩條截然不同的技術(shù)路徑,前者執(zhí)著于前沿技術(shù)的探索,后者則發(fā)力應(yīng)用優(yōu)化和商業(yè)化落地。南轅北轍的兩個(gè)方向,或許已經(jīng)無(wú)法直接進(jìn)行排位先后、優(yōu)

    標(biāo)簽:
    ai智能
  • 智能體進(jìn)化發(fā)展了一年,現(xiàn)在的RPA Agent迭代到什么程度了?

    智能體進(jìn)化發(fā)展了一年,現(xiàn)在的RPAAgent迭代到什么程度了?從實(shí)在智能最新發(fā)布的實(shí)在Agent7.0,看RPAAgent的迭代升級(jí)抓取豆瓣信息、自己制作PPT,這款A(yù)IAgent真的實(shí)現(xiàn)了流程全自動(dòng)化AIAgent構(gòu)建到執(zhí)行全自動(dòng)化,持續(xù)進(jìn)化RPAAgent再次降低智能體應(yīng)用門(mén)檻實(shí)在智能重磅發(fā)布實(shí)

  • 崔大寶:大模型降溫背后的難點(diǎn)、卡點(diǎn)、節(jié)點(diǎn)

    崔大寶|節(jié)點(diǎn)財(cái)經(jīng)創(chuàng)始人進(jìn)入2024年,大模型似乎有熄火之勢(shì):資本市場(chǎng),與之關(guān)聯(lián)的概念炒不動(dòng)了,英偉達(dá)股價(jià)動(dòng)輒暴跌重挫,引發(fā)“泡沫戳破”的擔(dān)憂;消費(fèi)市場(chǎng),BATH們的推新活動(dòng)少了,產(chǎn)品更新迭代的速度慢了,民眾的關(guān)注度降了……熱鬧的大概只剩下兩場(chǎng)酣仗:自5月15日字節(jié)跳動(dòng)宣布“以厘計(jì)費(fèi)”,打響國(guó)內(nèi)大模型

    標(biāo)簽:
    大模型
  • 這一屆“出道”的數(shù)字人,已經(jīng)拿捧上了“鐵飯碗”

    文|智能相對(duì)論作者|陳泊丞好消息!你心心念念的事業(yè)單位發(fā)錄取公告了!壞消息!他們沒(méi)錄你,錄了個(gè)數(shù)字人。圖片來(lái)源網(wǎng)絡(luò)隨著數(shù)字人技術(shù)的突破,越來(lái)越多的傳統(tǒng)企業(yè)和機(jī)構(gòu)開(kāi)始用上了“數(shù)字員工”。甚至很多中國(guó)人心心念念的“鐵飯碗”,也被這些數(shù)字人給捧上了。數(shù)字人捧上了“鐵飯碗”簡(jiǎn)單翻看一下全國(guó)各地事業(yè)單位的“錄

    標(biāo)簽:
    數(shù)字人
  • 來(lái)到IPO關(guān)口,地平線離“三分天下”還有多遠(yuǎn)?

    黑芝麻智能敲鐘后,港交所門(mén)口又有一些智駕芯片企業(yè)引發(fā)關(guān)注。據(jù)悉,近日地平線已通過(guò)中國(guó)證監(jiān)會(huì)IPO備案,擬發(fā)行不超過(guò)11.5億股境外上市普通股并在香港聯(lián)合交易所上市,預(yù)計(jì)籌集約5億美元資金。從天眼查可以了解到,該公司成立于2015年,是一家乘用車(chē)高級(jí)輔助駕駛(ADAS)和高階自動(dòng)駕駛(AD)解決方案供

  • 機(jī)器人大會(huì)引領(lǐng)產(chǎn)業(yè)動(dòng)向,卓翼飛思繪制無(wú)人系統(tǒng)教科研新藍(lán)圖

    8月21日,萬(wàn)眾矚目的2024世界機(jī)器人大會(huì)暨博覽會(huì)在北京亦創(chuàng)國(guó)際會(huì)展中心盛大開(kāi)幕。這場(chǎng)為期5天,集“展覽”“論壇”“賽事”于一體的機(jī)器人盛會(huì),反映了當(dāng)下機(jī)器人領(lǐng)域的繁榮生態(tài)。據(jù)官方統(tǒng)計(jì)數(shù)據(jù),今年現(xiàn)場(chǎng)逛展觀眾高達(dá)25萬(wàn)人次,比去年增加25%。機(jī)器人行業(yè)有多火?看看2024世界機(jī)器人大會(huì)火爆程度便可知

編輯推薦