上次我們介紹了紐約目前的ARVR圈子情況，涉及的方面非常廣泛，圍繞著迅速建立起來的圈子和生態(tài)圈，ARVR在各個方向都有著新的嘗試。
我們就來直接上點干貨

【AR】
AR x 工業(yè)

? ? ? ? 哥倫比亞大學(xué)的 Steven Feiner 教授展示了 AR 在機械組裝上已有成效的研究。通過帶上Hololens，工人們不用再花時間閱讀冗長的組裝說明書來確定裝置的細節(jié)。另外一方面，AR眼鏡還可以通過實時傳導(dǎo)圖像讓不在現(xiàn)場的人也可以看見并指導(dǎo)在現(xiàn)場的人進行操作。

圖： 攝于NYVR 2017 Feiner教授進行ARVR在工業(yè)上的運用

? ? ? ?Feiner教授在視覺領(lǐng)域非?；钴S，專攻電腦成像和用戶界面方向。其帶領(lǐng)的研究室最新發(fā)表了AirCode技術(shù)，有望使AR中的Marker Tracking有實質(zhì)性的突破。這種編碼將現(xiàn)在的二維碼進行隱性化處理，QR的形狀將不會被肉眼看到卻能被機器識別。這樣的研究不僅解決了物品的美觀問題，也提升了外觀相似的物品（item recognition中的難點）的易識別性和連接的不同信息的可能行，并且對于物品生產(chǎn)來說是實際而易用的。
?

圖 AirCode開發(fā)和運用

AirCode學(xué)術(shù)展示原文：

? ? ? ? ?另外，F(xiàn)einer教授在EFXR 2017上則提到，目前最難攻克的AR方面的難題是眼球動態(tài)（Eye Tracking）。筆者自己也體驗了一下現(xiàn)場的眼球追蹤儀器，雖然能夠大致追蹤到位置，但由于眼球本身并不是完全靜止的，在屏幕上的現(xiàn)實會發(fā)生劇烈的抖動，并且經(jīng)常會有誤判。

AR x 媒介

? ? ? ?要說到近期最奪人眼球的AR x 媒介的范例就是被蘋果商店官方推薦的華爾街日報（WSJ）AR版了。該項目的負責(zé)人Roger Kenny親身到展臺來和大家交流道瓊斯指數(shù)在這方面的創(chuàng)新和對未來媒體行業(yè)科技運用的想法。
?

圖 攝于EFXR 2017右二為Roger Kenny
?

? ? ? ?通過3D可視化的展現(xiàn)，人們能更清楚地看到各個股票的漲跌情況。同時還可以點擊進入單個股票查詢其更詳細的信息。對于那些無數(shù)次希望可視化市場數(shù)據(jù)的人來說這無疑將派上用場。此外，它也有著一個合理的好處，你能夠采用新的方式瀏覽相關(guān)信息。可視化能夠幫助人們在大量領(lǐng)域發(fā)現(xiàn)相關(guān)趨勢或者利益所在，像為新興企業(yè)和產(chǎn)品所做的市場研究，像投資等等。而新視角則提供給用戶洞察市場運作或者股票的表現(xiàn)的能力。
?

AR x 商業(yè)

? ? ? ?相比于中國AR借由電商和娛樂大廠搞得風(fēng)風(fēng)火火的各種商業(yè)活動和運用，紐約的展會上展示的DEMO似乎還在小規(guī)模探索中。和商業(yè)相關(guān)的似乎只看到基于商場的導(dǎo)覽功能相比于戶外空間店與店的指引，這個導(dǎo)覽功能是針對商場內(nèi)部引導(dǎo)，對于在不熟悉的商場中尋找心儀的店鋪是很有幫助的。另外還有一些針對商店內(nèi)的海報和宣傳冊的結(jié)合，相對來說切入店都顯得比較普通。但有一些開發(fā)者將AR和VR 360度全景結(jié)合在一起，也產(chǎn)生了一些新意。
?

圖 攝于EFXR 2017 商店內(nèi)GPS AR導(dǎo)覽
?

圖 攝于EFXR 2017 Verizon展臺 AR和VR 360度全景的結(jié)合

AR x 娛樂

? ? ? ? 自從Pokemon Go推行了基于LBS的AR玩法后，更多的研發(fā)者開始嘗試其他的游戲方式，目前主要的兩種方式產(chǎn)生于平面具現(xiàn)化或物體交互。紐約大學(xué)Tandon學(xué)院的Vhalerie Lee和Subigya Basnet共同研發(fā)了冰與火之歌的桌面AR展示，結(jié)合了3D模型，特效和音效的呈現(xiàn)，在桌面特征的捕捉上效果不俗。Vhalerie Lee表示后面將加入一些游戲性，向桌面游戲的方向發(fā)展。而VllageLive則更專注于城市里建筑的探索上，他們將Nelson在1980年拍攝的視頻隱藏在紐約的大街小巷，用戶探索紐約的過程中可以看到當(dāng)時紐約的情景并且探尋Nelson所拍攝的同性戀和性轉(zhuǎn)人歷史的記錄。Roi Lev則開發(fā)了When Things Talk Back，給了不同的物品角色，讓他們可以相互對話，甚至抱怨你為什么要吃他們。
?

圖：冰與火之歌桌面AR
?

圖：VillageLive同性戀歷史的城市探尋
?

圖 When Things Talk Back 在展會上

吸引了很多剛?cè)腴TAR的參觀者

AR x基礎(chǔ)設(shè)備

（Motion Tracking/Neuroscience）

? ? ? ? 除了AR的直接應(yīng)用之外，還有一些開發(fā)者放了更多精力在提供基礎(chǔ)支持上，比如XTH Sense的傳感器。它能通過追蹤佩戴者的手、手腕及手臂的動作來進行位置確認，并且能夠取得用戶的體溫，肌肉聲音，血液流動，心跳來數(shù)據(jù)化用戶的身體情況，從而讓設(shè)計者能夠基于這些數(shù)據(jù)進行內(nèi)容開發(fā)。例如創(chuàng)作者可以利用XTH Sense用身體發(fā)出聲音。
?

視頻 利用XTH Sense藝術(shù)家演出

? ? ? ? 紐約大學(xué)Tandon學(xué)院則帶來了建筑神經(jīng)學(xué)的最新研究成果。他們探索神經(jīng)科學(xué)和建筑之間的結(jié)合和關(guān)系，探測人體在不同建筑空間內(nèi)的反應(yīng)和受到的影響來改善建筑和物品擺放設(shè)計。展會上展示的只是Eye tracking的部分，而且看得出不太穩(wěn)定，但可以期待優(yōu)化后在建筑設(shè)計上的運用。
?

圖攝于EFXR 2017 Neurosciencefor Architecture, NYC Tandon

?

? ? ? ? 在紐約的主要VR廠商玩家仍然集中在HTC，三星和微軟身上。而NYC Media Lab和HTC Vive的合作非常的深入。在幾次展會上都能看到HTC Vive內(nèi)容平臺的活躍。Jenna Seiden女士作為HTC Vive美區(qū)內(nèi)容發(fā)展負責(zé)人在NYVR上展示了Go to China的計劃，推進VR內(nèi)容中美之間的交流。之前曾就職于NBA，微軟Xbox，她對內(nèi)容授權(quán)和內(nèi)容生態(tài)尤其是游戲內(nèi)容的打造有非常深厚的經(jīng)驗。

另一方面，由于微軟在2017年發(fā)布了Mix Reality家族，它在紐約的展會上所展示的仍然圍繞友商的Mix Reality體驗。
?

圖 攝于NYVR 2017 微軟的展臺主要以和友商

（Dell，HP，Lenovo，Samsung）合作的Mix Reality為主
?

圖 攝Nordstrom商場內(nèi)部

但NYC Media Lab合作的對象仍然主要是HTC Vive。
?

圖 在EFXR展會上VR展臺大部分是與HTC Vive合作的內(nèi)容

由于VR的DEMO和產(chǎn)品比較多，這里挑一些比較顯著的產(chǎn)品及內(nèi)容和大家分享。

VR x 醫(yī)療

? ? ? ? ?在此前說紐約在醫(yī)療方面的比較下功夫，因此在VR的創(chuàng)企上也不乏看到這樣的產(chǎn)品和內(nèi)容出現(xiàn)。以PIXCORE為例，這是一家主要為美國醫(yī)療和醫(yī)藥企業(yè)推出營銷計劃的公司。他們在2017年的時候率先嘗試了將VR marketing帶入醫(yī)學(xué)領(lǐng)域的整合性內(nèi)容。通過對患者發(fā)病原因和病理的沉浸式展示，醫(yī)生們有了新的向讓患者切身體會到不良習(xí)慣所造成的身體傷害。
?

圖 Pixacore和醫(yī)藥領(lǐng)域的客戶合作推出的Disease Education

VR x 教育/訓(xùn)練

? ? ? ? 另外一個就是之前提到的Aquinas Training,一個希望用VR在沉浸式方面的優(yōu)勢來增強記憶曲線的公司。相比于追逐和集中機器學(xué)習(xí)上，Aquinas Training的CEOHughSeaton更希望用新的科技加速和加強人類學(xué)習(xí)。機器學(xué)習(xí)的進步尚且那么快了，而人類獲取，理解，運用知識的過程卻沒有什么實質(zhì)的變化，而Aquinas Training則希望能專注于這一點。
?

圖：Hugh Seaton展示VR在教育上不可替代的促進作用

“和AR相比，VR有其不可替代的獨特作用，能幫助人們模擬和完成在現(xiàn)實中很難做到或代價很高的事情，例如幾千英尺以上的海底探測，面對恐怖分子的突發(fā)狀況等。” Hugh Seaton在NYVR的Workshop上講到。

VR x 基礎(chǔ)

? ? ? 還有一個則是偏基礎(chǔ)搭建的，其實AR，VR都用得到。Geopipe通過對衛(wèi)星圖片，地圖和激光掃描等成像的大數(shù)據(jù)收集和讀取，運用機器學(xué)習(xí)和算法理解真實世界的物體結(jié)構(gòu)，從而實現(xiàn)城市真實建筑的抓取和建模，不僅能呈現(xiàn)基本形狀，還能模擬出城市的內(nèi)部構(gòu)造，周圍的樹以及窗戶位置和大小。這個能提高AR和VR城市模型的建立速度并減少成本。Geopipe是在NYVR創(chuàng)業(yè)者大賽中脫引而出成為第一的公司，CEO Christopher Mitchell和CTO Thomas Dickerson是高中同學(xué)，他們在學(xué)生時期就有了這個想法，現(xiàn)在實現(xiàn)了，并通過紐約AR和VR的平臺找尋著客戶或者合作伙伴。
?

圖：Geopipe通過算法生成的城市樣貌還在有序的不斷增加

?

對于記錄城市發(fā)展也很有幫助

彩蛋

? ? ? ? 在筆者之前參加的NYVR展中，有一家唯一的中國廠商——小派科技。那是Kickstarter結(jié)束眾籌的前6天，在紐約做showcase。雖然是僅有的中國廠商，但排隊的來嘗試的參展人絡(luò)繹不絕，可以說是排最長隊伍的展臺之一。雖然展示的內(nèi)容Demo是一個非常短時間的海底體驗，但幾乎每一個試玩過的人都被8K畫質(zhì)和200度的FOV所震撼到，這樣的擬近人類的市場和高分辨率讓參展的人體驗到了區(qū)別于當(dāng)次展覽的任何一家VR頭顯廠商。

? ? ? ? 我們就是希望拿到國外來經(jīng)受批評和建議的洗禮，改進后再推出來。美國的用戶喜歡交流，評論，批評，有許多建議對我們都是有用的，包括媒體，問的問題也很犀利。”CEO任攀先生總是自己幫助來試玩的人帶上小派的頭顯，回答著他們的一些問題。很多人并不會想到這個人就是在Kickstarter還有6天結(jié)束的時候就已經(jīng)眾籌到260萬美元的啟動資金的小派核心人物之一。

? ? ? ? 紐約的許多研發(fā)者都對中國AR和VR的進展感興趣，并且希望能夠和中國的廠商進行合作。當(dāng)筆者和紐約ARVR圈子里的人們分享天貓和騰訊在春節(jié)期間的AR紅包大戰(zhàn)以及一些新奇的ARVR硬件和內(nèi)容時，他們都認真的聽著然后相互討論著。在EXFR的采訪宣講上Kyle Li也跟大家不斷安利Lenovo出的《絕地武士挑戰(zhàn)》游戲，稱其是最好的AR體驗，并希望聯(lián)想能開放其SDK。

“我們知道中國甚至建立了一個VR公園，但還是鮮少看到AR方面的報道。希望能多了解你們的創(chuàng)業(yè)者都在做些什么。
?