想像一下,走在路上看到自己喜歡的電影海報,這時只需拿起手機,將相機指向海報,就能看到電影中的角色活躍起來?透過 Facebook Research,我們來了解一下 AR Target Tracking 的原理吧~
「AR 目標追蹤 (AR Target Tracking)」,可說是 Facebook AR 平台的一個革命里程碑呢! Facebook 的 AR Target Tracker 效果,可以讓品牌及發行公司、藝術創作者者和開發者,能夠創造與影像、標誌或是圖標相關的AR情景內容。這項專為 Facebook Camera 設計的技術,可以讓鏡頭自動追蹤影像,進而為觀看者開啟虛擬體驗,直接在 Facebook Camera 畫面顯示!
電影《時間的皺摺》和《一級玩家》已經在這次封測中,採用了 Facebook AR Target Tracking 技術來創造相關的AR體驗,以新的體驗互動來吸引粉絲。使用者已經可以通過全球任何一張電影海報來嘗試體驗。根據 Facebook Research 發布的消息,開發團隊目前正在準備開發 SDK,計劃會在春季推出。
從瞬時性到持續性
Facebook 在 2017 年 12 月推出了 AR Studio,幫助創作者在環境中放置3D物件,就能達到即時互動的效果。但 Facebook 希望可以進一步圍繞「持續性 AR 體驗」探索不同的應用可能。
由於 AR 與海報相關,所以使用者可以享受相同的體驗。這允許開發者超越時間與空間,並為 Facebook 社區提供一致的體驗。
關注品質與廣泛使用性
儘管其他廠商已經開發了類似的技術,但 Facebook 的技術存在兩個與眾不同的地方。 Facebook 的目標,是盡可能為更多使用者提供最高品質的技術,將技術的含量最大化。如此一來,即便你是 iPhone 5s 或 2012 年 Android的使用者,都能體驗這項技術! Facebook 已經能夠為舊款的低端手機提供這種體驗,以確保不排除任何市場的使用者。為了做到這一點,Facebook 投入了大量資源來優化追踪算法,讓技術能夠支持較為低端的設備。
Facebook 同時希望維持 AR 體驗的最高品質。為此,Facebook 在不同的照明條件下測試了算法,如在夜晚,通過不同的角度,運算能夠持續進行。
製作 AR Target Tracker 效果
如果要為電影海報製作 AR Target Tracker 效果,你需要首先向 AR Studio上傳電影海報的圖片,然後創建並上傳旨在嵌入電影海報的特定 AR 藝術體驗。在完成後,使用者只需打開 Facebook Camera 並對準海報即可。當系統檢測到海報時,這將觸發相關的 AR 體驗。使用者同時可以通過其他機制來觸發效果。
工作原理
上傳至 AR Studio 的電影海報或圖片,會形成 3D 樣板影像,然後通過相機對影像的分析來識別海報。 Facebook 的技術將分析海報,並尋找唯一可識別的底層視覺特徵,然後使用圖像匹配和驗證管道將其與不同條件下的特徵進行比較。這一過程將搜索海報的唯一可識別部分,如角點或紋理圖案。接下來,Facebook 從這些位置提取補丁,並且使用預先訓練的編碼過程,將補丁 coding 成特徵描述符向量。在下一步中,系統將量化這些向量,並將其儲存在高效的索引以實現快速查找與匹配。
這一算法的關鍵在於,Facebook 可以出色地匹配上傳的內容,以便使用者可以立即身處於體驗之中。這時,算法將切換至追踪電影海報。隨著使用者移動手機,系統將確保不會丟失追蹤,以及可以持續瀏覽 AR 內容(即便內容被部分遮擋,比如有人走過)。為了做到這一點,Facebook 利用了 Viper 追踪器。 Facebook 的方法能夠利用高度優化的算法來檢測和追踪海報外的支持結構,而且其速度之快,要兼容大部分的智慧型手機也不是問題呢!
為創作者及企業帶來的機會?
這一全新的目標追蹤功能,可以為企業提供了一種通過 AR 體驗,與消費者產生新連結的方式。餐廳和商店可以創建與店面相關的沉浸式與娛樂性 AR 體驗,從而吸引顧客上門。另外,創建獨特 AR 遊戲的機遇將能讓使用者踏上一場以前無法想像的冒險。 Facebook 表示,他們十分期待創作者和企業將如何利用他們的 AR 平台來為市場帶來驚喜。
同場加映
為華納兄弟製作 AR 體驗的 The Mill,釋出了精彩內容:
原文引用:映維網 / Facebook Research