AR風向

#026

2019 WWDC:蘋果AR三箭頭與人物遮擋技術

RealityKit、Reality Composer、ARKit 3 

2019 APPLE WWDC在6/3~6/7舉行,本次在AR擴增實境的部分,蘋果一次推出了RealityKit、Reality Composer、ARKit 3三大更新。

RealityKit

RealityKit是一個融合AR場景的工具,並且在多個蘋果的設備上運行,最厲害的是它能將3D真實的展示在AR場景中,具備具備「照片級」的渲染、攝影機動態模糊、物理、音訊等效果,並且無縫整合進ARKit和具備native Swift API。

Reality Composer

那如何創造3D場景呢?這時候就需要Reality Composer來幫忙了。它能利用拖拉的方式來製作AR擴增實境,其中也包含高質量的3D模型和動畫素材庫,讓開發者能用非常快速、簡單的方式來創造AR互動的環境。

Reality Composer也和XCode整合,所以當然也能在iOS上使用,開發者可以在上面編輯、測試、調整,並且可以在Mac和iOS之間針對不同開發情境快速轉換。

ARKit 3

最後在ARKit3的部分更是重頭戲,推出了令人瞪目結舌的人物遮擋(People Occlusion)和動作捕捉(Motion Capture),其中尤其是人物遮擋(People Occlusion)讓底下的開發者們更是驚呼連連。

AR擴增實境技術中要達到逼真的效果,遮擋(Occlusion)絕對是必要條件,但也因為技術困難,過去一直很難實現。蘋果這次WWDC的demo影片中,已經可以判斷AR運算產生的物體和實際環境中人物的前後距離關係,當然,看影片還不夠,蘋果還直接找來了今年即將推出的Minecraft Earth團隊來現場展示。直接在現場大秀肌肉。

從影片中可以看到遊戲在連線中可以定位對方手機的位置,並且顯示玩家的名字和手持裝備,放置石頭的動畫也能精準的從手機飛到AR場景中對應的位置。

影片後半段更直接將桌面上的AR場景轉換為沉浸式的AR場景,雖然可能有利用舞台地面上的地毯協助做圖像辨識定位,且人的下半身在草叢中遮擋時也有些許的瑕疵,但是整體已經達到非常好的效果了。

而這場展示中也一起秀了動態捕捉,在影片1:39秒左右的地方,遊戲中的角色跟著展示者一起揮舞著手臂。

最後,WWDC的場外也有基於ARKit3的遊戲體驗區,在下面這個影片中會發現遮擋的更多破綻,也許ARKit3正式開放後,開發中會發現更多問題,但至少目前對遮擋技術已經有了重大的突破。

更多文章

分享在 facebook
分享在 google
分享在 twitter
分享在 linkedin