用iPhone就玩到3D掃瞄捕捉人體動作!人人都可以大玩3D特效影片

- 23 Aug 2024
睇好多大玩電腦特效的電影如《阿凡達》、《Iron Man》,演員都要穿上動作捕捉緊身衣,於studio內利用不同儀器紀錄動作;但來到今天,原來你只有靠手中的一部iPhone,加上動作捕捉的App,不用著緊身衣。都一樣可以隨時隨地都玩到Motion Capture,而不需要大量工作人員,不需要專業的空間,人人都可以玩到?

經常都說iPhone能夠做的,比你想像的其實更多,iPhone的鏡頭組有 LiDAR 感測器,可以感測空間的深度,平日的最大功能就是可以測量主體及背景距離,拍攝可以有更準確的景深效果。
但事實上,iPhone一早都有好好利用LiDAR感測器的立體掃瞄的App,但原來利用iPhone的LiDAR感測器其實做到人體動作捕捉!
影片製作人 Josh 同 3D 藝術家 Match今年年初,開始嘗試研究以iPhone作為基礎,去大玩Motion Capture,加上跳舞及3D動畫後製,就可以創作出這一種機械人街舞的影片!

他們只需要6部 iPhone 14 Pro,配合MoCap的App,於拍攝過程亦用了iPad mini實時控制所有 iPhone 14 Pro 進行拍攝,只需設置好iPhone的位置就好;同時間,也不需要特別的studio,在不同的空間甚至街頭都玩到!

但Josh指出,今時今日,其實一部iPhone都一樣玩到,只是早前只利用一部 iPhone,之前都有可能因應身體動作變化,而有遮擋的問題,動作捕捉的完成度就有機會出現問題,但是AI的快速升級,幫助科技跳級,如今都已經可以更準確推算人類骨頭的位置及動作,令到動作捕捉的完整度更高。

但如今利用iPhone做出MoCap的效果,已經可以做到大家常見穿上「波波點」緊身衣,以紅外線拍攝動作捕捉的8、9成準確度;但對比大家「波波點」緊身衣拍攝,利用iPhone拍攝,卻不需要的是大量專業操作人員,也不需要穿上緊身衣,舞者也可以穿上普通的衣服都可以,在影片的製作及創作上,都可以有更大空間,所以無論是成本、人員以至製作上,都是下放至「平民」級數!

要創作這種融合真人動作捕捉的立體電腦特效影片「其實唔難」,利用iPhone的鏡頭,配合MoCap的App收集到動作Motion Tracking的數據後,上傳至雲端就可以計算出骨頭動作資料,及後再利用這些數據套用在特效之上,就可以化身任何角色,創作出不同的電腦特效。
現場看《全民造星V》Kakit表現跳舞,利用一部iPhone做動作捕捉,再上傳至雲端系統,只需十數分鐘,已經可以將Kakit的動作分析完成,即時可以利用套用在不同電腦特效之上,這些技術,或者在三四年前都不敢想像,但是AI科技的突破,未來,只會愈來愈簡單,甚至愈來愈發。
Kakit都希望可以透過這一種技街,應用在不同的fashion shooting之上,可以將時裝與科技好好融合,將穿搭瞬間作出妏變化;而在未來,他們亦希望可以玩到即時性的Motion Capture及計算,即時產生出配上電腦特效的影片,相信在不久將來,這一種技術即可成真,而背後,就是由手中一部小小的iPhone開始!