“當(dāng)mocap涉及多個(gè)角色、復(fù)雜的編排、擁有一些特技或打斗鏡頭時(shí)會(huì)變成一個(gè)高壓環(huán)境,你最不想做的事情就是花大量時(shí)間來(lái)排除設(shè)備故障,讓你的演員做無(wú)謂的等待。”
Han Yang是動(dòng)作捕捉的業(yè)內(nèi)資深人士,現(xiàn)在是一名自由職業(yè)的虛幻電影制作人和內(nèi)容創(chuàng)作者。他曾在Method Studios任職,參與過(guò)如《大偵探皮卡丘》、《金剛狼》和《水行俠》等電影的制作工作。
在他的YouTube頻道上,他做了一個(gè)深度評(píng)測(cè),直接的比較了iPhone支持的人工智能動(dòng)作捕捉(Move.ai)與Xsens MVN?Link動(dòng)作捕捉系統(tǒng)的區(qū)別。
在壓力測(cè)試與深度評(píng)估中,他通過(guò)使用簡(jiǎn)單和更復(fù)雜的場(chǎng)景觀察了兩個(gè)動(dòng)捕系統(tǒng)的數(shù)據(jù)的行為。
Han在此次測(cè)試與評(píng)估中的主要問(wèn)題是:
iPhones支持的AI mocap是否適用于投入生產(chǎn)?
概述:
為了從AI mocap數(shù)據(jù)中獲得一定數(shù)量的優(yōu)質(zhì)數(shù)據(jù)和體面質(zhì)量,用戶(hù)需要使用多個(gè)高質(zhì)量的iPhone手機(jī)或相機(jī)。
要用相機(jī)建立一個(gè)人工智能動(dòng)作捕捉范圍,需要在一個(gè)合適大小的空間中,并保持環(huán)境中光線充足。每次需要捕獲數(shù)據(jù)時(shí),都要有這樣的空間,這對(duì)一些小型工作室而言可能是一個(gè)挑戰(zhàn)。
此外AI mocap需要穩(wěn)定的互聯(lián)網(wǎng)連接來(lái)上傳和同步相機(jī)數(shù)據(jù),這在戶(hù)外環(huán)境中比較難實(shí)現(xiàn)。
Xsens套裝在捕捉空間與環(huán)境方面提供了十分優(yōu)秀的靈活性,用戶(hù)可以利用現(xiàn)有的空間進(jìn)行拍攝,而無(wú)需設(shè)置捕捉范圍。也無(wú)需進(jìn)行互聯(lián)網(wǎng)連接,捕獲的數(shù)據(jù)可被保存在本地的body pack中。
數(shù)據(jù)質(zhì)量
用AI mocap處理的基本動(dòng)作看起來(lái)不錯(cuò),比如跑步、走路、轉(zhuǎn)彎、呼吸、腿部和四肢運(yùn)動(dòng)等。
但捕捉環(huán)境中如果出現(xiàn)遮擋物,例如在地面上滾動(dòng)和靠近體積邊緣做一些動(dòng)作,數(shù)據(jù)精度則會(huì)顯著下降。基于慣性的Xsens動(dòng)捕系統(tǒng)則沒(méi)有這一系列問(wèn)題,其能夠始終提供準(zhǔn)確的動(dòng)作數(shù)據(jù)。
例如,快速出拳和跳躍等更快、更高頻率的動(dòng)作對(duì)Xsens動(dòng)作捕捉系統(tǒng)來(lái)說(shuō)更是沒(méi)有挑戰(zhàn),但AI mocap依靠計(jì)算機(jī)視覺(jué)數(shù)據(jù)處理這些動(dòng)作卻很難實(shí)現(xiàn)。
AI mocap可以跟蹤道具,比如球。而使用Xsens則需要在后期處理中執(zhí)行此操作。
由于遮擋,對(duì)多個(gè)角色進(jìn)行捕捉對(duì)于計(jì)算機(jī)視覺(jué)來(lái)說(shuō)是具有挑戰(zhàn)性的,Xsens動(dòng)捕系統(tǒng)則可以實(shí)現(xiàn)多角色同時(shí)捕捉,且數(shù)據(jù)精確度高。
拍攝體驗(yàn)
The Move.ai應(yīng)用程序不支持實(shí)時(shí)預(yù)覽,所以在錄制鏡頭經(jīng)過(guò)處理之前,用戶(hù)并不知道會(huì)得到什么樣的數(shù)據(jù)。
Xsens動(dòng)作捕捉軟件提供了數(shù)據(jù)的實(shí)時(shí)預(yù)覽,這使得現(xiàn)場(chǎng)管理鏡頭變得更加容易,因此,如果數(shù)據(jù)沒(méi)有達(dá)到預(yù)期效果只需在現(xiàn)場(chǎng)重新拍攝,而無(wú)需像The Move.ai那樣之后進(jìn)行重新補(bǔ)拍。
使用相機(jī)的拍攝體驗(yàn)具有挑戰(zhàn)性,用戶(hù)可能需要嘗試幾次才能獲得最佳的捕捉效果。
Xsens動(dòng)捕系統(tǒng)在室內(nèi)和室外拍攝中能夠提供一致、可靠的用戶(hù)體驗(yàn)。
數(shù)據(jù)處理
要處理iPhone的動(dòng)作捕捉數(shù)據(jù),首先需要上傳這些數(shù)據(jù)。用戶(hù)將獲得30分鐘的處理數(shù)據(jù),此后時(shí)長(zhǎng)的數(shù)據(jù)將收取額外的費(fèi)用。如果用戶(hù)需要定期進(jìn)行mocap錄制,30分鐘的配額對(duì)他們來(lái)說(shuō)可能是一個(gè)挑戰(zhàn)。
在Han所應(yīng)用的具體情況下,其項(xiàng)目涉及多個(gè)角色,復(fù)雜的舞蹈、特技以及打斗鏡頭。擁有一個(gè)可靠的系統(tǒng)就變得非常重要,因?yàn)镠an可以將每一分鐘都用來(lái)捕獲動(dòng)作數(shù)據(jù),而不是排除故障。
但是歸根結(jié)底,你的動(dòng)作捕捉需求還是取決于項(xiàng)目的預(yù)算和類(lèi)型。