業(yè)內(nèi)專業(yè)AI公司發(fā)布全新的重慶3D動畫制作技術(shù)
人工智能平臺公司云從科技近日發(fā)布了其在3D人體重建技術(shù)上取得的重大突破。3月19日，作為“國內(nèi)CV（計算機視覺）四小龍”之一的云從科技（以下簡稱云從）宣布，重慶影視公司其基于單幀圖像的3D人體重建技術(shù)刷新了三項世界紀錄，這也是繼去年云從在3D人臉數(shù)據(jù)集上大幅刷新紀錄后，再次在此類3D重建技術(shù)上取得重要成果。
所謂的三項世界紀錄，指的是Human3.6M、Surreal和UP-3D三個數(shù)據(jù)集，是全球關(guān)于3D人體重建技術(shù)的權(quán)威數(shù)據(jù)集。榜單中的競爭對手包括加州大學(xué)伯克利分校、賓夕法尼亞大學(xué)、Amazon和Adobe Research等知名企業(yè)、研究所與高校。
那么，這項“牛逼”的AI技術(shù)到底有哪些應(yīng)用呢？對于大眾而言，3D人體重建技術(shù)帶來的是全新體驗：
這意味著，只用美顏APP就可以完成高精度的全身“瘦身”；你站在鏡子前，商場的試衣鏡便可實現(xiàn)一秒換裝；如果放在電影工業(yè)的范疇來看，全新的3D人體重建技術(shù)，甚至將超越今年熱映好萊塢科幻大片《阿麗塔》中所使用的視覺特效水平（鈦媒體曾對該片的特效技術(shù)有詳細介紹）。
在3D重建領(lǐng)域，重慶影視制作在的差通常被作為算法能力的主要衡量指標，它指的是生成模型與實際圖像的差別。一般來說誤差越低，精度越高，技術(shù)的性能越好。
云從對鈦媒體透露，此次技術(shù)突破，“將原有最低誤差記錄大幅降低30%，使3D人體建模的結(jié)果更優(yōu)秀，更接近人體的實際情況”。以下為云從提供的最低誤差記錄的信息：
全身精度誤差在Surreal上從75.4毫米降低到52.7毫米；關(guān)節(jié)精度誤差從55.8毫米降低到40.1毫米；Human3.6M上的關(guān)節(jié)精度誤差從59.9毫米降低到46.7毫米；
除了誤差指標，流暢度也是評價技術(shù)效果的關(guān)鍵指標。據(jù)云從透露，當(dāng)前人體模型的幀率已經(jīng)達到了200幀/每秒，相較之下，電影的幀率通常只有24幀/秒，即使對流暢度要求很高的電子游戲，達到60幀/秒就已經(jīng)非常流暢。在運算速度上，人體建模的耗時也從上百毫秒降低到5毫秒，建模效率更高。
關(guān)鍵指標取得重大突破，加速了3D人體重建的落地進程，但這一概念在大眾眼中實屬陌生。重慶3D動畫公司他們所提出的單幀3D人體重建到底是什么？其革命性到底體現(xiàn)在哪里？
2D向3D飛躍：更精細的人體重建
因為人體有豐富的姿態(tài)和穿著，云從提出了一套全新的基于人體3D縱深預(yù)測的3D信息表征方式。該重慶3D動畫制作技術(shù)通過對三原色圖像（RGB，不含深度信息）進行分析，預(yù)測人體的3D形態(tài)和姿勢。
這是3D人體重建從2D時代向3D時代的飛躍。
傳統(tǒng)的人體關(guān)鍵點檢測技術(shù)往往監(jiān)測的是2D的人體骨骼關(guān)節(jié)點，即通過技術(shù)預(yù)測RGB圖像中人體的十幾個關(guān)節(jié)點的坐標。這種方式存在著不足，其一這樣捕捉的節(jié)點非常稀疏；其二，這樣捕捉的結(jié)果一般只包含2D平面的坐標預(yù)測，不能還原3D的深度信息，無法體現(xiàn)縱深感。
而基于單幀圖像的3D重建技術(shù)不僅能輸出骨骼關(guān)節(jié)點信息，更能同時預(yù)測大量人體表面的關(guān)鍵點信息，使預(yù)測結(jié)果更豐富。而且每個點的坐標都是3D呈現(xiàn)，能夠體現(xiàn)不同軀干的縱深信息。
