僅一臺攝像機即可進行3D身體重建

點擊上方“3D視覺工坊”,選擇“星標”

乾貨第一時間送達

在計算機視覺會議CVPR上,Facebook展示了一種算法,該算法可以僅通過一個攝像頭就可以爲穿着衣服的人生成相當詳細的3D模型。

論文下載:在公衆號後臺回覆 CVPR_Facebook

Facebook是Oculus虛擬現實產品背後的公司。該公司被認爲是機器學習的世界領導者。機器學習(ML)是Oculus Quest和Rift S的核心-這兩款VR眼鏡都具有“由內而外”的位置跟蹤功能,無需外部基站即可達到亞毫米級的精度。在Quest上,甚至不需要控制器就可以使用機器學習來跟蹤用戶的手。

在一篇名爲PIFuHD的論文中,三名Facebook員工和南加州大學的一名研究人員提出了一種機器學習系統,該系統可從單個1K圖像生成人及其衣服的高細節3D表示。不需要深度傳感器或運動捕捉裝置。

本文不是從圖像生成人的3D表示的第一篇著作。由於計算機視覺的最新進展,此類算法於2018年出現。

在當今的硬件條件上,像PIFu這樣的系統只能處理相對低分辨率的輸入圖像。這限制了輸出模型的準確性和細節。

PIFuHD採用一種新方法,對輸入圖像進行下采樣並將其饋送到低細節基礎層的PIFu,然後新的獨立網絡使用全分辨率添加精細的表面細節。

早在2019年3月, Facebook首次展示了其對數字化重建人類的興趣,展示了"Codec Avatars''。該項目專門針對頭部和麪部,需要使用132個攝像頭對用戶的頭部進行掃描。

在2019年5月的F8年度會議上,該公司使用一種考慮了人體肌肉和骨骼系統的模型,以前所未有的保真度展示了實時無標記人體追蹤。

頭像生成是實現最終目標的又一步;允許用戶真實存在於虛擬環境中,並以真實的面貌見到朋友。

參考鏈接:https://uploadvr.com/facebook-body-meshing-one-camera/

本文僅做學術分享,如有侵權,請聯繫刪文。

推薦閱讀

重磅!3DCVer-學術論文寫作投稿 交流羣已成立

掃碼添加小助手微信,可申請加入3D視覺工坊-學術論文寫作與投稿 微信交流羣,旨在交流頂會、頂刊、SCI、EI等寫作與投稿事宜。

同時也可申請加入我們的細分方向交流羣,目前主要有3D視覺CV&深度學習SLAM三維重建點雲後處理自動駕駛、CV入門、三維測量、VR/AR、3D人臉識別、醫療影像、缺陷檢測、行人重識別、目標跟蹤、視覺產品落地、視覺競賽、車牌識別、硬件選型、學術交流、求職交流等微信羣,請掃描下面微信號加羣,備註:”研究方向+學校/公司+暱稱“,例如:”3D視覺 + 上海交大 + 靜靜“。請按照格式備註,否則不予通過。添加成功後會根據研究方向邀請進去相關微信羣。原創投稿也請聯繫。

▲長按加微信羣或投稿

▲長按關注公衆號

3D視覺從入門到精通知識星球:針對3D視覺領域的知識點彙總、入門進階學習路線、最新paper分享、疑問解答四個方面進行深耕,更有各類大廠的算法工程人員進行技術指導。與此同時,星球將聯合知名企業發佈3D視覺相關算法開發崗位以及項目對接信息,打造成集技術與就業爲一體的鐵桿粉絲聚集區,近1000+星球成員爲創造更好的AI世界共同進步,知識星球入口:

學習3D視覺核心技術,掃描查看介紹,3天內無條件退款

 圈裏有高質量教程資料、可答疑解惑、助你高效解決問題

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章