近日，Meta 研究團隊提出了一種以單張輸入圖像為指導，從基礎網格合成 3D 服裝資産的新方法——Garment3DGen。
據介紹，Garment3DGen 是一種可以從 2D 圖像生成 3D 網格服裝中風格化幾何形狀和紋理的方法，可以将其安裝到參數化身體上并進行模拟 3D 服裝生成和應用。
給定 RGB 圖像，研究團隊首先使用單視圖到多視圖一緻的圖像生成技術進行 3D 重建，将此輸出網格用作 3D 僞地面實況來指導網格變形過程，以使輸入網格幾何形狀變形以比對目标。其輸出幾何體保留了輸入幾何體的結構和拓撲結構，在頸部/手臂/腰部區域包含孔，是以它們可以适合身體，并且具有良好的網格品質，可以進行實體仿真。最後，紋理估算子產品可生成高保真紋理貼圖，這些貼圖具有全局和局部一緻性，并能忠實捕捉輸入導向，進而渲染生成的 3D 資産。
借助 Garment3DGen，使用者可以生成自己選擇的紋理3D服裝，而無需藝術家幹預。人們可以提供文字提示來描述他們想要生成模拟就緒的 3D 資産的服裝。