4

苹果公司提出新型 AI 框架 FaceLit,可生成光线真实的 3D 合成人像

 9 months ago
source link: https://www.8btc.com/article/6829500
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
2023-08-14 01:51

苹果公司提出新型 AI 框架 FaceLit,可生成光线真实的 3D 合成人像

据站长之家 8 月 14 日报道,苹果公司和哥伦比亚大学的 AI 研究人员提出了一种新型的 AI 框架,可以让一张照片生成 3D 模型时拥有真实的光线。该框架结合了物理光照模型和神经体积渲染技术,通过使用球面谐波将光照和渲染过程解耦,实现了更逼真的图像生成。该方法在三个数据集上进行了测试,并取得了领先的 FID 分数,被认为是 3 D 感知生成模型的最新进展。

FaceLit 通过神经网络实现了对人脸的三维重光,使用户能够根据不同光照条件下的重光效果对人脸进行操作和编辑。该框架提供了训练和测试 FaceLit 模型的代码和数据集,以及预训练的模型和演示视频。用户可以根据提供的指南设置环境并使用预训练模型进行演示。如果需要,用户也可以使用提供的代码和数据集进行自定义训练。


About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK