[综述] Generative AI meets 3D: A Survey on Text-to-3D in AIGC Era

这篇具有很好参考价值的文章主要介绍了[综述] Generative AI meets 3D: A Survey on Text-to-3D in AIGC Era。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

[综述] Generative AI meets 3D: A Survey on Text-to-3D in AIGC Era,人工智能,AIGC

论文|

改文章是23年5月27日挂在arxiv上,本文重点关注4.1节Text Guided 3D Avatar Generation、4.4节Text Guided 3D Shape Transformation和第5章Discussion


Text Guided 3D Avatar Generation

DreamAvatar

DreamAvatar: Text-and-Shape Guided 3D Human Avatar Generation via Diffusion Models

https://arxiv.org/abs/2304.00916生成姿态可控的高质量3D人体avatar,包含以下几个部分:

  • Trainable NeRF: 预测3D点的密度和颜色特征;
  • Pre-trained text-to-image diffusion model:提供2D自监督信息;
  • SMPL model:提供粗位姿和形态指导和生成;
  • dual-space design:包含canonical space和observation space,这两个空间与NeRF相关,将canonical space的纹理和几何信息传递到目标位姿的avatar;

该文章基于显示模型(SMPL)建模,缺点是缺少纹理细节,优点是可控性强。是目前的主流思路,还包括:

  • HeadSculpt: Crafting 3D Head Avatars with Text

DreamFace

DreamFace: Progressive Generation of Animatable 3D Faces under Text Guidance

文本引导的定制化3D人像生成,能够产生逼真的3D人像,包含以下几个部分:

  • Score Distillation Sampling (SDS): optimize subtle translations and normals
  • dual-path mechanism: 产生中性外观;
  • two-stage optimization: 增强用于细粒度合成的紧凑先验,并改善定制化能力

AvatarCraft: Transforming Text into Neural Human Avatars with Parameterized Shape and Pose Controls​​​​​​​

MotionCLIP

AvatarCLIP

Text Guided 3D Shape Transformation

传统方法对3D模型的编辑较为繁琐。因此,文本引导的3D模型编辑很有前景。

Instruct-NeRF2NeRF

Instruct 3D-to-3D

SKED

TextDeformer文章来源地址https://www.toymoban.com/news/detail-595536.html

到了这里,关于[综述] Generative AI meets 3D: A Survey on Text-to-3D in AIGC Era的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包