新出炉!谷歌AI #DreamFusion 从文本生成3D模型

这篇具有很好参考价值的文章主要介绍了新出炉!谷歌AI #DreamFusion 从文本生成3D模型。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

文本生成图像已有了大量模型工具,文本生成3D模型的工具到是很少见。

#

我记得有一期推文介绍了文本生成数字人模型吧,现在有能生成通用3D模型的工具了?

近期谷歌AI 发布了文本生成3D模型— Dreamfusion

#

赶紧去体验下有多神奇~

DreamFusion

新出炉!谷歌AI #DreamFusion 从文本生成3D模型

Dreamfusion 是 Google 的大型AI图像模型 Imagen 与 NeRF 的3D功能相结合。从模型发展脉络上看,Dreamfusion 是 Dream Fields 的演变,Dream Fields 是谷歌于 2021 年底推出的一种生成式 3D AI 系统。对于 Dream Fields,谷歌将 OpenAI 的图像分析模型 CLIP 与神经辐射场 (NeRF) 相结合,允许神经网络存储 3D 模型。

新出炉!谷歌AI #DreamFusion 从文本生成3D模型

小杜

Dream Fields 利用了 NeRF 生成 3D 视图的能力,并将其与 CLIP 评估图像内容的能力相结合。我们输入文本后,会经由 CLIP 评估,然后反馈用作 NeRF 模型的校正信号。这个过程中,从不同角度的评估反馈重复多达 20000 次,直到生成与文本描述匹配的 3D 模型。Dreamfusion 进一步发展了这种方法。


模型运作原理介绍

带我们直接看看模型的效果呗~

新出炉!谷歌AI #DreamFusion 从文本生成3D模型

Mixlab

新出炉!谷歌AI #DreamFusion 从文本生成3D模型

小杜

目前 Dreamfusion 还未完全做到工具开源,不过项目网站上也提供了生成的词条组合,我也上手体验了一番。


组合生成词条的生成结果

新出炉!谷歌AI #DreamFusion 从文本生成3D模型

小杜

目前 Dreamfusion 项目官网也提供了生成模型的加载查看体验,若想下载模型,运用浏览器检查工具,复制储存模型的网址,打开后即可下载。


模型加载查看工具

新出炉!谷歌AI #DreamFusion 从文本生成3D模型

小杜

虽然 Dreamfusion 还未开放使用,但项目网站提供了生成画廊,实时更新生成模型,感兴趣的同学可前去探索体验哦~



种类丰富的模型画廊

项目地址:
dreamfusion3d.github.io

我记得 Nvidia 也开源了从单个2D图像生成3D模型的AI

#

新出炉!谷歌AI #DreamFusion 从文本生成3D模型

Nvidia 最新的 AI 模型 GET3D 只需一个 2D 图像作为输入,即可在几秒钟内输出许多带纹理的 3D 网格,并可以在标准图形引擎中无缝使用。

我们 ♾️元宇宙创作者基地mo 的群友 Simon  也分享过他自主开发的Text-to-3D 模型。

AI 的发展太快了,我有点跟不上节奏了...

#

#

我是乐观派,已经迫不及待运用新工具开始全新的创意探索啦!

新出炉!谷歌AI #DreamFusion 从文本生成3D模型

小杜

看来大家对3D模型的生成工具非常感兴趣,我也在社群知识库里整理了相关的扩展阅读和开源工具链接,大家可以移步知识星球查看哦

!!!在知识星球使用标签搜索功能,搜索 #论文# #3d# 

新出炉!谷歌AI #DreamFusion 从文本生成3D模型

opus

欢迎留言讨论,参与 AIGC 的共创共建~

加创作者社群,备注
AIGC

提案# 《我做社区》共建者#纪念徽章发放

💡

Mixlab创造力团队招募链接

虚拟孵化器

公众号编辑/排版/校对招募

社区工作招募链接

sv.mikecrm.com/vHO5X6X文章来源地址https://www.toymoban.com/news/detail-404128.html

到了这里,关于新出炉!谷歌AI #DreamFusion 从文本生成3D模型的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 搜索引擎变天了!谷歌宣布开放「生成式搜索平台」!AI 大模型颠覆搜索体验

    作者 | 小戏、兔子酱 搜索引擎,可能真的要变天了! Google 终于要迎来它 25 年来最大的改变,谷歌宣布了开始内测开放【生成式搜索平台(Search Generative Experience,SGE)】,并逐步舍弃那些甚至是臭名昭著的十条蓝色链接(10 Blue Links) 1998 年,拉里·佩奇与谢尔盖·布林凭借

    2024年02月07日
    浏览(56)
  • 一行文本生成4D动态场景——Meta AI MAV3D论文解读

    论文链接:https://arxiv.org/pdf/2301.1128

    2024年02月12日
    浏览(38)
  • 【AI】Python调用讯飞星火大模型接口,轻松实现文本生成

    随着chatGPT的出现,通用大模型已经成为了研究的热点,由于众所周知的原因,亚太地区调用经常会被禁,在国内,讯飞星火大模型是一个非常优秀的中文预训练模型。本文将介绍如何使用Python调用讯飞星火大模型接口,实现文本生成等功能。 1. 安装API库 需要安装库,在命令

    2024年02月09日
    浏览(65)
  • Neuralangelo AI - 视频生成3D模型

    NVIDIA Research 宣布了 Neuralangelo,这是一种创新的 AI 模型,它利用神经网络的力量从 2D 视频剪辑中重建详细的 3D 结构。 Neuralangelo 能够生成逼真的建筑物、雕塑和其他现实世界物体的虚拟复制品,展示了 AI 在 3D 重建领域的非凡潜力。 本文深入探讨了 Neuralangelo 的功能,探讨了

    2024年02月17日
    浏览(52)
  • 3D生成式AI模型、应用与工具大全

    当谈到技术炒作时,人工智能正在超越虚拟世界,吸引世界各地企业和消费者的注意力。 但人工智能可以进一步增强虚拟世界,至少在某种意义上:资产创造。 AI 有潜力扩大用于虚拟环境的 3D 资产的创建。 推荐:用 NSDT编辑器 快速搭建可编程3D场景 AI 3D生成使用人工智能生

    2024年02月07日
    浏览(47)
  • DeepFloyd IF:由文本生成图像的强大模型,能够绘制文字的 AI 图像工具

    DeepFloyd IF:能够绘制文字的 AI 图像工具 之前的 Stable Diffusion 和 Midjourney 都无法生成带有文字的图片,而文字都是乱码。 DeepFloyd IF,这个文本到图像的级联像素扩散模型功能强大,能巧妙地将文本集成到图像中。 DeepFloyd IF的优点是它能够生成高度真实的图像,并且具有很强的

    2024年01月23日
    浏览(53)
  • Shap-E:3D资产的生成式AI大模型

    OpenAI 刚刚发布了 Shap-E,这是一种基于文本提示和图像创建 3D 资产的生成模型,能够生成带纹理的网格和神经辐射场 ,从而实现各种 3D 输出。 推荐:用 NSDT设计器 快速搭建可编程3D场景。 在本教程中,我们将引导你在 Google Colab(免费)上设置 Shap-E,运行代码以根据文本提

    2024年02月05日
    浏览(41)
  • 几张图片生成3D模型?距离真正的AI建模还有多远?

    时间溯回,早在2017年,美图秀秀就曾引入人工智能美化人像而被谷歌誉为“最佳娱乐App”。智能技术奔腾发展,今年的AIGC技术可谓在各行各业大放异彩,从AI绘画、AI写作到AI配音,人工智能技术自动生成内容已经成为继UGC、PGC之后的一种新型内容生产方式。 在AI-GC的背后,

    2023年04月15日
    浏览(45)
  • 只需5秒视频就能生成3D模型的AI工具——Luma AI

    HI,同学们,我是赤辰,本期是第13篇AI工具类教程,文章底部准备了粉丝福利,看完后可领取! 今天给大家介绍一款用视频生成3D模型内容的AI工具——Luma AI,基于神经渲染技术,只需拍摄照片或者视频,即可生成、上色和渲染出极为逼真的3D产品模型,是3D建模领域的一重大

    2024年02月05日
    浏览(49)
  • AI之LLM/MLM:Nvidia官网人工智能大模型工具合集(大语言模型/多模态模型,文本生成/图像生成/视频生成)的简介、使用方法、案例应用之详细攻略

    AI之LLM/MLM:Nvidia官网人工智能大模型工具合集(大语言模型/多模态模型,文本生成/图像生成/视频生成)的简介、使用方法、案例应用之详细攻略 目录 Nvidia官网人工智能大模型工具合集的简介 1、网站主要功能包括: Nvidia官网人工智能大模型工具合集的使用方法 1、SDXL-Turbo的使

    2024年04月28日
    浏览(76)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包