Stability AI推出Stable Zero123:从2D图像生成高质量3D内容的AI创造器

2023年12月25日 由 neo 发表 546 0

QQ截图20231225162448

Stability AI发布了一款AI 3D模型和图像创造器,叫做Stable Zero123,它可以把2D图像变成3D内容。这款创造器还在研究中,但已经吸引了很多创作者和开发者的注意,尤其是视频和游戏行业的人。

Stable Zero123用一种叫做得分蒸馏采样(SDS)的方法,从一张照片里分析和重建物体的深度和尺寸。这对虚拟现实和3D设计有很大的帮助,比如工程和建筑。

Stable Zero123是通过Hugging Face平台提供的,这个平台是分享机器学习模型的地方。Stability AI建议把Stable Zero123和Three Studio软件一起用,这样可以更好地管理3D内容。

Stability AI还在开发一些其他的工具,可以和Stable Zero123配合,增加模型的功能。这些工具有一个天空替换器和一个3D模型制作器,都还在私人预览中。这些工具可以让用户有更多的选择和效果。

Stable Zero123很强大,但也有一些要求,可能对一些用户有困难。AI模型需要很强的计算能力,所以需要高级的显卡或专业的训练GPU才能用好。这可能会影响模型的可用性,特别是对于没有这些资源的爱好者或小创作者。

Stable Zero123的技术细节和创新如下:

  • 基于Stable Diffusion 1.5
  • 生成一个新视角的VRAM和SD1.5一样。
  • 生成3D物体需要更多的时间和内存(推荐24GB VRAM)。
  • 只能用于研究,不能用于商业。
  • 权重可以下载。
  • 用了Objaverse的高质量3D物体数据集。
  • 在训练和推理时用了高度条件,提高了预测的质量。
  • 用了一个预计算的数据集和改进的数据加载器,训练效率提高了40倍。
  • 在Hugging Face上发布,给研究者和非商业用户用。
  • 改进了threestudio的开源代码,支持Zero123和Stable Zero123。
  • 用了SDS来优化一个和Stable Zero123结合的NeRF。
  • 可以做文本到3D的生成。
  • 有联系方式,可以问商业应用的问题。
  • 有新闻通讯、社交媒体和Discord社区,可以了解更新和更多信息。

Stable Zero123现在的一个缺点是它不能生成透明背景的图像,这对视频的效果不好。但是,它在视频和游戏领域有很大的潜力,因为这些领域需要高质量的3D内容。

Stability AI不停地改进Stable Zero123的应用,克服它的缺点。它还提供了一个关于机器学习和稳定扩散的课程,帮助创作者学习知识和工具,做出好的创意项目。

Stable Zero123是AI驱动的3D图像领域的一个里程碑。虽然它还在开发中,但它对内容创作有很大的影响。Stability AI会继续完善和提升这项技术,为创作者和开发者提供更先进和可访问的工具。Stable Zero123的未来令人期待,创意社区也在关注Stability AI为数字内容创作带来的新可能性。

文章来源:https://www.geeky-gadgets.com/ai-3d-model-and-image-creator/
欢迎关注ATYUN官方公众号
商务合作及内容投稿请联系邮箱:bd@atyun.com
评论 登录
热门职位
Maluuba
20000~40000/月
Cisco
25000~30000/月 深圳市
PilotAILabs
30000~60000/年 深圳市
写评论取消
回复取消