3D生成式AI模型与工具

当谈到技术炒作时,人工智能正在超越虚拟世界,吸引世界各地企业和消费者的注意力。

但人工智能可以进一步增强虚拟世界,至少在某种意义上:资产创造。 AI 有潜力扩大用于虚拟环境的 3D 资产的创建。

AI 3D生成使用人工智能生成3D模型或物体。有几种技术:文本转 3D 模型、图像转 3D 模型、视频转 3D 模型。

每种技术都可以帮助创作者快速定制和生成虚拟资产和环境,特别是帮助那些没有 3D 建模专业知识的人。

AI 3D 生成的潜在应用是在视频游戏和元宇宙环境中创建资产,以及商业产品的设计概念。 它甚至可以用于创建工厂车间的虚拟表示,生成工业工厂的潜在模型。

1、DreamFusion

  • 创作者:谷歌、加州大学伯克利分校
  • 首次发布:2022 年 9 月

 Dream Fields 可以根据文本输入生成 3D 模型。 它本质上是 Dream Fields 的扩展版本,Dream Fields 是 Google 于 2021 年推出的生成 3D 系统。

DreamFusion 几乎不需要事先训练,这意味着它可以在没有 3D 数据的情况下生成对象的 3D 表示。 它使用由 Imagen 文本到图像扩散模型生成的对象的 2D 图像来理解它尝试生成的模型的不同视角。

2、Point-E

  • 创建者:OpenAI
  • 首次发布:2022 年 12 月

Point-E 的工作原理与 OpenAI 的图像生成工具 DALL-E 相同 - 只需输入“戴着圣诞老人帽子的柯基犬”之类的内容,系统就会生成 3D 模型。

Point-E 可以在单个 GPU 上仅用一到两分钟生成 3D 模型。 它还拥有图像转 3D 功能,这意味着图像可以与文本一起用于输入。

3、GAUDI

  • 创作者:苹果
  • 首次发布:2022 年 8 月

GAUDI以著名西班牙建筑师的名字命名,由 Apple 的研究人员创建,用于根据文本提示生成 3D 场景。 用户可以使用自然语言从任何角度重新绘制场景,从而创建建筑物的内部扫描。

GAUDI 还可以通过文本在 3D 室内场景中生成新的摄像机运动,例如用户输入“穿过走廊”。

4、MVDream

  • 创建者:TikTok 母公司字节跳动、加州大学圣地亚哥分校
  • 首次发布:2023 年 8 月 31 日

MVDream是该列表中的最新模型之一。 字节跳动和加州大学圣地亚哥分校的研究人员开发了一种扩散模型,可以根据文本输入生成高质量的 3D 渲染。

MVDream 可以生成模型的多个视图,这些视图是几何一致的多视图图像。

可以使用 DreamBooth3D 等工具对该模型进行微调,以实现个性化 3D 生成。

5、Magic3D

  • 创建者:英伟达
  • 首次发布:2023 年 3 月

Magic3D是一种预先训练的文本到图像扩散模型。 它可以根据文本提示创建高质量的 3D 网格模型。

Magic3D 采用两阶段过程:它使用低分辨率扩散创建粗略模型,然后,系统使用稀疏 3D 哈希网格结构,并通过高效的可微渲染器进一步优化,以创建最终输出。

Magic3D 可以在 40 分钟内创建高质量的 3D 网格模型。

6、COLMAP

  • 创建者:Johannes L. Schönberger,微软混合现实和人工智能实验室首席科学家
  • 首次发布:2021 年 10 月

COLMAP是一个开源 3D 重建管道,具有图形和命令行界面。 它可用于从少量图像生成详细的 3D 环境。

COLMAP 用户可以导出 3D 网格 - 尽管要对其进行细化,需要使用 MeshLab 等程序。

7、PointLLM

  • 创作者:香港中文大学、上海人工智能实验室、浙江大学
  • 首次发布:2023 年 8 月

PointLLM旨在帮助 3D 生成。 这种方法可以帮助 PaLM 和 Llama 等大型语言模型理解 3D 数据。

使用 PointLLM,人工智能研究人员可以在其数据集中充分利用点云(代表 3D 形状或对象的数据点)。

8、Gliastar

Gliastar 是AI驱动的视频创建工具,可以通过文本输入为品牌角色制作动画。

只需向 Gliastar 提供角色的 2D 或粗略 3D 表示,将模型集成到 GliaStar AI 动画系统中,系统就会在几分钟内自动生成所需吉祥物的 3D 动画。

9、3DFY.ai

3DFY.ai可以根据文本提示或单个图像创建高质量的 3D 模型。

3DFY.ai 3D 生成管道可以快速自动生成 3D 输出 - 用户能够测试文本到 3D Web 服务以尝试自己的提示。

10、Fotor

Fotor可让你根据文本描述生成 3D 模型。 用户可以为各种应用创建详细的 3D 模型。

Fotor还拥有AI 3D角色生成器,用户可以在几分钟内创建独特且详细的角色。

11、Spline

借助 Spline,用户可以使用自然语言输入实时生成 3D 模型和表示。

样条曲线不仅可用于制作 3D 模型,还可用于制作动画和纹理。

12、Meshcapade

Meshcapade构建虚拟化身——使用生成式 AI 为电子商务设置等业务应用程序创建准确的数字人类。

Meshcapade 的 SMPL 系统使用机器学习来捕获个人 3D 体型的统计数据。

13、Masterpiece Studio

借助Masterpiece Studio  ,你可以使用 AI 生成 3D 资产。

Masterpiece Studio 构建了 3D 创作软件,非技术背景的用户可以使用该软件来创建从概念到动画的 3D 内容。

Masterpiece 团队与 Meta 合作构建了 Masterpiece X,它允许创作者重新混合现有的 3D 资产。 你也可以在 Meta Quest 商店中访问它。

14、Luma AI

借助 Luma,用户可以在几分钟内生成逼真的 3D 资源和环境。

Luma 可通过移动设备使用,因此 iOS 用户可以通过手机使用其 3D 生成工具。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/705019.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

开发知识点-.netC#图形用户界面开发之WPF

C#图形用户界面开发 NuGet框架简介WinForms(Windows Forms):WPF(Windows Presentation Foundation):UWP(Universal Windows Platform):MAUI(Multi-platform App UI):选择控件参考文章随笔分类 - WPF入门基础教程系列

什么时候要用到Reflect API?

参考文档 https://www.zhihu.com/question/460133198 https://cn.vuejs.org/guide/extras/reactivity-in-depth.html https://juejin.cn/post/7103764386220769311 Reflect API 一般搭配 Proxy API 一起使用。什么是 Proxy API 呢? 先回顾下 vue 的数据响应性是如何…

GDB之(3)加载指定动态库文件

GDB之(3)加载指定动态库文件 Author:Once Day Date:2024年2月26日 漫漫长路,才刚刚开始… 全系列文章请查看专栏: Linux实践记录_Once-Day的博客-CSDN博客 推荐参考文档: gdb 查找动态库方法_info sharedlibrary-CSDN博客GDB…

服务器权限:Error: EACCES: permission denied, open‘/Cardiac/uniquC.csv

背景: 我想在服务器上传一个文件uniquC.csv,但是服务器说我没有权限 解决方案: 1. 查看目前是否存在对文件夹的权限 ls -ld /Cardiac/ # your fold path 此时,我发现 这也意味着root也没有赋予写的权限。 2. 拿到root权限 …

Kotlin多线程

目录 线程的使用 线程的创建 例一:创建线程并输出Hello World Thread对象的用法 start() join() interrupt() 线程安全 原子性 可见性 有序性 线程锁 ReentrantLock ReadWriteLock 线程的使用 Java虚拟机中的多线程可以1:1映射至CPU中,即…

ARM 版银河麒麟桌面系统下 Qt 开发环境搭建指南

目录 前言安装Linux ARM 版 QtCreator配置 Qt Creator配置构建套件 第一个麒麟 Qt 应用程序小结 前言 在上一篇文章信创ARM架构QT应用开发环境搭建中建议大家使用 Ubuntu X86 系统作为信创 ARM 架构 QT 应用的开发环境,里面使用了交叉编译的方式。这对于自己的 Qt …

vue3 + vite + ts 中使用less文件全局变量

文章目录 安装依赖新建css变量文件全局引入css变量文件使用css变量 一、安装依赖 npm install less less-loader --save-dev 二、新建CSS变量文件 (1) :在根目录下的src文件中 src-> asset -> css ->glibal.less // glibal.less :root{--public_background_font_Col…

Dubbo知识点大全

“ 分布式应用场景有高并发,高可扩展和高性能的要求。还涉及到,序列化/反序列化,网络,多线程以及设计模式的问题。幸好 Dubbo 框架将上述知识进行了封装,让程序员能够把注意力放到业务上。 概念和架构 Provider:暴露服务的服务提供方Consumer:调用远程服务消费方Regist…

CUDA编程 - 用向量化访存优化 elementwise 核函数 - 学习记录

Cuda elementwise 一、简介1.1、ElementWise1.2、 float4 - 向量化访存 二、实践2.1、如何使用向量化访存2.2、Cuda elementwise - Add2.3、Cuda elementwise - Sigmoid2.3.1、简单的 Sigmoid 函数2.3.2、ElementWise Sigmoid float4(向量化访存) 2.4、C…

商家入驻平台怎么让资金自动分配给商家

最近很多上线了多商户电商系统的朋友咨询,我们平台的用户支付后,钱进入了我们的对公账户,怎样让钱在走完流程后,自动进入商家的账户呢?今天商淘云为您分享商户入驻平台自动分配给商家资金的三种方法。 首先是平台应建立…

Docker基础(一)

文章目录 1. 基础概念2. 安装docker3. docker常用命令3.1 帮助命令3.2 镜像命令3.3 容器命令3.4 其他命令 4. 使用案例 1. 基础概念 镜像(Image):Docker 镜像(Image),就相当于是一个 root 文件系统。比如官…

node14下运行项目报错:regeneratorRuntime is not defined

regeneratorRuntime is not defined,这是由于配置babel出错问题,由于使用了es7语法如async/await而当前babel版本过低 解决: npm install -D babel-plugin-transform-runtime babel-runtime 安装完成后在.babelrc文件下配置: &qu…

远程连接Redis

以连接阿里云上的Redis为例 1. 在阿里云安全组中开放端口 2.修改Redis启动时所用的配置文件(redis.conf) 2.1 修改ip地址 如图:将默认的本地ip bind 127.0.0.1地址改为bind 0.0.0.0 2.2 将保护模式关闭 将默认的 supervised yes 改为 n…

Transformer视频理解学习的笔记

今天复习了Transformer,ViT, 学了SwinTransformer, 还有观看了B站视频理解沐神系列串讲视频上(24.2.26未看完,明天接着看) 这里面更多论文见:https://github.com/mli/paper-reading/ B站视频理解沐神系列串讲视频下(明天接着看&a…

认证模式~

认证方式 基于Cookie和Session的认证方式 基于Cookie和Session的认证是传统的Web应用认证机制。它依赖于HTTP协议无状态的特性,在客户端(浏览器)和服务器之间保持用户的状态。 工作原理 用户登录:用户通过输入用户名和密码来登…

嵌入式C语言(三)

typeof() 使用typeof可以获取一个变量或表达式的类型。 typeof的参数有两种形式:表达式或类型。 int i;typeof(i) j 20; --> int j 20;typeof(int *) a; -->int *a; int f(); -->typeof(f()) k;--? int k我们可以看出通过typeof获取一个变量的…

合并spark structured streaming处理流式数据产生的小文件

备注: By 远方时光原创,可转载,不能复制到其他平台 背景:做流批一体,湖仓一体的大数据架构,常见的做法就是 数据源->spark Streaming->ODS(数据湖)->spark streaming->…

Vue 实现页面导出A4标准大小的PDF文件,以及处理图片跨域不能正常展示的问题等

效果预览: 代码流程:首先在utils文件夹下创建htmlToPdf的js工具文件,然后在main.js中注册引用 htmlToPdf.js // 导出页面为PDF格式 import html2Canvas from html2canvas import JsPDF from jspdfexport default {install(Vue, options) {V…

hcia datacom课程学习(1):通信基础

1.总体框架 上图为发送方通过互联网传递信息给接收方的过程。 家用路由器会直接集成上图中的四层(vlan,DHCP,静态路由,NAT,PPPoE)。 2.网络性能指标 (1)带宽 单位时间内传输的数…

解析Hadoop三大核心组件:HDFS、MapReduce和YARN

目录 HadoopHadoop的优势 Hadoop的组成HDFS架构设计Yarn架构设计MapReduce架构设计 总结 在大数据时代,Hadoop作为一种开源的分布式计算框架,已经成为处理大规模数据的首选工具。它采用了分布式存储和计算的方式,能够高效地处理海量数据。Had…