- 5周前
类别
🗞
新闻消息文字稿
00:00微软刚刚发布了最好的开源3D AI生成器
00:03支持1536网格分辨率
00:064K纹理
00:07PBR材质
00:08甚至还支持透明度
00:10所有这些功能都集成在一个开源模型中
00:13真的吗
00:15我是Steph
00:17我们现在就来弄清楚这件事
00:18太棒了
00:19各位
00:19今天微软发布了Tralis 2.0版本
00:23这真的非常出色
00:24我们先快速看一下发布页面
00:26然后一起测试一下吧
00:28与其他开源模型相比
00:30他们分解了所有的特征
00:32首先
00:33这个演示令人印象深刻
00:35我们首先看到的是
00:37分辨率提高了
00:38这真的非常酷
00:39它不仅支持1536P的分辨率
00:44这是第一个开源模型能做到的
00:47而且
00:47在内存消耗方面
00:48也非常高效
00:50这太棒了
00:54另一个特点是
00:55他们所谓的任意拓扑处理能力
00:57可以从内部理解拓扑结构
00:59包括非流行的表面
01:01这应该非常酷
01:02我看到了一些例子
01:06看起来非常不可思议
01:08我还没有生成过这样的东西
01:11但听起来超级酷
01:12他们还提到
01:14他们处理细小几何形状的能力非常强
01:16所以
01:17我肯定会进行很多测试
01:19来看看它的效果如何
01:21另外
01:22他们当然支持
01:24PBR材质
01:25真的是不可思议的是
01:27他们实现了对透明度的支持
01:29目前还没有任何付费的
01:31AI能够做到这一点
01:33所以
01:34我们肯定会很快进行测试
01:35这就是加水
01:37或加玻璃后的样子
01:38我的意思是
01:40看起来非常令人兴奋
01:42现在
01:43他们还在3D资产
01:44创建方面
01:45进行了一些创新
01:46主要是采用了更优化的压缩技术
01:49以及所谓的
01:50OXO这种新的表示方法
01:52这种方法比其他方法需要的令牌更少
01:55从而让我们能够在消费级GPU上获得更高的分辨率
01:58至少他们是这么说的
02:00如果我们看看GitHub上的信息
02:03最有趣的是运行这个程序需要多少
02:06VRM
02:07他们只在Linux系统上进行了测试
02:10但我想
02:10我们可以通过Docker之类的工具来解决这个问题
02:14他们说
02:16至少需要24G的内存
02:18但他们
02:19只在A100和H100上进行过测试
02:22所以
02:24各位
02:24我已经进行了测试
02:25会在这个视频的结尾揭示结果是否属实
02:27现在让我们来试试看吧
02:29在徒步旅行时
02:30你可以进行自由生成
02:31比如一次
02:32两次这样的自由生成
02:33看起来是这样的
02:35我们添加一张图片
02:36我们选择分辨率
02:37你真的可以选择1536
02:39你选择降采样率
02:42最终的多边形数量可以达到50万
02:44你需要选择一个纹理尺寸
02:46有4K
02:472K
02:481K
02:483K
02:49等选项
02:49还有一些高级设置
02:50我已经生成了一个样本了
02:52这是一个例子
02:54在形状方面还不错
02:56实际上
02:57我觉得它非常不错
02:58但我再运行一个例子
03:00来看看效果
03:01并解释一些有趣的地方
03:03我对透明度真的很兴奋
03:05那我们来做个浴缸实验怎么样
03:07我会选择这个设置
03:08或者我们试试30万个多边形
03:10和2K的纹理吧
03:12我们按生成按钮吧
03:13我使用的是专业版
03:14所以
03:15它仍然不使用GPU
03:16但我相信
03:17在HubbingFace的免费账户上
03:19至少可以进行两次生成
03:20首先
03:21你的图像被转换成了Oxel格式
03:24然后生成了Slat格式的文件
03:26现在开始吧
03:28它会给你一个预览
03:29你可以看看生成的结果
03:31各位
03:32这是我看到的透明度效果
03:35我的意思是
03:36看起来非常有趣
03:38我还是能看到一些阴影效果
03:40这些是Slat解压过程中的产物
03:42现在我们需要提取双视图数据
03:46是的
03:47这需要分两步完成
03:48首先
03:49它会生成自己的内部格式
03:51甚至还会给你一个预览
03:52但要使用它
03:54还需要再进行一步转换
03:56将其转换为GB格式
03:57这让我有点想起
03:59Metalworks的SAM3D软件
04:01如果你还没看过那个视频
04:03一定要看看
04:04它们会创建一些模型
04:05然后进行碰撞模拟
04:06最后将其转化为几何形状
04:08不过
04:09我们的方法有点不同
04:10另有一种叫做Slat的表示方法
04:13然后是烘焙过程
04:14目前来看
04:16它们还在不断改进这个技术
04:18因为在现有的GPU上
04:19整个过程需要将近两分钟
04:22这确实挺长的
04:23这就是我们的模型
04:25所以这个模型没有透明度效果
04:30对吧
04:30但是有一点需要注意
04:32如果我们查看它们的文档
04:34会发现GB默认处于不透明模式
04:36但它有一个α通道和颜色纹理
04:39所以我们只需要手动启用它就可以了
04:43为什么不在这里就启用它呢
04:45我不知道
04:45不过我们先下单模型
04:47看看在Blender中
04:48是否能够正常使用
04:49所以我要把加载到Blender里的GP去掉
04:52我要启用适口着色
04:54现在我们转到模型着色设置
04:57这里我有这个基础颜色纹理
04:59我会把α通道连接到α输入端
05:02我们放大模型看看
05:06大家看
05:06这里有透明度效果
05:08真的哦
05:09我简直无言以对
05:10这真的是我第一次看到
05:123D AI能够理解物体的形状
05:15并处理透明度
05:16还能将其导出
05:17虽然还不完美
05:20但他们确实重建了那个碗的模型
05:23多酷啊
05:24而且你可以放大查看
05:26甚至能看到泥墨
05:27泥墨在里面
05:28哇
05:29我的意思是
05:30这太不可思议了
05:31这真的是炒作
05:32关于部署
05:34我实际上在拖车上复制了空间
05:36基本上和你在本地安装的过程是一样的
05:39我启用了A10G显卡
05:42它配备了24G的VRM
05:44据说这是最低要求
05:47我们得在我的空间里
05:49尝试做一些事情
05:50因为免费使用的空间是有限的
05:52我们和工作人员一起试试这个
05:54好的
05:55设置保持不变
05:56速度会慢一点
05:57对吧
05:57它不是H100版本
05:59而且崩溃了
06:00从我的测试来看
06:03无论你使用什么设置
06:04在渲染的那一刻
06:06它都会崩溃
06:07原因是内存问题
06:09你可以看到
06:11这里显示的是内存不足的错误
06:12也许它还没有优化好
06:14这只是发布的第一天
06:15我想
06:16我们肯定会看到量化版本
06:19或加速版本
06:20我不知道
06:21但目前24
06:22单位未提及
06:23是不够的
06:24说实话
06:25大家在准备模型的过程中
06:27遇到了很多错误和崩溃问题
06:29坦白说
06:31几乎有一半的人
06:32在使用Harding Faces功能时
06:33遇到了问题
06:34我认为
06:35这个功能还没有优化好
06:36还有一些漏洞
06:37但肯定会很快得到修复的
06:39对于现在想要测试它的人来说
06:41当然
06:42我已经把它上传到了Top AI上了
06:44这里我们可以看一下
06:46我准备的一些事例
06:47这可花了好几个小时呢
06:49火箭呢
06:50我花了五个小时来准备这25个模型
06:52希望你们会喜欢它们
06:54如果你们想比较的话
06:55可以选择Trelis和其他任何模型
06:57那我们再和另一个开源项目
06:59Hang Ion 2.1
07:00做一下比较吧
07:01Hang Ion 2.1生成的图像
07:03颜色更深一些
07:04当然分辨率也差得远
07:06Sam 3D也是如此
07:08再次强调
07:09这不是网站的问题
07:09Sam 2D生成的模型
07:11颜色比实际颜色更深
07:13这是一个拖车模型的事例
07:14我认为
07:15我们完全可以称它为
07:16最好的开源模型
07:17我们甚至可以尝试
07:19将其与Hang Ion 3.0的
07:21前两名模型进行比较
07:23看看效果如何
07:24结果非常接近
07:27在这种情况下
07:28我更喜欢Trelis模型
07:30我们再试一个例子吧
07:32你可以在这里选择测试
07:33好的
07:34那我们开始吧
07:35我的意思是
07:36它们几乎一模一样
07:37我觉得
07:38这里的细节
07:39可能稍微清晰一些
07:41但总体来说非常酷
07:42这是开源的
07:47而这是闭源的
07:48我得说
07:49在这次测试中
07:50表现得非常出色
07:51好的
07:52这里我们有一个摄像头
07:53好的
07:54Hang Ion
07:55在文本处理上做的不对
07:56Trelis也是
07:57好的
07:59关于这个文本
07:59我觉得在Hang Ion方面
08:01有一些问题
08:01逻辑上更合理一些
08:03我不知道它是什么样的
08:04看起来很糟糕
08:05并不是我预期的那种重够效果
08:07所以在这种情况下
08:09Hang Ion肯定赢了
08:10这里我们还有另一个例子
08:11我还是觉得
08:12湖南这边做的更好
08:14这部分真的很不错
08:16不过
08:17我个人更喜欢后面的部分
08:18它在逻辑上更合理一些
08:20看看这个女孩
08:22她对Trelis的表现
08:24感到非常惊讶
08:25对吧
08:25看看她的眼神
08:27这真的太棒了
08:29对于开源模型来说
08:31这简直太出色了
08:32虽然后面的这些部分
08:34看起来有些不连贯
08:35但它们还是放在该放的位置上
08:38这就是Hang Ion模型
08:40好吧
08:43这个结果真的很好
08:44所以我的意思是做得不错
08:46但还是Hang Ion模型更上一筹
08:48我们再来试试这个模型吧
08:49这个模型真的让我有点震惊
08:51看看它在细节上的表现
08:53有多出色
08:54哇
08:55处于固态模式
08:57哇
08:58所以
08:58我的意思是
09:00看
09:00这个头部比Hang Ion的更加详细
09:03更加清晰
09:04真是太棒了
09:05真是太厉害了
09:07非常酷
09:07非常令人印象深刻
09:08那我们来做最后一个吧
09:09开始吧
09:10也还不错
09:11但我更喜欢Hang Ion的材料
09:14可能还有脸的形状
09:15对吧
09:16总的来说
09:20细节部分
09:21比如花朵之类的
09:22也真的非常非常好
09:23再次强调
09:24我们正在比较避元和开元软件
09:27Hang进行了全球发布
09:29但他们很快也会提供付费服务
09:31而预告片在拥有足够GPU的情况下
09:33是免费的
09:34大家
09:35这就是今天的内容
09:36在评论区告诉我
09:37你们对新的Microsoft模型的看法
09:39订阅我们的频道
09:41第一时间了解3DEI的新发布信息
09:44mos愿推荐 没关系
09:45我们下ceks为
09:46呢
09:47我们下期的准备
09:47我们下期的准备
09:48都不是补现实取材
09:49的耶
Be the first to write a comment