AI建模/场景/NPC/CG 【AI资讯简报 第一期】23/4/12

本专栏开始搜集关于最近新出的AI资讯。信息来源主要是ytb或tt 平台或其他新闻网站。做搬运视频太费时间,所以用专栏的形式。
这是第一期。如果看的人多的话,后面每周更一次。

来自Y站@Matt Wolfe -This 3D AI Technology Is Getting Wild!视频提要:
1,全息AI宠物 Uncle Rabbit实现和人的自然语音对话并支持ChatGPT的基础功能。
(有条件自己去看视频,语音非常自然)
官网:lookingglassfactory.com/uncle-rabbit
门槛:需加入等候列表。且这是个相框一样的硬件物体,应该要购买才行。

2,Spline AI. 文字生成模型,看演示应该支持常见几何体和一些low poly物体,支持物理和材质。
官网:spline.design/ai
门槛:需加入等候列表。加入后有免费和付费服务。




3,英伟达发表演示使用ChatGPT插件在Omniverse中 用文字编辑场景,让AI帮你摆模型。(基于素材库资产)

原文:medium.com/@nvidiaomniverse/chatgpt-and-gpt-4-for-3d-content-generation-9cbe5d17ec15#cid=ov01_so-yout_en-us
备注:插件未发布
4,OPUS.AI ,支持文字到3D场景创建。(基于素材库资产)
以下截图来源官方网站右上角的demo演示。
官网:opus.ai
门槛:需加入等候列表







来自Y站@Matt Wolfe -CRAZY AI Computer Graphic Technology! 视频提要:
1,Meta公司发布图像分块AI,能够准确识别图像中每一块物体并标记。将有望极大程度改善AI图像/视频生成流程或其他图像相关的科技发展。
官网:segment-anything.com
门槛:可在官网免费使用demo,可自行上传图片测试


据悉国内已有团队基于次做出的开源进阶版,叫 Grounded SAM
github.com/IDEA-Research/Grounded-Segment-Anything
2,Luma AI发布基于神经辐射场NeRFs 的3D场景重建插件。用于UE5的插件,场景可直接在UE5中渲染查看。是一种扫描建模技术,用户可以用视频创建一个3d场景。
官网:lumalabs.ai
门槛:需要插件,软件,或手机App。有免费和付费版。模型精度还是有点低。


3,Blackade Labs 发布支持 文字生成HDRi (天空盒贴图/360度全景图)
官网: skybox.blockadelabs.com
门槛: 免费使用



来自Y站@Matt Wolfe -ANYONE Can Make Insane Visual Effects Now!视频提要
1,主播获取了Wonder Dynamics的 Wonder Studio资格,能够直接拍视频,然后选择一个CG角色替换其中的演员。
AI会自动处理CG角色的动作,表情,光影,和背景修复问题。
官网:wonderdynamics.com
门槛:需加入等候列表,有资格后,demo免费使用


来自Y站@Matt Wolfe - Autonomous AI: Are We Creating Westworld?视频提要
1,Reverie,一个用AI驱动的NPC,让他们自动生活的模拟游戏demo。
其中的所有NPC都是基于一个基础人设后,自动规划任务,执行任务,包括聊天,工作,学习,生活,社交等。

你可以点击每一个npc 查看他们正在做什么,位置,和对话。
官网:reverie.herokuapp.com/arXiv_Demo/#
门槛:免费查看,可暂停时间,暂无交互功能。

研究员在论文中指出:他们发现,当其中一个小人想举办情人节聚会时,他们自发的筹备聚会,人们开始寻找伴侣,约会并准时参加派对。
2,Meta AI声称,他们的机器人可通过虚拟3d演示的机器人抓取物体,学会在现实中到达对应目标点,并抓取物体。

3, tt用户 @rikvk01 发布自己开发的MemoryGPT,是拥有长期记忆的ChatGPT。能将你们的所有对话整理并准确记忆,哪怕重启页面也能回想你告知他的个人信息。而不是像ChatGPT的短期记忆,或new bing一样被清除。
原贴:twitter.com/rikvk01/status/1644787327057776645
门槛:需要加入等候列表

4,tt用户@skirano发布 DesignerGPT,基于GPT4和插件系统的网页设计插件。
能够使用户文字生成网站,GPT自动调用图像插件和网页设计插件为你生成网页
原贴:twitter.com/skirano/status/1645555893902397440
门槛: 需要GPT插件测试资格


5, SceneDreamer, 一个通过几张风景图片创建无边界3d地形的网站。
官网:scene-dreamer.github.io
门槛:免费

支持多种风格。

虽然真实性上还有些差距,但已经初具雏形了。



本期咨询大多来自Matt Wolfe,如果各位还有其他咨询来源推荐,欢迎留言。
如果信息有错请指正。另外B站的图片注释功能有bug,我编辑状态看不见注释,所以有几个莫名其妙的字母就无视。
本期咨询到此结束,欢迎点赞关注。