ChatGPT写着色器、Stable Diffusion生成风格动画，AI影视级动捕，Nuke GPT来袭···

　　“ 感知技术 · 感触CG · 感受艺术 · 感悟心灵 ”

　　中国很有影响力影视特效CG动画领域自媒体

　　编辑：木木

　　前两天LOFRTER登上了热搜，秉承着“吃瓜群众”凑热闹的心理点开看看发生了什么，没想到AI再次成为了整个事件的中心。

　　“你关注的画手写手都去哪了？”迅速成为话题，LOFRTER部分用户甚至消号或者停更，那么使用户有如此大的反应，到底发生了什么事呢？

　　小编先来给大家科普一下，什么是LOFRTER？中文名为乐乎，由网易开发的轻博客服务，2011年8月份上线，目前，LOFRTER是中国主要的图文社交和同人创作平台。

　　这么优秀的创作平台为什么越来越多的人对它感到失望呢？

　　起因是，LOFRTER做了一个Ai绘画功能“老福鸽画画机”，线上版为头像生成器，大概就是用AI可以生成自己喜欢的头像，既然使用到了AI绘图，那么一直以来的AI侵权问题又再次搬到台面上来说，许多用户不买账，表示一个鼓励自主创作的平台为何突然推出AI板块。

　　官方给出的解释是为了方便没有绘画能力的用户制作喜欢的头像，该功能训练集来自开源，没有使用LOFRTER用户的作品数据，并注明不能商用……

　　目前，已删除“老福鸽”活动通告，但功能可以正常运作，此前该平台还曾上线Ai写文功能。

　　但是针对官方的回应，用户依旧表示不能理解并合理表达自己的不满……

　　现在的局面到最后也没说出来个123，只能希望最后的发展别让创作的画师寒了心……

　　也是因为LOFRTER的事件，小编顺便也搜了搜最近国外对AI是一个什么样的看法，毕竟前段时间AI创作漫画，作者争版权的事情也闹得沸沸扬扬的，所以小编就想看看AI在国外CG领域目前是个什么影响！

　　比如有一家游戏公司，首当其冲开始禁止AI生成的内容。

　　Paizo禁止在其游戏中使用AI生成的内容

　　Paizo是Pathfinder和Starfinder等桌面角色扮演游戏的发行商，已宣布将禁止在其游戏中使用AI生成的艺术和文本，据该公司称，此举措直白来说就是为了支持有才华的艺术家和作家！

　　Paizo的官方表示：自公司成立以来，其主要优先事项之一就是“无数传统艺术家和作家的需求”，人工智能技术的使用对“合作伙伴的生计”构成了“严重威胁”，这就是出版商表示“坚决反对在Paizo产品中使用AI的原因”。

　　此外，Paizo所关联的所有程序，都不允许使用AI生成的内容，他们表示只期待未来可以和众多艺术家以及作家合作。

　　这么多人抵制AI，那么它的出现终究是错误的吗？

　　其实不然，大家只是针对“AI侵权”、“生成艺术作品=剽窃”有着自己的看法，只是合理捍卫自己的艺术创作，因为界限太过于模糊，才会让无数艺术家对AI产生极大的抵触。

　　排除上述这几点，其实对于目前我们很多的3D制作流程AI在很大程度上提高了制作效率的。

　　AI 着色器：用于Unity的ChatGPT支持的着色器生成器

　　近日，Unity开发人员Keijiro Takahashi通过设置扩展了Unity的简洁可下载工具集合， 并展示了所创建的AI Shader，它是Unity的ChatGPT驱动的着色器生成器的概念验证实现，这样用户就可以通过使用文本提示在引擎中生成可自定义的着色器。

　　具体操作是必须要先生成一个API密钥来使用ChatGPT API，然后紧接着在Unity的“项目设置”页面上进行设置。据开发者介绍，该生成器支持英文和日文提示，可通过GitHub下载。

　　https://twitter.com/i/status/1632634562399600640

　　下载链接：

　　https://github.com/keijiro/AIShader

　　适用于Blender的Stable Diffusion渲染插件

　　看标题可能以为是一个像往常见到的普通插件差不多，但其实！其中涉及到了AI技术。该工具由Stability.ai发布，是一个将Stable Diffusion集成到Blender中的免费插件。

　　它的特别之处就是，可以使用Blender内部的开源AI图像生成模型，将现有图像转换为纹理，或使用3D场景来引导生成的图像。甚至可以在为Stable Diffusion参数设置关键帧时渲染出整个Blender动画，来创建有趣的程式动态图形风格化效果。

　　这个工具主要可以分为两个部分：

　　一、将简单的3D几何图形转换为各种视觉风格的插图或概念艺术

　　该插件的操作其实非常简单，只要将Stable Diffusion运用到Blender中，就可以直接在Blender中输入文本提示，完全不需要再使用Web界面。而且还有一种更便捷的方式，在Blender中使用3D场景可以直接引导Stable Diffusion生成的图像，以及文本提示本身。

　　此外也可用Blender渲染场景，然后使用该渲染作为Stable Diffusion的附加提示，从而生成与3D场景的合成相匹配的图像。

　　这个工作流程就是将Stable Diffusion变成类似于AI渲染引擎的东西，一切都简化、直白化。有了它，用户可以快速探索场景的不同外观，甚至可以使用简单的块状几何体来生成详细的概念艺术或插图，从UI中选择一系列预设样式。

　　二、可以风格化渲染动画

　　此外，Blender的Stability可以将简单的引导图像转换为Blender中的漫反射纹理，甚至可以风格化整个动画。用户可以渲染现有的Blender动画，同时为Stable Diffusion控制参数设置关键帧，从而产生一些有趣的运动图形风格效果。如下图：

　　因为Blender的开源，现在成了各个AI开发公司的试验场，也有更多的AI工具先后入驻Blender。

　　基于Stable Diffusion AI生成PBR材质

　　再比如有插件开发人员使用Stable Diffusion AI在Blender上开发了一个生成PBR材质的插件DT2DB Bridge。免费！新插件连接了两个现有的免费工具：Carson Katri的Dream Textures（生成漫反射纹理）和Hugo Tini的DeepBump（从这些图像生成法线和高度贴图）。

　　下载链接：

　　https://pan.baidu.com/s/1i9riZcM3GtNuAuuYZQNLNA?pwd=94fe

　　提取码：94fe

　　此外，从外网得到的最新消息，目前Stable Diffusion的开发者Stability AI已经收购了Init ML，这个公司开发了一款基于AI的照片编辑器名为ClipDrop。据了解Clipdrop融入了先进的机器学习和工程技术，包括移除背景和超分辨率。而且Clipdrop一直在将Stability AI强大的生成性AI模型融入其测试版应用程序中。

　　Init ML成立于2020年7月，总部位于法国巴黎。拿到种子投资后，它的图像应用程序Clipdrop已经积累了超过1500万用户。

　　这个工具有一个非常厉害的地方，就是可对图像进行重光照。

　　所以，在AI的加持下，之后这种照片的重光照，抠图等操作变得非常简单。

　　AI加持下的手机动捕技术更加成熟

　　AI在视频动捕技术上的应用也越来越成熟。

　　最近一直专注AI动作捕捉技术的公司Plask发布了一款免费的iOS和Android应用程序Modif，可以从手机捕捉视频片段提取全身运动，并将其重定向到3D角色上。Plask的机器学习训练技术已经作为基于浏览器的服务提供，它从视频片段中提取演员的动作，并将其重新定位为3D角色。

　　Modif将这项技术打包到一个移动应用程序中，用户可以裁剪在手机或平板电脑上拍摄的视频，然后让Modif提取人物身体的运动，并将其重定向到一个普通角色。

　　但这个APP更多的是面向社交媒体的使用，而不是高标准的影视制作，它有一组卡通风格的角色，可以将动画重定向到这些角色，而宣传片则侧重于将动画导出为MP4文件。

　　当然了，如果需要你也可以将动作数据以FBX或JSON格式导出到DCC应用程序和游戏引擎，并将你自己的3D角色提交到Plask，这样就出现在应用程序中。

　　与许多免费的移动动作捕捉应用不同，它适用于Android和iOS，但是目前只有支持韩国地区才能使用，小编用苹果手机测试下，可以搜索下载，但是注册需要手机号码，但不支持国内的。或许小编没搞对，大家感兴趣可以试玩下。

　　基于AI的手机端专业级动捕

　　如果你觉得这种动捕数据太小儿科，那么基于AI动捕的专业级也有。

　　近日基于人工智能的动捕开发者Move.ai发布了新的iOS应用程序。这款应用被宣传为传统光学和惯性运动捕捉系统的替代产品，只需要两到六部iPhones就能捕捉的镜头中提取高质量的动作数据。

　　市面上已经有很多iOS动作捕捉APP，且其中有一些还是免费的，但它们主要是单摄像头系统，生成的数据质量并不能达到制作级别的要求。而Move.ai不同，它不是用在单个手机，而是设计用于两到六部安装在三脚架上的iphone上，创建一个捕捉空间。与iPi Soft的基于摄像机的无标记动作捕捉系统有点类似，但是与iPi不同的是Move.ai处理数据是在云端完成，而不是在用户手机端。

　　为了证明他们这个工具捕捉数据的高质量，开发公司在其网站上发布了自己的技术与Rokoko、Xsens、OptiTrack和Vicon现有系统的对比。

　　这个工具还有个厉害的地方就是，它不需要TrueDepth传感器，因此它可以用2017年iPhone 8之后出的所有版本。可以安装在任何运行iOS 15.0或更高版本的iPhone。还有个优势是，可以捕捉多个演员，但move.ai建议为了不增加硬件成本建议最多三个人。

　　捕捉完的镜头在Move.ai的服务器上进行在线处理，它可以直接从iPhones上传。在处理过程中，用户可以选择将原始数据重定为自定义角色绑定，前提是符合Move.ai的标准49骨结构。自定义绑定可以以FBX格式上传，并可以选择上传带有绑定控件的单独Maya文件。

　　生成的动画可以下载为FBX、BVH或USD格式，作为Maya HumanIK文件，或作为包含原始和重定目标运动、角色网格和摄影机位置的Blender场景，目前市面上绝大多数的DCC都是可用的。

　　NukeGPT

　　除了AI在3D领域的应用，AI也正在进入后期制作。最近有个国外的艺术家写了一个脚本把ChatGPT植入到了Nuke里，能干啥？它可以帮助你写Python，TCL，Nuke表达式和BlinkScript。可直接在Nuke中使用OpenAI的模型生成代码，轻松地将其集成到Nuke工作流程中，只需单击几下即可开始生成Python脚本。

　　感兴趣的后期小伙伴，可以去网上搜搜如何实现的，这里就详述了。

　　除了上面这些技术，目前AI在3D制作流程中的应用远比我们看到的要多的多，可能大家在平时的制作中也感受到了，现在有各种AI工具或者基于AI的功能都极大的方便了制作过程，把不必要的重复操作过程交给AI来完成，效率得到了很大的提高，同时还帮助你给出相应的策划方案，何乐而不为呢？

　　我们上面讲的这些内容，有的很早我们就发过了，但是今年因为ChatGPT和Stable Diffusion火爆又重新搬到台面上，给人感觉更加神奇。就像很多人说的AI技术的发展是无法阻挡的，但要合理的加以利用，也需要出台一些法律法规对其进行规范，要不然就成了“吃图”的最大侵权阵地。

　　好了，今天内容就到这里吧，明天见！

　　end

　　点击图片进入详情页

　　萌新小姐姐四个月全流程做出精彩毕设短片！先后就读川美、谢尔丹学院国人小姐姐专访

　　轻松搞定Maya绑定！16年经验绑定大佬耗时10年开发的拖拽式绑定工具发布

　　不要再舔屏AI图了，大神作品才更香！盘点近期各路神仙超赞CG美女作品

　　10几年了，大佬从渲染师干到概念设计师，Max和Vray的技艺一直很猛！