腾讯发布了 ToonCrafter,是一种新型的卡通动画生成技术,可以通过生成插值方法生成自然、连贯的卡通动画中间帧。该技术超越了传统基于对应关系的卡通视频插值方法,能够处理复杂的非线性运动和遮挡问题,使动画过渡更加平滑自然。
从演示来看效果很好,过渡很顺滑,而且没有明显问题。ToonCrafter 利用预训练的图像到视频模型,可以插值两幅卡通图像,并根据参考图像对动画草图自动上色。它支持生成最多16帧的视频,每帧分辨率为512x320。通过减少DDIM步骤,可以降低推理时间。
还设计了一个灵活的草图编码器,使用户能够对插值结果进行互动控制。
项目地址:ToonCrafter
前段时间,2023腾讯视频动画节在上海正式拉开帷幕。在腾讯视频动漫大赏上,腾讯视频发布了国内首部采用人工智能辅助技术的动画作品《魔游纪人工智能辅助篇》的预告,《魔游纪人工智能辅助篇》是由腾讯视频燃动宇宙工作室群联合技术团队共同打造,结合了时下流行的通用智能 AI 技术、前期的美术多元化开发、中期的制作插件应用和后期的转绘合成。
不只是《魔游纪人工智能辅助篇》,腾讯视频的《完美世界》第四季也将通过全局光照动态演算光线追踪、houdinl 全线制作特效等技术,为动画带来影视级的渲染效果。
这对动画制作的从业者会带来哪些影响呢?
各位设计师们,这个工具太牛了啊,只需在源图像中指定需要编辑的区域,并提供一张参考图,MimicBrush 就能智能捕捉两者间的联系,自动完成局部编辑或替换。该工具的主要功能包括局部区域编辑、纹理转移和后期处理优化等。分享给大家!!
MimicBrush 是由中国香港大学、阿里巴巴集团和蚂蚁集团联合开发的一种零样本图像编辑工具,通过参考图像进行模仿编辑,帮助用户更方便地进行创作。
MimicBrush 的主要特点包括: 参考图像模拟:分析并复制参考图像中指定的视觉特征到源图像中的标记区域,确保风格或内容的一致性。 零样本图像编辑:允许用户在没有原始目标图像的情况下进行图像编辑,通过参考仿制的方式实现编辑效果。 文本到图像对齐:利用 CLIP 编码器和 VAE 实现文本到图像的对齐功能,用户可以通过输入文本描述来指导编辑过程。 多样化的编辑结果:展示了一系列多样化的编辑结果,包括局部区域编辑、纹理转移和后期处理优化等功能。
MimicBrush 还简化了复杂的编辑流程,提高了效率和灵活性,特别适用于产品定制、角色设计和特效制作等领域。其底层框架基于 SD1.5 的扩散模型和 MimicBrush 模型结合,极大地简化了 AI 图像编辑的流程。
项目地址:https://github.com/ali-vilab/MimicBrush
Aiuni 是一款基于人工智能技术的 2D图片转3D模型生成工具,由北京云可科技开发,并依托清华大学团队开源的Unique3D框架实现高效建模。
Aiuni 核心功能与技术特点 1. 快速3D建模:用户上传单张2D图片后,系统能在约30秒内生成高保真3D模型,支持OBJ、STL等通用格式导出,大幅简化传统建模流程。 2. 多视图扩散与法线图生成:通过深度学习技术,从单张图片推断物体的多角度视图和法线图,为3D重建提供多维度信息。 3. 即时一致的网格重建算法(ISOMER):确保模型颜色和几何形状的一致性,减少传统方法中常见的细节失真问题。 4. 高分辨率上采样:逐步提升图像分辨率,捕捉更丰富的纹理细节,生成清晰度更高的模型。 5. 多模态算法扩展:未来计划整合视频、动画、图形学数据,训练角色、场景、动作大模型,构建4D时空表征系统。
近日,Figma在Config 2025发布了史上最炸的4大AI工具,一个比一个猛,彻底改变设计、开发、协作全流程!
第一个是Figma Sites,这不是普通建站工具,而是AI驱动的神级神器。设计稿可以一键上线网站,一键添加不同的设备布局,还能通过一键生成动画,各种动画效果直接显示在网页内。CMS内容系统也即将上线,现在处于测试阶段。
第二个是Figma Make。不会写代码?没关系!Figma Make配合Claude 3.7模型,只要你说一句话,它就能生成可运行的App原型,比如音乐播放器。而且还能手动微调、改颜色、调布局,未来还支持接入第三方系统,真正打通从设计到开发的最后一步。
第三个是Figma Buzz。设计师设定好品牌模板,运营可以批量出图,不管是社媒内容、广告Banner、还是电商海报,都能快速搞定。AI还能根据你的文本提示生成图像,甚至能从表格里读取数据,一次生成成千上万张图!
第四个是Figma Draw。Illustrator太重太复杂?Figma Draw是Figma内置的矢量插画工具,画笔、纹理、路径编辑通通都有,适合画Logo、做视觉、搞插画,轻量又顺手,完全不需要切换软件。
这一次,Figma不止是做设计强,连开发、上线、营销全都包了!一站式搞定,再也不用来回切换十几个软件了。更多详细介绍,大家可以访问Figma AI 官网查看:https://www.figma.com/ai/
幸好Figma当初没被Adobe收购,不然我们哪有今天这些炸裂的新功能!
figma这次发布的4个AI工具,你最想用哪一个?评论区告诉我吧!
Adobe 将于下周的 Adobe Max 活动中宣布推出一款新的AI照片编辑工具 Project Stardust。Adobe近日也提前曝光了Stardust的实测视频。
从视频中可以看出,Stardust强大的AI编辑功能,如用户可选择单张照片中的对象进行准确的识别和编辑。用户只需点击所选对象,就能轻松完成图片的处理。Stardust尤其适用于电商平台,它可以快速检测图片中的元素,并通过AI算法生成新的图片元素,极大地提升了工作效率。
这会改变我们与 Adobe 产品交互的方式吗?
不知道大家最近有没有关注OpenAI举办的首届开发者大会呢?有哪些亮点值得关注呢?
昨晚的开发者大会让AI界再次沸腾不已,OpenAI推出了备受瞩目的GPT-4 Turbo版本,这对整个行业来说是一个重要的里程碑。
OpenAI还推出了GPTs,这使得那些不懂代码的人也能够用自然语言来创建自己的GPT模型,并将其加入OpenAI的应用商店,与此同时还能够分享收益。
这种创新可以说是OpenAI的突破之举,相当于他们的iPhone时刻,而即将发布的GPT Store则类似于APP store。
虽然其他竞争对手还在探索AI的奥秘,但OpenAI已经开始构建一个宏大而有前景的生态系统。
我们正在见证一个行业的浪潮涌动,也可能正在见证一个巨头的崛起。
昨天(5月30日)凌晨,OpenAI 在 x 平台宣布,GPT-4o 多模态能力向所有用户免费开放。不过,在使用次数上官方没有更新公告,预计还是会是有一定次数限制。
北京时间 5 月 14 日凌晨,OpenAI 举办发布会,带来了 GPT-4o 。该模型打通了文本、图片、视频和语音输入,无需中间转换,互相之间就可以直接生成。此次发布会还带来了更智能的实时语音助手,以及适用于 macOS 的 ChatGPT 桌面应用程序。
当时,OpenAI 宣布向 ChatGPT Plus 和 Team 用户推出 GPT-4o,很快就会向企业用户推出。同时,也向所有人开放 GPT-4o 多模态能力,但有使用次数限制。