昨日,Stability AI官方公布了两项Stable Assistant的拓展新功能,Stable Assistant是Stability AI出品的用户友好型聊天机器人,新功能之一是可以在图片编辑过程中进行搜索和替换,例如将图像中的人物或背景替换成其他图片中的对象;新功能之二是支持通过Stable Audio生成3分钟的高质量完整音频。
Stable Assistant的新功能利用了Stability AI基于Stable Diffusion 3的最先进的图像生成技术Stable Image Ultra。
Stable Assistant还提供了多种图像编辑工具,包括放大(提高图像的分辨率)和使用生成式AI从图像创建视频的功能,同时还兼备文本转视频、草图转完整图像等功能,目前Stable Assistant可3天免费试用。
一、Stable Assistant新功能亮点:图片编辑搜索和替换以及音频生成
搜索和替换(Search&Replace):该功能允许用户在自己上传的图像中指定一个对象,并将其无缝替换为另一个对象,这对于希望在不影响整体构图的情况下修改现有视觉效果的创意专业人士非常有用。
Stable Audio:Stable Audio专注于音乐制作,能够制作高质量的全长音乐曲目,生成的音轨长达三分钟,以44.1 kHz立体声生成。Stable Audio 2.0是在AudioSparx音乐库的许可数据集上训练的。
二、Stable Assistant可多样化执行图片处理的各种指令
生成具有相同构图的新图像:在保持输入图像的结构的同时促进高级内容创建方案,例如重新创建场景或从模型渲染角色。该功能可以确保生成的图像与所需的结构参数紧密结合。
提示1:一个咖啡杯,在日出时,在森林里,电影般的,电影般的,逼真的,温暖的噪音。
提示2:一个咖啡杯,在日出时,在沙漠中,电影般的,电影般的,逼真的,温暖的噪音。
扩图:可以从任意方向填充图像,能够最大限度地减少伪影并创建原始视觉效果的无缝扩展。
提示:日本动漫制作,科幻场景,将视线从相机、城市、选择性对焦中移开。
提高画质或风格:对高度退化的图像进行重新构想或增强,为视觉效果注入新的活力。
提示:马站立,一片森林,森林里长满了树叶,大气的照片,环顾拐角,空灵而梦幻的主题,秋天的季节,大气的色调,令人叹为观止的数字艺术(在动漫风格中得到了增强)。
放大分辨率和增强:提高图像的分辨率,同时保留所有细节。
提示:在渐变背景上充满活力的3D文本艺术场景。将“Stable Assistant”放在俏皮、色彩缤纷的字母中,周围环绕着画笔、音符、胶卷和羽毛笔等创意工具。添加气球和云等元素。在下面以异想天开的字体包含“分享创造的魔力!
草图到图像:将粗糙的手绘草图升级为精细的输出,提供对最终外观的精确控制。对于非草图图像,可以通过利用图像中的轮廓线和边缘进行详细操作。
提示:异想天开和丰富多彩的卡通风格,描绘了地球和太阳在宇宙中聊天。地球和太阳有一张友好的面孔,富有表现力的眼睛和一张微笑的嘴巴,繁星点点的背景,闪烁的星星和遥远的星系,轻松愉快。
删除背景:准确地从图像中分割前景,允许用户删除背景并将主体置于新的图层中,这对于精确处理图像非常有用。
提示:一个神秘的青蛙王子,非常具备艺术气息,在颓废的背景下散发着帝王般的魅力。他的服装闪耀着紫色和金色色调的亮片。
Stable Video:
图片转视频(Image to Video):使用Stable Video的扩散功能,能够根据初始图像生成一个简短的视频。
文字转视频(Text to Video):根据简单的文本或提示想法生成一个简短的视频。
提示1:在阴雨蒙蒙的天空下,一朵鲜艳的红色罂粟花在金色的麦田中拍摄的特写照片。花朵鲜艳的花瓣与花纹形成鲜明对比,戏剧性的阴影增强了场景。该图像强调了丰富的色彩和纹理。
提示2:创建一个视频,其中包含动漫女孩、夜晚、她身后的蓝光、(星系、镜头光晕)、短发、花田、夜空、电影镜头、壁纸、蓝色的配色方案,详细的背景,远处的城市。
Stability AI鼓励用户通过其平台开始使用Stable Assistant,并享受3天免费试用。
结语:Stable Assistant将图片、音视频生成全链路涵盖
此次stability AI拓展Stable Assistant新功能,不仅囊括了图片编辑和音频生成,我们还可以看到文字生成视频、草稿生成完整图片等为创意工作赋能的多样化智能操作。
我们也能够看到Stable Assistant在stability AI的各种生态中都已经在发挥长足作用,无论是专注于音乐制作的Stable Audio还是视频功能Stable Video,stability AI都可以为用户提供多样化的智能编辑工具。