效果炸裂！AI绘画版神笔马良，指哪画哪！

效果炸裂！AI绘画版神笔马良，指哪画哪！

大家好！今天我要给大家介绍一个堪称AI绘画界的神器——StreamMultiDiffusion。这个项目简直就是AI绘画版的神笔马良！你只需要在特定区域输入文本提示，它就能实时生成图像，简直炸裂了。

想象一下，你可以像神笔马良一样指哪画哪，只需简单输入几个词语，就能让画笔在画布上自由挥洒，创造出你心目中的完美画面。是不是超酷？

项目功能特点

1. 实时交互式图像生成

Stream Multi Diffusion允许用户实时与系统互动，根据自定义的文本提示在特定区域生成图像。这个过程是动态且即时的，为用户提供了高度互动的体验。

2. 基于区域的语义控制

通过区域文本提示，用户能够对图像的具体区域进行精确控制，指定每个部分应该显示的内容。这种细粒度的控制使得生成的图像更加符合用户的意图。

3. 语义调色板

引入了一种新的绘画范式，用户不仅可以绘制颜色，还可以绘制具有特定语义的内容，例如“蓝天”、“绿草”等，从而在创作过程中加入更丰富的意义层次。

4. 图像修复和编辑

提供了实时图像修复和编辑功能，用户可以在任何上传的照片或艺术作品上进行绘画，自由修改和美化现有图像。

应用场景

1. 创作个性化艺术作品

场景描述：一名艺术家想要创作一幅包含蓝天、绿草和一棵大树下的孩子玩耍的画面。

操作示例：艺术家在画布的不同区域分别输入文本提示：“蓝天”、“绿草”和“一棵大树下的孩子”。StreamMultiDiffusion便会根据这些区域性的语义提示生成相应的图像内容，实现艺术家的创作愿景。

2. 定制个性化海报

场景描述：一名设计师需要为一场音乐节制作宣传海报，希望在海报中加入具有节日氛围的元素，如烟花、音乐符号和快乐的人群。

操作示例：设计师在海报模板的相应区域内输入文本提示：“夜空中的烟花”、“音乐符号”和“跳舞的人群”。使用StreamMultiDiffusion后，系统会在指定区域内生成与提示相匹配的图像内容，快速完成海报设计。

3. 图像修复和个性化编辑

场景描述：一名用户希望修复一张旧照片中的破损部分，并在照片的空白区域添加花朵装饰。

操作示例：用户首先上传需要修复的旧照片，然后在破损的区域输入“修复”作为提示，在希望添加花朵的区域输入“五彩缤纷的花朵”。StreamMultiDiffusion能够理解这些指令，实时修复破损并在指定区域生成花朵，达到美化效果。

4. 实时交互式图像生成教学

场景描述：一位教师在教授关于创意绘画的课程时，希望展示如何将文本描述转化为图像。

操作示例：教师在课堂上通过StreamMultiDiffusion展示一个实时演示，他们在不同区域输入各种创意文本提示，如“神秘的森林”、“远处的城堡”。系统根据输入的提示在画布上生成相应的图像，展示从文本到图像的创意转换过程。

StreamMultiDiffusion能够同时在一个画面中实时绘制5个不同的对象。并且不同颜色的画笔精确调整它们的外观和位置，实现复杂画面的精准绘制。

生成的可控照片

以下是使用Stream Multi Diffusion生成的可控照片：

多区域可控图像生成

全景图片生成

图片

学术Fun将上述工具制作成一键启动包，点击即可使用，避免大家配置环境出现各种问题。下载地址（电脑浏览器访问）：https://xueshu.fun/4796/，在此页面右侧区域点击下载！

注意电脑配置如下：

Windows 10/11 64位操作系统

8G显存以上英伟达显卡

解压

最好不要有中文路径，解压后，如下图所示，双击启动.exe文件运行

图片

浏览器访问

打开浏览器，即可在浏览器中使用。

用户界面介绍

使用方法

上传背景图像。你可以用白色背景图开始，也可以使用手机拍摄的照片或其他AI生成的艺术作品。你甚至可以完全覆盖画布，用特定的语义画笔从文本提示中同时绘制背景图像。

输入一些文本提示。在界面左边的语义调色板上点击每个语义画笔，然后在下面的界面中输入文本提示。这将为你创建一个新的语义画笔。

绘制。选择匹配语义调色板顺序的适当图层。即，图层 n 对应 提示 n。如果你对绘图界面不满意，可以导入专业的基于JavaScript的在线绘图工具来替代默认的 gr.ImageEditor。我们已发布代码并使用MIT许可证，所以请随意fork这个仓库并基于它构建更好的用户界面。

按下播放按钮，享受成果！ 按钮的意思是“切换流/单步运行/批量运行（4）”。