OmniGen V2版 – 8Bit量化版,8G显存可玩,全能型图像生成模型,简单提示实现图像生成与精细编辑 本地一键整合包下载
OmniGen是北京人工智能学院的研究团队推出了一款全新图像生成模型,这是一种全新的扩散模型,它最大的特点在于“统一”。与Stable Diffusion等流行模型不同,OmniGen无需额外的模块(如ControlNet或IP-Adapter),便能处理多种控制条件。
其设计目标是解决多个图像生成相关任务,譬如文本到图像的生成、图像编辑、基于特定对象的生成以及视觉条件生成等。其架构经过高度简化,用户无需进行繁琐的预处理步骤,这大大降低了使用门槛。
与以往的图像生成工具如 Stable Diffusion ,OmniGen 最大的亮点是,它不再只是专注于单一任务,它具备了多种能力:
能在一个统一的框架下处理多种图像生成任务能: 包括从文本到图像生成、图像编辑,可以说是个全能选手。这意味着,用户只需提供简单提示词,就能控制图像生成与精细编辑,而不再需要再使用 ControlNet、IP-Adapter 这样的插件对图片进行细节调整!
– 8Bit量化版,8G显存可玩,全能型图像生成模型,简单提示实现图像生成与精细编辑
前几天发布的 OmniGen V1版,对显卡要求太高,且生成速度太慢,所以业内大佬基于这个问题,发布了低显存的8bit量化版模型。现在只需要8G显存就可以畅玩该应用,而且生成速度大幅度提升,8G显存显卡3分钟左右就可以实现50步出图了。
使用教程:(建议N卡,显存8G起)
上传一张或者多张需要处理的素材,比如需要把两张不同照片的人合成到一张照片,就分别上传两张照片。
然后输入提示词,比如让两个人拥吻在一起,输入对应提示词(提示词只支持英文),页面的提示词生成也有详细说明,大家可以参考下。
之后可以设置高级参数,比如生成的长宽和推理步数,点生成即可。
比如下图:
提示词:<img><|image_1|></img> 中的女人在人群中高兴地挥手
<img>是参考图标签,标签内包含参考图编号,比如|image_1|就是第一张参考图,同理|image_2|代表第二张参考图。
生成效果如上。
下载地址:(下载前,请先阅读 使用说明 再下载,避免不必要的问题和纠纷)
夸克网盘:https://pan.quark.cn/s/8f40c86fbd34