Qwen-Image-Edit
扫码查看

阿里巴巴开发的200亿参数AI图像编辑模型,支持语义、外观和精确文本编辑,采用Apache 2.0开源许可。

Qwen-Image-Edit

综合介绍

Qwen-Image-Edit是阿里巴巴开发的一款AI图像编辑工具。它拥有200亿参数,能够理解并处理图像内容。这个工具支持多种编辑方式,包括语义修改、外观调整和精确文本编辑。用户可以用简单的文字指令完成复杂的图像编辑任务。该工具采用Apache 2.0开源许可,意味着任何人都可以自由使用和修改它。

功能列表

  • 语义编辑:通过文字描述改变图像中的物体或场景
  • 外观调整:修改图像的色彩、亮度和风格
  • 文本编辑:在图像中添加、修改或删除文字内容
  • 批量处理:一次性对多张图像进行相同操作
  • 高分辨率输出:支持生成高质量的大尺寸图像

使用帮助

Qwen-Image-Edit不需要安装任何软件。用户可以通过网页浏览器直接访问在线工具。打开网站后,你会看到一个简洁的操作界面。

首先上传需要编辑的图像。点击"上传图像"按钮,选择本地文件。支持常见的图像格式,包括JPG、PNG和WEBP。图像大小不能超过10MB。

编辑界面分为三个主要区域。左侧是图像预览区,中间是编辑选项,右侧是文字指令输入框。

要进行语义编辑,在输入框描述你想要的变化。例如输入"将蓝天变成夜晚星空",系统就会自动处理。处理时间通常需要10-30秒,取决于图像复杂程度。

外观调整更加直观。使用滑块调整亮度、对比度和饱和度。每个参数都有实时预览功能,方便用户看到效果。

文本编辑功能很实用。选择"添加文本"选项,输入想要显示的文字。可以调整字体大小、颜色和位置。还能选择不同的字体样式。

所有编辑操作都是非破坏性的。这意味着原始图像不会被修改,每次编辑都会生成新文件。用户可以随时撤销或重做操作。

编辑完成后,点击"导出"按钮下载图像。可以选择不同的质量等级和文件格式。最高支持4K分辨率输出。

工具还提供批量处理功能。先编辑好一张图像,然后保存编辑参数。之后可以将这些参数应用到其他图像上。这个功能特别适合处理大量相似图像。

对于高级用户,网站提供API接口。开发者可以将图像编辑功能集成到自己的应用中。API文档详细说明了各种调用方法和参数设置。

使用过程中遇到问题可以查看帮助文档。网站有完整的使用教程和示例库。这些资源能帮助用户快速掌握各种编辑技巧。

产品特色

基于200亿参数大模型,实现智能图像理解和精准编辑。

适用人群

  • 摄影师:需要快速修图和处理大量图像
  • 设计师:需要灵活的图像编辑工具完成创作
  • 普通用户:想要简单易用的图片修改工具
  • 开发者:需要集成AI图像处理功能到自己的应用

应用场景

  • 照片修饰:调整光线、修复瑕疵、改变背景
  • 创意设计:制作海报、广告图片、社交媒体内容
  • 文档处理:为文档添加标注、修改图表文字
  • 电商运营:批量处理商品图片、统一图片风格

常见问题

  • 是否需要付费?
    完全免费使用,基于Apache 2.0开源协议
  • 支持哪些语言?
    目前主要支持中文和英文指令
  • 处理速度如何?
    普通图像处理约10秒,复杂编辑可能需要30秒
  • 是否支持移动端?
    支持手机浏览器访问,但建议使用电脑获得更好体验

综合介绍

Qwen-Image-Edit 是由 Qwen 团队开发的一款开源图像编辑模型,基于 20B 参数的 Qwen-Image 模型打造。它结合了 Qwen2.5-VL 和变分自编码器(VAE),支持图像的语义编辑和外观编辑,同时在文字编辑方面表现出色。用户可以通过简单的文本指令实现图像内容修改、风格转换、物体旋转等功能,同时保持图像的视觉一致性。模型在多个公开基准测试中表现优异,适用于创意设计、虚拟形象创建和艺术作品修正等场景。Qwen-Image-Edit 通过 Hugging Face 平台提供,用户可免费下载和使用,适合开发者、设计师和内容创作者。

体验地址:

QWEN CHAT

https://modelscope.cn/models/Qwen/Qwen-Image-Edit

功能列表

  • 语义编辑:修改图像内容,如物体旋转、风格转换和 IP 形象创建,保持整体语义一致。
  • 外观编辑:精确添加、删除或修改图像特定区域,如调整背景、服装或物体颜色。
  • 精准文字编辑:支持中英文文字的添加、删除和修改,保留原始字体、颜色和风格。
  • 新视角生成:实现物体 90 度或 180 度旋转,生成不同视角的图像。
  • 链式编辑:通过逐步修正实现复杂图像编辑,如书法作品的字符校正。
  • 风格迁移:将图像转换为特定艺术风格,如吉卜力风格,适用于虚拟形象设计。

使用帮助

安装流程

要使用 Qwen-Image-Edit,首先需要安装最新版本的 diffusers 库。以下是安装步骤:

  1. 确保已安装 Python 3.8 或更高版本。
  2. 打开终端,运行以下命令安装 diffusers
    pip install git+https://github.com/huggingface/diffusers
    

  1. 安装其他依赖库,如 PyTorch 和 Pillow:
    pip install torch pillow
    
  2. 验证安装:运行 python -c "from diffusers import QwenImageEditPipeline",无报错即表示安装成功。

硬件要求:推荐使用支持 CUDA 的 GPU,以加速图像处理。最低配置为 16GB 显存的 GPU 和 32GB 系统内存。

基本使用

Qwen-Image-Edit 通过 Python 脚本调用,结合文本提示词完成图像编辑。以下是一个基本示例,展示如何将图像中的兔子颜色改为紫色并添加闪光背景:

  1. 准备输入图像:确保有一张待编辑的图像(如 input.png),格式为 RGB。
  2. 编写代码
    import os
    from PIL import Image
    import torch
    from diffusers import QwenImageEditPipeline
    # 加载模型
    pipeline = QwenImageEditPipeline.from_pretrained("Qwen/Qwen-Image-Edit")
    pipeline.to(torch.bfloat16)
    pipeline.to("cuda")
    pipeline.set_progress_bar_config(disable=None)
    # 加载图像和设置提示词
    image = Image.open("./input.png").convert("RGB")
    prompt = "Change the rabbit's color to purple, with a flash light background."
    inputs = {
    "image": image,
    "prompt": prompt,
    "generator": torch.manual_seed(0),
    "true_cfg_scale": 4.0,
    "negative_prompt": " ",
    "num_inference_steps": 50,
    }
    # 执行编辑并保存结果
    with torch.inference_mode():
    output = pipeline(**inputs)
    output_image = output.images[0]
    output_image.save("output_image_edit.png")
    print("image saved at", os.path.abspath("output_image_edit.png"))
    
  3. 运行代码:将上述代码保存为 .py 文件,运行后会在同一目录生成编辑后的图像 output_image_edit.png

特色功能操作

1. 语义编辑

语义编辑适合需要整体内容调整的场景,如物体旋转或风格迁移。操作步骤:

  • 准备一张包含目标物体的图像。
  • 设置提示词,明确描述修改内容。例如,旋转物体 90 度:
    prompt = "Rotate the object 90 degrees to show its side view."
    
  • 调整 num_inference_steps(推荐 50-100)以提高生成质量。
  • 运行代码,检查输出图像是否符合预期。

2. 外观编辑

外观编辑用于精确修改特定区域。操作步骤:

  • 使用图像编辑工具(如 Photoshop)标记需要修改的区域,生成掩码图像(可选)。
  • 在提示词中描述修改内容,如添加物体:
    prompt = "Add a signboard with text 'Welcome' in the center of the image."
    
  • 如果需要更高精度,可提供掩码图像:
    inputs["mask_image"] = Image.open("mask.png")
    
  • 运行代码,检查修改区域是否自然融合。

3. 文字编辑

Qwen-Image-Edit 支持中英文文字编辑,保留原始字体风格。操作步骤:

  • 准备包含文字的图像,如广告牌或书法作品。
  • 设置提示词,明确文字修改内容。例如:
    prompt = "Change the text 'Hello' to 'Welcome' in the same font and style."
    
  • 对于中文书法修正,需逐步编辑:
    • 先标记错误文字区域(如用红色框)。
    • 设置提示词修正单个字符:
      prompt = "Replace the character in the red box with '稽'."
      
    • 如果仍有错误,继续标记子区域(如字符“稽”的右下部分),重复修正。

4. 链式编辑

链式编辑适合复杂任务,如书法作品修正。操作步骤:

  • 准备初始图像,标记错误区域(如书法中的错字)。
  • 使用提示词逐步修正。例如:
    prompt = "Correct the character in the red box to '稽'."
    
  • 检查结果,若仍有错误,缩小范围继续修正:
    prompt = "Replace the lower-right part of '稽' with '旨'."
    
  • 重复直到满意,保存最终图像。

注意事项

  • 提示词优化:提示词需清晰具体,避免模糊描述。例如,“将背景改为蓝色”优于“更改背景”。
  • 计算资源:高分辨率图像或复杂编辑需更多显存,建议分步处理。
  • 模型更新:定期检查 Hugging Face 页面,确保使用最新模型版本。

应用场景

  1. 创意设计Qwen-Image-Edit 可用于生成品牌宣传海报、社交媒体内容或艺术作品。用户通过文字指令快速调整图像风格或添加元素,适合营销团队和独立设计师。
  2. 虚拟形象创建模型支持风格迁移和 IP 形象扩展,如将卡通角色转换为不同艺术风格或生成 MBTI 主题表情包,适用于游戏开发和社交媒体内容创作。
  3. 艺术作品修正对于书法或插画中的细节错误,链式编辑功能可逐一修正,适合艺术家和文化机构修复数字艺术品。
  4. 广告内容优化用户可通过文字编辑功能快速修改广告牌文字或调整产品展示背景,提升广告制作效率。

QA

  1. Qwen-Image-Edit 是否免费?是的,Qwen-Image-Edit 是开源模型,可通过 Hugging Face 免费下载和使用,遵循 Apache 2.0 许可证。
  2. 需要多强的硬件支持?推荐使用至少 16GB 显存的 GPU 和 32GB 系统内存。CPU 运行可能较慢,不适合复杂任务。
  3. 如何优化编辑效果?使用清晰的提示词,增加 num_inference_steps(如 100),并提供掩码图像以提高精度。
  4. 支持哪些语言的文字编辑?支持中英文文字编辑,能保留原始字体和风格,适合多语言海报或艺术作品。
微信微博Email复制链接