零基础玩转Wan2.1-Fun-1.3B-InP WebUI:文生/图生/视频生视频全功能体验
【免费下载链接】Wan2.1-Fun-1.3B-InP 项目地址: https://ai.gitcode.com/hf_mirrors/PAI/Wan2.1-Fun-1.3B-InP
Wan2.1-Fun-1.3B-InP是一款强大的视频生成模型,支持文生视频、图生视频和视频生视频等多种功能,通过WebUI界面即可轻松操作,即使是零基础用户也能快速上手体验AI视频创作的乐趣。
🌟 认识Wan2.1-Fun-1.3B-InP模型
Wan2.1-Fun-1.3B-InP是由PAI团队开发的视频生成模型,属于HuggingFace镜像项目的一部分。该模型以多分辨率训练,支持首尾图预测,能够根据文本描述、图片或参考视频生成高质量的视频内容。其核心参数配置可在config.json中查看,包括模型维度、头数、层数等关键信息,确保了模型的强大性能和生成效果。
✨ 模型核心优势
- 多模态生成:支持文本、图片、视频多种输入方式,满足不同创作需求
- 多分辨率支持:可生成不同分辨率的视频,适应各种场景使用
- 显存优化方案:提供多种显存节省模式,如model_cpu_offload、model_cpu_offload_and_qfloat8和sequential_cpu_offload,让消费级显卡也能运行
🚀 快速启动指南
1️⃣ 环境准备
在开始使用Wan2.1-Fun-1.3B-InP之前,需要确保您的环境满足以下要求:
- 操作系统:Windows 10或Ubuntu 20.04、CentOS
- Python版本:3.10或3.11
- PyTorch版本:2.2.0
- CUDA版本:11.8或12.1
- GPU要求:至少12GB显存(如Nvidia-3060 12G)
- 磁盘空间:至少60GB可用空间
2️⃣ 项目获取
首先需要克隆项目仓库到本地:
git clone https://gitcode.com/hf_mirrors/PAI/Wan2.1-Fun-1.3B-InP
3️⃣ 权重下载与放置
模型权重需要放置在指定路径,推荐的目录结构如下:
📦 models/
├── 📂 Diffusion_Transformer/
│ └── 📂 Wan2.1-Fun-1.3B-InP/
└── 📂 Personalized_Model/
└── your trained trainformer model / your trained lora model (for UI load)
您可以通过Hugging Face或Model Scope下载权重:
- Hugging Face: Wan2.1-Fun-1.3B-InP
- Model Scope: Wan2.1-Fun-1.3B-InP
4️⃣ 启动WebUI
完成上述准备后,运行以下命令启动WebUI:
cd Wan2.1-Fun-1.3B-InP
python examples/cogvideox_fun/app.py
等待程序启动完成后,在浏览器中访问提示的地址即可进入WebUI界面。
💡 WebUI全功能使用教程
WebUI界面支持文生视频、图生视频、视频生视频和普通控制生视频(Canny、Pose、Depth等)多种功能,下面分别介绍它们的使用方法。
1️⃣ 文生视频:文字变动画
文生视频功能允许您通过文本描述生成视频内容,操作步骤如下:
- 在WebUI中选择"文生视频"选项卡
- 输入您的文本描述(prompt),例如:"一只可爱的小猫在草地上玩耍"
- 输入负面描述(neg_prompt),例如:"模糊,低质量,变形"
- 调整参数:
- guidance_scale:控制生成结果与文本描述的匹配程度,建议值7-10
- seed:随机种子,相同种子可生成相同结果
- 视频长度:选择生成视频的时长
- 点击"生成"按钮,等待视频生成完成
- 生成结果将保存在samples/cogvideox-fun-videos文件夹中
2️⃣ 图生视频:图片动起来
图生视频功能可以让静态图片变成动态视频,支持指定开始和结束图片:
- 在WebUI中选择"图生视频"选项卡
- 上传开始图片(validation_image_start)和结束图片(validation_image_end)
- 输入文本描述,指导视频生成方向
- 调整相关参数(guidance_scale、seed等)
- 点击"生成"按钮
- 结果保存在samples/cogvideox-fun-videos_i2v文件夹中
3️⃣ 视频生视频:风格迁移与编辑
视频生视频功能允许您以现有视频为参考,生成新的视频内容:
- 在WebUI中选择"视频生视频"选项卡
- 上传参考视频(validation_video)
- 输入文本描述,指定生成视频的风格和内容
- 调整参数
- 点击"生成"按钮
- 结果保存在samples/cogvideox-fun-videos_v2v文件夹中
4️⃣ 控制生视频:精准控制视频效果
控制生视频功能支持通过Canny、Pose、Depth等控制条件来生成视频,实现更精准的效果控制:
- 在WebUI中选择"控制生视频"选项卡
- 上传控制视频(control_video),这是使用Canny、Pose、Depth等算子提取后的视频
- 输入文本描述
- 调整参数
- 点击"生成"按钮
- 结果保存在samples/cogvideox-fun-videos_v2v_control文件夹中
⚙️ 高级设置:显存优化方案
由于Wan2.1-Fun-1.3B-InP模型参数较大,为了适应不同配置的显卡,提供了多种显存节省方案,您可以在预测文件中设置GPU_memory_mode参数:
- model_cpu_offload:整个模型在使用后会进入CPU,可以节省部分显存
- model_cpu_offload_and_qfloat8:模型使用后进入CPU,并且对transformer模型进行了float8量化,节省更多显存(会部分降低模型性能)
- sequential_cpu_offload:模型的每一层在使用后会进入CPU,速度较慢,但节省大量显存
如果您的显存足够(如24G以上),推荐使用model_cpu_offload模式;如果显存有限,可以尝试其他两种模式。
📚 总结
Wan2.1-Fun-1.3B-InP WebUI为零基础用户提供了简单易用的视频生成工具,通过直观的界面和丰富的功能,任何人都能快速上手AI视频创作。无论是文生视频、图生视频还是视频生视频,都能满足您的创作需求。赶快尝试,体验AI视频生成的乐趣吧!
本项目采用Apache License (Version 2.0)许可证,更多详细信息请参考项目文档。
【免费下载链接】Wan2.1-Fun-1.3B-InP 项目地址: https://ai.gitcode.com/hf_mirrors/PAI/Wan2.1-Fun-1.3B-InP
创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考



