tin2tin/Pallaidium

解决的问题

Pallaidium 是一个直接集成到 Blender 视频序列编辑器（VSE）中的生成式 AI 电影工作室。它允许电影制作人使用 AI 生成的视频、音频和文本，在实际拍摄之前对整个制作周期（从剧本、分镜到动画、配音和音乐）进行原型设计。该工作流使创作者能够完善其创作愿景，并基于 AI 生成的原型提取出最终剧本。

如何工作

作为 Blender 插件，Pallaidium 在 VSE 中提供一个侧边栏面板，用户可以根据文本提示或现有时间线条目生成媒体。它支持广泛的生成任务，包括文本转视频、图像转视频、文本转语音和文本转音乐。

默认情况下，该工具在 NVIDIA GPU 上本地运行模型，但也支持远程后端（如 ComfyUI、fal.ai 或自定义 OpenAI 兼容服务器），可将计算任务卸载到更强大的机器上。它集成了 ControlNet、IP-Adapters 和 LoRAs 等高级 AI 控制功能，以保持视觉一致性。

适用人群

专为使用 Blender 的电影制作人、动画师和视频编辑者设计，他们希望利用生成式 AI 快速原型化场景、创建占位符或在编辑时间线上生成最终资产。

主要亮点

• 集成工作流：所有 AI 生成均在 Blender 视频序列编辑器内完成。
• 多模态生成：支持图像、视频、音频、语音和文本（转录/剧本创作）。
• 灵活后端：可通过 CUDA 本地运行，或通过与供应商无关的 API 协议连接远程服务器。
• 高级控制：支持 ControlNet、OpenPose、Canny 和多参考图像输入，以实现高视觉保真度。
• ComfyUI 集成：可直接从 Blender 导入并驱动 ComfyUI 工作流。