简易VLM本地加载器
节点中英文对比
简易VLM本地加载器
model_name_or_path
device
dtype
is_locked
type
简易VLM本地加载器
model_name_or_path
device
dtype
is_locked
type
简易VLM本地加载器 - 参数说明
输出参数
model
已加载的多模态模型对象。
tokenizer(processor)
模型的处理器(如 tokenizer/processor),用于预处理文本和图像输入。
控件参数
model_name_or_path
已放入模型目录下的 VLM 模型名,例如 Llama-3.2-11B-Vision-Instruct。
device
推理设备:auto / cuda / cpu / mps,推荐 cuda(GPU)。
dtype
精度控制:auto(自动)、float16(省显存)、float32(高精度)、bfloat16、int8 / int4(量化,节省显存)。
is_locked
是否锁定模型,true 表示只加载一次,避免重复加载耗时。
type
模型架构:llama-v、qwen-vl、deepseek-janus-pro,不同厂商需对应选择。
暂无节点说明