LFM2.5-VL-1.6B开源大模型:Liquid AI官方授权,可商用可二次开发
1. 项目概述
LFM2.5-VL-1.6B是由Liquid AI发布的轻量级多模态大模型,专为端侧和边缘设备设计。这款开源模型结合了1.2B参数的语言模型和约400M参数的视觉模型,总参数量达到1.6B,在保持高性能的同时显著降低了硬件需求。
核心特点:
- 多模态能力:同时处理图像和文本输入
- 轻量化设计:适合边缘设备离线运行
- 低显存需求:仅需约3GB GPU显存
- 快速响应:优化后的推理速度
| 项目 | 值 |
|---|---|
| 模型名称 | LFM2.5-VL-1.6B |
| 开发商 | Liquid AI |
| 参数量 | 1.6B |
| 类型 | 视觉语言模型 (Vision-Language) |
| 模型路径 | /root/ai-models/LiquidAI/LFM2___5-VL-1___6B |
| WebUI 地址 | http://localhost:7860 |
2. 环境准备与快速部署
2.1 硬件要求
LFM2.5-VL-1.6B对硬件要求相对友好,适合大多数开发者环境:
| 组件 | 要求 |
|---|---|
| GPU | NVIDIA GPU (推荐 8GB+ 显存) |
| 当前配置 | RTX 4090 D, 22.15 GB 可用 |
| 内存占用 | ~3 GB GPU |
2.2 快速启动方式
WebUI方式(推荐)
模型已配置开机自启服务,可通过以下命令管理:
# 查看服务状态 supervisorctl status lfm-vl # 重启服务 supervisorctl restart lfm-vl # 查看日志 tail -f /var/log/lfm-vl.out.log启动后访问 http://localhost:7860 即可使用Web界面。
命令行方式
如需手动启动,可执行:
cd /root/LFM2.5-VL-1.6B python webui.py3. 核心功能与使用指南
3.1 Python API调用示例
以下是完整的Python调用示例,展示如何加载模型并进行图文对话:
import warnings warnings.filterwarnings('ignore') import torch from PIL import Image from transformers import AutoProcessor, AutoModelForImageTextToText MODEL_PATH = "/root/ai-models/LiquidAI/LFM2___5-VL-1___6B" # 加载模型 processor = AutoProcessor.from_pretrained(MODEL_PATH, trust_remote_code=True) model = AutoModelForImageTextToText.from_pretrained( MODEL_PATH, device_map="auto", dtype=torch.bfloat16, trust_remote_code=True ) model.eval() # 准备图片 image = Image.open("your_image.jpg").convert('RGB') # 构建对话 conversation = [ { "role": "user", "content": [ {"type": "image", "image": image}, {"type": "text", "text": "描述这张图片"} ] } ] # 生成回复 text = processor.apply_chat_template( conversation, add_generation_prompt=True, tokenize=False, ) inputs = processor.tokenizer( text, return_tensors="pt", padding=True, truncation=True, max_length=2048, ) inputs = {k: v.to(model.device) for k, v in inputs.items()} with torch.no_grad(): outputs = model.generate( **inputs, max_new_tokens=256, temperature=0.1, min_p=0.15, do_sample=True, ) response = processor.batch_decode(outputs, skip_special_tokens=True)[0].strip() print(response)3.2 使用URL图片
模型支持直接处理网络图片:
from transformers.image_utils import load_image url = "https://cdn.britannica.com/61/93061-050-99147DCE/Statue-of-Liberty-Island-New-York-Bay.jpg" image = load_image(url)3.3 推荐生成参数
针对不同任务类型,建议使用以下参数组合:
| 任务 | temperature | min_p | max_new_tokens |
|---|---|---|---|
| 事实问答 | 0.1 | 0.15 | 256 |
| 创意描述 | 0.7 | 0.15 | 512 |
| 代码生成 | 0.1 | 0.1 | 1024 |
4. 功能特性与项目结构
4.1 支持功能
- 图片问答/描述:理解图片内容并回答问题
- 多语言支持:英语、日语、韩语、法语、西班牙语、德语、阿拉伯语、中文
- 高分辨率处理:支持512x512分块处理大图
- 多图片输入:同时处理多张图片
- OCR文档理解:识别和理解文档内容
- Function Calling:纯文本功能调用
4.2 项目结构
/root/LFM2.5-VL-1.6B/ ├── webui.py # Gradio WebUI 入口 ├── webui.log # 运行日志 └── ... /root/ai-models/LiquidAI/LFM2___5-VL-1___6B/ ├── model.safetensors # 模型权重 (3.1 GB) ├── config.json # 模型配置 ├── processor_config.json # 处理器配置 ├── tokenizer.json # 分词器 ├── chat_template.jinja # 对话模板 ├── README.md # 官方文档 └── ...5. 系统配置与维护
5.1 开机自启配置
服务已通过Supervisor配置为开机自动启动:
[program:lfm-vl] command=/opt/miniconda3/envs/torch28/bin/python /root/LFM2.5-VL-1.6B/webui.py directory=/root/LFM2.5-VL-1.6B user=root autostart=true autorestart=true stderr_logfile=/var/log/lfm-vl.err.log stdout_logfile=/var/log/lfm-vl.out.log5.2 常见问题解决
WebUI启动报端口占用
# 检查端口占用 lsof -i :7860 # 重启服务 supervisorctl restart lfm-vl模型加载失败
# 检查模型文件 ls -la /root/ai-models/LiquidAI/LFM2___5-VL-1___6B/ # 检查 GPU nvidia-smi推理报错处理
确保使用正确的调用方式:
# 错误方式 (会报错) inputs = processor.apply_chat_template(...).to(device) # 正确方式 text = processor.apply_chat_template(..., tokenize=False) inputs = processor.tokenizer(text, return_tensors="pt") inputs = {k: v.to(model.device) for k, v in inputs.items()}6. 总结与资源
LFM2.5-VL-1.6B作为一款轻量级多模态大模型,在边缘计算场景下表现出色。其低显存需求和快速响应特性使其成为实际应用中的理想选择。
官方资源:
- 模型主页
- 官方文档
- Playground
- Discord 社区
更新日志:
| 日期 | 内容 |
|---|---|
| 2026-04-08 | 初始部署,修复apply_chat_template调用方式,配置开机自启 |
获取更多AI镜像
想探索更多AI镜像和应用场景?访问 CSDN星图镜像广场,提供丰富的预置镜像,覆盖大模型推理、图像生成、视频生成、模型微调等多个领域,支持一键部署。