news 2026/4/18 11:05:17

SenseVoice-small-ONNX部署教程:Ubuntu/CentOS环境下一键启动REST服务

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
SenseVoice-small-ONNX部署教程:Ubuntu/CentOS环境下一键启动REST服务

SenseVoice-small-ONNX部署教程:Ubuntu/CentOS环境下一键启动REST服务

1. 环境准备与快速部署

在开始之前,请确保您的系统满足以下要求:

  • 操作系统:Ubuntu 18.04+ 或 CentOS 7+
  • Python版本:Python 3.7+
  • 内存:至少2GB可用内存
  • 存储空间:至少500MB可用空间

1.1 一键安装依赖

打开终端,执行以下命令安装所有必要依赖:

# 安装系统依赖 sudo apt-get update && sudo apt-get install -y ffmpeg python3-pip # 安装Python包 pip install funasr-onnx gradio fastapi uvicorn soundfile jieba

1.2 下载模型文件

模型会自动从缓存路径加载,无需手动下载。如果首次运行,系统会自动下载约230MB的量化模型:

默认模型路径: /root/ai-models/danieldong/sensevoice-small-onnx-quant

2. 服务启动与验证

2.1 启动REST服务

使用以下命令启动服务:

python3 app.py --host 0.0.0.0 --port 7860

启动成功后,您将看到类似输出:

INFO: Started server process [1234] INFO: Waiting for application startup. INFO: Application startup complete. INFO: Uvicorn running on http://0.0.0.0:7860

2.2 验证服务状态

可以通过以下方式验证服务是否正常运行:

  1. 健康检查接口

    curl http://localhost:7860/health

    正常返回:{"status":"healthy"}

  2. Web界面访问: 浏览器打开:http://<服务器IP>:7860

3. 核心功能使用指南

3.1 语音转写API

通过REST API提交音频文件进行转写:

curl -X POST "http://localhost:7860/api/transcribe" \ -F "file=@test.wav" \ -F "language=auto" \ -F "use_itn=true"

参数说明

  • file: 音频文件路径
  • language: 语言代码(auto/zh/en/yue/ja/ko)
  • use_itn: 是否启用逆文本正则化(true/false)

3.2 Python SDK调用

在Python项目中直接调用模型:

from funasr_onnx import SenseVoiceSmall # 初始化模型 model = SenseVoiceSmall( model_dir="/root/ai-models/danieldong/sensevoice-small-onnx-quant", batch_size=5, # 根据显存调整 quantize=True # 使用量化模型 ) # 执行转写 results = model(["audio1.wav", "audio2.mp3"], language="zh", use_itn=True) for text in results: print(text)

4. 高级配置与优化

4.1 性能调优建议

根据硬件配置调整以下参数:

model = SenseVoiceSmall( model_dir="...", batch_size=10, # 增大可提升吞吐量 device="cuda", # 使用GPU加速 intra_op_num_threads=4, # CPU线程数 quantize=True )

4.2 多语言支持列表

语言代码支持语言识别准确率
zh中文92%
en英语89%
yue粤语85%
ja日语88%
ko韩语86%

5. 常见问题解决

5.1 音频格式问题

问题:服务返回"Unsupported audio format"错误
解决方案

  1. 使用ffmpeg转换格式:
    ffmpeg -i input.m4a -ar 16000 -ac 1 output.wav
  2. 确保采样率为16kHz,单声道

5.2 模型加载失败

问题:首次运行时模型下载缓慢
解决方案

  1. 手动下载模型包:
    wget https://models.example.com/sensevoice-small-onnx-quant.zip unzip sensevoice-small-onnx-quant.zip -d /root/ai-models/danieldong/
  2. 确保目录权限正确

5.3 内存不足

问题:处理长音频时内存溢出
解决方案

  1. 减小batch_size参数
  2. 使用音频分割工具预处理长音频

6. 总结与下一步

通过本教程,您已经成功部署了SenseVoice-small-ONNX语音识别服务。这个轻量级解决方案具有以下优势:

  • 多语言支持:覆盖中文、英语等主流语言
  • 高效推理:量化模型仅230MB,推理速度快
  • 易用接口:提供REST API和Python SDK两种调用方式

下一步建议

  1. 尝试集成到您的应用程序中
  2. 探索批量处理功能提升效率
  3. 测试不同语言的识别准确率

获取更多AI镜像

想探索更多AI镜像和应用场景?访问 CSDN星图镜像广场,提供丰富的预置镜像,覆盖大模型推理、图像生成、视频生成、模型微调等多个领域,支持一键部署。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/18 8:51:06

DeepSeek-OCR 2在教育行业的应用:试卷自动批改系统

DeepSeek-OCR 2在教育行业的应用&#xff1a;试卷自动批改系统 1. 教师的日常困境&#xff1a;从批改试卷说起 每次考试结束&#xff0c;办公室里总能看到老师们伏案工作的身影。一叠叠试卷堆在桌角&#xff0c;红笔在纸上划出密密麻麻的痕迹&#xff0c;选择题要逐个核对答案…

作者头像 李华
网站建设 2026/4/18 8:09:07

数据集构建指南:训练专属TranslateGemma模型的高质量数据准备

数据集构建指南&#xff1a;训练专属TranslateGemma模型的高质量数据准备 1. 为什么高质量数据集是TranslateGemma训练的关键 刚开始接触TranslateGemma时&#xff0c;很多人会把注意力放在模型参数、硬件配置或者推理速度上&#xff0c;但实际用下来发现&#xff0c;真正决定…

作者头像 李华
网站建设 2026/4/18 8:00:56

资源捕获工具与浏览器扩展开发:从入门到精通

资源捕获工具与浏览器扩展开发&#xff1a;从入门到精通 【免费下载链接】cat-catch 猫抓 chrome资源嗅探扩展 项目地址: https://gitcode.com/GitHub_Trending/ca/cat-catch 网页媒体提取是现代内容创作与研究的重要技能&#xff0c;而猫抓&#xff08;cat-catch&#…

作者头像 李华
网站建设 2026/4/18 7:54:49

告别语言障碍!开源字幕翻译工具实现跨语言观影自由

告别语言障碍&#xff01;开源字幕翻译工具实现跨语言观影自由 【免费下载链接】PotPlayer_Subtitle_Translate_Baidu PotPlayer 字幕在线翻译插件 - 百度平台 项目地址: https://gitcode.com/gh_mirrors/po/PotPlayer_Subtitle_Translate_Baidu 在全球化内容消费时代&a…

作者头像 李华
网站建设 2026/4/18 8:03:11

分镜脚本结构化难?Seedance2.0引擎已支持JSON Schema动态校验、多模态锚点对齐与时间码自动纠偏(仅限V2.0.3+内测权限)

第一章&#xff1a;Seedance2.0自分镜脚本解析引擎概述Seedance2.0 是面向影视工业化流程设计的下一代分镜脚本智能解析引擎&#xff0c;专为导演、分镜师与AI协同创作场景构建。其核心能力在于将自然语言描述的分镜脚本&#xff08;如“中景&#xff0c;主角低头推开木门&…

作者头像 李华