顶顶通语音识别使用说明

介绍

顶顶通语音识别软件(asrproxy)是一个对接了多种语音识别接口的语音识别系统。可私有化部署(支持中文英文和方言等，支持一句话识别、实时流识别、多声道录音文件识别。

原理

asrproxy内嵌了阿里达摩院的开源语音识别工具包FunASR,后续我们也会使用自有的预料来增强模型，以后也会添加openai的开源模型whisper 。asrproxy也对接了主流的ASR云服务商，比如阿里云，科大讯飞，腾讯云，mrcp等。使用同一套接口就可以无缝切换各种ASR。

一句话识别接口和录音文件识别接口

识别参数放在http请求头里面，声音文件内容通过post发送，不需要编码发送原始文件就可以。

POST /asr HTTP/1.1
Host: 116.62.146.93:9990
User-Agent: Mozilla/5.0
Accept: */*
Cache-Control: max-age=0
Connection: close
id:test
samplerate: 8000
signature:605bef92414621abfca073ebc6ad7d3b
timestamp:1697505856
engine:shortsentence
Content-Length: 30240
声音数据

识别结果通过JSON返回。

HTTP/1.1 200 OK
Date: Tue, 17 Oct 2023 01:25:36 GMT
Server: www.ddrj.com
Content-Length: 35
Connection: Keep-Alive
Content-Type: text/plain
Pragma: no-cache
Cache-Control: private, max-age=0, no-cache{"code":"0","desc":"识别结果"}

请求参数说明

  • timestamp 时间戳和服务器误差只允许5分钟内

  • id asrproxy.json配置的用户id(asrproxy.json->short_sentence_asr->users)

  • signature 签名 md5(key+timestamp) 本例中key是test,md5(test1697505856)=605bef92414621abfca073ebc6ad7d3b。
    key配置位置：asrproxy.json->short_sentence_asr->users->id->key

  • engine 引擎类型 asrproxy.json->groups配置ASR引擎，默认配置是 shortsentence

  • hostwords 热词，多个热词用空格分开

  • datatype 数据类型，不设置默认是pcm类型

    1. pcm 原始的PCM数据，
    2. wav wav格式的数据
    3. mp3 mp3格式的数据
    4. url 通过URL获取文件

  • samplerate datatype是pcm时有效，声音采样频率，不设置默认是8000

  • sentence_time 是否需要输出句子时间，设置为true输出。

  • post内容

    • datatype是pcm、wav、mp3时是原始的声音数据

    • datatype是url的时候是josn格式的要识别的文件信息

      {
"uuid":"唯一的ID，回调通知用"，
"callback_url":"识别结果回掉URL。"，
"file_url":"要识别文件的URL，支持本地文件的绝对路径和http文件"，
"ext":"wav|mp3|pcm"//http返回的数据类型,如果file_url是本地文件会根据文件后缀来识别文件类型
}

响应参数说明

  • code 0 没错误 其他错误代码，如果有错误desc内容是错误信息
  • desc

    • 识别单声道文件时desc是字符串类型的识别结果。

    • 识别多声道文件时并且sentence_time设置为fasle,desc字符串数组类型[“第一声道的识别结果”,“第二声道的识别结果”]

    • sentence_time 设置为true,desc是二维数组

      • silence_duration 句子前面的静音时间，单位秒
      • begin_time 句子开始时间，单位秒
      • end_time 句子结束时间，单位秒
      • speech_rate 语速，单位为每分钟字数
        {"uuid": "","code": "0","desc": [[{"silence_duration": 1.36,"begin_time": 1.36,"end_time": 3.19,"speech_rate": 131.148,"text": "喂你好。"}, {"silence_duration": 0.74,"begin_time": 3.93,"end_time": 17.76,"speech_rate": 303.688,"text": "这边是百万医疗项目的客服哈。"}],[{"silence_duration": 1.36,"begin_time": 1.36,"end_time": 3.19,"speech_rate": 131.148,"text": "喂你好。"}, {"silence_duration": 0.74,"begin_time": 3.93,"end_time": 17.76,"speech_rate": 303.688,"text": "这边是百万医疗项目的客服哈。"
}]
]
}

测试方法

接口测试地址 http://demo.ddrj.com:9990/asr

浏览器直接上传文件测试地址 http://demo.ddrj.com:9990/test

可用curl命令测试,为了调过验证签名步骤，需要把asrproxy.json->short_sentence_asr->users->id(test)里面添加"not_validate_signature":true这个配置。

一句话识别测试

1.wav改成要识别的文件，如果识别的文件是mp3的，datatype:wav也要改成datatype:mp3

curl -H "id:test" -H "engine:shortsentence" -H "datatype:wav" -X POST --data-binary @1.wav  http://demo.ddrj.com:9990/asr

录音文件识别测试

curl -H "id:test" -H "engine:shortsentence" -H "datatype:url" -X POST -d "{\"ext\":\"mp3\",\"uuid\":\"name\",\"file_url\":\"http://demo.ddrj.com/t1.mp3\",\"callback_url\":\"http://demo.ddrj.com/ttsresult\"}" http://demo.ddrj.com:9990/asr

实时流识别接口

通过websocket连接上 ws://127.0.0.1:9988 ,发送一个请求头，然后发送二进制的声音流，结束识别发送字符串END结束识别。

引导头格式为 时间戳json的参数\0,注意\0是一个二禁制的0。

1699344741507{"callid":"07ca13d3-55cc-47ef-a591-ffaee83d0e0b","asr_mode":1,"hot_word":"","asr_params":{"group":"default"},"vad_min_active_time_ms":100,"vad_max_end_silence_time_ms":1000,"wait_speech_timeout_ms":5000,"max_speech_time_ms":60000,"samples_per_second":8000}\0

  • asr_mode: asr模式 0只第一句话 1 持续识别
  • hot_word: 热词 ，需要asr引擎支持
  • asr_params: asr参数，可用来选择asr引擎 {“group”:“default”}
  • vad_min_active_time_ms: 最小说话时间，需要ASR引擎支持
  • vad_max_end_silence_time_ms:　最大静音时间，需要ASR引擎支持
  • wait_speech_timeout_ms:　等待说话时间，需要ASR引擎支持
  • max_speech_time_ms:　最大识别时间，需要ASR引擎支持
  • samples_per_second: 声音频率 8000或者 16000

返回识别结果

【标记1个字节-识别结果】
标记字符含义
0:中间结果
1:句子结束，对于支持长时间识别的ASR才支持，用于断句。
F:识别结束，客户端已经发送了END
f:识别结束，客户端没有发送END，ASR检测到静音太长认为停止说话了。
E:ASR错误
标志是f/F/E的时候客户端要主动断开连接

测试页面

http://demo.ddrj.com/wsasr.html

配置

{"key":"asrproxy.license",  //授权文件路径"log":{"console_level":0, //输出控制台日志等级0-5(0:DEBUG, 1:INFO, 2:NOTICE, 3:WARNING, 4:CRIT, 5:CONSOLE)"file_level":0,    //输出到文件日志等级0-5(0:DEBUG, 1:INFO, 2:NOTICE, 3:WARNING, 4:CRIT, 5:CONSOLE)"file_maxsize":100, //文件大于多少M就自动创建新的日志文件。"file_number":10 //最大保留日志文件个数},"short_sentence_asr":{"listen_ip":"0.0.0.0","listen_port":9990,"bgasr_thread_count":null, //录音文件识别的ASR线程个数，如果不设置就是根据CPU个数自动设置。"users":{//用户ID，可以配置多个用户"test":{          "not_validate_signature":false,//是否禁用验证签名，改成true,就是不验证签名"key":"test",//用户KEY"ip":"*"  //*任意IP都可以访问，也可以限制可以访问的ip}}},"asr":{"listen_ip": "127.0.0.1","listen_port": 9988,"storage": "record", //asr录音目录，调用asr时，设置了asr_params.recordfilename才会录音。"acl":"*", //哪些IP可以访问，配置*任意IP都可以访问，多个IP用逗号隔开，如果不配置acl，通过127.0.0.1不需要配置在ACL里面也可以访问。"interface": {"funasr": {"type": "funasr","engine": "sentence", //一句话"enable_itn":true,  //数字转换成阿拉伯数字"model-dir": "model/paraformer-large"//模型目录},"funasr_realtime": {"type": "funasr","engine": "2pass",//offline:关闭实时识别 online:开启实时识别  2pass:混合2种模式，需要更多CPU。"enable_itn":true,  //数字转换成阿拉伯数字 "model-dir": "model/paraformer-large","online-model-dir": "model/paraformer-large-online","punc-dir": "model/punc-realtime","chunk-size":4800 } },"groups":{//实时识别使用的ASR"default":{ "mode":0,  //0:顺序使用，当使用数量等于count的时候切换下一个  1:循环使用"enable": //启用的那些ASR配置["funasr_realtime"]},//一句话识别和文件识别使用的ASR"shortsentence":{"mode":0,"enable":["funasr"]}}}
}

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/137929.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

【科研绘图】MacOS上的LaTeX公式插入工具——LaTeXiT

【科研绘图】MacOS上的LaTeX公式插入工具——LaTeXiT

在Mac上经常用OmniGraffle绘图，但是有个致命缺点是没办法插入LaTeX公式，很头疼。之前有尝试用Pages文稿插入公式，但是调字体和颜色很麻烦。并且，PPT中的公式插入感觉也不太好看。 偶然机会了解到了LaTeXiT这个工具，可…
阅读更多...
thinkphp6 起步

thinkphp6 起步

1、安装 composer create-project topthink/think6.0 tp62、使用多应用模式，你需要安装多应用模式扩展think-multi-app composer require topthink/think-multi-app3、config/app.php中，将 ‘auto_multi_app’ > flase, 改为true； 需要自…
阅读更多...
QRadioButton、QCheckBox样式表

QRadioButton、QCheckBox样式表

QRadioButton、QCheckBox样式表 实现效果Chapter1 QRadioButton样式表详细描述示例效果源码样式表 Chapter2 QRadioButton样式表 实现效果 QRadioButton{spacing: 2px;color: white; } QRadioButton::indicator {width: 60px;height: 35px; } QRadioButton::indicator:unchecke…
阅读更多...
赛宁网安入选国家工业信息安全漏洞库（CICSVD）2023年度技术组成员单

赛宁网安入选国家工业信息安全漏洞库（CICSVD）2023年度技术组成员单

近日，由国家工业信息安全发展研究中心、工业信息安全产业发展联盟主办的“2023工业信息安全大会”在北京成功举行。 会上，国家工业信息安全发展研究中心对为国家工业信息安全漏洞库（CICSVD）提供技术支持的单位授牌表彰。北京赛宁…
阅读更多...
Spring -Spring之依赖注入源码解析（下）--实践（流程图）

Spring -Spring之依赖注入源码解析（下）--实践（流程图）

IOC依赖注入流程图 注入的顺序及优先级：type-->Qualifier-->Primary-->PriOriry-->name
阅读更多...
安全物理环境（设备和技术注解）

安全物理环境（设备和技术注解）

网络安全等级保护相关标准参考《GB/T 22239-2019 网络安全等级保护基本要求》和《GB/T 28448-2019 网络安全等级保护测评要求》 密码应用安全性相关标准参考《GB/T 39786-2021 信息系统密码应用基本要求》和《GM/T 0115-2021 信息系统密码应用测评要求》 1物理位置选择 1.1机房…
阅读更多...
XSS脚本（存储型xss获取肉鸡的cookies）

XSS脚本（存储型xss获取肉鸡的cookies）

XSS脚本（存储型xss获取肉鸡的cookies） 存储型XSS就是在能够提交上传的文本框中提交一些标签代码，这段代码被插入到页面中，肉鸡每次点击这个页面时都会有弹框弹出。（只要点击就会弹框） 反射性XSS顾名思义插入…
阅读更多...
python3GUI--PyQt5打包心得（二）nuitka、inno Setup（详细图文演示、附所有软件）

python3GUI--PyQt5打包心得（二）nuitka、inno Setup（详细图文演示、附所有软件）

文章目录 一．前言二．准备1.nuitka1.1介绍1.3项目地址1.3安装 2.mingw641.1介绍1.2下载安装 3.Inno Setup1.1介绍1.2安装 三．nuitka打包1.打包2.装mingw643.装ccahe4.打包完成 四．测试效果五．inno Setup制作安装软件1.配…
阅读更多...
计算机是如何进行工作的+进程和线程

计算机是如何进行工作的+进程和线程

一)计算机是如何工作的? 指令是如何执行的?CPU基本工作过程？ 假设上面有一些指令表，假设CPU上面有两个寄存器A的编号是00，B的编号是01 1)第一个指令0010 1010，这个指令的意思就是说把1010地址上面的数据给他读取到A寄存器里面 2…
阅读更多...
6.4翻转二叉树（LC226—送分题，前序遍历）

6.4翻转二叉树（LC226—送分题，前序遍历）

算法： 第一想法是用昨天的层序遍历，把每一层level用切片反转。但是这样时间复杂度很高。 其实只要在遍历的过程中去翻转每一个节点的左右孩子就可以达到整体翻转的效果。 这道题目使用前序遍历和后序遍历都可以，唯独中序遍历不方便&#x…
阅读更多...
ChatGPT、GPT-4 Turbo接口调用

ChatGPT、GPT-4 Turbo接口调用

接口地址 https://chat.xutongbao.top/api/light/chat/createChatCompletion 请求方式 post 请求参数 model可选值： “gpt-3.5-turbo-1106”、 “gpt-3.5-turbo-16k” 、 “gpt-4”、“gpt-4-1106-preview”。 默认值为： “gpt-3.5-turbo-1106” to…
阅读更多...
安卓常见设计模式4------原型模式（Kotlin版）

安卓常见设计模式4------原型模式（Kotlin版）

1. W1 是什么，什么是原型模式？ 原型模式（Prototype Pattern）用于创建对象的克隆副本，而无需依赖于显式的类实例化。原型模式可以帮助我们在创建对象时避免重复的初始化过程，通过复制一个现有对象来创建新的…
阅读更多...
编码规范集合

编码规范集合

文章目录 前言命名规范项目命名目录命名文件命名命名严谨性 HTML 书写规范结构、样式、行为分离缩进文件编码语义化IE 兼容模式viewport为移动端设备优化，设置可见区域的宽度和初始缩放比例iOS 图标favicon（网站图标，移动端默认可用于添加到桌…
阅读更多...
Wincc flexible SMART v4 报警蜂鸣器的基本使用方法示例

Wincc flexible SMART v4 报警蜂鸣器的基本使用方法示例

Wincc flexible SMART v4 报警蜂鸣器的基本使用方法示例 WinCC flexible SMART V4 SP1 软件针对SMART LINE V4 面板新增了触发蜂鸣器报警功能，但要注意该功能仅支持固件版本为 4.0.1.0 及以上的设备。 可通过配置以下两个系统函数来触发蜂鸣器： 举例说明： 组态离散量报警，在…
阅读更多...
快块手多功能全自动引流软件-引流工具-引流脚本-自动引流技术功能介绍

快块手多功能全自动引流软件-引流工具-引流脚本-自动引流技术功能介绍

脚本功能： 功能1_养号功能 功能2_评论区关注 功能3_评论区私信 功能4_评论区用户作品评论 功能5_评论区点赞 功能6_粉丝回关 功能7_自己粉丝私信 功能8_已关私信 功能9_好友私信 功能10_关键词搜索关注 功能11_关键词搜索私信 功能12_搜索ID关注 功能13_搜索ID私信…
阅读更多...
Unity 跑酷游戏全部脚本（完结）

Unity 跑酷游戏全部脚本（完结）

脚本1 触发器脚本 这个脚本是主角身上的脚本，用于检测是否碰到其他触发器，并做出对应的行为 using System.Collections; using System.Collections.Generic; using UnityEngine; public class ColliidisonTrigger : MonoBehaviour { //触发检测 …
阅读更多...
【开源分享】国内可用的免费安卓GPT语音助手 - 可音量键唤起，可联网

【开源分享】国内可用的免费安卓GPT语音助手 - 可音量键唤起，可联网

写在前面：这是一个我写的开源GPT语音助手，不收钱，只求Star! 简要介绍 这是一个基于ChatGPT的安卓端语音助手，允许用户通过手机音量键从任意界面唤起并直接进行语音交流，用最快捷的方式询问并获取回复 使用效果 一、基…
阅读更多...
【码银送书第十期】《强化学习：原理与Python实战》

【码银送书第十期】《强化学习：原理与Python实战》

目录 1.什么是人工智能对齐 2.为什么要研究人工智能对齐 3.人工智能对齐的常见方法 1.什么是人工智能对齐 人工智能对齐（AI Alignment）指让人工智能的行为符合人的意图和价值观。 人工智能系统可能会出现“不对齐”（misalign）的…
阅读更多...
.NET关于 跳过SSL中遇到的问题

.NET关于 跳过SSL中遇到的问题

一、事件的起因： 起因：开发项目过程中，可能会遇到 调用其他系统的接口 以及 代码中历史开发人员留下的IP接口访问等问题，后面该项目由自己负责，其他系统全部迁移到容器里面，只提供域名去访问。 问题：访问已迁移到容器其他系统，那么用IP地址访问肯定无法调用成功，只能用…
阅读更多...
liunx的启动过程

liunx的启动过程

1.国内的云服务器 腾讯云 阿里云 华为云 这些是vps 就是liunx远程 2.启动过程 内核的引导 操作系统 ---boot 系统 运行init sysv init centos5 配置文件 etc/inittab upstart init centos6 配置文件 etc/inittab systemd systemd centos7配置文件 …
阅读更多...
最新文章

Copyright @ 2022~2023