【MXGS-577】人妻女雀士～AV初出演ドキュメント～雪菜</a>2013-11-16マキシング&$MAXING118分钟阿里通义开源音频谈话模子Qwen2-Audio

8月13日，记者了解到【MXGS-577】人妻女雀士～AV初出演ドキュメント～雪菜2013-11-16マキシング&$MAXING118分钟，阿里通义大模子连接开源，Qwen2系列开源家眷新增音频谈话模子Qwen2-Audio。

据悉，Qwen2-Audio可以不需文本输入，径直进行语消息答，默契并分析用户输入的音频信号，包括东说念主声、当然音、音乐等。该模子在多个泰斗测评中都显耀特等先前的最好模子。通义团队还同步推出了一套全新的音频默契模子测评基准，相干论文已入选本周正在举办的国外顶会ACL 2024。

Qwen2-Audio是一款大型音频谈话模子（Large Audio-Language Model ，LALM)，具备语音聊天和音频分析两种使用步地，前者是指用户可以用语音向模子发出提示，模子无需自动语音识别（ASR）模块就可默契用户输入；后者是指模子大要把柄用户提示分析音频信息，包括东说念主类声息、当然声息、音乐或者多种信号搀杂的音频。Qwen2-Audio大要自动达成两种步地的切换。Qwen2-Audio撑握跳跃8种谈话和方言，如华文、英语、法语、意大利语、西班牙语、德语、日语，粤语。

把柄Qwen2-Audio手艺讲述，性吧Qwen2-Audio的模子结构包含一个Qwen大谈话模子和一个音频编码器。在预锻真金不怕火阶段，次序进行ASR、AAC等多任务预锻真金不怕火以达成音频与谈话的对王人，接着通过SFT（监督微调）强化模子管束下流任务的智力，再通过 DPO（径直偏好优化）措施加强模子与东说念主类偏好的对王人。

此外，通义团队同步开源了基础模子 Qwen2-Audio-7B 过头提示奴隶版块Qwen2-Audio-7B-Instruct，用户可以通过Hugging Face、魔搭社区ModelScope等下载模子，也可以在魔搭社区“创空间”径直体验模子智力。

举报第一财经告白互助，请点击这里此现实为第一财经原创，文章权归第一财经所有。未经第一财经籍面授权，不得以任何形势加以使用，包括转载、摘编、复制或成就镜像。第一财经保留细致侵权者法律牵累的权益。如需获取授权请推敲第一财经版权部：021-22002972或021-22002335；banquan@yicai.com。文章作家