news 2026/9/14 19:13:52

DPO-Tuned Large Language Models for Segmentation in Simultaneous Speech Translation

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
DPO-Tuned Large Language Models for Segmentation in Simultaneous Speech Translation

该文章提出了一种基于直接偏好优化(DPO)微调大型语言模型(LLMs)的同步语音翻译(SimulST)分割框架,解决了现有分割模型缺乏人类偏好对齐的问题,在翻译质量和延迟平衡上表现更优。

一、文章主要内容总结

  1. 研究背景:同步语音翻译需通过精准分割平衡翻译质量与延迟,现有模型(如SHAS)依赖监督学习目标,未融入人类偏好对齐,难以满足实时自然翻译需求。
  2. 核心方法:构建以Qwen2.5-Omni-3B为基础的LLM分割框架,通过DPO进行微调;从CoVoST2语料库构建约8000个偏好对(结合VAD、固定长度分割等策略生成候选分割,按翻译质量和延迟排序),将分割模块与SeamlessM4T v2翻译骨干集成。
  3. 实验设计:在ACL 60/60语料库的英日、英中、英德三种语言对上评估,以固定长度分割、VAD分割、SHAS为基线,采用BLEU(翻译质量)和Streaming LAAL(延迟)为指标。
  4. 实验结果:DPO微调的LLM分割框架在三种语言对上均优于基线,如英德方向BLEU达25.5(SHAS为23.6),平均比SHAS提升约1.5个BLEU,延迟仅增加约100ms;在延迟-质量权衡上,该方法始终优于其他策略。
  5. 局限性:仅评估三种语言对,泛化性待验证;3B参数LLM增加计算开销,不利于资源受限设备部署;部分延迟阈值下BLEU波动,分割稳定性需提升;未进行人工评估。

二、文章创新点

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/9/14 19:11:46

Java EE银行转账业务开发与事务管理实战

1. Java EE银行转账业务开发概述银行转账业务作为金融系统的核心功能之一,在Java EE体系中的实现涉及事务管理、数据一致性、并发控制等关键技术要点。本章将基于Java EE 3规范,从零开始构建一个完整的银行转账模拟系统,重点解析在没有使用MV…

作者头像 李华
网站建设 2026/9/14 19:10:21

数字时代个人知识管理:日记系统的实践与优化

1. 项目概述"1.31日记"这个看似简单的标题背后,隐藏着许多值得探讨的可能性。作为一位长期记录工作与生活的实践者,我深知日记不仅是个人记忆的载体,更是知识管理的重要工具。这个日期标记的项目,可能涉及多种形式的记录…

作者头像 李华