算力资讯
算力资讯技术进展

OpenAI扩大实时语音模型能力:GPT-Live-1上线API,支持打断处理、工具调用和电话语音智能体

IT之家9月11日消息,OpenAI今日宣布将GPT-Live-1引入API,开发者可据此打造支持实时语音交互的应用和业务流程。该模型支持全双工对话,能够同时听取和输出语音,并在对话过程中处理打断、停顿及背景噪声。

GPT-Live-1还支持电话场景,可用于预订餐厅、客户服务等全双工语音智能体。OpenAI表示,开发者可以将其与Codex等工具连接,也可以通过OpenAI Presence开发能够查询企业系统、执行获批操作并在必要时转交人工的语音工作。

据介绍,GPT-Live-1将语音理解与语音输出整合在同一模型中,减少传统“语音转文字 — 大语言模型 — 文字转语音”的多次衔接,从而降低延迟。模型还支持将复杂推理和工具调用交由后端文本模型处理。

开发者可以通过系统提示词调整其语气、语速和对话风格,也可以配置后端模型、工具及智能体框架。

OpenAI表示,GPT-Live-1支持原生语音识别转写和回复文本,并具备字母数字理解、关键词偏置及轮次检测能力。

在早期评估中,语言学习平台Speak使用GPT-Live-1后,学习者思考停顿期间的误打断次数较此前基于轮次的系统减少近80%。医疗服务平台的联合创始人兼首席技术官Tony Stoyanov表示,其团队将代码量减少了80%,删除约2.3万行代码。

OpenAI公布的评测结果显示,GPT-Live-1在Full Duplex Bench测试中的表现比GPT-Realtime-2.1高出30个百分点,在搭配GPT-6 Astra中等推理强度时,Tau3端到端语音智能体任务测试排名第一。

目前,GPT-Live-1已在API中提供,前端语音层价格为每分钟0.05美元。按每小时60分钟计算,单纯前端语音层的费用约为3美元 (IT之家注:现汇率约合20.2元人民币) ,后端模型和智能体工具的费用另行计算。

OpenAI同时扩大了实时语音选项,新增Quartz、Ripple、Vesper、Willow、Stone、Gleam、Meridian、Bossa、Tempo、Beacon、Delta和Cinder等声音,并计划在未来数月继续增加语音和语言支持。

软媒旗下网站:

IT之家

最会买- 返利返现优惠券

iPhone之家

Win7之家

Win10之家

Win11之家

软媒旗下软件:

软媒手机APP应用

魔方

最会买

要知

转载说明引用来源:IT之家引用网址:https://www.ithome.com/1/001/091.htm