智能体能够识别用户当前的情绪，并做出带有情感色彩的回应。
Native&Web
2024-12-31
一键上报优化
优化Demo中一键上报位置不明显问题。
STT节点配置优化
控制台
TTS节点配置优化
支持TTS节点默认音色的语速、音调和试听。
智能体创建优化
WebDemo
支持移动端WebDemo体验。
Web
2024-11-15
自定义智能体形象
您可以为所创建的智能体上传一张图片，以便在语音通话场景中展示该智能体的形象。
百炼平台对接
您可以百炼平台发布的AI实时互动应用。
2024-11-30
真人接管
在用户与智能体进行交互时，如遇无法处理的情况或需作出关键决策时，可以选择由真人进行接管以作出决策。
API
离线唤醒
您可以通过语音唤醒智能体。
音色复刻
您可以使用CosyVoice进行音色复刻。
视觉理解通话
通过视频方式与智能体进行直接交互，智能体通过分析视频内容进行识别与解释。
2024-10-31
对讲机模式
用户可以在启动或者通话中设置通话模式为对讲机模式，通过按下按钮与智能体进行交互。
声纹降噪
在多人交谈的场景中，智能体通过识别主讲人的声纹特征，更加精确地捕捉和保留主讲人的语音，同时降低对无关噪音的干扰。
Native
STT/TTS对接百炼
STT/TTS节点支持百炼大模型。
实时字幕优化
开启智能断句时，实时字幕显示问题优化。
数字人通话优化
数字人并发路数、形象、实时字幕问题优化。
2024-09-15
智能断句
智能体能够自动识别并分割长句或复杂句，以提升文本的可读性和用户体验。
2024-09-27
短信验证
数字人通话
WebDemo支持数字人通话。
用量统计
您可以在控制台查看AI实时互动服务的用量。
AICallKitSDK
通过集成AICallKitSDK您可以快速开发AI实时互动能力。
TTS三方插件
TTS工作流节点支持MiniMax第三方插件接入。
2024-08-16
STT三方插件
STT工作流节点支持讯飞第三方插件接入。
优雅下线
当需要停止智能体任务时，可以允许智能体任务在完成当前内容输出后再进行停止，以避免对话出现生硬的中断。
Native&API
服务端回调
将智能体的运行状态实时回调给客户。
AI实时互动上线WebDemo。
2024-08-31
AI实时互动支持数字人通话类型。
ASR热词
AppServer
您可以参考AI实时互动服务端源码，将AI实时互动服务端实现集成到您的工程中。
实时通话
2024-07-31
实时工作流
您可以使用白屏化的方式，灵活地编排智能体AI的工作流程。
智能打断
AI智能体智能识别用户的对话打断意图。
智能降噪
AI智能体将自动过滤对话过程中用户侧产生的嘈杂音。当用户侧有多个人同时说话时，将优先采集音量最大的人声。
AI智能体状态
提供AI智能体状态的实时信息：
实时字幕
AI智能体和用户的对话信息将会被实时转换成文字，并由客户端进行展示。
欢迎词
您可以在用户与AI智能体开始对话时设置欢迎词。
控制台&API
数据归档
用户和AI智能体的通话信息可以被分段归档存储到对象存储OSS。