摘要
本文介绍 Agora 对话式 AI 扩展正式登陆 Dify 市场。该扩展结合超低延迟网络与主流大语言模型,助力开发者在 Dify 生态中快速构建实时交互式语音 AI 智能体,降低开发门槛,提升应用体验。
轻松打造实时交互式语音 AI:Agora 对话式 AI 扩展现已登陆 Dify 市场

我们很高兴地宣布,Agora 对话式 AI 扩展现已作为插件正式上架 Dify 市场。它将强大的实时语音 AI 能力直接带给 Dify 生态中的开发者。此次合作将 Agora 在低延迟交互式 AI 解决方案上的专业经验,与 Dify 开放、社区驱动的插件市场相结合。开发者如今可以更加轻松地打造更智能、更具互动性的 AI 智能体。
Dify 市场:创新枢纽
我们在 v1.0.0 版本中推出了市场功能。依托开源 AI 应用开发平台,我们成功构建了一个蓬勃发展的生态系统。目前,市场已汇聚 120 多款插件,涵盖模型、工具、智能体策略、扩展和套件。这些资源将赋能开发者,助力您构建并规模化落地创新方案。凭借模块化架构、对开发者友好的工具,以及社区分享和本地部署等分发渠道,Dify 市场成为 Agora 对话式 AI 扩展的理想载体,将持续推动社区内的实时 AI 创新。

Agora 对话式 AI 扩展:赋能实时语音 AI
我们重点介绍现已上架 Dify 市场的 Agora 对话式 AI 扩展。该扩展功能强大,可帮助开发者构建实时、交互式的语音 AI 体验。开发者可接入多种主流大语言模型(LLM),结合业界领先的语音转文本技术,并自由选择顶级文本转语音(TTS)服务,轻松打造无缝衔接的语音 AI 智能体。
该扩展由 Agora 超低延迟软件定义实时网络(SD-RTN™)驱动。即使在网络条件不佳的情况下,也能提供极速响应与全球可靠的连接。借助快速、低代码的集成方式,开发者可直接在 Dify 内部部署虚拟助手或客服机器人等语音智能体。这将进一步丰富 Dify 生态,融入 Agora 全球规模、高品质的语音能力。
该扩展基于 Ten Framework 构建。这是一个由 Agora 支持并开源的框架与社区项目,专为开发对话式 AI 应用而生。
快速入门指南
在 Dify 上使用 Agora 对话式 AI 扩展非常简单。
步骤 1:安装扩展
进入 Dify 插件市场的探索页面。搜索并找到“Agora Conversational AI”扩展,点击安装即可。

步骤 2:确认安装
检查已安装的插件列表。您应该能看到该扩展已成功安装。

步骤 3:配置 Agora 账号
准备好您的 Agora 账号信息。
首先,登录 Agora 控制台。创建一个项目,并复制 App ID。请妥善保存,后续配置需要用到。如果您的项目启用了证书,也请一并保存。

接着,在对话式 AI 引擎中启用相关配置。如图所示,右侧会显示“active”(已启用)状态。

然后,在概览页面的“RESTful API”子页面中,创建对应的 RESTful API 密钥和密码。请妥善保存。


注意:您需要在 Agora 控制台中开启“Conversational AI”功能。
步骤 4:配置 TTS
该扩展支持两家 TTS 服务商:Microsoft Azure 和 Elevenlabs。请根据实际需求申请对应服务商的 API 密钥,并保存备用。
步骤 5:集成至 Dify
返回 Dify 界面。点击该扩展,在右侧面板选择“创建新的 API 端点”。按照指引输入相关参数。


您可以在 Dify 市场中该插件的 ReadMe 文件里,找到 TTS 参数的 JSON 格式示例(具体取决于服务商)。

保存配置后,您可通过以下 URL 打开演示页面:
https://<your Dify endpoint host>/convoai-web/index.html
如果您希望自定义 UI,也可以直接调用 API 来启动或停止智能体。API 参考文档请查阅此处。
应用场景:每日搜索助手
与传统高延迟的聊天机器人不同,实时通信(RTC)要求交互快速且自然。Agora 对话式 AI 扩展正是为此而生。
我们以 Dify 平台为例,构建了一个“每日搜索助手”应用。这款语音驱动的智能体就像一位博学的伙伴,能针对日常问题提供快速、简洁的回答。无论是“今天天气如何?”还是“怎么做一顿快手晚餐?”,它都能应对自如。

想象一下这个场景:您问:“附近有什么不错的咖啡店?”助手会立即用温暖且定制化的音色回复:“嘿,离这儿两条街就有一家叫 Brew Haven 的咖啡馆,非常适合快速提神!”依托 Agora 超低延迟的 SD-RTN™ 以及无缝衔接的语音转文本/文本转语音技术,即使在网络波动的情况下,助手也能实现实时响应。
当您的智能体或工作流在 Dify 中发布后,可通过端点面板微调设置。接入 Agora 扩展后,该助手将具备实时对话能力与可定制的音色,非常适合个人助理、客户服务或销售支持等场景。
完整演示视频请查看:AgoraDemoFinal.mp4
结语
Agora 对话式 AI 扩展登陆 Dify 市场,将实时、低延迟的语音 AI 能力带给广大开发者。这让交互式 AI 体验的门槛大幅降低。凭借无缝的集成方式与高品质的语音交互,此次合作将为打造更智能、更具吸引力的 AI 智能体铺平道路。立即尝试,让您的 AI 智能体真正“活”起来!
关于 Agora
Agora 是全球实时互动领域的领导者。我们为开发者提供简洁、灵活且强大的 API,助力将实时对话式 AI、语音、视频、互动直播和聊天功能嵌入各类应用与 IoT 设备。Agora 总部位于美国加利福尼亚州圣克拉拉,深受全球 1700 多家领先企业的信赖。其技术广泛应用于社交媒体、直播电商、在线教育及远程医疗等场景,打造行业顶尖的实时互动体验。如需了解更多,请访问:www.agora.io。
关于 Dify.AI
Dify.AI 正在革新 AI 原生应用开发。它提供开源平台,简化 AI 应用的创建、部署与管理全生命周期。凭借可扩展的插件生态,Dify.AI 帮助开发者与企业无缝集成 AI 能力、自定义工作流并加速创新。通过降低 AI 应用门槛,Dify.AI 赋能用户以更高效、灵活的方式构建智能应用。
官网 | GitHub | 文档 | X | Discord | LinkedIn | YouTube