Skip to content

ADK 中的双向流式处理（实时）

Supported in ADKPython v0.5.0Experimental

ADK 中的双向流式处理（实时）为 AI 智能体添加了 Gemini Live API 的低延迟双向语音和视频交互能力。

实验性预览版

双向（Bidi）流功能属于实验性功能。

通过双向流式处理（实时）模式，你可以为终端用户提供自然的、类似人类的语音对话体验，包括用户能够通过语音命令中断智能体响应的能力。具有流式处理的智能体可以处理文本、音频和视频输入，并且可以提供文本和音频输出。

Info

This is different from server-side streaming or token-level streaming. Token-level streaming is a one-way process where a language model generates a response and sends it back to the user one token at a time. This creates a "typing" effect, giving the impression of an immediate response and reducing the time it takes to see the start of the answer. The user sends their full prompt, the model processes it, and then the model begins to generate and send back the response piece by piece. This section is for bidi-streaming (live).

  • 快速入门（流式处理）

    在此快速入门中，你将构建一个简单的智能体，并使用 ADK 中的流式处理来实现低延迟和双向语音与视频通信。

  • 快速入门（双向流式处理）

  • 自定义音频流式处理应用示例

    本文概述了使用 ADK 流式处理和 FastAPI 构建的自定义异步 Web 应用的服务器和客户端代码，实现通过 WebSocket 的实时、双向音频和文本通信。

  • 双向流式处理开发指南系列

    一系列文章帮助你深入了解使用 ADK 进行双向流式处理开发。你可以学习基本概念和用例、核心 API 以及端到端应用程序设计。

  • 双向流式处理开发指南系列：第 1 部分 - 介绍

  • 流式处理工具

    流式处理工具允许工具（函数）将中间结果流式传输回智能体，智能体可以对这些中间结果做出响应。例如，我们可以使用流式处理工具来监控股票价格的变化，并让智能体对此做出反应。另一个例子是，我们可以让智能体监控视频流，当视频流中有变化时，智能体可以报告这些变化。

  • 流式处理工具

  • 自定义音频流式处理应用示例

    本文概述了使用 ADK 流式处理和 FastAPI 构建的自定义异步 Web 应用的服务器和客户端代码，实现了使用服务器发送事件（SSE）和 WebSocket 的实时双向音频和文本通信。

  • 流式处理配置

  • 博客文章：Google ADK + Vertex AI Live API

    本文展示了如何在 ADK 中使用双向流（实时）进行实时音视频流传输。它提供了一个使用 LiveRequestQueue 构建自定义交互式 AI 智能体的 Python 服务器示例。

  • 博客文章：Google ADK + Vertex AI Live API

  • 博客文章：使用 Claude 代码技能加速 ADK 开发

    本文演示了如何使用 Claude 代码技能来加速 ADK 开发，以构建双向流式聊天应用为例。学习如何利用 AI 驱动的编码辅助来更快地构建更好的智能体。