Pipecat 实时语音助手快速入门3 条命令搭出会说话的 AI 机器人【免费下载链接】pipecatOpen Source framework for voice agents, multimodal apps, and realtime AI. Maintained by Daily and the community.项目地址: https://gitcode.com/GitHub_Trending/pi/pipecat你打开网页对着麦克风说帮我把这段话翻译成英文不到一秒自然的女声已经把译文读了出来你中途插一句慢一点它立刻掐断自己的播报按新要求重说。这种边听边说、随时可打断的体验来自开源 Python 框架 Pipecat 里一条最普通的流水线而不是某个闭源产品的私有功能。Pipecat 由 Daily 团队和社区共同维护把 STT、大模型、TTS 和音视频传输串成可插拔的模块本文带你从 3 条命令开始把它跑起来。Pipecat 安装与初始化最短路径跑起来需要 Python 3.11 以上推荐 3.12。最短路径走官方 CLI两条命令装好并初始化项目这段命令先安装 Pipecat CLI再交互式创建项目会问你机器人类型电话或网页和想用的服务生成带前端页面的可运行 bot。uv tool install pipecat-ai[cli] pipecat init不想用 CLI 也行pip install pipecat-ai或uv add pipecat-ai然后cp env.example .env填入 API key。建议你现在就打开 examples/getting-started/ 目录从 01 的一行音频播到 06 的完整语音助手逐个对照着跑。它是怎么工作的一句话进一句话出你说一句话它在流水线里依次经过五步传输层Daily 或 LiveKit 的 WebRTC或 WebSocket收到你的麦克风音频流STT 服务把音频流式转成文字聚合器配合 VAD 分析器默认 Silero判断用户开始说话和用户说完了控制 LLM 何时启动LLM 生成回复TTS 把回复逐段转成音频传输层把音频播回给你同时把内容记入对话上下文。关键是每个组件只处理一种帧帧数据靠一个列表串起来。你把 STT 换成别家其余一行不用动想加过滤器或分类器也是往列表里插一项。打断同样走这套机制——VAD 判定你再次开口传输层就停止 TTS 正在输出的内容。想对照源码理解读 examples/getting-started/06-voice-agent.py 并和上面五步一一对应即可。多模态是同一条流水线音频帧、视频帧、文字帧走同一条链examples/vision/ 里有让 bot 看图描述的例子。组件怎么选STT、TTS、LLM 与传输层对照表表中服务全部出自 README 的服务清单任意环节都可以自由混搭环节常见选择什么时候选它STT 语音识别Deepgram、OpenAIWhisper、Azure、Google、Groq按语言覆盖和延迟选云端要纯离线用本地 WhisperTTS 语音合成ElevenLabs、Cartesia、Azure、Google、Kokoro要真人感选 ElevenLabs/Cartesia要免费本地选 KokoroLLM 大模型OpenAI、Anthropic、Gemini、Groq、Ollama按已有 API key 和成本选Ollama 可完全离线传输层DailyWebRTC、LiveKitWebRTC、FastAPI WebSocket、Twilio/Telnyx/Vonage 序列化器网页端选 Daily/LiveKit纯数据交换选 WebSocket做电话机器人选序列化器选型时可以照这个顺序做先定传输层声音从哪进、从哪出再按已有 key 和预算挑其余三项。实战案例搭一个网页语音接待员以 06-voice-agent.py 为底Deepgram 做 STTOpenAI 做 LLMCartesia 做 TTSDaily WebRTC 做传输。整文件的核心就是下面这段流水线其余都是读 key、注册事件这段代码组装一条完整的听—想—说流水线把三个 key 换成自己的就能跑起来。pipeline Pipeline([ transport.input(), # 接收麦克风音频 DeepgramSTTService(api_keyDEEPGRAM_KEY), # 语音转文字 user_aggregator, # 判断你是否说完了 OpenAILLMService(api_keyOPENAI_KEY), # 生成回复 CartesiaTTSService(api_keyCARTESIA_KEY), # 回复转语音 transport.output(), # 把语音播给你 assistant_aggregator, # 记录 bot 说了什么 ])多轮记忆由 LLMContext 承载user_aggregator 把你的话接进去assistant_aggregator 记录 bot 的播报人设在 OpenAILLMService.Settings 的 system_instruction 里定义写上回复会被朗读避免列表和格式符号LLM 就不会输出读不出来的 Markdown。避坑指南延迟、成本与打断处理延迟是四段之和先确认所选 STT 和 TTS 都支持流式示例默认服务都支持再确认供应商区域离你近。PipelineParams 默认 audio_in_sample_rate16000、audio_out_sample_rate24000中途别自己多做重采样。成本不透明给 PipelineParams 传 enable_usage_metricsTrue 和 enable_metricsTrue就能看到每次对话的 token 与音频用量开发期可临时换小模型examples/features/features-service-switcher.py 演示了运行中替换服务。打断太敏感或被忽略打断由 VAD 驱动误触发可以给聚合器的 UserTurnStrategies 加 MinWordsUserTurnStartStrategy(min_words3) 门槛现成写法见 examples/turn-management/turn-management-interruption-config.py。抢答或该答不答这是 turn 起止策略问题examples/turn-management/ 下有过滤不完整句子、检测用户空闲等成套示例可直接抄参数。别忘了 VAD 不花钱SileroVADAnalyzer 内置本地运行不需要额外买服务。Pipecat 适合谁以及下一步如果你有基础 Python 能力想做语音助手、电话机器人或语音多模态演示Pipecat 值得先跑通一遍如果你只需要文本问答、没有实时音频需求直接用普通 LLM API 更直接不必引入流水线。下一步可以去三个地方examples/按类别分好的示例voice/、transcription/、realtime/、function-calling/、multi-worker/填好 key 即可运行docs/api/API 参考含 Makefile 和 conf.py可在本地构建文档COMMUNITY_INTEGRATIONS.md社区集成清单以及自己写一个服务适配器的方法。【免费下载链接】pipecatOpen Source framework for voice agents, multimodal apps, and realtime AI. Maintained by Daily and the community.项目地址: https://gitcode.com/GitHub_Trending/pi/pipecat创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
企业数字化 ERP 产品动态
相关推荐
Monaspace 等宽字体安装教程:三步开启纹理修复,让代码更好读 Monaspace 等宽字体安装教程:三步开启纹理修复,让代码更好读 【免费下载链接】monaspace An innovative superfamily of fonts for code 项目地址: https://gitcode.com/gh_mirrors/mo/monaspace
你一定在等宽字体里发现过这个问题:i、… · 2026/11/19 6:56:47
Automa 浏览器扩展自动化:从克隆源码到加载进浏览器的完整上手指南 Automa 浏览器扩展自动化:从克隆源码到加载进浏览器的完整上手指南 【免费下载链接】automa A browser extension for automating your browser by connecting blocks 项目地址: https://gitcode.com/gh_mirrors/au/automa
Automa 是一款做浏览器自动化的扩展… · 2026/11/16 15:11:10
Nuxt Studio 进化史:从付费托管平台到免费开源 Nuxt 模块,完整复盘 10 个关键里程碑 【免费下载链接】nuxt-studio Edit your Markdown website, in production. 项目地址: https://gitcode.com/gh_mirrors/nu/nuxt-studio 点击查看 免费下载 Nuxt Studio 是专为 Nuxt Content 网站打造的在线视觉内容编辑器,如今已演进为一个免费、开源、… · 2026/11/15 18:10:58
挂电工证多少钱 在哪考不踩坑的避坑指南 挂电工证多少钱 在哪考不踩坑的避坑指南 怕考不过白交培训费?别急,先看清楚这些细节,再决定要不要花这笔钱。电工证作为特种作业操作证中非常重要的一类,不管是低压还是高压,它不仅关系到个人职业发展,也直接影响到工作安全和企业合规。很多人在报考电… · 2026/11/19 6:56:35
电工证是几寸的照片良心建议:别让培训费打水漂 电工证是几寸的照片良心建议:别让培训费打水漂 怕考不过白交培训费?别急,电工证是几寸的照片这事,其实没你想的那么复杂,关键是你得知道怎么准备、怎么避坑。今天从南阳市政公用工程从业者的角度出发,给你讲讲电工证照片标准、报考条件、考试难度,还有… · 2026/11/19 6:56:35
扬州老虎山路考电工证官方报名入口怎么找才靠谱 扬州老虎山路考电工证官方报名入口怎么找才靠谱 实操考试心里没底怕挂科,这是很多准备在扬州老虎山路考电工证的学员真实的心声。特别是像平顶山的在职建筑工人,往往时间紧张、经验不足,对考试流程和通过率更是心中没底。但好消息是,只要你掌握了正确的报… · 2026/11/19 6:56:35
临沧高级电工证查询 2026河南最新政策怎么影响你在外省的证? 临沧高级电工证查询 2026河南最新政策怎么影响你在外省的证? 之前考的证在外省能不能转过来,这是很多特种作业从业者问得最多的问题,特别是在2026河南最新政策出台后,不少在外省工作的朋友开始担心自己的证书还能不能用。别急,今天就带你从临沧… · 2026/11/19 6:56:35
高级电工证能挂靠千万别踩坑:转岗从业者怎么选培训机构 高级电工证能挂靠千万别踩坑:转岗从业者怎么选培训机构 证书过期了不知道怎么复审延期,这事儿真不是小事,尤其是像我们这种从商丘转岗过来的电工,手里拿着高级电工证,本来想着能多接点活、多赚点钱,结果一不小心证书就过期了,那可就麻烦了。… · 2026/11/19 6:55:35
长春初级电工证怎么考?通过率揭秘全在这里 长春初级电工证怎么考?通过率揭秘全在这里 之前考的证在外省能不能转过来?这几乎是每个想从事电工工作的人都会问的问题。特别是那些在外地打拼多年、手里握着一张“外地电工证”的人,到了长春想继续干这一行,第一反应就是“我的证能用吗?”。今天我们就… · 2026/11/18 8:19:55
国内电工证报考条件与考试时间 低压电工证怎么考?学历不高也能报名,官方报名入口全在这 你是不是经常听说“电工证是入行门槛”,但又担心自己学历不够、经验不足,根本报不了名?别急,今天就带你从零了解【国内电工证】的报考流程、考试内容,还有怎么在 官方报名入口… · 2026/11/18 8:19:53
电工作业时如何断电?电子证书到底能不能全国通用? 电工作业时如何断电?电子证书到底能不能全国通用? 实操考试心里没底怕挂科,特别是电工作业时如何断电这一操作,不仅关系到你能不能拿到证书,更关系到以后能不能顺利上岗。很多人觉得这不过就是“断个电”,但其实这里面的门道可不少,稍有不慎就可能出错… · 2026/11/18 14:38:14
姑苏区哪里考电工证好考前押题怎么找 姑苏区哪里考电工证好考前押题怎么找 工地太忙根本没时间复习考试,电工证考前还总找不到靠谱的 考前押题 资源,真让人头疼。如果你也是在苏州姑苏区从事建筑或电力行业的,那这些建议你一定要看完。 为什么姑苏区考电工证的人这么多?… · 2026/11/19 0:00:12
罗定能考电工证吗?外省证转过来流程全解析+郑州报考避坑指南 罗定能考电工证吗?外省证转过来流程全解析+郑州报考避坑指南 之前考的证在外省能不能转过来?这几乎是每个特种作业证书持有者都会遇到的问题,特别是像你这样已经在外地工作多年,想回老家罗定发展或者重新规划职业路径的人。别急,今天就给你一条清晰的路… · 2026/11/19 0:00:12
罗定能考电工证吗 电工证含金量到底有多少? 罗定能考电工证吗 电工证含金量到底有多少? 之前考的证在外省能不能转过来,这几乎是每个准备考电工证的朋友最先想到的问题。特别是在罗定这样的地方,很多人的电工证都是在外地考的,现在想在当地继续使用,但不知道怎么办。实际上,电工证的 含金量… · 2026/11/19 0:00:12
双极步进电机控制实战:DRV8818PWPR与PIC18F86K22驱动调试 /* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/19 6:33:25
STM32F207ZG + DRV8818PWPR 步进电机驱动实战解析 /* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/19 6:33:32
DRV8818PWPR+dsPIC30F4013工业级双极步进电机控制方案 /* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/19 0:22:38