Cloudflare 推出实时语音 AI 平台：Realtime Agents

cloudflare 宣布推出实时语音 ai 平台（cloudflare realtime agents），正式进军低延迟对话式 ai 领域。该平台依托 cloudflare 全球 330 多个节点的边缘网络，为开发者提供构建语音交互应用的完整解决方案。

新平台的核心组件包括 Realtime Agents（语音 AI 管道编排运行时）、WebRTC 音频传输支持、Workers AI 的 WebSocket 实时推理 以及 Deepgram 的语音识别/合成模型。通过这些功能，开发者可快速搭建自然流畅的语音代理应用。

下面的示例代码展示了如何创建一个继承自

RealtimeAgent

• 创建 WebRTC 会话

• 管道编排（如：Deepgram STT → 自定义文本处理 Handler → ElevenLabs TTS）

  小云雀

  剪映出品的AI视频和图片创作助手

  1949 查看详情

• 支持会议参与者加入/离开的事件处理
  这让开发者几乎不需管理底层基础设施，就可快速构建个性化语音代理应用。

export class MyAgent extends RealtimeAgent<Env> {
	constructor(ctx: DurableObjectState, env: Env) {
		super(ctx, env);
	}

	async init(agentId: string ,meetingId: string, authToken: string, workerUrl: string, accountId: string, apiToken: string) {
		// Construct your text processor for generating responses to text
		const textHandler = new MyTextHandler(this.env);
		// Construct a Meeting object to join the RTK meeting
		const transport = new RealtimeKitTransport(meetingId, authToken, [
			{
				media_kind: 'audio',
				stream_kind: 'microphone',
			},
		]);
		const { meeting } = transport;

		// Construct a pipeline to take in meeting audio, transcribe it using
		// Deepgram, and pass our generated responses through ElevenLabs to
		// be spoken in the meeting
		await this.initPipeline(
			[transport, new DeepgramSTT(this.env.DEEPGRAM_API_KEY), textHandler, new ElevenLabsTTS(this.env.ELEVENLABS_API_KEY), transport],
			agentId,
			workerUrl,
			accountId,
			apiToken,
		);

		// The RTK meeting object is accessible to us, so we can register handlers
		// on various events like participant joins/le*es, chat, etc.
		// This is optional
		meeting.participants.joined.on('participantJoined', (participant) => {
			textHandler.speak(`Participant Joined ${participant.name}`);
		});
		meeting.participants.joined.on('participantLeft', (participant) => {
			textHandler.speak(`Participant Left ${participant.name}`);
		});

		// Make sure to actually join the meeting after registering all handlers
		await meeting.rtkMeeting.join();
	}

	async deinit() {
		// Add any other cleanup logic required
		await this.deinitPipeline();
	}
}

Cloudflare 指出，要让语音交互达到“自然对话”的体验，总延迟需低于 800 毫秒，而其分布式边缘架构正好能满足这一苛刻要求。平台同时兼容多种 AI 模型和第三方服务，支持高度可组合的语音处理管道。

目前，Cloudflare Realtime Agents 已开放 Beta 公测，开发者可免费试用并基于该平台开发新一代实时语音 AI 应用。

以上就是Cloudflare 推出实时语音 AI 平台：Realtime Agents的详细内容，更多请关注其它相关文章！

# java  # 相关文章  # 多个  # 这一  # 边缘  # 多语言  # 开发工具  # 将在  # speak  # red  # ai  # access  # javascript  # 微软  # 钟声音效网站建设  # 网贷平台seo方案  # 福建建筑网站建设  # 网络小说推广营销  # 南京关键词优化seo  # 河源网站建设品牌  # 门店营销推广活动方案  # 北京优秀营销推广  # 营销推广体验  # 德城区网站优化哪家好些  # 就可  # 中文网 

相关栏目： 【 行业新闻62819 】 【 科技资讯67470 】

相关推荐： 泗洪：畅通城市“血管” ，管下机器人来帮忙  OpenAI 为开发者推出 GPT 聊天机器人 API 大更新，同时降低价格  全媒封面丨⑤商汤科技：原创AI算法“发电厂”  650亿参数，8块GPU就能全参数微调：邱锡鹏团队把大模型门槛打下来了  陈根：ChatGPT和人类合作开发机器人  英媒：硅谷有些人太鼓吹AI，宣扬“学习无用”  百川智能发布Baichuan-13B AI模型，号称“130亿参数开源可商用”  贫穷让我预训练  沐曦首款AI推理GPU亮相：INT8算力达160TOPS！  读创正式上线“读创AI聊”功能  首届全国体育人工智能大会在首都体育学院召开  世界人工智能大会|“AI领航，共筑未来”高端保险论坛成功举办  彭博社：苹果Vision Pro曾测试VR手柄追踪方案  IBM和NASA合作发布可追踪碳排放的开源AI基础模型  海南科技职业大学第25届中国机器人及人工智能大赛海南赛区荣获一等奖等114项  选对AI智能写作软件，让创作游刃有余！  Meta 开源 AI 语言模型 MusicGen，可将文本和旋律转化为完整乐曲  OpenAI大神Karpathy最新分享：为什么OpenAI内部对AI Agents最感兴趣  对话式论文阅读工具PaperMate上线，综述细节AI告诉你  AI赋能艺术 超现实达利奇幻之旅在沪开启  OpenAI高管：AI能创造新的就业机会 但也会淘汰一些  “痴迷”元宇宙，魔珐科技想做什么？  英特尔张宇：边缘计算在整个AI生态系统中扮演重要角色  DreamAvatar数字人使用教程  元宇宙技术带你穿梭“大运河”，江苏书展上的数字阅读馆吸睛小读者  微幼科技晨检机器人与人工晨检相比，有何优势  AI在教育中的角色：AI如何改变我们的学习方式  利好来了，AI再起一波？  扎克伯格吐槽苹果Vision Pro：社交落后Meta太多，无法建设元宇宙  AI室内设计软件流行，室内设计行业如何应对效率变革  苹果CEO库克：持续研究生成式人工智能技术  优化J*a与MySQL合作：分享批处理操作的技巧  人工智能在商业中的风险和局限性  周星驰支持的人工智能与 Web3 初创公司 Moonbox 完成 100 万美元融资  为了避免人工智能可能带来的灾难，我们要向核安全学习  OpenAI宣布在伦敦设立海外分部，要招揽“世界级人才”  普渡机器人与变形金刚品牌合作，特别活动爆火，商品售罄！  “踩油门，也要会踩刹车” 互联网企业高管谈人工智能发展  微软推出人工智能模型 CoDi，可互动和生成多模态内容  数字彩排、虚拟建厂！这家顶级洗衣机工厂敲开“工业元宇宙”之门  智能技术提高现代商业运营的7七种方式  阿里达摩院发布免费开放100项AI专利许可的动机是什么？  AI立法迫在眉睫，如何看对行业影响？  Databricks推出人工智能模型共享机制，可令开发者与公司“双赢”  【趋势周报】全球元宇宙产业发展趋势：ChatGPT的出现，将元宇宙实现至少提前了10年  美版贴吧8000小组自爆停摆！拒绝数据被谷歌OpenAI白嫖，CEO被网友骂翻：背刺第三方应用  引领AI变革，九章云极DataCanvas公司重磅发布AIFS+DataPilot  全新升级的广州麦当劳：面积最大餐厅正式引入智慧机器人  世界人工智能大会（WAIC 2025）点燃魔都，博尔捷数字科技携前沿技术产品亮相  争鸣：OpenAI奥特曼、Hinton、杨立昆的AI观点到底有何不同？