OpenAI实时API是一个改变游戏规则的技术。这里有一个条件。

OpenAI 实时 API 已经推出，我们有一个星期的时间来体验。正如我们在上周的文章中所建议的，这对于您的联系中心来说是一个重大改变，可能是联系中心 AI 的 iPhone 时刻，但事情并不像看起来那么简单。

我们的第一个观察是，对话人工智能现在已经是一个解决的问题！

以前要创建自然而引人入胜的对话体验是很困难的。除非你有100万美元和12个月的时间可以浪费，否则忘掉构建一个体验良好的自动化语音体验吧。不再是这样了。通过OpenAI的实时API游乐场或者在Microsoft Azure上完成同样的事情 - 我们更倾向于后者，因为有企业安全性的保证 - 你只需选择实时模型，输入一些指令，选择一个声音，连上你的AirPods，开始使用！

游戏改变者！但是...您不想提供一个“帮助人们查找信息的AI助手”。

您希望有一个可以找出您客户需求的人工智能代理：

回答他们的问题并将他们引导到合适的代理人或立即解决他们的问题。

为了回复您，您需要筛选正确的知识来源，消除信息冲突，并以一种AI代理可以使用的方式对其进行结构化。

为了为您提供路由服务，您需要训练AI代理以理解人们打电话的不同原因，提出澄清问题，并将与您的联系中心平台联系的人类接通连接。

为了解决问题，您需要详细规定AI代理需要实现的目标和关键结果，为每项任务提供标准操作程序，提供工具以完成任务，并指导代理如何执行所有这些操作。以正确的方式说正确的事情。

哦，你必须让你的AI代理抵抗恶意行为和意外失误。

不要误会我们，这仍然是一个改变游戏规则的东西。你现在实际上可以做到这一点。所有这些复杂性在仅仅2年前的AI技术中是无法实现的！

但是...你的客户并不是通过OpenAI或Azure AI游乐场与你交谈。他们打电话给你。因此，你需要将所有这些连接到你的CCaaS。

有点喧闹和一则炒作的新闻发布关于:

Twilio与OpenAI的实时API集成，用于构建对话式人工智能应用程序.

配套博客文章带您了解如何设置Twilio语音号码以接收电话，打开连接到OpenAI实时API，并开始实时对话！我们将博客输入ChatGPT，并让它指导我们完成步骤（如果您以前没有尝试过这个小技巧，请试一试，它会使教程变得更加有用和互动）。然后，我们用OpenAI o1-mini（OpenAI几周前发布的新代码推理模型）帮助我们扩展它，添加了一个漂亮的小GUI，让我们可以给任何人打电话。您看，人工智能不只是编写贪吃蛇游戏！

到目前为止一切都还不错。但是我们花了几天时间试图让它正确处理中断，最终只能准确地录制和存储对话。

您看，让人工智能做一些酷炫的事情是相当容易的。而且简单的编码在新的OpenAI模型和互联网上到处都有的入门教程的帮助下真的很容易。但是很快就会遇到障碍。我们甚至还没有考虑过保护、扩展、测试以确保它做正确的事情、进行红队渗透测试以确保它能够抵御恶意行为者，以及以支持持续监控、分析和改进的方式部署它，就像我们在我们的12步虚拟代理人小抄中所介绍的那样。

我们总是有点担心使用外部AI套件而不是直接使用AI技术，但Parloa团队提前访问了新的实时API，它在我们读完那个Twilio教程之前就集成到他们的平台中了！

下周更多关于他们开创性的工具的消息，我们将会推出一个令人兴奋的新语音人工智能代理，用于一个非常特殊的用例。敬请关注 😁.