进行Chatbot调优的时间
简介：  现在您有一些时间进行内省，如何查看聊天机器人的性能呢。
这个锁定期可能使您比以前拥有更多的内省和观察时间。让我建议，这是个很好的时机，看看您的聊天机器人的性能如何以及如何改进它们。
不存在竞争的KPI来衡量绩效，因此让我们关注那些最有可能标记问题的KPI和在所有情况下都无法正常工作的KPI。
从头开始–成功率
无论您称这个目标完成率还是自助服务率，都意味着您的客户最终得到了他所追求的目标而没有被介绍给别人。具体细节将根据Bot的目标而有很大不同。
服务机器人的响应可以是简短的或多步的。它可能只需要一两个步骤就可以返回有关帐户余额或特定日期的可用约会时间的信息。但是，那些处理更复杂的操作方法（尤其是在技术方面）的方法可能会具有较高的升级率，从而导致转而引用人类CSR。
服务机器人通常试图解决客户问题，这从一开始就意味着一定程度的客户不满或加剧。另一方面，商务机器人正在响应积极性更高的用户。但是，他们可能需要更多的交互步骤，以使用户与正确的服务或产品相匹配，这也会带来麻烦。
可以从成功下订单或使用服务中看到Commerce Bot的成功率。另一方面，服务机器人的测量可能比较棘手。为您的用户提供一个机会，可以在会议结束时对他们的体验进行评分，或者只是询问他们的问题是否已得到令人满意的解决，这总是一个好主意。拥有四星级或五星级评级是一件好事。但是，它可能也掩饰了不满意的用户的高放弃率，他们从不愿意为您提供低评级的真实反馈。
保留率，单个用户返回使用您的Bot的频率和使用间隔时间被认为是Commerce Bot的一个很好的衡量标准，但对于频繁重复使用可能表明存在问题的Service Bot则不一定。
如果您使用的是保留率，请务必查看所测量的时间范围。例如，如果Bot是用于游戏或音乐选择，则您可以正确地假设像7天这样的短时间范围是合适的，因为您可能会提高用户的每日回报。另一方面，如果您的Bot专注于显示就业机会，则您可能需要测量更长的时间，例如30天，因为用户可能需要花费很长时间来评估和申请首次提出的工作，然后才能返回寻找更多。
问题KPI的类型
回退响应或混乱率KPI是开始寻找改进机会的好地方。当您的Bot无法理解用户输入并且必须要求提供其他信息，或者更糟的是根本无法响应时，这两个术语都描述了类似的情况。
显然，根本没有回应就是明显的失败。但是，以无休止的请求更多信息或“对不起，我听不懂”的响应来吸引客户也同样糟糕。
这些可能是NLP失败，但它们也可能表示您的响应策略的一部分不再起作用，这可能是因为客户需求已更改，产品或服务已更改，或者完全是新问题类型浮出水面。
长时间的对话是好的，对吗？
不必要。根据Bot的目的，更长的会话时间和每次会话更多的步骤被视为成功的衡量标准。但是，这里的一些统计见解可以大有帮助。
在按类型对交互进行聚类之后，检查那些特别长或特别短的交互很有用。很短的那些实际上可能是用户遗弃。
更长的也值得研究。您的客户是否陷入不满意的循环？您的Bot是否需要太多澄清的问题？您的用户是否重复相同的问题？
即使您的用户经过超长的会话最终成功获得了所需的信息，客户对您的Bot的不良体验也可能阻止他们下次再次返回。
自愿使用与即时使用
在自愿使用中，您的客户发起与Bot的交互，而不是由Bot提示进行通信。自愿使用率和良好的保留率可以很好地表明您的Bot运作良好并受到用户欢迎。
每小时使用量分布
您采用聊天机器人有两个潜在的好处。我们最常想到的一种是通过减少对人类CSR的依赖来控制成本。但是，特别是对于商务机器人，附加目标是在人类CSR不在值班或仅在容量显着减少的情况下增加收入。
按小时跟踪您的漫游器使用情况，应该可以显示新的24/7渠道在一天中以前没有用户支持服务的那一天中如何增加您的收入。
AI / ML学习率
我们希望您的Bots配备有AI / ML例程，该例程会不断监视您的获利和损失，并使用这些新数据来改进您的推荐程序，定位和定价算法。
此外，我们建议您选择KPI，这些KPI可以让您直接衡量学习是继续进行还是加速进行。最终，在设计最佳的系统中，如果对算法进行了完全优化，则改进速度将减慢甚至停止。了解您在那条曲线上的位置对于继续投资改进资源或将这些资源转移到下一个机会同样有价值。

关注 CDA人工智能学院 ，回复“录播”获取更多人工智能精选直播视频！