具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

本申请实施例提供的通话质检方法、装置、计算机设备和计算机可读存储介质，旨在解决传统技术中，在外呼结束后，由人工导出已外呼的通话语音进行重听质检，以及由人工在质检结束后手动记录相关的质检数据，所导致的质检效率低以及质检准确性差的技术问题。下面将通过实施例并结合附图具体地对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体地实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。

下面结合本申请实施例所应用的场景，对本申请实施例涉及的技术方案进行介绍。

图1-a为本申请实施例提供的通话质检方法所涉及到的一种实施环境的示意图。如图1-a所示，该实施环境可以包括计算机设备101，计算机设备101可以为智能手机、平板电脑、个人计算机、笔记本电脑、车载设备，等等。

在图1-a所示的实施环境中，计算机设备101若检测到针对目标质检任务的触发指令，可以展示质检界面，该质检界面至少包括目标质检任务对应的外呼通话数据以及质检标注控件；计算机设备101可以基于质检标注控件获取针对外呼通话数据的质检数据，质检数据用于表征外呼通话数据的数据质量和外呼质量中的至少一种；计算机设备101可以将质检数据与外呼通话数据对应存储于质检数据库中。

图1-b为本申请实施例提供的通话质检方法所涉及到的另一种实施环境的示意图。如图1-b所示，该实施环境还可以包括计算机设备101和服务器102，计算机设备101和服务器102之间可以通过有线网络或无线网络进行通信。

其中，计算机设备101可以为智能手机、平板电脑、个人计算机、笔记本电脑、车载设备等；服务器102可以是一台服务器，也可以是包括多台服务器的服务器集群。

在图1-b所示的实施环境中，计算机设备101若检测到针对目标质检任务的触发指令，可以向服务器102请求质检界面，计算机设备101接收到服务器102发送的质检界面后可以展示该质检界面，该质检界面至少包括目标质检任务对应的外呼通话数据以及质检标注控件；计算机设备101可以基于质检标注控件获取针对外呼通话数据的质检数据，质检数据用于表征外呼通话数据的数据质量和外呼质量中的至少一种；计算机设备101可以将获取的质检数据发送至服务器102，服务器102可以将质检数据与外呼通话数据对应存储于质检数据库中。

在一个实施例中，如图2所示，提供了一种通话质检方法，以该方法应用于图1-a中的计算机设备101为例进行说明，包括以下步骤：

步骤201，计算机设备若检测到针对目标质检任务的触发指令，则展示质检界面。

目前，采用外呼机器人替代人工对用户终端进行自动外呼已越来越普遍，自动外呼在很多行业均具有广泛地应用。例如，在金融科技领域，金融机构通常会通过外呼机器人对用户终端进行催收外呼或者业务推销外呼，在电商领域，电商平台通过外呼机器人对用户终端进行满意度回访，等等。

具体地，针对一个业务场景，在外呼过程中，外呼机器人通常需要对外呼对象的外呼通话语音进行语音识别得到文本，再对文本进行意图识别得到意图，外呼机器人根据意图匹配该业务场景的外呼知识库，得到该意图触发的外呼节点的自动对话语句，并将该自动对话语句反馈给外呼对象的终端，实现外呼过程中的自动对话。然而，在实际应用过程中，常常存在由于外呼机器人无法准确识别外呼对象的语义意图等原因，导致外呼机器人无法准确对话的情况，影响外呼质量。

本申请实施例中，为了对外呼机器人的外呼质量进行质检，在外呼结束后，计算机设备可以配置质检任务，每个质检任务关联对应的质检界面，质检人员基于该质检界面则可以进行通话质检。当然，质检任务也可以由质检人员自行配置。

本申请实施例中，目标质检任务可以是任意一个质检任务，目标质检任务可以是针对一个完整会话配置的质检任务，也可以是针对一个完整会话中的部分会话配置的质检任务，当然也可以是针对多个完整会话配置的质检任务，等等。

以目标质检任务是针对一个完整会话配置的质检任务为例，一个完整会话可以是针对一个外呼对象的一次完整外呼会话过程。计算机设备可以获取该外呼过程中的对话数据，该对话数据可以包括外呼机器人的自动对话语句和外呼对象的外呼通话语音，并利用该对话数据生成目标质检任务对应的质检界面，可选地，计算机设备可以将生成的质检界面与目标质检任务对应的任务标识关联存储。

本申请实施例中，生成的质检界面至少包括目标质检任务对应的外呼通话数据以及质检标注控件。质检标注控件可以用于质检人员输入针对外呼通话数据的质检数据，外呼通话数据可以是根据外呼过程中外呼对象的外呼通话语音得到的。以下，对外呼通话数据的获取方式进行介绍。

在一种可能的实施方式中，外呼通话数据可以包括基于外呼通话语音获取的通话数据，例如，外呼通话数据可以是对外呼通话语音进行语音识别得到的外呼通话文本，外呼通话数据还可以为该外呼通话语音，外呼通话数据还可以是外呼通话文本和外呼通话语音的组合，即，外呼通话数据可以是语音形式，也可以是文本形式，还可以是语音形式和文本形式的组合，在此不做限制。

在另一种可能的实施方式中，外呼通话数据还可以包括基于外呼通话语音获取的通话数据以及意图，即，在上述实施方式的基础上，外呼通话数据还可以包括外呼通话语音的意图，例如，外呼通话数据可以包括对外呼通话语音识别得到的外呼通话文本以及外呼通话语音的意图，外呼通话数据还可以包括外呼通话语音以及外呼通话语音的意图，外呼通话数据还可以包括外呼通话文本、外呼通话语音以及外呼通话语音的意图。

计算机设备配置目标质检任务后，可以将目标质检任务分配至质检人员的质检账户，这样，质检人员登录其质检账户后，则可以触发目标质检任务进行通话质检。示例性地，质检人员可以点击目标质检任务以输入触发指令，当然，质检人员也可以通过语音输入针对目标质检任务的触发指令，质检人员还可以通过面部表情、手势动作输入针对目标质检任务的触发指令，等等。

该触发指令可以携带目标质检任务的任务标识，这样，计算机设备检测到该触发指令后，则获取该任务标识对应的质检界面并展示。

步骤202，计算机设备基于质检标注控件获取针对外呼通话数据的质检数据。

计算机设备展示质检界面后，质检人员则可以根据外呼通话数据进行通话质检。

以外呼通话数据包括基于外呼通话语音获取的通话数据为例，质检界面还可以包括外呼机器人的自动对话语句，计算机设备可以在质检界面中以对话形式展示通话数据和自动对话语句。这样，质检人员根据质检界面中上下文的对话逻辑，则可以确定外呼机器人针对外呼通话数据的自动对话语句是否准确，确定后则可以基于质检标注控件输入质检数据。

以外呼通话数据包括基于外呼通话语音获取的通话数据和意图为例，作为一种实施方式，质检人员可以直接核对该意图和通话数据是否匹配，从而可以确定外呼机器人针对外呼通话数据回复的自动对话语句是否准确，确定后则可以基于质检标注控件输入质检数据；作为另一种实施方式，质检界面还可以包括外呼机器人的自动对话语句，计算机设备在质检界面中以对话形式展示外呼通话数据和自动对话语句，这样，质检人员可以结合上下文的对话逻辑以及意图，来判定外呼机器人针对外呼通话数据回复的自动对话语句是否准确，从而得到质检数据。

本申请实施例中，质检数据用于表征外呼通话数据的数据质量和外呼质量中的至少一种。示例性地，质检数据可以包括外呼通话语音对应的语音识别结果和意图识别结果，这样，若语音识别结果存在偏差，则语音识别质量较差，即质检数据表征外呼通话数据的数据质量较差；若意图识别结果存在偏差，则意图识别质量较差，即质检数据同样表征外呼通话数据的数据质量较差，等等。

示例性地，质检数据还可以包括外呼是否接通、对话过程是否噪音过大、外呼机器人和外呼对象是否存在相互抢话的情况等结果，若外呼未接通、噪音过大或存在相互抢话的问题，则质检数据表征外呼通话数据的外呼质量较差。

步骤203，计算机设备将质检数据与外呼通话数据对应存储于质检数据库中。

计算机设备将质检人员基于外呼通话数据输入的质检数据与外呼通话数据对应存储于质检数据库中，这样，若质检数据表征的外呼通话数据的数据质量和/或外呼质量较差，计算机设备则可以对外呼机器人在外呼过程中使用到的语音识别模型、意图识别模型等机器学习模型进行性能优化，以提升外呼机器人的外呼质量。

上述实施例，计算机设备若检测到针对目标质检任务的触发指令，则展示质检界面，该质检界面至少包括目标质检任务对应的外呼通话数据以及质检标注控件，而后，基于质检标注控件获取针对外呼通话数据的质检数据，并将质检数据与外呼通话数据对应存储于质检数据库中，该质检数据用于表征外呼通话数据的数据质量和外呼质量中的至少一种；这样，质检人员不必人工导出已外呼的通话语音，也不必在质检结束后人工手动记录质检数据，本申请实施例通过质检界面展示外呼通话数据以及质检标注控件，质检人员基于该质检标注控件输入外呼通话数据的质检数据即可，质检数据即会自动对应存储，从而避免了由人工导出已外呼的通话语音以及人工手动记录质检数据所造成的时间浪费、避免了人工手动记录质检数据造成的人为误差，因此，本申请实施例提升了通话质检的质检效率以及质检准确性。

在一个实施例中，基于图2所示的实施例，参见图3，本实施例涉及的是计算机设备如何展示质检界面的过程。本实施例质检标注控件包括语句标注控件，如图3所示，步骤201包括步骤301和步骤302：

步骤301，计算机设备若检测到针对目标质检任务的触发指令，则展示初始质检界面。

其中，质检人员可以点击目标质检任务以输入触发指令，质检人员还可以通过语音输入针对目标质检任务的触发指令，或者，通过面部表情、手势动作输入针对目标质检任务的触发指令。

计算机设备在检测到针对目标质检任务的触发指令之后，计算机设备则展示初始质检界面，该初始质检界面包括外呼通话数据，即计算机设备首先在初始质检界面中展示外呼通话数据。

可以理解的是，在外呼会话过程中，外呼通话数据的数量可以是多个，即外呼机器人和外呼对象进行了多次对话交互，这样，计算机设备在检测到针对目标质检任务的触发指令后，则在初始质检界面中展示目标质检任务对应的全部外呼通话数据，质检人员可以按需选择其需要进行通话质检的一个外呼通话数据或多个外呼通话数据进行质检。

示例性地，外呼通话数据可以包括外呼通话文本，外呼通话文本是对目标质检任务对应的外呼通话语音进行识别得到的。作为一种实施方式，计算机设备获取到外呼对象的外呼通话语音之后，可以将外呼通话语音输入至语音识别模型，得到语音识别模型输出的外呼通话文本。

当然，外呼通话数据还可以包括外呼通话文本和外呼通话语音对应的外呼对象的意图。计算机设备可以将语音识别得到的外呼通话文本输入至意图识别模型得到意图。

步骤302，计算机设备若检测到用户针对外呼通话数据的选择指令，则在初始质检界面中展示语句标注控件，以展示质检界面。

基于该初始质检界面，用户(即质检人员)可以选择需要质检的外呼通话数据，并输入针对该外呼通话数据的选择指令，计算机设备若检测到针对外呼通话数据的选择指令，则在初始质检界面中展示针对该外呼通话数据的语句标注控件，这样，展示有语句标注控件和外呼通话数据的初始质检界面即为质检界面。

以下，对计算机设备检测用户针对外呼通话数据的选择指令的过程进行介绍。

在一种可能的实施方式中，质检界面中可以展示外呼通话数据对应的选择框，质检人员若选中该选择框，计算机设备则检测到用户针对外呼通话数据的选择指令，从而触发展示语句标注控件。

在另一种可能的实施方式中，计算机设备若检测到鼠标指针悬浮在质检界面中外呼通话数据周围的预设范围内，则确定检测到用户针对外呼通话数据的选择指令，即若质检人员移动鼠标指针，若鼠标指针悬浮在外呼通话数据上方或周围，计算机设备则检测到用户针对外呼通话数据的选择指令。

当然，质检人员还可以长按外呼通话数据以输入针对外呼通话数据的选择指令，等等，在此不做具体限制。

这样，计算机设备若检测到针对目标质检任务的触发指令，首先展示初始质检界面，若检测到用户在初始质检界面中输入的针对外呼通话数据的选择指令，再在初始质检界面中展示语句标注控件，以展示质检界面，从而可以按照质检人员实际的质检需求展示语句标注控件，提升了质检灵活性。

在一个实施例中，基于图3所示的实施例，参见图4，本实施例涉及的是一种示例性地计算机设备如何基于质检标注控件获取针对外呼通话数据的质检数据的过程。本实施例语句标注控件包括标注子控件，质检数据包括文本识别准确性质检数据，如图4所示，步骤202包括步骤401和步骤402：

步骤401，计算机设备若检测到用户针对标注子控件的选择指令，则展示标注语句页面。

示例性地，质检人员选择外呼通话数据(如上文所述，质检人员可以通过选中该选择框、鼠标指针悬浮、长按等方式选择外呼通话数据)之后，计算机设备则展示该外呼通话数据对应的语句标注控件，该语句标注控件包括标注子控件。

计算机设备若检测到用户针对标注子控件的选择指令，则展示标注语句页面。示例性地，质检人员可以点击标注子控件输入针对标注子控件的选择指令。

步骤402，计算机设备基于标注语句页面获取用户输入的文本识别准确性质检数据。

本申请实施例中，标注语句页面用于质检人员输入文本识别准确性质检数据，在一种可能的实施方式中，标注语句页面中可以包括语音识别结果、意图识别结果、意图纠正控件、语音识别结果纠正控件。

其中，标注语句页面中包括的语音识别结果为对外呼对象的外呼通话语音进行识别得到的外呼通话文本；意图识别结果为对上述外呼通话语音或外呼通话文本进行意图识别得到的意图。

示例性地，参见图5，图5为一种标注语句页面的页面示意图。语音识别结果纠正控件如图5所示的“正确的语音识别结果”控件以及该控件所关联的正确语音识别结果输入框，计算机设备可以默认该正确语音识别结果输入框为空或者与标注语句页面中显示的语音识别结果相同，即默认语音识别结果正确。这样，若质检人员修改了正确语音识别结果输入框中的默认结果，即质检人员在语音识别结果纠正控件中输入了正确的语音识别结果，计算机设备则确定语音识别结果存在偏差，并计入语音识别正确率的统计。

可选地，计算机设备展示的该外呼通话数据对应的语句标注控件还包括语音播放子控件，语音播放子控件用于语音播放外呼通话语音。质检人员若输入针对该语音播放子控件的触发指令，计算机设备则播放外呼通话数据对应的外呼通话语音，这样，质检人员通过收听该外呼通话语音，将收听的内容和标注语句页面中显示的语音识别结果进行比较，即可确定该语音识别结果是否正确，若不正确，质检人员则可以在语音识别结果纠正控件中输入正确的语音识别结果。

请继续参见图5，意图纠正控件可以如图5所示的“正确的意图”控件以及该控件所关联的下拉选项控件，计算机设备可以默认该下拉选项控件为空或者与意图识别结果相同，即默认意图识别结果正确。这样，若质检人员修改了下拉选项控件中的默认结果，即质检人员在意图纠正控件中输入了正确的意图，计算机设备则确定意图识别结果存在偏差，并计入意图理解正确率的统计。可选地，下拉选项控件可以提供当前业务场景中对应的对话节点能够触发的所有意图。

当然，该下拉选项控件也可以采用输入框替代，这样，质检人员可以直接在输入框中输入正确的意图。

可选地，标注语句页面中还可以包括意图识别错误原因分析控件，请继续参见图5，意图识别错误原因分析控件可以包括多个意图识别错误原因的选择子控件，示例性地，多个意图识别错误原因的选择子控件可以包括“缺少意图”子控件、“缺少教育数据”子控件、“语音识别错误”子控件以及“其他原因”子控件，这样，若意图识别错误，质检人员则可以在多个选择子控件中选择对应的子控件，计算机设备则可以记录到意图识别错误的原因，以便于后续的意图识别模型优化操作。

可选地，标注语句页面中还可以包括语音识别错误原因分析控件，请继续参见图5，语音识别错误原因分析控件可以包括多个语音识别错误原因的选择子控件，多个语音识别错误原因的选择子控件可以包括“正常人声但文字有误”子控件、“漏识部分人声”子控件、“识别了背景人声”子控件、“识别了噪音”子控件、“识别了其他人声”子控件等，若语音识别结果存在上述某个子控件表征的语音识别错误原因，质检人员则可以在多个选择子控件中选择对应的子控件，计算机设备则可以记录到语音识别错误的原因，以便于后续的语音识别模型优化操作。

以下，对上述提及的各个语音识别错误原因的含义进行简要介绍，正常人声但文字有误，是指外呼对话过程中，在业务识别范围外的人声识别结果，该人声识别结果会被计入语音识别错误数的统计；漏识部分人声，指人声未被识别出文本的情况；识别了背景人声，是指外呼对话过程中主要对话人之外的人声识别结果，该人声识别结果会被计入语音识别错误数的统计；识别了噪音，是指外呼通话语音中的噪音被识别出文字，该人声识别结果会被计入语音识别错误数的统计；识别了其他人声，是指人声模糊不清、无法辨别，或者外呼通话数据为不支持的方言类型，等等，该人声识别结果会被计入语音识别错误数的统计。这样，质检人员依据实际语音识别错误的原因，可以选择对应的选择子控件，有利于计算机设备对外呼过程中使用的相关模型算法进行优化。

可选地，标注语句页面中还可以包括语义识别结果确认控件，请继续参见图5，语义识别结果确认控件如图5中的“语义识别情况”及其关联的两个确认子控件“与原意相同”和“与原意不相同”，质检人员根据语音识别结果确定语义识别情况，并在标注语句页面中进行选择。其中，与原意相同，表征语音识别结果的文本语义和外呼对象真实想表达的语意一致，与原意不相同，表征语音识别结果的文本语义和外呼对象真实想表达的语意不同，质检人员针对两个确认子控件的选择结果会计入语音识别句意错误率统计。

综上，本申请实施例中，质检人员基于标注语句页面输入的文本识别准确性质检数据包括语音识别准确性质检数据和意图识别准确性质检数据中的至少一种。语音识别准确性质检数据例如可以包括上述的正确的语音识别结果、语音识别错误原因，意图识别准确性质检数据例如可以包括上述的正确的意图、意图识别错误原因，等等。

上述实施例，质检人员基于计算机设备展示的标注语句页面即可输入文本识别准确性质检数据，计算机设备即可自动存储该文本识别准确性质检数据，从而不必质检人员人工记录，提升了质检效率。另外，计算机设备可以基于存储的文本识别准确性质检数据可以对外呼过程中使用到的语音识别模型、意图识别模型等模型进行优化，从而有利于提升外呼质量。

在一个实施例中，基于图3所示的实施例，参见图6，本实施例涉及的是另一种示例性地计算机设备如何基于质检标注控件获取针对外呼通话数据的质检数据的过程。本实施例语句标注控件包括性能优化子控件，质检数据包括识别性能优化数据，如图6所示，步骤202包括步骤601和步骤602：

步骤601，计算机设备若检测到用户针对性能优化子控件的选择指令，则展示相似问补充页面。

示例性地，质检人员选择外呼通话数据(如上文所述，质检人员可以通过选中该选择框、鼠标指针悬浮、长按等方式选择外呼通话数据)之后，计算机设备则展示该外呼通话数据对应的语句标注控件，语句标注控件包括性能优化子控件。

参见图7，图7为一种示例性地外呼通话数据对应的语句标注控件的示意图。如图7所示，语句标注控件可以包括性能优化子控件，还可以包括上述实施例涉及的标注子控件以及语音播放子控件等。

示例性地，质检人员可以点击性能优化子控件输入针对性能优化子控件的选择指令，这样，计算机设备若检测到用户针对性能优化子控件的选择指令，则展示相似问补充页面。

步骤602，计算机设备基于相似问补充页面获取用户输入的识别性能优化数据。

其中，识别性能优化数据包括与外呼通话文本对应的相似问句文本。

示例性地，参见图8，图8为一种示例性地相似问补充页面的页面示意图，质检人员可以基于相似问补充页面快速输入相似问句文本。

在一种可能的实施方式中，相似问补充页面还可以包括语音识别结果，即外呼通话文本，质检人员可以在相似问补充页面中输入与该外呼通话文本匹配的相似问句文本。例如，外呼对象的外呼通话文本是采用方式A表达某个意图，那么，质检人员输入的一个或多个相似问句文本则可以是通过方式B、方式C等表达外呼通话文本对应的意图。

这样，计算机设备将基于相似问补充页面获取用户输入的识别性能优化数据作为质检数据进行存储，从而不必质检人员人工记录，提升了质检效率。另外，计算机设备可以基于该识别性能优化数据对外呼过程中使用到的意图识别模型等语义理解模型进行优化，从而有利于提升外呼质量。

在一个实施例中，基于图3所示的实施例，参见图9，本实施例涉及的是另一种示例性地计算机设备如何基于质检标注控件获取针对外呼通话数据的质检数据的过程。本实施例中，质检标注控件包括语句质检控件，语句质检控件包括多个不同的通话体验标签子控件，步骤202包括图9所示的步骤901和步骤902：

步骤901，计算机设备针对外呼通话数据，若检测到用户针对目标通话体验标签子控件的选择指令，则确定通话体验标签子控件对应的目标通话体验标签。

本申请实施例中，质检界面中针对每个外呼通话数据配置有选择项，例如可以是选择框，若质检人员选中该外呼通话数据的选择项，计算机设备则在质检界面中展示该外呼通话数据对应的语句质检控件。

示例性地，参见图10，图10为一种示例性地计算机设备在质检界面中展示语句质检控件的界面示意图。如图10所示，外呼通话数据对应的语句质检控件可以包括多个不同的通话体验标签子控件，例如，包括“噪音过大”通话体验标签子控件、“体验不好”通话体验标签子控件以及“互相抢话”通话体验标签子控件。

需要说明的是，通话体验标签子控件可以由质检人员自行配置，通话体验标签子控件用于质检人员标记当前对话中的客户体验相关数据。

步骤902，计算机设备根据目标通话体验标签获取质检数据。

这样，质检人员可以选择当前对话的通话体验标签，例如，若当前对话噪音过大，质检人员在点击“噪音过大”通话体验标签子控件，计算机设备则确定质检人员点击的目标通话体验标签，从而得到质检数据，该质检数据为目标通话体验标签所表征的通话体验标签。

基于图9所示的实施例，在一种可能的实施方式中，质检标注控件还包括通话结果质检控件，参见图11，步骤902包括图11所示的步骤9021和步骤9022：

步骤9021，计算机设备基于通话结果质检控件获取外呼通话数据对应的通话质量评估数据以及通话结果分析数据。

示例性地，参见图12，图12为一种示例性地通话结果质检控件的界面示意图。如图12所示，通话结果质检控件可以包括通话质量评估子控件以及通话分析结果子控件，该通话质量评估子控件中可以包括“已跑通”选项、“未跑通”选项以及“无效通话”选项，质检人员可以根据当前外呼的实际情况选择对应的选项，计算机设备则获取到通话质量评估数据，同样地，质检人员可以基于通话分析结果子控件输入通话结果分析数据，该通话结果分析数据例如可以包括当前外呼的呼出状态(如已完成)，等等。

步骤9022，计算机设备将目标通话体验标签、通话质量评估数据以及通话结果分析数据作为质检数据。

计算机设备将目标通话体验标签、通话质量评估数据以及通话结果分析数据作为质检数据进行存储，从而不必质检人员人工记录，提升了质检效率。另外，计算机设备可以基于存储的质检数据可以对外呼过程中使用到的语音识别模型、意图识别模型等模型进行优化，从而有利于提升外呼质量。

在一个实施例中，基于图2所示的实施例，参见图13，本实施例涉及的是质检审核过程。如图13所示，步骤203之前还包括步骤204：

步骤204，计算机设备根据目标质检任务和质检数据生成质检审核任务。

本申请实施例中，计算机设备还可以配置质检审核任务，供审核人员对审核人员的质检数据进行审核，审核通过后，计算机设备才可以将质检数据与外呼通话数据对应存储于质检数据库中。

作为一种实施方式，计算机设备根据目标质检任务和质检数据生成质检审核任务，并将质检审核任务分配至审核人员的质检审核账户，这样，审核人员登录其质检审核账户，则可以触发质检审核任务进行质检审核。

示例性地，审核人员触发质检审核任务(例如点击质检审核任务)之后，计算机设备则展示质检审核界面，该质检审核界面至少包括外呼通话数据以及对应的质检数据。这样，审核人员可以查看针对外呼通话数据的质检数据是否准确。

示例性地，参见图14，图14为一种示例性地质检审核界面的示意图。如图14所示，外呼通话数据、质检数据以及审核结果输入控件，审核结果输入控件例如可以包括“驳回并下一通”子控件以及“通过并下一通”子控件，若当前质检审核界面展示的针对外呼通话数据的质检数据准确，审核人员则可以点击“通过并下一通”子控件，这样，计算机设备则确定质检审核任务的审核结果为通过。

对应地，步骤203，包括：

步骤2031，计算机设备若检测到质检审核任务的审核结果为目标审核结果，则将质检数据与外呼通话数据对应存储于质检数据库中。

该目标审核结果表征质检审核任务的审核结果为通过审核，即，若质检审核任务的审核结果为审核通过，计算机设备再将质检数据与外呼通话数据对应存储于质检数据库中。

在一种可能的实施方式中，审核结果输入控件还可以包括“结束审核”子控件，审核人员点击“结束审核”子控件之后，计算机设备可以统计预设时间段内的质检审核任务的相关信息展示在任务审核统计界面，相关信息例如预设时间段内的质检审核任务的总量、通过量、驳回量以及未审核量。

示例性地，参见图15，图15为一种示例性地任务审核统计界面的示意图，审核人员基于该任务审核统计界面，若审核部分数据后对整体数据已有把握，则可以提前结束审核，节约审核时间。

在一种可能的实施方式中，审核结束后，若驳回量等于预设阈值，例如等于零，计算机设备可以将质检审核任务的任务状态标记为已完成；若驳回量大于预设阈值，例如大于零，计算机设备则将质检审核任务的任务状态标记为未完成，并将质检审核任务对应的目标质检任务重新下发至质检人员的质检账户重新进行质检，从而可以提升质检数据的准确性。

在一个实施例中，提供了一种通话质检方法，以该方法应用于图1-a中的计算机设备101为例进行说明，包括以下步骤：

步骤a，计算机设备若检测到针对目标质检任务的触发指令，则展示初始质检界面，初始质检界面包括外呼通话数据。

其中，外呼通话数据包括外呼通话文本，外呼通话文本是对目标质检任务对应的外呼通话语音进行识别得到的。

步骤b，计算机设备若检测到用户针对外呼通话数据的选择指令，则在初始质检界面中展示语句标注控件，以展示质检界面。

其中，质检界面至少包括目标质检任务对应的外呼通话数据以及质检标注控件，质检标注控件包括语句标注控件。

步骤c，计算机设备基于质检标注控件获取针对外呼通话数据的质检数据，质检数据用于表征外呼通话数据的数据质量和外呼质量中的至少一种。

其中，语句标注控件包括标注子控件，质检数据包括文本识别准确性质检数据，计算机设备基于质检标注控件获取针对外呼通话数据的质检数据，包括：计算机设备若检测到用户针对标注子控件的选择指令，则展示标注语句页面；计算机设备基于标注语句页面获取用户输入的文本识别准确性质检数据，文本识别准确性质检数据包括语音识别准确性质检数据和意图识别准确性质检数据中的至少一种。

其中，语句标注控件包括性能优化子控件，质检数据包括识别性能优化数据，计算机设备基于质检标注控件获取针对外呼通话数据的质检数据，包括：计算机设备若检测到用户针对性能优化子控件的选择指令，则展示相似问补充页面；计算机设备基于相似问补充页面获取用户输入的识别性能优化数据，识别性能优化数据包括与外呼通话文本对应的相似问句文本。

其中，语句标注控件还包括语音播放子控件，语音播放子控件用于语音播放外呼通话语音。

其中，质检标注控件包括语句质检控件，语句质检控件包括多个不同的通话体验标签子控件，计算机设备基于质检标注控件获取针对外呼通话数据的质检数据，包括：计算机设备针对外呼通话数据，若检测到用户针对目标通话体验标签子控件的选择指令，则确定通话体验标签子控件对应的目标通话体验标签；计算机设备根据目标通话体验标签获取质检数据。

其中，质检标注控件还包括通话结果质检控件，计算机设备根据目标通话体验标签获取质检数据，包括：计算机设备基于通话结果质检控件获取外呼通话数据对应的通话质量评估数据以及通话结果分析数据；计算机设备将目标通话体验标签、通话质量评估数据以及通话结果分析数据作为质检数据。

步骤d，计算机设备根据目标质检任务和质检数据生成质检审核任务。

步骤e，计算机设备若检测到质检审核任务的审核结果为目标审核结果，则将质检数据与外呼通话数据对应存储于质检数据库中。

应该理解的是，虽然上述流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，上述流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

在一个实施例中，如图16所示，提供了一种通话质检装置，包括：

展示模块100，用于若检测到针对目标质检任务的触发指令，则展示质检界面，所述质检界面至少包括所述目标质检任务对应的外呼通话数据以及质检标注控件；

获取模块200，用于基于所述质检标注控件获取针对所述外呼通话数据的质检数据，所述质检数据用于表征所述外呼通话数据的数据质量和外呼质量中的至少一种；

存储模块300，用于将所述质检数据与所述外呼通话数据对应存储于质检数据库中。

在一个实施例中，所述质检标注控件包括语句标注控件，所述展示模块100，包括：

第一展示单元，用于若检测到针对所述目标质检任务的触发指令，则展示初始质检界面，所述初始质检界面包括所述外呼通话数据；

第二展示单元，用于若检测到用户针对所述外呼通话数据的选择指令，则在所述初始质检界面中展示所述语句标注控件，以展示所述质检界面。

在一个实施例中，所述外呼通话数据包括外呼通话文本，所述外呼通话文本是对所述目标质检任务对应的外呼通话语音进行识别得到的。

在一个实施例中，所述语句标注控件包括标注子控件，所述质检数据包括文本识别准确性质检数据，所述获取模块200，包括：

第三展示单元，用于若检测到用户针对所述标注子控件的选择指令，则展示标注语句页面；

第一获取单元，用于基于所述标注语句页面获取用户输入的所述文本识别准确性质检数据，所述文本识别准确性质检数据包括语音识别准确性质检数据和意图识别准确性质检数据中的至少一种。

在一个实施例中，所述语句标注控件包括性能优化子控件，所述质检数据包括识别性能优化数据，所述获取模块200，包括：

第四展示单元，用于若检测到用户针对所述性能优化子控件的选择指令，则展示相似问补充页面；

第二获取单元，用于基于所述相似问补充页面获取用户输入的所述识别性能优化数据，所述识别性能优化数据包括与所述外呼通话文本对应的相似问句文本。

在一个实施例中，所述语句标注控件还包括语音播放子控件，所述语音播放子控件用于语音播放所述外呼通话语音。

在一个实施例中，所述质检标注控件包括语句质检控件，所述语句质检控件包括多个不同的通话体验标签子控件，所述获取模块200，包括：

确定单元，用于针对所述外呼通话数据，若检测到用户针对目标通话体验标签子控件的选择指令，则确定所述通话体验标签子控件对应的目标通话体验标签；

第三获取单元，用于根据所述目标通话体验标签获取所述质检数据。

在一个实施例中，所述质检标注控件还包括通话结果质检控件，所述第三获取单元具体用于基于所述通话结果质检控件获取所述外呼通话数据对应的通话质量评估数据以及通话结果分析数据；将所述目标通话体验标签、所述通话质量评估数据以及所述通话结果分析数据作为所述质检数据。

在一个实施例中，所述装置还包括：

生成模块，用于根据所述目标质检任务和所述质检数据生成质检审核任务；

对应地，所述存储模块300具体用于若检测到所述质检审核任务的审核结果为目标审核结果，则将所述质检数据与所述外呼通话数据对应存储于质检数据库中。

本实施例提供的通话质检装置，可以执行上述通话质检方法实施例，其实现原理和技术效果类似，在此不再赘述。关于通话质检装置的具体限定可以参见上文中对于通话质检方法的限定，在此不再赘述。上述通话质检装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

在一个实施例中，还提供了一种如图17所示的计算机设备，该计算机设备可以是终端，其内部结构图可以如图17所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信，无线方式可通过WIFI、运营商网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种通话质检方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。

本领域技术人员可以理解，图17中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

在一个实施例中，提供了一种计算机设备，包括存储器和处理器，存储器中存储有计算机程序，该处理器执行计算机程序时实现以下步骤：

若检测到针对目标质检任务的触发指令，则展示质检界面，所述质检界面至少包括所述目标质检任务对应的外呼通话数据以及质检标注控件；

基于所述质检标注控件获取针对所述外呼通话数据的质检数据，所述质检数据用于表征所述外呼通话数据的数据质量和外呼质量中的至少一种；

将所述质检数据与所述外呼通话数据对应存储于质检数据库中。

在一个实施例中，所述质检标注控件包括语句标注控件，该处理器执行计算机程序时还实现以下步骤：

若检测到针对所述目标质检任务的触发指令，则展示初始质检界面，所述初始质检界面包括所述外呼通话数据；

若检测到用户针对所述外呼通话数据的选择指令，则在所述初始质检界面中展示所述语句标注控件，以展示所述质检界面。

在一个实施例中，所述外呼通话数据包括外呼通话文本，所述外呼通话文本是对所述目标质检任务对应的外呼通话语音进行识别得到的。

在一个实施例中，所述语句标注控件包括标注子控件，所述质检数据包括文本识别准确性质检数据，该处理器执行计算机程序时还实现以下步骤：

若检测到用户针对所述标注子控件的选择指令，则展示标注语句页面；

基于所述标注语句页面获取用户输入的所述文本识别准确性质检数据，所述文本识别准确性质检数据包括语音识别准确性质检数据和意图识别准确性质检数据中的至少一种。

在一个实施例中，所述语句标注控件包括性能优化子控件，所述质检数据包括识别性能优化数据，该处理器执行计算机程序时还实现以下步骤：

若检测到用户针对所述性能优化子控件的选择指令，则展示相似问补充页面；

基于所述相似问补充页面获取用户输入的所述识别性能优化数据，所述识别性能优化数据包括与所述外呼通话文本对应的相似问句文本。

在一个实施例中，所述语句标注控件还包括语音播放子控件，所述语音播放子控件用于语音播放所述外呼通话语音。

在一个实施例中，所述质检标注控件包括语句质检控件，所述语句质检控件包括多个不同的通话体验标签子控件，该处理器执行计算机程序时还实现以下步骤：

针对所述外呼通话数据，若检测到用户针对目标通话体验标签子控件的选择指令，则确定所述通话体验标签子控件对应的目标通话体验标签；

根据所述目标通话体验标签获取所述质检数据。

在一个实施例中，所述质检标注控件还包括通话结果质检控件，该处理器执行计算机程序时还实现以下步骤：

基于所述通话结果质检控件获取所述外呼通话数据对应的通话质量评估数据以及通话结果分析数据；

将所述目标通话体验标签、所述通话质量评估数据以及所述通话结果分析数据作为所述质检数据。

在一个实施例中，该处理器执行计算机程序时还实现以下步骤：

根据所述目标质检任务和所述质检数据生成质检审核任务；

对应地，所述将所述质检数据与所述外呼通话数据对应存储于质检数据库中，包括：

若检测到所述质检审核任务的审核结果为目标审核结果，则将所述质检数据与所述外呼通话数据对应存储于质检数据库中。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Ramb微秒)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。

在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：

若检测到针对目标质检任务的触发指令，则展示质检界面，所述质检界面至少包括所述目标质检任务对应的外呼通话数据以及质检标注控件；

基于所述质检标注控件获取针对所述外呼通话数据的质检数据，所述质检数据用于表征所述外呼通话数据的数据质量和外呼质量中的至少一种；

将所述质检数据与所述外呼通话数据对应存储于质检数据库中。

在一个实施例中，所述质检标注控件包括语句标注控件，该计算机程序被处理器执行时还实现以下步骤：

若检测到针对所述目标质检任务的触发指令，则展示初始质检界面，所述初始质检界面包括所述外呼通话数据；

若检测到用户针对所述外呼通话数据的选择指令，则在所述初始质检界面中展示所述语句标注控件，以展示所述质检界面。

在一个实施例中，所述外呼通话数据包括外呼通话文本，所述外呼通话文本是对所述目标质检任务对应的外呼通话语音进行识别得到的。

在一个实施例中，所述语句标注控件包括标注子控件，所述质检数据包括文本识别准确性质检数据，该计算机程序被处理器执行时还实现以下步骤：

若检测到用户针对所述标注子控件的选择指令，则展示标注语句页面；

基于所述标注语句页面获取用户输入的所述文本识别准确性质检数据，所述文本识别准确性质检数据包括语音识别准确性质检数据和意图识别准确性质检数据中的至少一种。

在一个实施例中，所述语句标注控件包括性能优化子控件，所述质检数据包括识别性能优化数据，该计算机程序被处理器执行时还实现以下步骤：

若检测到用户针对所述性能优化子控件的选择指令，则展示相似问补充页面；

基于所述相似问补充页面获取用户输入的所述识别性能优化数据，所述识别性能优化数据包括与所述外呼通话文本对应的相似问句文本。

在一个实施例中，所述语句标注控件还包括语音播放子控件，所述语音播放子控件用于语音播放所述外呼通话语音。

在一个实施例中，所述质检标注控件包括语句质检控件，所述语句质检控件包括多个不同的通话体验标签子控件，该计算机程序被处理器执行时还实现以下步骤：

针对所述外呼通话数据，若检测到用户针对目标通话体验标签子控件的选择指令，则确定所述通话体验标签子控件对应的目标通话体验标签；

根据所述目标通话体验标签获取所述质检数据。

在一个实施例中，所述质检标注控件还包括通话结果质检控件，该计算机程序被处理器执行时还实现以下步骤：

基于所述通话结果质检控件获取所述外呼通话数据对应的通话质量评估数据以及通话结果分析数据；

将所述目标通话体验标签、所述通话质量评估数据以及所述通话结果分析数据作为所述质检数据。

在一个实施例中，该计算机程序被处理器执行时还实现以下步骤：

根据所述目标质检任务和所述质检数据生成质检审核任务；

对应地，所述将所述质检数据与所述外呼通话数据对应存储于质检数据库中，包括：若检测到所述质检审核任务的审核结果为目标审核结果，则将所述质检数据与所述外呼通话数据对应存储于质检数据库中。

以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。