具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行描述。

为了实现识别投屏设备在播放投屏内容前是否被插入非法广告，本发明实施例提供了一种非法广告确定方法、装置、电子设备及存储介质。

需要说明的是，本发明实施例所提供的一种非法广告确定方法应用于投屏设备，该投屏设备可以为显示器、智能电视、投影仪、电视机顶盒等可实现投屏功能的设备。该投屏功能可以包括但不局限于DLAN(Digital Living Network alliance，数字生活网络联盟)功能。具体而言，本发明实施例提供了一种非法广告确定方法的执行主体可以为运行于投屏设备中的一种非法广告确定装置。示例性的，该非法广告确定装置可以为运行于投屏设备中的具有视频播放功能的应用软件、网页客户端。

其中，本发明实施例所提供的一种非法广告确定方法，可以包括如下步骤：

获得待处理的目标音频，其中，目标音频为作为投屏方的投屏设备在投屏设备播放投屏内容之后，利用音频采集单元对投屏设备所在环境采集到的音频；

提取目标音频的指定音频特征；其中，指定音频特征为用于唯一标识目标音频的特征信息；

判断指定音频特征是否与预设音频特征相匹配，预设音频特征为与投屏设备预先相关联的广告中的音频特征，或者预设音频特征为投屏内容中的音频特征；

如果指定音频特征与预设音频特征相匹配，确定投屏设备在播放目标音频时未插入非法广告。

本发明实施例提供的方案，由于目标音频为投屏设备在开始播放投屏内容的预设时间段内采集到的音频，若投屏设备被插入非法广告，则该目标音频应当包含被插入非法广告播放时的音频，反之，若投票设备未被插入非法广告，那么该目标音频包含预先相关联的广告的音频，或播放投屏内容时的音频。进一步的，在提取目标音频的指定音频特征后，可以判断指定音频特征是否与预设音频特征相匹配，若相匹配，则说明目标音频为播放相关联的广告的音频，或播放投屏内容时的音频，也就是说，投屏设备在开始播放投屏内容的预设时间段内在播放的是相关联的广告或投屏内容，而不是非广告。可见，本发明可以实现识别投屏设备在播放投屏内容前是否被插入非法广告。

下面结合附图对本发明实施例所提供的一种非法广告确定方法进行介绍。

如图1所示，本发明实施例所提供的一种非法广告确定方法，可以包括如下步骤：

S101，获得待处理的目标音频，其中，目标音频是投屏设备在开始播放投屏内容的预设时间段内采集到的音频；

其中，音频采集单元可以为投屏设备自身的音频采集单元，也可以为与投屏设备关联的音频采集单元，这都是合理的。

另外，获得待处理的目标音频的实现方式可以存在多种。

在一种实现方式中，在投屏设备播放投屏内容之后，利用音频采集单元进行环境音频采集，得到待处理的目标音频。

可以理解的是，投屏设备为了保证将待投屏内容投屏至目标设备，可以在投屏前与目标设备建立通信连接，并在建立通信连接后，向投屏设备投放投屏内容。其中，投屏设备与投屏设备可以通过局域网、WIFI(无线网络)等通信方式建立通信连接。

为了识别投屏设备在播放目标音频时是否被插入非法广告，投屏设备可以在接收到投屏内容时，调用音频采集单元，从而利用音频采集单元采集当前环境的音频数据。当投票设备未被插入非法广告时，则投屏设备在接收到投票内容，可能播放预先相关联的广告，或者，也可能不播放任何广告，而直接播放投屏内容。当投票设备被插入非法广告时，则投屏设备在播放接收到的投票内容时，可能播放被插入的非法广告。

因此，所采集的环境音频可能为该目标音频包含预先相关联的广告的音频，或播放投屏内容时的音频，也可能为被插入非法广告播放时的音频。

为了方便对目标音频进行进一步分析，投屏设备的音频采集单元在采集到目标音频后，可以将该目标音频保存为任一种可以通过现有技术进行解析的文件格式，例如wave格式的文件，即wav文件。

在一实施例中，为了缓解目标音频的存储压力，在对采集音频时，可以仅在预设时间段内采集音频。即目标音频是投屏设备在开始播放投屏内容的预设时间段内采集到的音频。上述预设时间段可以为起始时刻为投屏设备在接收到投屏内容的时刻，持续时长为指定时长的时间段。上述指定时长的设定可以由用户手动设置，也可以由投屏设备默认设置，例如30s、2分钟或者3分钟等。示例性的，指代时长为30s，从投屏设备接收到投屏内容时开始计时并开始采集音频，当计时时长达到30s时，计时停止并停止音频采集。

上述音频采集单元可以是投屏设备内预制的麦克风，或者，也可以为在投屏设备内嵌入的音频采集插件等。

可选地，触发音频采集单元进行环境音频采集的方式存在多种，例如：在投屏设备接收到投屏内容后，投屏设备的显示界面弹出提示框，以使用户通过点击提示框许可投屏设备进行音频采集，投屏设备获取许可后，利用音频采集单元进行环境音频采集，或者，投屏设备在将投屏内容投放至投屏设备后，直接利用音频采集单元进行环境音频采集。

S102，提取目标音频的指定音频特征；其中，指定音频特征为用于唯一标识目标音频的特征信息。

指定音频特征可以存在多种，示例性的，指定音频特征可以为目标音频的梅尔频率倒谱系数(MFCC，Mel-Frequency Cepstral Coefficients)，或者目标音频的频谱特征等等，其中，梅尔频率倒谱系数可以用于表征人耳能够识别的语音频率的特征。

可以理解的是，通过对任一音频进行分析，可以确定出该音频对应的频谱特征，并且，通过对任一频谱特征的分析，可以得到该频谱特征对应的音频。示例性的，在一种实现方式中，提取目标音频的指定音频特征，可以包括：对目标音频进行傅里叶变换，得到目标音频的频谱特征，并将频谱特征作为指定音频特征。

为了方案清楚和布局清晰，针对确定梅尔频率倒谱系数的实现方式，后续结合另一实施例进行详细介绍。

S103，判断指定音频特征是否与预设音频特征相匹配；。

在一种实现方式中，预设音频特征可为与投屏设备预先相关联的广告中的音频特征。其中，与投屏设备预先相关联的广告也称为合法广告。在此情况下，当投屏设备接收到投屏内容时，首先将会播放预先相关联的广告，在广告播放完成之后，再继续播放所接收到的投票内容。此时，投票设备所获取的目标音频为投票设备播放预先相关联的广告的音频。经过步骤S102，所获取的指定音频特征应当与预先相关联的广告中的音频特征相匹配。

在另一种实现方式中，预设音频特征可为投屏内容中的音频特征。在此情况下，投屏设备在获取到投屏内容后，直接开始播放投屏内容，此时，投屏设备所获得的目标音频为投屏内容播放时的音频。经过步骤S102，所获取的指定音频特征应当与投屏内容中的音频特征相匹配。

在执行本步骤之前，可以预先获取预先相关联的广告的音频特征或投屏内容的音频特征，作为预设音频特征。

当经过步骤S102得到目标音频的指定音频特征后，可以对比指定音频特征与预设音频特征之间的特征差异。在一种实现方式中，当特征差异小于预设阈值时，判定指定音频特征与预设音频特征相匹配，反之，当特征差异不小于预设阈值时，判定指定音频特征与预设音频特征不相匹配。

S104，如果指定音频特征与预设音频特征相匹配，确定投屏设备在播放目标音频时未插入非法广告。

如果指定音频特征与预设音频特征相匹配，则说明目标音频为预设的相关联的广告播放时的音频或者视频内容播放时的音频，均属于合法的播放内容，即投屏设备在播放目标音频时未插入非法广告。

而若指定音频特征与预设音频特征不相匹配，则说明目标音频既不是预设的相关联的广告播放时的音频，也不是视频内容播放时的音频，此时，可以判定投屏设备在播放目标音频时插入了非法广告，进而可以采取进一步的措施。

本发明实施例提供的方案，由于目标音频为投屏设备在开始播放投屏内容的预设时间段内采集到的音频，若投屏设备被插入非法广告，则该目标音频应当包含被插入非法广告播放时的音频，反之，若投票设备未被插入非法广告，那么该目标音频包含预先相关联的广告的音频，或播放投屏内容时的音频。进一步的，在提取目标音频的指定音频特征后，可以判断指定音频特征是否与预设音频特征相匹配，若相匹配，则说明目标音频为播放相关联的广告的音频，或播放投屏内容时的音频，也就是说，投屏设备在开始播放投屏内容的预设时间段内在播放的是相关联的广告或投屏内容，而不是非广告。可见，本发明可以实现识别投屏设备在播放投屏内容前是否被插入非法广告。

可选地，如图2所示，本发明的实施例中，步骤S102可以包括如下步骤S102A-S102C：

S102A，对目标音频进行预处理，得到预处理后的目标音频；

其中，预处理包括预加重处理、分帧处理和加窗处理中的至少一种。

可以理解的是，为了方便确定出目标音频的指定音频特征，可以对目标音频进行预处理，并且，预处理的方式为预加重处理、分帧或者加窗处理中的一种或多种，每一预处理的实现方式可以为现有技术中的实现该预处理的方式。示例性的，当预处理的方式包括预加重处理、分帧以及加窗处理时，针对对目标音频进行预处理，得到预处理后的目标音频的实现方式，可以包括如下步骤(1)-(3)：

(1)采用高通滤波器，对目标音频进行预加重处理，得到第一音频；

可以理解的是，上述使用的高通滤波器可以为现有技术中的任一种。并且，对目标音频进行预加重处理时,所采用的处理公式可以为：H(z)＝1-uz^-1。

(2)对参考第一音频进行分帧，得到多个第二音频；

为了方便对参考音频分帧，分帧的采样点N可以设置为256或512，以使所涵盖的目标音频的采集时间为20-30ms。

(3)对多个第二音频进行加窗处理，得到预处理后的目标音频。

示例性的，对多个第二音频进行加窗处理所使用的窗函数，可以为汉明窗、汉宁窗等等。当采用汉明窗进行加窗处理时，假设分帧后的第二音频为s0(n)，n＝0,1,…,N-1，其中N为分帧是的采样点，加窗后的信号为s1(n),此时，s1(n)＝s0(n)*W(n)，W(n)的形式如下：

W(n,a)＝(1-a)-a*cos(2πn/(N-1))，

其中，0≤n≤N-1，不同的a值会产生不同的汉明窗，一般情况下a取0.46。

S102B，计算预处理后的目标音频的谱线能量；

示例性的，在一种实现方式中，计算预处理后的目标音频的谱线能量，可以包括：对预处理后的目标音频进行傅里叶变换，得到预处理后的目标音频的频谱；对预处理后的目标音频的频谱取模平方，得到预处理后的目标音频的谱线能量。

可以理解的是，对音频进行傅里叶变换和对频谱取模平方，均可以通过现有技术实现，在此不做赘述。

S102C，基于预处理后的目标音频的谱线能量，计算预处理后的目标音频的梅尔频率倒谱系数，得到目标音频的指定音频特征。

示例性的，在一种实现方式中，基于预处理后的目标音频的谱线能量，计算预处理后的目标音频的梅尔频率倒谱系数，可以包括：

基于预处理后的目标音频的谱线能量，采用预设的第一计算公式，得到目标音频的对数能量；

基于目标音频的对数能量，采用预设的第二计算公式，得到目标音频的梅尔频率倒谱系数，作为目标音频的指定音频特征；

其中，预设的第一计算公式包括：

预设的第二计算公式包括：

其中，0≤k≤N，x(n)为输入的目标音频，N为傅里叶变换的点数，s(m)用于表征目标音频的对数能量，C(n)为梅尔频率倒谱系数，H_m(k)表征滤波器的频率响应函数，M为滤波器的数量。

本发明实施例提供的方案，可以实现识别投屏设备在播放投屏内容前是否被插入非法广告。进一步的，可以先读目标音频处理，提取目标音频的指定音频特征，从而可以避免噪音对指定音频特征的影响，提高了识别非法广告的准确率。

投屏设备通过预先获取预设音频特征的方式，为本发明实现识别投屏设备在播放投屏内容前是否被插入非法广告提供了基础。

可选地，基于上述实施例，本发明的实施例中，在判断指定音频特征是否与预设音频特征相匹配之前，可以预先从后台服务器获取预设音频特征。

可选地，在一种实现方式中，包括：

向后台服务器发送投屏设备的标识信息或投屏内容的标识信息，并获取后台服务器反馈的，基于标识信息所查找的与投屏设备预先相关联的广告中的音频特征，作为预设音频特征。

其中，当投屏设备需要播放预先相关联的广告时，可以向后台服务器发送自身的标识信息，如设备标识等。若投屏设备需要播放预先相关联的广告时，则可以向后台服务器发送投屏内容的标识信息，如内容标识等。

当后台服务器接收到投屏设备发送的标识信息之后，可以基于该标识信息查找该标识信息对应的预先相关联的广告的音频特征，或查找该标识信息对应的投屏内容的音频特征，并将所查找到的音频特征反馈至投屏设备。

本发明实施例提供的方案，可以实现识别投屏设备在播放投屏内容前是否被插入非法广告。进一步的，投屏设备通过预先获取预设音频特征的方式，为本发明实现识别投屏设备在播放投屏内容前是否被插入非法广告提供了基础。

可选地，本发明的实施例中，在利用音频采集单元对投屏设备所在环境进行音频采集，得到待处理的目标音频之后，提取目标音频的指定音频特征之前，方法还包括：

判断目标音频的音频数据是否为静音数据，如果否，执行提取目标音频的指定音频特征；如果是，结束。

可以理解的是，为了识别投屏设备在播放投屏内容前是否被插入非法广告，需要获取投屏设备在开始播放投屏内容的预设时间段内的音频。若目标音频的音频数据为静音数据，则无法从静音数据中确定目标音频的指定音频特征。然而，若用户在投屏设备投屏过程中，将音量调整为静音，或者，在投屏后，投屏设备的音量较小时，都可能导致采集的音频数据为静音数据，从而无法提取目标音频的指定音频特征，因此，当目标音频的音频数据是否为静音数据，则结束流程。

示例性的，判断目标音频的音频数据是否为静音数据，可以包括：

利用活动语音检测算法(Voice Activity Detection，简称VAD)对该参考音频进行分析，确定该参考音频的音频数据是否为静音数据。其中，利用VAD对该参考音频进行分析可以包括：采用高斯混合模型(Gaussian Mixture Model，简称GMM)对该参考音频进行分析，得到该参考音频的音频数据是否为静音数据。

本发明实施例提供的方案，可以实现识别投屏设备在播放投屏内容前是否被插入非法广告。进一步，在判断目标音频的音频数据为静音数据之后，可以结束流程，从而不需要进行指定特征的提取，以及特征匹配的过程，可以节约运算资源。

如图3所示，本发明实施例还提供了一种非法广告确定流程的示意图。图3中，预设相关联广告与投屏内容提取梅尔频率倒谱系数的过程可以预先完成的，并预先存储在音频特征库中。其中，在音频特征库中，每一广告的梅尔频率倒谱系数与该广告的广告标识关联，而广告标识与该广告投放至的投票设备的设备标识关联。每一投屏内容的梅尔频率倒谱系数与该投屏内容相关联。当投屏设备获取到音频数据采集所采集的目标音频后，可以提取目标音频的梅尔频率倒谱系数，进而，根据目标音频的梅尔频率倒谱系数，与预设相关联广告的梅尔频率倒谱系数或投票内容的梅尔频率倒谱系数进行特征匹配，进而根据匹配结果，确定投屏设备在播放目标音频时是否被插入非法广告。

相应于上述的方法实施例，如图4所示，本发明实施例还提供了一种非法广告确定装置，应用于投屏设备，设备包括：

音频获得模块401，用于获得待处理的目标音频，其中，目标音频是投屏设备在开始播放投屏内容的预设时间段内采集到的音频；

特征提取模块402，用于提取目标音频的指定音频特征；其中，指定音频特征为用于唯一标识目标音频的特征信息；

特征匹配模块403，用于判断指定音频特征是否与预设音频特征相匹配，预设音频特征为与目标音频预先相关联的广告中的音频特征，或者预设音频特征为目标音频中的音频特征

广告确定模块404，用于如果指定音频特征与预设音频特征相匹配，确定投屏设备在播放目标音频时未插入非法广告。

可选地，指定音频特征包括梅尔频率倒谱系数。

可选地，特征提取模块具体用于，对目标音频进行预处理，得到预处理后的目标音频；其中，预处理包括预加重处理、分帧处理和加窗处理中的至少一种；计算预处理后的目标音频的谱线能量；基于预处理后的目标音频的谱线能量，计算预处理后的目标音频的梅尔频率倒谱系数，得到目标音频的指定音频特征。

可选地，音频获得模块包括：音频采集子模块，用于在投屏设备播放投屏内容之后，利用音频采集单元对投屏设备所在环境进行音频采集，得到待处理的目标音频。

可选地，装置还包括：静音判断模块，用于在音频采集子模块之后，且在特征提取模块之前，判断目标音频的音频数据是否为静音数据，如果否，执行提取目标音频的指定音频特征；如果是，结束。

可选地，装置还包括：信息发送模块，用于在特征匹配模块执行判断指定音频特征是否与预设音频特征相匹配之前，向后台服务器发送投屏设备的标识信息或投屏内容的标识信息，并获取后台服务器反馈的，基于标识信息所查找的与投屏设备预先相关联的广告中的音频特征，作为预设音频特征。

本发明实施例提供的方案，由于目标音频为投屏设备在开始播放投屏内容的预设时间段内采集到的音频，若投屏设备被插入非法广告，则该目标音频应当包含被插入非法广告播放时的音频，反之，若投票设备未被插入非法广告，那么该目标音频包含预先相关联的广告的音频，或播放投屏内容时的音频。进一步的，在提取目标音频的指定音频特征后，可以判断指定音频特征是否与预设音频特征相匹配，若相匹配，则说明目标音频为播放相关联的广告的音频，或播放投屏内容时的音频，也就是说，投屏设备在开始播放投屏内容的预设时间段内在播放的是相关联的广告或投屏内容，而不是非广告。可见，本发明可以实现识别投屏设备在播放投屏内容前是否被插入非法广告。

本发明实施例还提供了一种电子设备，如图5所示，包括处理器501、通信接口502、存储器503和通信总线504，其中，处理器501，通信接口502，存储器503通过通信总线504完成相互间的通信，

存储器503，用于存放计算机程序；

处理器501，用于执行存储器503上所存放的程序时，实现任一种非法广告确定方法的步骤。

本发明实施例所提供的电子设备，由于目标音频为投屏设备在开始播放投屏内容的预设时间段内采集到的音频，若投屏设备被插入非法广告，则该目标音频应当包含被插入非法广告播放时的音频，反之，若投票设备未被插入非法广告，那么该目标音频包含预先相关联的广告的音频，或播放投屏内容时的音频。进一步的，在提取目标音频的指定音频特征后，可以判断所述指定音频特征是否与预设音频特征相匹配，若相匹配，则说明目标音频为播放相关联的广告的音频，或播放投屏内容时的音频，也就是说，投屏设备在开始播放投屏内容的预设时间段内在播放的是相关联的广告或投屏内容，而不是非广告。可见，本发明可以实现识别投屏设备在播放投屏内容前是否被插入非法广告。

上述终端提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect，简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

通信接口用于上述终端与其他设备之间的通信。

存储器可以包括随机存取存储器(Random Access Memory，简称RAM)，也可以包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。可选地，存储器还可以是至少一个位于远离前述处理器的存储装置。

上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(Digital Signal Processing，简称DSP)、专用集成电路(Application SpecificIntegrated Circuit，简称ASIC)、现场可编程门阵列(Field－Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。

在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述实施例中任一所述的非法广告确定方法。

在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中任一所述的非法广告确定方法。

在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置、电子设备及存储介质等实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。