阅读说明：本技术 一种视频中批量植入内容信息的方法和系统 (Method and system for implanting content information in video in batch ) 是由 陈访访 于 2018-06-29 设计创作，主要内容包括：本发明的实施例提供了一种视频中批量植入内容信息的方法和系统,该方法读入已有视频的图像序列,通过物体识别和分类等技术获取视频中所有物体的图像数据,通过智能分析选取插入信息的目标物体,将待插入的内容植入到目标物体上,按照规则调整并优化图像,输出植入信息后的视频,并将系统获取的数据进行统计分析,方便数据的复用及插入内容的改变。为广告植入、特效植入等特定问题提供批量且智能的方法,提高精度和效果,同时节省人力和时间成本。(The embodiment of the invention provides a method and a system for implanting content information in a video in batches, the method comprises the steps of reading in an image sequence of an existing video, obtaining image data of all objects in the video through technologies such as object identification and classification, selecting a target object with inserted information through intelligent analysis, implanting content to be inserted into the target object, adjusting and optimizing the image according to rules, outputting the video with the inserted information, and performing statistical analysis on data obtained by the system, so that multiplexing of the data and changing of the inserted content are facilitated. The method provides a batch and intelligent method for specific problems such as advertisement implantation, special-effect implantation and the like, improves the precision and effect, and saves labor and time cost.)

一种视频中批量植入内容信息的方法和系统

技术领域

本发明涉及视频处理技术领域，尤其涉及一种视频中批量植入内容信息的方法和系统。

背景技术

现有技术中，视频中植入内容的方法能够为视频相关领域的工作提供很大的帮助。例如，为已有的视频植入合适的广告信息，为了不破坏视频原有的效果，做到自然的植入，可以在视频中的公交车、建筑物、公交站等物体上批量***适合物体本身风格的广告信息。再例如，为已有视频中的特定人或物体植入标志或细节，达到一定的视觉效果。

目前在视频中植特定内容，多采用人工操作软件的方式，抽取出视频中所有需要植入内容的图像，利用软件进行操作，然后生成修改后的新视频。

现有的利用软件进行视频植入内容的操作具有以下缺点：

1、当视频信息较大时，一般由较多帧的图组成，对于移动的物体，如行走的人、起飞中的飞机、移动的车，镜头移动时在视频中连续发生位置变化的建筑物等在每一帧图中的坐标都是不一样的，且随着镜头的变化物体的大小和角度也会发生改变，在利用人工操作软件进行目标图像信息的植入时，很难做到图像信息在每一帧图中跟随目标物体的改变而改变，这样对于完整的视频来说，就容易产生“穿帮”的结果，导致信息植入的失败。

2、当需要植入的信息种类和目标物体较多时，人工软件操作将耗费大量的人力和时间成本。

3、利用软件进行视频信息植入的修改时，所获得的每一个目标物体和每一个适合植入的图像的数据信息难以被复用，当在相同的原视频中进行不同内容的植入时，需要重复相似的工作流程。

发明内容

鉴于上述技术问题，本发明实施例提供一种视频中批量植入内容信息的方法和系统，能够再视频中批量植入指定内容或信息，从而为视频改写和后期制作提供一种更为智能何高效的方案。

本发明的实施例一方面提供一种视频中批量植入内容信息的方法，包括以下步骤：

获取原始视频，对所述原始视频内容进行物体检测和分类；

从所述物体检测和分类的结果中，筛选符合预先设定植入规则的物体；

获取植入内容信息，替换所述符合预先设定植入规则的物体，并进行图像适配；

分析植入内容信息后的视频的图像序列，根据植入内容信息的数据和所述符合预先设定植入规则的物体的数据进行位置、角度、大小的调整和优化；

逐帧完成内容信息植入后，输出植入内容后的视频。

还包括以下步骤：

预先设定底层数据库；所述底层数据库中包含待植入的所有内容信息、对应的人工标签及内容的特征数据；

从所述底层数据库中获取植入内容信息。

所述底层数据库中，还包括：

物体检测和分类的规则数据以及检测和分类的结果数据；

根据所述底层数据库中的物体检测和分类的规则数据对所述原始视频内容进行物体检测和分类。

所述底层数据库中，还包括：

预先设定的植入规则以及对应的物体和分类；

根据所述底层数据库中预先设定的植入规则以及对应的物体和分类，筛选符合植入规则的物体。

所述替换所述符合预先设定植入规则的物体，并进行图像适配，包括：

用植入内容信息替换或覆盖原始视频中对应物体，并根据原始图像的信息对植入内容信息进行图像适配，使得植入内容信息与原始视频的图像一致。

本发明的实施例另一方面还提供了一种视频中批量植入内容信息的系统，包括检测单元、分析单元、植入单元、适配单元和输出单元，其中，

所述检测单元，用于获取原始视频，对所述原始视频内容进行物体检测和分类；

所述分析单元，用于从所述物体检测和分类的结果中，筛选符合预先设定植入规则的物体；

所述植入单元，用于获取植入内容信息，替换所述符合预先设定植入规则的物体，并进行图像适配；

所述适配单元，用于分析植入内容信息后的视频的图像序列，根据植入内容信息的数据和所述符合预先设定植入规则的物体的数据进行位置、角度、大小的调整和优化；

所述输出单元，用于逐帧完成内容信息植入后，输出植入内容后的视频。

还包括底层数据库单元，其中，

所述底层数据库单元，用于预先设定底层数据库；所述底层数据库中包含待植入的所有内容信息、对应的人工标签及内容的特征数据；

所述植入单元，用于从所述底层数据库中获取植入内容信息。

还包括底层数据库单元，其中，

所述底层数据库单元，用于预先设定底层数据库；所述底层数据库中包含物体检测和分类的规则数据以及检测和分类的结果数据；

所述检测单元，用于根据所述底层数据库中的物体检测和分类的规则数据对所述原始视频内容进行物体检测和分类。

还包括底层数据库单元，其中，

所述底层数据库单元，用于预先设定底层数据库；所述底层数据库中包含预先设定的植入规则以及对应的物体和分类；

所述分析单元，用于根据所述底层数据库中预先设定的植入规则以及对应的物体和分类，筛选符合植入规则的物体。

还包括统计单元，其中，

所述统计单元，用于获取每个内容的特征数据及整个系统的操作数据，生成视频植入制作报告，并建立视频植入模型。

上述技术方案具有如下优点或有益效果：

本发明各个实施例中，读入已有视频的图像序列，通过物体识别和分类等技术获取视频中所有物体的图像数据，通过智能分析选取***信息的目标物体，将待***的内容植入到目标物体上，按照规则调整并优化图像，输出植入信息后的视频，并将系统获取的数据进行统计分析，方便数据的复用及***内容的改变。为广告植入、特效植入等特定内容植入问题提供批量且智能的方法，提高精度和效果，同时节省人力和时间成本。

附图说明

图1为本发明实施例一中视频中批量植入内容信息的流程图。

图2为本发明实施例二中视频中批量植入内容信息系统的结构示意图。

图3为本发明实施例三中视频中批量植入内容信息系统的结构原理图。

具体实施方式

下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例，然而应当理解，可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本发明，并且能够将本发明的范围完整的传达给本领域的技术人员。

本发明各个实施例中，主要应用于视频类文件中的特定物体或位置上，植入文字、图标、广告等内容信息。例如但不限于以下情况：电影、电视剧、短片、综艺视频、个人或组织机构拍摄的视频文件等，在视频中的车体、墙面、公交站台、建筑物、人等某一个或多个特定物体或特定位置，置入水印、广告LOGO、图片、标语等各种图像信息。具体的应用实例可以是将广告图标植入视频中的所有公交车体及公交站牌上。

本发明各个实施例中，其目的在于利用图像识别、物体检测、物体追踪等人工智能技术，为在视频中的目标物体上自动批量植入内容提供一种方法，覆盖视频中每一帧图像的目标物体，做到自然的植入。为广告植入、特效制作等提供一种更智能的方法。改变传统操作软件进行视频中内容植入的方式，节约大量人力和时间成本。为视频中的物体建立数据库，并进行标签管理和统计，为视频中***不同的内容提供可复用的信息，使视频的后期制作更为智能和高效。

图1为本发明实施例一中视频中批量植入内容信息的流程图。如图1所示，该视频中批量植入内容信息的流程包括以下步骤：

步骤101，获取原始视频，对所述原始视频内容进行物体检测和分类。

原始视频即为待植入内容的视频，需要对其中的部分内容进行内容植入。内容植入包括但不限于图像植入、文字植入或者其它类型的内容植入。内容植入的方式可以是直接替换，或者采用覆盖原有视频图像的方式。

原始视频中包含需要内容植入而替换的物体或者内容，在获取原始视频后，需要对原始视频进行内容分析，找出其中需要替换或覆盖的物体，也即进行物体检测和分类。检测的目的是发现需要替换或覆盖的物体，分类的目的在于对同类物体进行统一分析。

步骤102，从所述物体检测和分类的结果中，筛选符合预先设定植入规则的物体。

预先设定植入规则，也就是预先设置好需要植入内容而替换的物体以及替换的方式。从原始视频中检测得到的物体以及相关分类数据，进行进一步的分析，从而筛选出真正需要替换的物体。

植入规则即为替换物体的种类、位置、替换或覆盖方式以及植入内容等，根据植入内容来确定具体的替换物体。

步骤103，获取植入内容信息，替换所述符合预先设定植入规则的物体，并进行图像适配。

得到需要替换的物体后，获取植入内容信息，也就是用来替换该物体的图像或者其它内容信息。用植入内容信息替换符合预先设定的植入规则的物体，从而使得植入内容信息替换了原始视频中相关物体。

替换之后的图像，由于图像内容、效果、像素、大小等各种原因，可能不能完全符合，因而需要进一步的图像适配，将植入内容信息与原始视频图像进行同意适配处理，使得二者融合为一。

步骤104，分析植入内容信息后的视频的图像序列，根据植入内容信息的数据和所述符合预先设定植入规则的物体的数据进行位置、角度、大小的调整和优化。

适配后的图像，仍然会出现各种问题，因而还需要进一步分析植入内容信息后的视频的图像序列，对于未被植入内容信息覆盖的图像内容需要抹除，并将原有视频图像中的背景图像还原。同时，根据植入内容信息的具体数据和对应物体的数据，还需要进行植入内容的位置、角度、大小等各方面的优化调整，以使得植入内容后的图像更为逼真。

步骤105，逐帧完成内容信息植入后，输出植入内容后的视频。

对于原始视频逐帧进行内容植入后，得到新的视频，其中的内容已经完成了替换，也即得到了视频中批量植入内容信息后的视频。

进一步的，需要预先设定底层数据库；所述底层数据库中包含待植入的所有内容信息、对应的人工标签及内容的特征数据；从所述底层数据库中获取植入内容信息。

底层数据库中，还包括：物体检测和分类的规则数据以及检测和分类的结果数据；根据所述底层数据库中的物体检测和分类的规则数据对所述原始视频内容进行物体检测和分类。

底层数据库中，还包括：预先设定的植入规则以及对应的物体和分类；根据所述底层数据库中预先设定的植入规则以及对应的物体和分类，筛选符合植入规则的物体。

植入内容而需要替换掉所述符合预先设定植入规则的物体，并进行图像适配，包括：用植入内容信息替换原始视频中对应物体，并根据原始图像的信息对植入内容信息进行图像适配，使得植入内容信息与原始视频的图像一致。

进一步的，还需要获取每个植入内容的特征数据及整个系统的操作数据，生成视频内容植入制作报告，并建立视频内容植入模型。

为了实现上述流程，本发明技术方案的另一个实施例提供了一种视频中批量植入内容信息的系统，图2为本发明实施例二中视频中批量植入内容信息系统的结构示意图。

如图2所示，该儿童故事播放系统包括检测单元21、分析单元22、植入单元23、适配单元24和输出单元25，其中，

所述检测单元21，用于获取原始视频，对所述原始视频内容进行物体检测和分类；

所述分析单元22，用于从所述物体检测和分类的结果中，筛选符合预先设定植入规则的物体；

所述植入单元23，用于获取植入内容信息，替换所述符合预先设定植入规则的物体，并进行图像适配；

所述适配单元24，用于分析植入内容信息后的视频的图像序列，根据植入内容信息的数据和所述符合预先设定植入规则的物体的数据进行位置、角度、大小的调整和优化；

所述输出单元25，用于逐帧完成内容信息植入后，输出植入内容后的视频。

进一步的，该系统还包括底层数据库单元26，其中，

所述底层数据库单元26，用于预先设定底层数据库；所述底层数据库中包含待植入的所有植入内容信息、对应的人工标签及内容的特征数据；

所述植入单元23，用于从所述底层数据库中获取植入内容信息。

所述底层数据库单元26，还用于预先设定底层数据库；所述底层数据库中包含物体检测和分类的规则数据以及检测和分类的结果数据；

所述检测单元21，用于根据所述底层数据库中的物体检测和分类的规则数据对所述原始视频内容进行物体检测和分类。

所述底层数据库单元26，用于预先设定底层数据库；所述底层数据库中包含预先设定的植入规则以及对应的物体和分类；

所述分析单元22，用于根据所述底层数据库中预先设定的植入规则以及对应的物体和分类，筛选符合植入规则的物体。

进一步的，该系统还包括统计单元27，其中，

所述统计单元27，用于获取每个内容的特征数据及整个系统的操作数据，生成视频植入制作报告，并建立视频植入模型。

如图3所示，本发明实施例三提供另外一种视频中批量植入内容信息系统，其中，

该系统包含三个主要部分：视频读取、信息植入、视频输出。

视频读取主要包含读入模块，能够将目标视频读入。

信息植入是该系统最重要的部分，能够对读入的视频进行处理，识别视频中的目标物体，并选取待植入的目标图像，按照一定的规则将目标图像植入视频，其包含五个功能模块：目标图像库、智能检测模块、智能分析模块、智能植入模块、智能统计模块。根据需要***的信息，提前做好的待***的图像，所有图像进行标签和数据管理，形成目标图像库，存储于数据库中；智能检测模块对读入的目标视频进行图像识别，完成物体检测和分类，并将获取到的所有图像数据传输给智能分析模块；智能分析模块对智能检测模块获得的类别、坐标等数据进行分析，根据分析结果筛选出目标物体，将目标物体的数据传输给智能植入模块；智能植入模块根据智能分析模块获得的分析结果，将待***的图像***到目标物体上，并根据***图像的数据和目标物体的数据进行位置、角度、大小的自动调整和优化；智能统计模块能够统计所有智能检测模块、智能分析模块、智能植入模块的数据，并给出视频处理前后的数据统计情况；所有模块获得的数据将被存储于数据库中。

视频输出主要包含输出模块，能够获取处理完的所有图像序列，并将处理完的视频进行导出。

具体来说，视频读取主要包含读入模块，能够将目标视频读入；信息植入是该系统最重要的部分，能够对读入的视频进行处理，识别视频中的目标物体，并选取待植入的目标图像，按照一定的规则将目标图像植入视频，其包含五个功能模块：数据库、智能检测模块、智能分析模块、智能植入模块、智能统计模块；视频输出主要包含输出模块，能够将处理完的视频进行导出。

关于信息植入部分的五个主要模块，具体如下：

数据库中存储有所有图像信息和数据。根据需要***的信息，提前做好的待***的图像进行标签管理后，形成目标图像库存储于数据库中。系统中产生的图像特征信息也存储于数据库中。

智能检测模块，对读入的目标视频进行图像识别，完成物体检测和分类，并将获取到的所有图像数据传输给智能分析模块；

智能分析模块，对智能检测模块获得的类别、坐标等数据进行分析，根据分析结果筛选出目标物体，将目标物体的数据传输给智能植入模块；

智能植入模块，根据智能分析模块获得的分析结果，将待***的图像***到目标物体上，并根据***图像的数据和目标物体的数据进行位置、角度、大小的自动调整和优化；

智能统计模块，智能统计模块能够统计所有智能检测模块、智能分析模块、智能植入模块的数据，并给出视频处理前后的数据统计情况。

本发明各个实施例中，读入已有视频的图像序列，通过物体识别和分类等技术获取视频中所有物体的图像数据，通过智能分析选取***信息的目标物体，将待***的内容植入到目标物体上，按照规则调整并优化图像，输出植入信息后的视频，并将系统获取的数据进行统计分析，方便数据的复用及***内容的改变。为广告植入、特效植入等特定内容植入问题提供批量且智能的方法，提高精度和效果，同时节省人力和时间成本。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理包括，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述收发方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述的是本发明的优选实施方式，应当指出对于本技术领域的普通人员来说，在不脱离本发明所述的原理前提下还可以做出若干改进和润饰，这些改进和润饰也在本发明的保护范围内。