阅读说明：本技术 视频列表数据聚合方法、装置、计算机设备及存储介质 (Video list data aggregation method and device, computer equipment and storage medium ) 是由 张子立 于 2019-10-22 设计创作，主要内容包括：本发明公开了视频列表数据聚合方法、装置、计算机设备及存储介质,涉及数据聚合领域。该方法包括：当接收到视频列表数据的同步请求后,根据所述同步请求查询对应的视频列表数据,并根据查询到的视频列表数据生成视频ID集合和生产者ID集合；根据所述视频ID集合异步请求点赞数据以及根据所述生产者ID集合异步请求关注数据；当获取到点赞数据和/或关注数据时,则将所述点赞数据和/或关注数据与视频列表数据进行聚合；返回聚合后的视频列表数据。本发明可保证获取到基础的视频列表数据,同时异步请求点赞数据和/或关注数据,下游服务互相不影响,可以快速水平扩充。(The invention discloses a video list data aggregation method and device, computer equipment and a storage medium, and relates to the field of data aggregation. The method comprises the following steps: after receiving a synchronization request of video list data, inquiring corresponding video list data according to the synchronization request, and generating a video ID set and a producer ID set according to the inquired video list data; asynchronously requesting praise data according to the video ID set and asynchronously requesting attention data according to the producer ID set; when the praise data and/or the concerned data are/is acquired, aggregating the praise data and/or the concerned data with the video list data; and returning the aggregated video list data. The invention can ensure that the basic video list data is acquired, and meanwhile, the data is complied with and/or concerned by asynchronous requests, the downstream services do not influence each other, and the invention can be expanded horizontally and rapidly.)

视频列表数据聚合方法、装置、计算机设备及存储介质

技术领域

本发明涉及数据聚合领域，尤其涉及视频列表数据聚合方法、装置、计算机设备及存储介质。

背景技术

目前的数据请求方式一般分为同步请求和异步请求，这两种请求方式各有各的特点。例如，同步请求使用主线程一次性获得所有请求数据，这就导致一个比较常见的问题，当请求的数据比较大时，容易出现卡顿现象，也就是阻塞主线程；异步请求则是再创建一个线程，使用这个线程进行请求数据，逐步请求数据，这样就可以不断获得数据同时进行数据更新，不至于造成卡顿现象，即异步请求可以一边接收数据一边用接收的数据进行数据更新，不至于必须要接收完数据才能进行更新，但这种方式无法保证数据一定能接收到。

对于视频服务来说，某些数据必须保证能够获取到，某些数据则是可有可无的，现有的数据请求方式则无法同时满足这两方面的要求。

发明内容

本发明实施例提供了视频列表数据聚合方法、装置、计算机设备及存储介质，旨在解决现有数据请求方法无法保证既能获取到指定数据又能不断获取可选数据的问题。

本发明实施例提供一种视频列表数据聚合方法，其包括：

当接收到视频列表数据的同步请求后，根据所述同步请求查询对应的视频列表数据，并根据查询到的视频列表数据生成视频ID集合和生产者ID集合；

根据所述视频ID集合异步请求点赞数据以及根据所述生产者ID集合异步请求关注数据；

当获取到点赞数据和/或关注数据时，则将所述点赞数据和/或关注数据与视频列表数据进行聚合；

返回聚合后的视频列表数据。

优选的，所述根据查询到的视频列表数据生成视频ID集合和生产者ID集合，包括：

遍历所述视频列表数据中的视频ID，生成视频ID集合；

遍历所述视频列表数据中的生产者ID，生成生产者ID集合。

优选的，所述根据所述视频ID集合异步请求点赞数据以及根据所述生产者ID集合异步请求关注数据，包括：

根据所述视频ID集合异步请求点赞数据；

根据所述生产者ID集合异步请求关注数据，并且关注数据的异步请求与点赞数据的异步请求并发进行。

优选的，所述根据所述视频ID集合异步请求点赞数据，包括：

生成一DeferredResult对象，所述DeferredResult对象保存有网络连接的上下文；

将所述点赞数据的异步请求交由点赞业务线程，通过所述点赞业务线程异步请求点赞数据；

当点赞业务线程根据异步请求查询到点赞数据时，将查询到的点赞数据填充至所述DeferredResult对象并返回。

优选的，所述根据所述生产者ID集合异步请求关注数据，包括：

生成一DeferredResult对象，所述DeferredResult对象保存有网络连接的上下文；

将所述关注数据的异步请求交由关注业务线程，通过所述关注业务线程异步请求关注数据；

当关注业务线程根据异步请求查询到关注数据时，将查询到的关注数据填充至所述DeferredResult对象并返回。

优选的，所述当获取到点赞数据和/或关注数据时，则将所述点赞数据和/或关注数据与视频列表数据进行聚合，包括：

判断在第一超时时间内是否获取到点赞数据，和/或在第二超时时间内是否获取到关注数据；

若在第一超时时间内获取到点赞数据，则将所述点赞数据与视频列表数据进行聚合；和/或，若在第二超时时间内获取到关注数据，则将所述关注数据与视频列表数据进行聚合。

优选的，所述的视频列表数据聚合方法还包括：

若在第一超时时间内未获取到点赞数据，以及在第二超时时间内未获取到关注数据，则直接将未聚合的视频列表数据返回。

本发明实施例提供一种视频列表数据聚合装置，其包括：

同步请求单元，用于当接收到视频列表数据的同步请求后，根据所述同步请求查询对应的视频列表数据，并根据查询到的视频列表数据生成视频ID集合和生产者ID集合；

异步请求单元，用于根据所述视频ID集合异步请求点赞数据以及根据所述生产者ID集合异步请求关注数据；

聚合单元，用于当获取到点赞数据和/或关注数据时，则将所述点赞数据和/或关注数据与视频列表数据进行聚合；

返回单元，用于返回聚合后的视频列表数据。

本发明实施例提供一种计算机设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上所述的视频列表数据聚合方法。

本发明实施例提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序当被处理器执行时使所述处理器执行如上所述的视频列表数据聚合方法。

本发明实施例提供了视频列表数据聚合方法、装置、计算机设备及存储介质，该方法包括：当接收到视频列表数据的同步请求后，根据所述同步请求查询对应的视频列表数据，并根据查询到的视频列表数据生成视频ID集合和生产者ID集合；根据所述视频ID集合异步请求点赞数据以及根据所述生产者ID集合异步请求关注数据；当获取到点赞数据和/或关注数据时，则将所述点赞数据和/或关注数据与视频列表数据进行聚合；返回聚合后的视频列表数据。本发明实施例可保证获取到基础的视频列表数据，同时异步请求点赞数据和/或关注数据，下游服务互相不影响，可以快速水平扩充。

附图说明

为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的视频列表数据聚合方法的流程示意图；

图2为本发明实施例提供的视频列表数据聚合装置的示意性框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进一步理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

请参阅图1，图1为本发明实施例提供的一种视频列表数据聚合方法的流程示意图，包括步骤S101～S104：

S101、当接收到视频列表数据的同步请求后，根据所述同步请求查询对应的视频列表数据，并根据查询到的视频列表数据生成视频ID集合和生产者ID集合；

当需要进行视频列表数据的聚合时，先获取视频列表数据的同步请求，再根据该同步请求来查询对应的视频列表数据。由于视频列表数据是视频服务中所必须的基础数据，所以本发明实施例采用同步请求的方式来请求数据，确保能够获取到视频列表数据。

再根据视频列表数据生成两个集合，一个是视频ID集合，另一个是生产者ID集合。其中的视频ID集合是指各个视频对应的视频ID构成的集合，其中的生产者ID集合是指各个视频对应的用户构成的集合。其中的生产者可以是指视频的作者。

视频列表数据中含有视频ID和生产者ID的信息，遍历此视频列表数据，可根据其中的信息获得视频ID和生产者ID，分别缓存为视频ID集合和生产者ID集合。

在一实施例中，所述根据查询到的视频列表数据生成视频ID集合和生产者ID集合包括：

遍历所述视频列表数据中的视频ID，生成视频ID集合；

遍历所述视频列表数据中的生产者ID，生成生产者ID集合。

具体的，由于视频列表数据中有多个视频的信息，所以可遍历视频列表数据中的视频ID从而获取视频列表数据中的所有视频ID，并构成所述视频ID集合。同样的，可遍历视频列表数据中的生产者ID从而获取视频列表数据中的所有生产者ID，并构成生产者ID集合。

本实施例中，可设置同步请求的请求超时时间，如果在请求超时时间内未获取到视频列表数据，则返回空视频列表数据。此处的请求超时时间可设置较大，例如可设置请求超时时间为500毫秒，以便留有足够的时间请求视频列表数据。假设需要查询20个视频的信息，在查询后确认对应的视频存在且状态正常，则会返回这20个视频ID对应的视频数据，构成视频列表数据。所述视频数据中即包含上述的视频ID和生产者ID的信息，当然，所述视频数据中可以不仅仅包含上述视频ID和生产者ID的信息，还可以包含其他信息，例如视频时长、视频类型、视频标签等等。这样所述视频列表数据中也不仅仅包含上述视频ID和生产者ID的信息，同样还可以包含视频时长、视频类型、视频标签等信息，如果调用者需要这些信息，则可以将这些信息一同返回。

如果根据这20个视频ID查询后确认有不存在的视频，则不存在的视频对应的视频ID不会进入后续处理流程。

S102、根据所述视频ID集合异步请求点赞数据以及根据所述生产者ID集合异步请求关注数据。

根据上述步骤得到的视频ID集合，可以获取点赞数据；根据上述步骤得到的生产者ID集合，也可以得到关注数据，这样可以依据点赞数据和关注数据进行聚合操作，从而可以获知当前用户在这一批视频中点赞过哪些视频或者关注过哪些视频的生产者。

在一实施例中，所述步骤S102包括：

根据所述视频ID集合异步请求点赞数据；

根据所述生产者ID集合异步请求关注数据，并且关注数据的异步请求与点赞数据的异步请求并发进行。

在本实施例中，分别异步请求点赞数据和关注数据，并且两种异步请求并发进行，这样可以提高请求效率。

在一实施例中，所述根据所述视频ID集合异步请求点赞数据，包括：

生成一DeferredResult对象，所述DeferredResult对象保存有网络连接的上下文；

将所述点赞数据的异步请求交由点赞业务线程，通过所述点赞业务线程异步请求点赞数据；

当点赞业务线程根据异步请求查询到点赞数据时，将查询到的点赞数据填充至所述DeferredResult对象并返回。

在本实施例中，可根据点赞数据的异步请求，先生成一个DeferredResult对象，该DeferredResult对象保存着网络连接的上下文。在生成DeferredResult对象后，可定义回调方法，交由点赞业务线程池中的点赞业务线程，来异步请求点赞数据，此时即可释放网络线程，大大提高网络处理性能。

本实施例采用DeferredResult对象，其具有如下两个功能：超时配置和结果设置。对于超时配置来说：可以通过构造函数可以传入超时时间，单位为毫秒；因为需要等待设置结果后才能继续处理并返回，如果一直等待会导致一直无响应，因此必须有相应的超时机制来避免这个问题。对于结果设置来说：它的结果存储在一个名称为result的属性中；可以通过调用setResult的方法来设置属性。

在一实施例中，所述根据所述生产者ID集合异步请求关注数据，包括：

生成一DeferredResult对象，所述DeferredResult对象保存有网络连接的上下文；

将所述关注数据的异步请求交由关注业务线程，通过所述关注业务线程异步请求关注数据；

当关注业务线程根据异步请求查询到关注数据时，将查询到的关注数据填充至所述DeferredResult对象并返回。

在本实施例中，可根据关注数据的异步请求，先生成一个DeferredResult对象，该DeferredResult对象保存着网络连接的上下文。在生成DeferredResult对象后，可定义回调方法，交由关注业务线程池中的关注业务线程，来异步请求关注数据，此时即可释放网络线程，大大提高网络处理性能。

S103、当获取到点赞数据和/或关注数据时，则将所述点赞数据和/或关注数据与视频列表数据进行聚合；

本步骤中，在获取到点赞数据和/或关注数据后，可以进行后续的聚合操作。

在一实施例中，所述步骤S103包括：

判断在第一超时时间内是否获取到点赞数据，和/或在第二超时时间内是否获取到关注数据；

若在第一超时时间内获取到点赞数据，则将所述点赞数据与视频列表数据进行聚合；和/或，若在第二超时时间内获取到关注数据，则将所述关注数据与视频列表数据进行聚合。

在本步骤中，可预先定义此处的第一超时时间，如果在第一超时时间内点赞业务线程获取到点赞数据，则调起回调方法，把点赞数据填充进DeferredResult对象，以便后续返回给客户端；反之如果在第一超时时间内未获取到点赞数据，则可直接返回空数据，释放资源，避免影响其他请求的处理。

在本步骤中，可预先定义此处的第二超时时间，如果在第二超时时间内关注业务线程获取到关注数据，则调起回调方法，把关注数据填充进DeferredResult对象，以便后续返回给客户端；反之如果在第二超时时间内未获取到关注数据，则可直接返回空数据，释放资源，避免影响其他请求的处理。

在本实施例中，如果在第一超时时间内获取到点赞数据，或在第二超时时间内获取到关注数据，则进行聚合操作。这样通过异步并发请求非基础数据服务(点赞数据和关注数据)，能比传统的同步阻塞方案提供更好的性能。在一具体应用场景中，所述第一超时时间和第二超时时间可设置较短，例如均可设置为50毫秒，这样可限制点赞数据和关注数据尽快返回，下游服务之间互不影响，以便快速水平扩充。

S104、返回聚合后的视频列表数据。

本步骤中，聚合后的数据对象返回给调用方，即客户端。

在一实施例中，所述视频列表数据聚合方法还包括：

若在第一超时时间内未获取到点赞数据，以及在第二超时时间内未获取到关注数据，则直接将未聚合的视频列表数据返回。

即在相应超时时间内未获取到点赞数据和关注数据，会直接将未聚合的视频列表数据返回。如果在第一超时时间内未获取到点赞数据或者在第二超时时间内未获取到关注数据，则不进行聚合操作，此时之前获取到的视频列表数据已能够为用户提供基础的服务。

如果从接收到同步请求开始的预设时间内未返回视频列表数据(不论是聚合的视频列表数据还是未聚合的视频列表数据)，则发出告警，向客户端反馈超时提示。

请参阅图2，图2为本发明实施例提供的一种视频列表数据聚合装置的示意性框图，该装置200可以包括：

同步请求单元201，用于当接收到视频列表数据的同步请求后，根据所述同步请求查询对应的视频列表数据，并根据查询到的视频列表数据生成视频ID集合和生产者ID集合；

异步请求单元202，用于根据所述视频ID集合异步请求点赞数据以及根据所述生产者ID集合异步请求关注数据；

聚合单元203，用于当获取到点赞数据和/或关注数据时，则将所述点赞数据和/或关注数据与视频列表数据进行聚合；

返回单元204，用于返回聚合后的视频列表数据。

所述同步请求单元201包括：

第一遍历单元，用于遍历所述视频列表数据中的视频ID，生成视频ID集合；

第二遍历单元，用于遍历所述视频列表数据中的生产者ID，生成生产者ID集合。

所述异步请求单元202包括：

第一异步请求单元，用于根据所述视频ID集合异步请求点赞数据；

第二异步请求单元，用于根据所述生产者ID集合异步请求关注数据，并且关注数据的异步请求与点赞数据的异步请求并发进行。

所述第一异步请求单元包括：

第一生成单元，用于生成一DeferredResult对象，所述DeferredResult对象保存有网络连接的上下文；

第一请求单元，用于将所述点赞数据的异步请求交由点赞业务线程，通过所述点赞业务线程异步请求点赞数据；

第一填充单元，用于当点赞业务线程根据异步请求查询到点赞数据时，将查询到的点赞数据填充至所述DeferredResult对象并返回。

所述第二异步请求单元包括：

第二生成单元，用于生成一DeferredResult对象，所述DeferredResult对象保存有网络连接的上下文；

第二请求单元，用于将所述关注数据的异步请求交由关注业务线程，通过所述关注业务线程异步请求关注数据；

第二填充单元，用于当关注业务线程根据异步请求查询到关注数据时，将查询到的关注数据填充至所述DeferredResult对象并返回。

所述聚合单元203包括：

判断单元，用于判断在第一超时时间内是否获取到点赞数据，和/或在第二超时时间内是否获取到关注数据；

聚合执行单元，用于若在第一超时时间内获取到点赞数据，则将所述点赞数据与视频列表数据进行聚合；和/或，若在第二超时时间内获取到关注数据，则将所述关注数据与视频列表数据进行聚合。

所述视频列表数据聚合装置200还包括：

未聚合单元，用于若在第一超时时间内未获取到点赞数据，以及在第二超时时间内未获取到关注数据，则直接将未聚合的视频列表数据返回。

本发明实施例还提供一种计算机设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现所述的视频列表数据聚合方法。

本发明实施例还一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序当被处理器执行时使所述处理器执行所述的视频列表数据聚合方法。

所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的设备、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

在本发明所提供的几个实施例中，应该理解到，所揭露的设备、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为逻辑功能划分，实际实现时可以有另外的划分方式，也可以将具有相同功能的单元集合成一个单元，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。