CN111966733B - 热点知识生成方法及装置 - Google Patents

Abstract

本发明提供了一种热点知识生成方法及装置，涉及数据处理技术领域，该方法包括：获取时间窗口内的商品知识数据；商品知识数据包括每种商品的热点参数；按照热点参数对商品知识数据进行分组，按照分组结果将商品知识数据写入多个目标文件；按照目标文件计算商品的热度值；根据商品的热度值生成时间窗口内的热点知识。本发明可以收集商品知识数据，根据热点参数对商品知识数据进行分组计算，得到商品的热度值，根据商品的热度值生成时间窗口内的热点知识，该方案耗时少，数据处理速度快，且得到热点知识结果准确。

Description

热点知识生成方法及装置

技术领域

本发明涉及数据处理技术领域，尤其是涉及一种热点知识生成方法及装置。

背景技术

在银行的客服知识库中，大部分热点知识是通过手工标注来实现的，该方式费时费力，并且人工标标注热点知识的过程，存在一定主观性，标注结果不准确，不能反映坐席员真正的使用情况，是知识库系统中亟待改进的功能。

发明内容

本发明提供了一种热点知识生成方法及装置，可以提升热点知识的生成效率，节省人工成本，提升数据处理速度和结果准确度。

第一方面，本发明实施例提供了一种热点知识生成方法，该方法包括：获取时间窗口内的商品知识数据；所述商品知识数据包括每种商品的热点参数；按照所述热点参数对所述商品知识数据进行分组，按照分组结果将所述商品知识数据写入多个目标文件；按照所述目标文件计算商品的热度值；根据所述商品的热度值生成所述时间窗口内的热点知识。

第二方面，本发明实施例还提供一种热点知识生成装置，该装置包括：获取模块，用于获取时间窗口内的商品知识数据；所述商品知识数据包括每种商品的热点参数；分组模块，用于按照所述热点参数对所述商品知识数据进行分组，按照分组结果将所述商品知识数据写入多个目标文件；计算模块，用于按照所述目标文件计算商品的热度值；生成模块，用于根据所述商品的热度值生成所述时间窗口内的热点知识。

第三方面，本发明实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述热点知识生成方法。

第四方面，本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述热点知识生成方法的计算机程序。

本发明实施例带来了以下有益效果：本发明实施例提供了一种热点知识生成方案，该方案通过时间窗口获取商品知识数据，其中，商品知识数据包括每种商品的热点参数，之后，按照热点参数对商品知识数据进行分组，按照分组结果将商品知识数据写入多个目标文件，计算每个目标文件中商品的热度值，最后综合多个目标文件中的商品的热度值生成时间窗口内的热点知识。本发明实施例可以收集商品知识数据，根据热点参数对商品知识数据进行分组计算，得到商品的热度值，根据商品的热度值生成时间窗口内的热点知识，该方案耗时少，数据处理速度快，且得到热点知识结果准确。

本发明的其他特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的热点知识生成方法流程图；

图2为本发明实施例提供的一种热点知识生成装置结构框图；

图3为本发明实施例提供的另一种热点知识生成装置结构框图；

图4为本发明实施例提供的热点知识生成装置中分组模块结构框图；

图5为本发明实施例提供的计算机设备结构框图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例提供的一种热点知识生成方法及装置，该方法能够按照固定的时间窗口大小，收集知识库后台的点击量、访问频率、评价分数等指标，通过滑动窗口聚合完成热点知识的计算，该方式耗时少、运行速度快、结果准确。

为便于对本实施例进行理解，首先对本发明实施例所公开的一种热点知识生成方法进行详细介绍。

本发明实施例提供了一种热点知识生成方法，参见图1所示的一种热点知识生成方法流程图，该方法包括以下步骤：

步骤S102，获取时间窗口内的商品知识数据。

在本发明实施例中，时间窗口是指一段固定的时间长度，例如，可以为一个小时。获取一个小时时间段内商品知识数据。其中，商品可以为金融产品，如理财产品。商品知识数据是该商品的用户关注以及用户使用情况的数据。商品知识数据包括每种商品的热点参数。热点参数是用于描述用户关注程度以及用户使用频率等信息的参数，可以包括一种或多种参数类型。

需要说明的是，在获取时间窗口内的商品知识数据之前，需要预先查询坐席知识库，抽取出各知识点时间戳，划分窗口大小，过滤出点击行为、查询频率、评分、收藏数等数据，以便提升数据获取效率。

步骤S104，按照热点参数对商品知识数据进行分组，按照分组结果将商品知识数据写入多个目标文件。

在本发明实施例中，由于知识库中的知识是海量的，为了统计每个窗口下最热门的商品，提升数据处理效率，可以将时间窗口内的多条商品知识数据进行分组处理。可以按照热点参数的类别或各类别对应数值的大小对商品知识数据进行分组，将多个分组结果分别写入多个不同的目标文件中，以保证相同的知识被分到相同的文件中。

步骤S106，按照目标文件计算商品的热度值。

在本发明实施例中，每个目标文件中存储属于同一个分组的商品知识数据，对每个目标文件中的商品知识数据计算商品的热度值。热度值用于描述商品在多种热度参数综合考虑情况下的被关注程度。

步骤S108，根据商品的热度值生成时间窗口内的热点知识。

在本发明实施例中，按照热度值对商品排序，热度值越高说明商品被关注程度越高，根据排序结果确定时间窗口内的热点知识。

本发明实施例提供了一种热点知识生成方案，该方案通过时间窗口获取商品知识数据，其中，商品知识数据包括每种商品的热点参数，之后，按照热点参数对商品知识数据进行分组，按照分组结果将商品知识数据写入多个目标文件，计算每个目标文件中商品的热度值，最后综合多个目标文件中的商品的热度值生成时间窗口内的热点知识。本发明实施例可以收集商品知识数据，根据热点参数对商品知识数据进行分组计算，得到商品的热度值，根据商品的热度值生成时间窗口内的热点知识，该方案耗时少，数据处理速度快，且得到热点知识结果准确。

为了保证分组的效率，按照热点参数对商品知识数据进行分组，按照分组结果将商品知识数据写入多个目标文件，可以按照如下步骤执行：

按照热点参数计算商品知识数据的哈希值；根据哈希值和商品知识数据对商品知识数据进行分组；将属于同一分组的商品知识数据写入同一个目标文件。

在本发明实施例中，若一个时间窗口中有n条商品知识数据。对每条商品知识数据通过哈希操作得到哈希值h，根据哈希值h和n条商品知识数据进行分组，并将属于同一分组的商品知识数据写入同一个目标文件。

根据哈希值和商品知识数据对商品知识数据进行分组，可以按照如下步骤执行：

计算哈希值与商品知识数据的数量相除的余数；若第一商品知识数据与第二商品知识数据对应的余数相同，则确定第一商品知识数据和第二商品知识数据属于同一分组。

在本发明实施例中，将哈希值h与商品知识数据的数量n相除，得到余数，若第一商品知识数据与第二商品知识数据对应的余数相同，则确定第一商品知识数据和第二商品知识数据属于同一分组。因此，可以确保将相同的知识分到相同的目标文件中。

热点参数至少包括点击次数参数、查询频率参数、评分参数和收藏次数参数中的一种或几种；按照目标文件计算商品的热度值，包括：获取各类热点参数的权重值；计算每个目标文件中商品的热点参数值；按照权重值对多个热点参数值进行加权计算，得到商品的热度值。

在本发明实施例中，权重值可以根据实际需求进行设定，本发明实施例对此不作具体限定。热点参数值是根据热点参数类型计算得到的该类型的被关注程度值。例如，根据击次数参数这个类型的热点参数，计算得到热点参数值为，点击次数为50次，根据查询频率参数这个类型的热点参数，计算得到的热点参数值为，查询频率为每分钟3次。基于权重值对多个热点参数值进行加权计算，得到商品的热度值，用于描述商品在多个维度的综合被关注程度。

为了提升内存处理效率，按照热点参数对商品知识数据进行分组之后，还可以执行如下步骤：

判断分组结果所需内存量是否小于空闲内存量；如果是，按照分组结果将商品知识数据写入多个目标文件；如果否，按照热点参数对分组结果进行再分组，按照再分组结果将商品知识数据写入多个目标文件。

在本发明实施例中，分组结果包括多组目标文件中的多个商品知识数据，每组商品知识数据存在不同的目标文件中，如果一个目标文件中数据量在数据处理时所需要的内存量小于或等于系统中空闲内存量，则证明系统可以一次性装载该目标文件，按照分组结果将商品知识数据写入多个目标文件，如果一个目标文件中数据量在数据处理时所需要的内存量大于系统中空闲内存量，则按照热点参数对分组结果进行再分组，使再分组得到的目标文件中，商品知识数据在数据处理时所需要的内存量减小，按照再分组结果将商品知识数据写入多个目标文件，之后判断再分组结果所需内存量是否小于空闲内存量，直至分组结果所需内存量小于空闲内存量。

为了便于全局统计，提升数据处理效率，根据商品的热度值生成时间窗口内的热点知识之后，还可以执行如下步骤：

根据多个时间窗口内的热点知识，生成聚合的热点知识。

在本发明实施例中，可以间隔固定时长获取时间窗口内的商品知识数据，例如，时间窗口长度为1小时，每5分钟获取一次时间窗口内的商品知识数据，即分别要统计[09:00，10:00)，[09:05，10:05)，[09:10，10:10)…等窗口的商品点击量、查询评率、评分等。

之后，依次在每个窗口内分片计算最热知识，做滑动窗口聚合，按每个窗口聚合，输出每个窗口中点击量前N名的商品，得到时间窗口内的热点知识，最后通过聚合各个时间窗口的统计量计算最热知识。

本发明实施例提供了一种热点知识生成方法及装置，该方法能够对热点知识生成任务采用滑动窗口聚合的思想进行统计，最终根据个窗口的统计结果聚合生成热点知识，该方法计算效率高、结果准确，能够有效的替代知识库中的知识手工标热。

本发明实施例中还提供了一种热点知识生成装置，如下面的实施例所述。由于该装置解决问题的原理与热点知识生成方法相似，因此该装置的实施可以参见热点知识生成方法的实施，重复之处不再赘述。参见图2所示的热点知识生成装置结构框图，该装置包括：

获取模块71，用于获取时间窗口内的商品知识数据；商品知识数据包括每种商品的热点参数；分组模块72，用于按照热点参数对商品知识数据进行分组，按照分组结果将商品知识数据写入多个目标文件；计算模块73，用于按照目标文件计算商品的热度值；生成模块74，用于根据商品的热度值生成时间窗口内的热点知识。

在一个实施例中，参见图4所示的热点知识生成装置中分组模块结构框图，分组模块，包括：哈希单元61，用于按照热点参数计算商品知识数据的哈希值；数据单元62，用于根据哈希值和商品知识数据对商品知识数据进行分组；写入单元63，用于将属于同一分组的商品知识数据写入同一个目标文件。

在一个实施例中，数据单元，具体用于：计算哈希值与商品知识数据的数量相除的余数；若第一商品知识数据与第二商品知识数据对应的余数相同，则确定第一商品知识数据和第二商品知识数据属于同一分组。

在一个实施例中，热点参数至少包括点击次数参数、查询频率参数、评分参数和收藏次数参数中的一种或几种；计算模块，具体用于：获取各类热点参数的权重值；计算每个目标文件中商品的热点参数值；按照权重值对多个热点参数值进行加权计算，得到商品的热度值。

在一个实施例中，参见图3所示的另一种热点知识生成装置结构框图，该装置还包括判断模块75，具体用于：判断分组结果所需内存量是否小于空闲内存量；如果是，按照分组结果将商品知识数据写入多个目标文件；如果否，按照热点参数对分组结果进行再分组，按照再分组结果将商品知识数据写入多个目标文件。

在一个实施例中，参见图3所示的另一种热点知识生成装置结构框图，该装置还包括聚合模块76，用于：根据多个时间窗口内的热点知识，生成聚合的热点知识。

本发明实施例还提供一种计算机设备，参见图5所示的计算机设备结构示意框图，该计算机设备包括存储器81、处理器82及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现上述任一种热点知识生成方法的步骤。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的计算机设备的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述任一种热点知识生成方法的计算机程序。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

最后应说明的是：以上所述实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

Claims (6)

1.一种热点知识生成方法，其特征在于，应用于银行的客服知识库，包括：

获取时间窗口内的商品知识数据；所述商品知识数据包括每种商品的热点参数；所述热点参数至少包括点击次数参数、查询频率参数、评分参数和收藏次数参数中的一种或几种；

按照所述热点参数对所述商品知识数据进行分组，按照分组结果将所述商品知识数据写入多个目标文件；其中，按照热点参数的类别或各类别对应数值的大小对商品知识数据进行分组，将多个分组结果分别写入多个不同的目标文件中；

按照所述目标文件计算商品的热度值；

根据所述商品的热度值生成所述时间窗口内的热点知识；

其中，按照所述目标文件计算商品的热度值，包括：

获取各类热点参数的权重值；计算每个目标文件中商品的热点参数值；

按照所述权重值对多个所述热点参数值进行加权计算，得到商品的热度值；

其中，按照所述热点参数对所述商品知识数据进行分组，按照分组结果将所述商品知识数据写入多个目标文件，包括：

按照所述热点参数计算所述商品知识数据的哈希值；

根据所述哈希值和所述商品知识数据对所述商品知识数据进行分组；

将属于同一分组的商品知识数据写入同一个目标文件；

其中，按照所述热点参数对所述商品知识数据进行分组之后，还包括：

判断分组结果所需内存量是否小于空闲内存量；

如果是，按照所述分组结果将所述商品知识数据写入多个目标文件；

如果否，按照所述热点参数对所述分组结果进行再分组，按照再分组结果将所述商品知识数据写入多个目标文件；

其中，根据所述商品的热度值生成所述时间窗口内的热点知识之后，还包括：

根据多个所述时间窗口内的热点知识，生成聚合的热点知识。

2.根据权利要求1所述的方法，其特征在于，根据所述哈希值和所述商品知识数据对所述商品知识数据进行分组，包括：

计算所述哈希值与所述商品知识数据的数量相除的余数；

若第一商品知识数据与第二商品知识数据对应的余数相同，则确定所述第一商品知识数据和所述第二商品知识数据属于同一分组。

3.一种热点知识生成装置，其特征在于，应用于银行的客服知识库，包括：

获取模块，用于获取时间窗口内的商品知识数据；所述商品知识数据包括每种商品的热点参数；所述热点参数至少包括点击次数参数、查询频率参数、评分参数和收藏次数参数中的一种或几种；

分组模块，用于按照所述热点参数对所述商品知识数据进行分组，按照分组结果将所述商品知识数据写入多个目标文件；其中，按照热点参数的类别或各类别对应数值的大小对商品知识数据进行分组，将多个分组结果分别写入多个不同的目标文件中；

计算模块，用于按照所述目标文件计算商品的热度值；

生成模块，用于根据所述商品的热度值生成所述时间窗口内的热点知识；

所述计算模块，具体用于：

获取各类热点参数的权重值；

计算每个目标文件中商品的热点参数值；

按照所述权重值对多个所述热点参数值进行加权计算，得到商品的热度值；

所述分组模块，包括：

哈希单元，用于按照所述热点参数计算所述商品知识数据的哈希值；

数据单元，用于根据所述哈希值和所述商品知识数据对所述商品知识数据进行分组；

写入单元，用于将属于同一分组的商品知识数据写入同一个目标文件；

还包括判断模块，用于：

判断分组结果所需内存量是否小于空闲内存量；

如果是，按照所述分组结果将所述商品知识数据写入多个目标文件；

如果否，按照所述热点参数对所述分组结果进行再分组，按照再分组结果将所述商品知识数据写入多个目标文件；

还包括聚合模块，用于：

根据多个所述时间窗口内的热点知识，生成聚合的热点知识。

4.根据权利要求3所述的装置，其特征在于，所述数据单元，具体用于：

计算所述哈希值与所述商品知识数据的数量相除的余数；

若第一商品知识数据与第二商品知识数据对应的余数相同，则确定所述第一商品知识数据和所述第二商品知识数据属于同一分组。

5.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至2任一所述方法。

6.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1至2任一所述方法。