一种数据处理方法、装置、设备和存储介质与流程

专利2022-06-29  84


本发明实施例涉及计算机技术,尤其涉及一种数据处理方法、装置、设备和存储介质。
背景技术
:组织机构可以是指依法建立的公务机构,比如省机构、政府机构、省内的厅局机构、设区市机构等。通常组织机构之间存在上下级关系,并且下级组织机构需要将获得的监管数据上报给上级组织机构中,以使上级组织机构可以实时了解到下级组织机构的情况。由于不同的下级组织机构可以同时监管同一对象,使得上级组织机构可以获得同一对象的不同监管数据,从而需要对这些监管数据进行归并处理为一条数据,以便进行查看管理。现有技术中,通常是根据每个监管数据的获取时间的先后顺序进行归并,比如,将最新获得的监管数据直接覆盖该对象的已有监管数据,从而保存该对象的最新监管数据。然而,在实现本发明过程中,发明人发现现有技术中至少存在如下问题:现有的归并方式仅是基于数据获取时间这一参数进行归并,使得归并灵活性较差,并且也未考虑到数据来源的可靠性,从而无法保证数据归并的准确性。技术实现要素:本发明实施例提供了一种数据处理方法、装置、设备和存储介质,以提高数据归并的灵活性,同时保证数据归并的准确性。第一方面,本发明实施例提供了一种数据处理方法,包括:确定至少两个第一组织机构监管的目标对象的第一监管数据;根据预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个所述第一监管数据对应的数据可信度;根据各所述数据可信度对各个所述第一监管数据进行归并处理,确定所述目标对象的目标监管数据。第二方面,本发明实施例还提供了一种数据处理装置,包括:第一监管数据确定模块,用于确定至少两个第一组织机构监管的目标对象的第一监管数据;数据可信度确定模块,用于根据预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个所述第一监管数据对应的数据可信度;数据归并处理模块,用于根据各所述数据可信度对各个所述第一监管数据进行归并处理,确定所述目标对象的目标监管数据。第三方面,本发明实施例还提供了一种设备,所述设备包括:一个或多个处理器;存储器,用于存储一个或多个程序;当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本发明任意实施例所提供的数据处理方法。第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明任意实施例所提供的数据处理方法。上述发明中的实施例具有如下优点或有益效果:通过确定至少两个第一组织机构监管的目标对象的第一监管数据;根据预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个第一监管数据对应的数据可信度;根据各数据可信度对各个第一监管数据进行归并处理,从而可以基于数据来源的可靠性进行数据归并处理,保证了数据归并的准确性,并且可以基于业务需求预先设置预设规则配置文件,以便基于预设规则配置文件进行数据归并处理,从而提高了数据归并的灵活性,满足用户个性化需求。附图说明图1是本发明实施例一提供的一种数据处理方法的流程图;图2是本发明实施例二提供的一种数据处理方法的流程图;图3是本发明实施例三提供的一种数据处理装置的结构示意图;图4是本发明实施例四提供的一种设备的结构示意图。具体实施方式下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。实施例一图1为本发明实施例一提供的一种数据处理方法的流程图,本实施例可适用于对各个下级组织机构的监管数据进行归并处理的情况。该方法可以由数据处理装置来执行,该装置可以由软件和/或硬件的方式来实现,集成于具有数据处理功能的设备中。该方法具体包括以下步骤:s110、确定至少两个第一组织机构监管的目标对象的第一监管数据。其中,第一组织机构可以是指需要进行数据上报的属于同一等级的组织机构。例如,第一组织机构可以是但不限于省内的各个厅局机构等。目标对象可以是至少两个第一组织机构监管的同一个对象。例如,目标对象可以是但不限于:执法人员、企业、个体工商户、自然人、行政相对人等。第一监管数据可以是指第一组织机构监管获得的目标对象的一条数据。例如,当目标对象为执法人员时,第一监管数据为执法人员数据,其可以包括但不限于:个人信息、单位信息、执法岗位信息、执法证号信息和资格资质信息中的至少一种。本实施例中的第一监管数据可以以数据表方式进行存储。具体地,每个第一组织机构下可以存在多个下级组织机构,即第二组织机构,从而每个第一组织机构可以通过其下的各个第二组织机构进行监管,并将监管获得的监管数据通过前置机的方式上报至第一组织机构的上级组织机构中所设置的数据处理装置中。若数据处理装置接收到某个第一组织机构上报的目标对象的一条监管数据时,可以将该条监管数据确定为该第一组织机构对应的第一监管数据。若数据处理装置接收到某个第一组织机构上报的目标对象的至少两条监管数据时,可以对至少两条监管数据进行数据归并处理,确定出该第一组织机构对应的第一监管数据。示例性地,在监管对象为执法人员张三时,表1给出了司法厅和市监局监管的执法人员张三的第一监管数据。表1中的身份证号可以作为主键标识,用于区分不同的对象,并基于主键标识可以获得同一对象的所有第一监管数据。表1司法厅和市监局监管的执法人员张三的第一监管数据s120、根据预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个第一监管数据对应的数据可信度。其中,预设规则配置文件可以是基于业务需求和场景进行预先配置的,以便提高数据处理的灵活性。字段权重信息可以包含每个对象对应的各个监管字段的权重,并且同一对象对应的各个监管字段的权重之和等于1。监管字段的权重可以用于表征该监管字段的重要程度。例如,监管字段的权重越高,则表明对于该监管字段所对应的对象而言,该监管字段的重要程度越高。字段来源可信度信息可以包含从各个来源机构中获取的每个对象对应的各个监管字段的字段值信息的可信度。当从某个来源机构中获得的某个监管字段的字段值信息的可信度越高时,表明从该来源机构获得的字段值信息的真实性越高。数据可信度可以是指从整体上评估的每个第一监管数据的可靠真实程度。本实施中的字段权重信息和字段来源可信度信息均可以利用数据表的方式进行表征。例如,表2给出了一种执法人员对应的字段权重信息的示例;表3给出了一种执法人员对应的字段来源可信度信息的示例。表2执法人员对应的字段权重信息对象监管字段权重执法人员年龄0.2执法人员住址0.1执法人员执法证号0.7表3执法人员对应的字段来源可信度信息表名字段名第一数据来源机构可信度执法人员表年龄司法厅1执法人员表年龄市监局0.5执法人员表住址司法厅1执法人员表住址市监局1执法人员表执法证号司法厅1执法人员表执法证号市监局0.5具体地,当确定出至少两个第一组织机构监管的同一对象(即目标对象)的第一监管数据时,对于每条第一监管数据而言,可以利用预设规则配置文件中的字段权重信息和字段来源可信度信息,确定出第一监管数据中的每个监管字段的可信度,并将各个监管字段的可信度进行相加,获得第一监管数据对应的数据可信度。示例性地,s120可以包括:获取每个第一监管数据中的各个有效字段和第一监管数据对应的第一数据来源机构;根据第一数据来源机构、各个有效字段、以及预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个有效字段对应的目标字段可信度;根据各目标字段可信度确定第一监管数据对应的数据可信度。其中,第一监管数据对应的第一数据来源机构可以是指上报第一监管数据的第一组织机构。有效字段可以是指第一监管数据中的字段值信息为非空的监管字段。目标字段可信度可以用于表征第一数据来源机构上报的有效字段的字段值信息的可靠真实程度。具体地,每个第一监管数据中可能存在字段值信息为空的监管字段,从而需要检测每个第一监管数据中的各个监管字段的字段值信息是否为空信息,确定出每个第一监管数据中的字段值信息为非空信息的各个有效字段。对于每个第一监管数据中的每个有效字段而言,可以根据预设规则配置文件中的字段权重信息和字段来源可信度信息确定出有效字段对应的目标字段可信度。通过将第一监管数据中的各个有效字段对应的目标字段可信度进行相加,获得的相加结果可以确定为该第一监管数据对应的数据可信度。同理,可以确定出每个第一监管数据对应的数据可信度。示例性地,根据第一数据来源机构、各个有效字段、以及预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个有效字段对应的目标字段可信度,可以包括:根据预设规则配置文件中的字段权重信息确定每个有效字段对应的目标权重;根据预设规则配置文件中的字段来源可信度信息和第一数据来源机构,确定每个有效字段对应的目标可信度;根据每个有效字段对应的目标权重和目标可信度,确定每个有效字段对应的目标字段可信度。具体地,可以基于每个有效字段对应的目标对象标识,从预设规则配置文件中的字段权重信息中查询出该目标对象标识下的每个有效字段所对应的目标权重。可以基于每个有效字段对应的目标对象标识和第一数据来源机构,从预设规则配置文件中的字段来源可信度信息中查询出该目标对象标识下的第一数据来源机构所对应的每个有效字段所对应的目标可信度。将同一个有效字段对应的目标权重和目标可信度进行相乘,获得的相乘结果确定为该有效字段对应的目标字段可信度。同理,可以确定出每个有效字段对应的目标字段可信度。需要说明的是,第一监管数据中的字段值信息为空的各个无效字段所对应的目标字段可信度为零。示例性地,基于表1-表3给出的内容,表4给出了第一监管数据中每个有效字段对应的目标字段可信度的示例。表4第一监管数据中的每个有效字段对应的目标字段可信度s130、根据各数据可信度对各个第一监管数据进行归并处理,确定目标对象的目标监管数据。具体地,对各个数据可信度进行比较,将数据可信度最高的第一监管数据作为目标监管数据,并可以基于其他第一监管数据补充目标监管数据中字段值信息为空的监管字段,从而可以获得更加真实可靠的完整监管数据,保证了数据归并的准确性。示例性地,s130可以包括:将最高的数据可信度所对应的第一监管数据作为目标监管数据,并检测目标监管数据中是否存在字段值信息为空的第一字段;若是,则根据除目标监管数据之外的其他第一监管数据,确定第一字段对应的第一字段值信息,并将第一字段值信息添加至目标监管数据中。具体地,检测可信度最高的第一监管数据(即目标监管数据)中是否存在字段值信息为空的第一字段;若否,则表明当前的目标监管数据是一个完整监管数据,无需进行数据补充,此时可以直接将当前的目标监管数据作为数据归并后获得的目标对象的最终监管数据;若是,则可以基于除目标监管数据之外的其他第一监管数据确定出每个第一字段对应的第一字段值信息,并将每个第一字段值信息添加至目标监管数据中,从而使得目标监管数据为一个完整监管数据,保证数据归并的完整性。示例性地,根据除目标监管数据之外的其他第一监管数据,确定第一字段对应的第一字段值信息,可以包括:在除目标监管数据之外的其他第一监管数据中,确定存储有第一字段的值信息的各个目标第一监管数据;根据各目标第一监管数据对应的数据可信度,确定第一字段对应的第一字段值信息。具体地,在除目标监管数据之外的其他第一监管数据中,检测每个第一监管数据中是否存储有第一字段对应的非空值信息,若是,则将该第一监管数据确定为目标第一监管数据,从而可以获得其他第一监管数据中的各个目标第一监管数据。通过比较每个目标第一监管数据的数据可信度,可以获得数据可信度最高的目标第一监管数据。若仅存在一个数据可信度最高的目标第一监管数据,则可以直接将该目标第一监管数据中第一字段对应的非空值信息确定为第一字段对应的第一字段值信息。若存在至少两个数据可信度最高的目标第一监管数据,则可以基于每个数据可信度最高的目标第一监管数据的获取时间,将最晚获得的第一监管数据中第一字段对应的非空字段值信息确定为第一字段对应的第一字段值信息,从而可以归并获得可信度最高且最新的第一字段值信息,进而保证数据的准确性。示例性地,对表4给出的两条第一监管数据进行归并处理后,获得的执法人员张三的目标监管数据如表5所示。表5执法人员张三的目标监管数据本实施例的技术方案,通过确定至少两个第一组织机构监管的目标对象的第一监管数据;根据预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个第一监管数据对应的数据可信度;根据各数据可信度对各个第一监管数据进行归并处理,从而可以基于数据来源的可靠性进行数据归并处理,保证了数据归并的准确性,并且可以基于业务需求预先设置预设规则配置文件,以便基于预设规则配置文件进行数据归并处理,从而提高了数据归并的灵活性,满足用户个性化需求。在上述技术方案的基础上,在s130之后,还可以包括:对目标监管数据分配一个归档标识,并将归档标识、每个有效字段对应的目标字段可信度、以及数据可信度均添加至相应的第一监管数据中,并保存添加后的各个第一监管数据。其中,归档标识可以是由数字、字母和符号中的至少一种组成,以区分不同的目标监管数据,并可以基于归档标识链接该目标监管数据对应的归并处理之前的各个第一监管数据,便于进行数据查询。例如,归档标识可以是预设长度的递增值,比如从00000001开始,每分配一次增加1。具体地,可以基于当前已分配的归档标识,对目标对象的目标监管数据分配一个新的归档标识,以便唯一标识该目标监管数据。本实施例可以将所分配的归档标识添加至目标监管数据中,以便进行数据追溯。例如,表6给出了一种添加归档标识后的目标监管数据。表6添加归档标识后的目标监管数据本实施例可以在用于进行归并处理的每个第一监管数据中添加目标监管数据所对应的归档标识、第一监管数据中每个有效字段对应的目标字段可信度、以及第一监管数据对应的数据可信度,并将添加后的第一监管数据进行归档存放,从而可以便于用户更加便捷地查看整个归并过程,实现数据追溯,并且便于进行错误修正,实现功能多样化。示例性地,表7给出了一种归档存放的第一监管数据。表7归档存放的第一监管数据实施例二图2为本发明实施例二提供的一种数据处理方法的流程图,本实施例在上述实施例的基础上,对步骤“确定至少两个第一组织机构监管的目标对象的第一监管数据”进行了优化。其中与上述实施例相同或相应的术语的解释在此不再赘述。参见图2,本实施例提供的数据处理方法具体包括以下步骤:s210、若检测到第一组织机构中存在至少两个第二组织机构监管获得的目标对象的第二监管数据,则根据预设优先级配置文件,确定每个第二监管数据对应的第二数据来源机构的优先级信息。其中,第一组织机构为第二组织机构的上级机构。第一组织机构下的第二组织机构的数量可以为多个。例如,当第一组织机构为某省的司法厅时,该第一组织机构下的第二组织机构可以是该省中的各个市的司法局。第二监管数据可以是指第二组织机构上报的目标对象的监管数据。预设优先级配置文件可以是基于业务需求和场景预先设置的,以便提高数据处理的灵活性。预设优先级配置文件可以包含每个第二组织机构的优先级信息,以表征每个第二组织机构的重要程度。例如,优先级信息可以利用数值方式进行表征,比如数值越大,优先级等级越低。第二数据来源机构可以是指上报第二监管数据的第二组织机构。具体地,当数据处理装置接收到任意一个第一组织机构下的至少两个第二组织机构上报的同一目标对象的第二监管数据,即该第一组织机构对应至少两条第二监管数据时,需要对所有第二监管数据进行归并处理,以便确定出该第一组织机构对应的第一监管数据,此时可以根据每条第二监管数据对应的第二数据来源机构的机构标识,从预设优先级配置文件中获得每个第二数据来源机构对应的优先级信息。s220、根据各个优先级信息对各个第二监管数据进行归并处理,确定第一组织机构监管的目标对象的第一监管数据。具体地,可以根据每个第二数据来源机构的优先级信息,确定出优先级最高的第二监管数据,并将优先级最高的第二监管数据作为目标对象的第一监管数据,并检测该第一监管数据中是否存在字段值信息为空的第二字段;若是,则根据除第一监管数据之外的其他第二监管数据,确定第二字段对应的第二字段值信息,并将第二字段值信息添加至第一监管数据中,从而实现第二监管数据的归并操作,获得第一组织机构监管的目标对象的第一监管数据。示例性地,根据除第一监管数据之外的其他第二监管数据,确定第二字段对应的第二字段值信息,可以包括:在除第一监管数据之外的其他第二监管数据中,确定存储有第二字段的值信息的各个目标第二监管数据;根据各目标第二监管数据对应的优先级信息,确定第二字段对应的第二字段值信息。具体地,在除第一监管数据之外的其他第二监管数据中,检测每个第二监管数据中是否存储有第二字段对应的非空值信息,若是,则将该第二监管数据确定为目标第二监管数据,从而可以获得其他第二监管数据中的各个目标第二监管数据。通过比较每个目标第二监管数据的优先级信息,可以获得优先级最高的目标第二监管数据。若仅存在一个优先级最高的目标第二监管数据,则可以直接将该目标第二监管数据中第二字段对应的非空值信息确定为第二字段对应的第二字段值信息。若存在至少两个优先级最高的目标第二监管数据,则可以基于每个优先级最高的目标第二监管数据的获取时间,将最晚获得的第二监管数据中第二字段对应的非空字段值信息确定为第二字段对应的第二字段值信息,从而可以归并获得优先级最高且最新的第二字段值信息,进而保证数据的准确性。s230、根据预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个第一监管数据对应的数据可信度。s240、根据各数据可信度对各个第一监管数据进行归并处理,确定目标对象的目标监管数据。本实施例的技术方案,通过在检测到第一组织机构中存在至少两个第二组织机构监管获得的目标对象的第二监管数据时,根据预设优先级配置文件,可以确定每个第二监管数据对应的第二数据来源机构的优先级信息,并基于各个优先级信息对各个第二监管数据进行归并处理,从而可以基于第二组织机构的优先级进行归并处理,确定出第一组织机构监管的目标对象的第一监管数据,以便后续对各个不同的第一组织机构的第一监管数据进行归并处理。以下是本发明实施例提供的数据处理装置的实施例,该装置与上述各实施例的数据处理方法属于同一个发明构思,在数据处理装置的实施例中未详尽描述的细节内容,可以参考上述数据处理方法的实施例。实施例三图3为本发明实施例三提供的一种数据处理装置的结构示意图,本实施例可适用于对各个下级组织机构的监管数据进行归并处理的情况,该装置具体包括:第一监管数据确定模块310、数据可信度确定模块320和数据归并处理模块330。其中,第一监管数据确定模块310,用于确定至少两个第一组织机构监管的目标对象的第一监管数据;数据可信度确定模块320,用于根据预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个第一监管数据对应的数据可信度;数据归并处理模块330,用于根据各数据可信度对各个第一监管数据进行归并处理,确定目标对象的目标监管数据。可选地,第一监管数据确定模块310,具体用于:若检测到第一组织机构中存在至少两个第二组织机构监管获得的目标对象的第二监管数据,则根据预设优先级配置文件,确定每个第二监管数据对应的第二数据来源机构的优先级信息;根据各个优先级信息对各个第二监管数据进行归并处理,确定第一组织机构监管的目标对象的第一监管数据;其中,第一组织机构为第二组织机构的上级机构。可选地,数据可信度确定模块320,包括:有效字段获取单元,用于获取每个第一监管数据中的各个有效字段和第一监管数据对应的第一数据来源机构;目标字段可信度确定单元,用于根据第一数据来源机构、各个有效字段、以及预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个有效字段对应的目标字段可信度;数据可信度确定单元,用于根据各目标字段可信度确定第一监管数据对应的数据可信度。可选地,目标字段可信度确定单元,具体用于:根据预设规则配置文件中的字段权重信息确定每个有效字段对应的目标权重;根据预设规则配置文件中的字段来源可信度信息和第一数据来源机构,确定每个有效字段对应的目标可信度;根据每个有效字段对应的目标权重和目标可信度,确定每个有效字段对应的目标字段可信度。可选地,数据归并处理模块330,包括:字段值信息检测单元,用于将最高的数据可信度所对应的第一监管数据作为目标监管数据,并检测目标监管数据中是否存在字段值信息为空的第一字段;第一字段值信息确定单元,用于若是,则根据除目标监管数据之外的其他第一监管数据,确定第一字段对应的第一字段值信息,并将第一字段值信息添加至目标监管数据中。可选地,第一字段值信息确定单元,具体用于:在除目标监管数据之外的其他第一监管数据中,确定存储有第一字段的值信息的各个目标第一监管数据;根据各目标第一监管数据对应的数据可信度,确定第一字段对应的第一字段值信息。可选地,该装置还包括:归档标识添加模块,用于在确定目标对象的目标监管数据之后,对目标监管数据分配一个归档标识,并将归档标识、每个有效字段对应的目标字段可信度、以及数据可信度均添加至相应的第一监管数据中,并保存添加后的各个第一监管数据。本发明实施例所提供的数据处理装置可执行本发明任意实施例所提供的数据处理方法,具备执行数据处理方法相应的功能模块和有益效果。值得注意的是,上述数据处理装置的实施例中,所包括的各个模块和单元只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。实施例四图4是本发明实施例四提供的一种设备的结构示意图。参见图4,该设备包括:一个或多个处理器410;存储器420,用于存储一个或多个程序;当一个或多个程序被一个或多个处理器410执行,使得一个或多个处理器410实现如上述实施例中任意实施例所提供的数据处理方法,该方法包括:确定至少两个第一组织机构监管的目标对象的第一监管数据;根据预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个第一监管数据对应的数据可信度;根据各数据可信度对各个第一监管数据进行归并处理,确定目标对象的目标监管数据。图4中以一个处理器410为例;设备中的处理器410和存储器420可以通过总线或其他方式连接,图4中以通过总线连接为例。存储器420作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本发明实施例中的数据处理方法对应的程序指令/模块(例如,数据处理装置中的第一监管数据确定模块310、数据可信度确定模块320和数据归并处理模块330)。处理器410通过运行存储在存储器420中的软件程序、指令以及模块,从而执行设备的各种功能应用以及数据处理,即实现上述的数据处理方法。存储器420主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据设备的使用所创建的数据等。此外,存储器420可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器420可进一步包括相对于处理器410远程设置的存储器,这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。本实施例提出的设备与上述实施例提出的数据处理方法属于同一发明构思,未在本实施例中详尽描述的技术细节可参见上述实施例,并且本实施例具备执行数据处理方法相同的有益效果。实施例五本实施例提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明任意实施例所提供的数据处理方法,该方法包括:确定至少两个第一组织机构监管的目标对象的第一监管数据;根据预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个第一监管数据对应的数据可信度;根据各数据可信度对各个第一监管数据进行归并处理,确定目标对象的目标监管数据。本发明实施例的计算机存储介质,可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是但不限于:电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、rf等等,或者上述的任意合适的组合。可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言,诸如java、smalltalk、c ,还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络,包括局域网(lan)或广域网(wan),连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。本领域普通技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个计算装置上,或者分布在多个计算装置所组成的网络上,可选地,他们可以用计算机装置可执行的程序代码来实现,从而可以将它们存储在存储装置中由计算装置来执行,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件的结合。注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。当前第1页1 2 3 
技术特征:

1.一种数据处理方法,其特征在于,包括:

确定至少两个第一组织机构监管的目标对象的第一监管数据;

根据预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个所述第一监管数据对应的数据可信度;

根据各所述数据可信度对各个所述第一监管数据进行归并处理,确定所述目标对象的目标监管数据。

2.根据权利要求1所述的方法,其特征在于,确定至少两个第一组织机构监管的目标对象的第一监管数据,包括:

若检测到第一组织机构中存在至少两个第二组织机构监管获得的目标对象的第二监管数据,则根据预设优先级配置文件,确定每个所述第二监管数据对应的第二数据来源机构的优先级信息;

根据各个所述优先级信息对各个所述第二监管数据进行归并处理,确定所述第一组织机构监管的目标对象的第一监管数据;

其中,所述第一组织机构为所述第二组织机构的上级机构。

3.根据权利要求1所述的方法,其特征在于,根据预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个所述第一监管数据对应的数据可信度,包括:

获取每个所述第一监管数据中的各个有效字段和所述第一监管数据对应的第一数据来源机构;

根据所述第一数据来源机构、各个所述有效字段、以及预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个所述有效字段对应的目标字段可信度;

根据各所述目标字段可信度确定所述第一监管数据对应的数据可信度。

4.根据权利要求3所述的方法,其特征在于,根据所述第一数据来源机构、各个所述有效字段、以及预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个所述有效字段对应的目标字段可信度,包括:

根据预设规则配置文件中的字段权重信息确定每个所述有效字段对应的目标权重;

根据所述预设规则配置文件中的字段来源可信度信息和所述第一数据来源机构,确定每个所述有效字段对应的目标可信度;

根据每个所述有效字段对应的目标权重和目标可信度,确定每个所述有效字段对应的目标字段可信度。

5.根据权利要求1所述的方法,其特征在于,根据各所述数据可信度对各个所述第一监管数据进行归并处理,确定所述目标对象的目标监管数据,包括:

将最高的数据可信度所对应的第一监管数据作为目标监管数据,并检测所述目标监管数据中是否存在字段值信息为空的第一字段;

若是,则根据除所述目标监管数据之外的其他第一监管数据,确定所述第一字段对应的第一字段值信息,并将所述第一字段值信息添加至所述目标监管数据中。

6.根据权利要求5所述的方法,其特征在于,根据除所述目标监管数据之外的其他第一监管数据,确定所述第一字段对应的第一字段值信息,包括:

在除所述目标监管数据之外的其他第一监管数据中,确定存储有第一字段的值信息的各个目标第一监管数据;

根据各所述目标第一监管数据对应的数据可信度,确定所述第一字段对应的第一字段值信息。

7.根据权利要求3所述的方法,其特征在于,在确定所述目标对象的目标监管数据之后,还包括:

对所述目标监管数据分配一个归档标识,并将所述归档标识、每个所述有效字段对应的目标字段可信度、以及所述数据可信度均添加至相应的第一监管数据中,并保存添加后的各个第一监管数据。

8.一种数据处理装置,其特征在于,包括:

第一监管数据确定模块,用于确定至少两个第一组织机构监管的目标对象的第一监管数据;

数据可信度确定模块,用于根据预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个所述第一监管数据对应的数据可信度;

数据归并处理模块,用于根据各所述数据可信度对各个所述第一监管数据进行归并处理,确定所述目标对象的目标监管数据。

9.一种设备,其特征在于,所述设备包括:

一个或多个处理器;

存储器,用于存储一个或多个程序;

当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的数据处理方法。

10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一所述的数据处理方法。

技术总结
本发明实施例公开了一种数据处理方法、装置、设备和存储介质,该方法包括:确定至少两个第一组织机构监管的目标对象的第一监管数据;根据预设规则配置文件中的字段权重信息和字段来源可信度信息,确定每个第一监管数据对应的数据可信度;根据各数据可信度对各个第一监管数据进行归并处理,确定目标对象的目标监管数据。通过本发明实施例的技术方案,可以提高数据归并的灵活性,同时保证数据归并的准确性。

技术研发人员:王彬
受保护的技术使用者:中国建设银行股份有限公司;建信金融科技有限责任公司
技术研发日:2020.01.13
技术公布日:2020.06.09

转载请注明原文地址: https://bbs.8miu.com/read-26017.html

最新回复(0)