一种数据处理方法、装置、设备和存储介质与流程

    专利查询2025-11-14  1


    本发明实施例涉及大数据及区块链,尤其涉及一种数据处理方法、装置、设备和存储介质。


    背景技术:

    1、随着互联网的高速发展,用户之间的合作日益频繁,在合作中,数据多存储在中心化数据库中,往往面临着信任机制问题。而区块链技术因其去中心化、不可篡改等特性,体现出良好的去中心化能力以及去信任化能力。联盟链指多个机构或组织参与管理的区块链,每个机构或组织运行一个或多个节点。联盟链通过身份权限控制属于联盟成员的机构或组织进入,联盟链中的数据只允许属于联盟成员的机构或组织读取和发送交易,并共同记录交易数据。

    2、用户对联盟链中存储的区块链数据进行检索时,可以通过部署在个节点上的查询链码,向存储层查询相关的区块链数据。

    3、在实现本发明的过程中,发明人发现现有技术中至少存在以下技术问题:

    4、通过部署在个节点上的查询链码向存储层查询相关的区块链数据,涉及在区块链各区块的数据检索,检索效率低下。


    技术实现思路

    1、本发明提供一种数据处理方法、装置、服务器和存储介质,以提升对区块链数据的检索效率,同时解决检索效率与数据一致性的矛盾问题。

    2、第一方面,本发明实施例提供了一种数据处理方法,包括:

    3、将区块链数据实时同步至数据库,确定所述区块链数据对应的数据表,根据所述数据表确定全量索引;

    4、获取所述区块链数据对应的所述数据表的变更数据,根据所述变更数据确定增量索引;

    5、根据所述增量索引和所述全量索引确定目标索引;

    6、响应于接收的检索请求,基于所述检索请求在所述目标索引中进行检索,得到检索结果。

    7、第二方面,本发明实施例还提供了一种数据处理装置,包括:

    8、全量索引确定模块,用于将区块链数据实时同步至数据库,确定所述区块链数据对应的数据表,根据所述数据表确定全量索引;

    9、增量索引确定模块,用于获取所述区块链数据对应的所述数据表的变更数据,根据所述变更数据确定增量索引;

    10、目标索引确定模块,用于根据所述增量索引和所述全量索引确定目标索引;

    11、检索模块,用于响应于接收到的检索请求,基于所述检索请求在所述目标索引中进行检索,得到检索结果。

    12、第三方面,本发明实施例还提供了一种计算机设备,所述计算机设备包括:

    13、一个或多个处理器;

    14、存储装置,用于存储一个或多个程序,

    15、当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如第一方面中任一所述的数据处理方法。

    16、第四方面,本发明实施例还提供了一种包含计算机可执行指令的存储介质,其特征在于,所述计算机可执行指令在由计算机处理器执行时用于执行如第一方面中任一所述的数据处理方法。

    17、上述发明中的实施例具有如下优点或有益效果:

    18、本发明实施例提供的数据处理方法包括:将区块链数据实时同步至数据库,确定所述区块链数据对应的数据表,根据所述数据表确定全量索引;获取所述区块链数据对应的所述数据表的变更数据,根据所述变更数据确定增量索引;根据所述增量索引和所述全量索引确定目标索引;响应于接收到的检索请求,基于所述检索请求在所述目标索引中进行检索,得到检索结果。上述技术方案,将区块链数据实时同步至数据库,确保了数据库中存储的区块链数据与区块链中存储的区块链数据的一致性,确定数据库中存储区块链数据的数据表,即区块链数据对应的数据表,进而通过预先设计好的索引实现类确定数据表对应的索引,即全量索引,实现确定存储有区块链数据的数据表在数据库中的全量索引。获取区块链数据对应的数据表的变更数据,根据变更数据确定增量索引。变更数据可以随着区块链数据实时更新,体现区块链数据的更新情况,根据变更数据确定的增量索引同样可以体现区块链数据的更新情况。根据全量索引和增量索引确定目标索引,目标索引也可以随着区块链数据实时更新,与实时区块链数据更加匹配。响应于接收到的检索请求,基于检索请求对应的检索条件在目标索引中确定目标行,进而根据检索请求对应的检索条件遍历数据库中的目标行,得到检索结果,减少了数据库的调用次数以及数据库需要遍历的行数,缩减检索所需的时间,提升检索效率,解决检索效率与数据一致性的矛盾问题。



    技术特征:

    1.一种数据处理方法,其特征在于,包括:

    2.根据权利要求1所述的数据处理方法,其特征在于,根据所述数据表确定全量索引,包括:

    3.根据权利要求1所述的数据处理方法,其特征在于,获取所述区块链数据对应的所述数据表的变更数据,根据所述变更数据确定增量索引,包括:

    4.根据权利要求3所述的数据处理方法,其特征在于,将所述变更数据转换为所述增量索引,包括:

    5.根据权利要求1所述的数据处理方法,其特征在于,根据所述增量索引和所述全量索引确定目标索引,包括:

    6.根据权利要求1所述的数据处理方法,其特征在于,将区块链数据实时同步至数据库,包括:

    7.根据权利要求6所述的数据处理方法,其特征在于,在根据所述背书节点所广播的广播信息将所述区块链数据实时同步至所述数据库之后,还包括:

    8.一种数据处理装置,其特征在于,包括:

    9.一种计算机设备,其特征在于,所述计算机设备包括:

    10.一种包含计算机可执行指令的存储介质,其特征在于,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7中任一所述的数据处理方法。


    技术总结
    本发明实施例公开了一种数据处理方法、装置、服务器和存储介质,涉及数据处理技术领域,该方法包括:将区块链数据实时同步至数据库,确定区块链数据对应的数据表,根据数据表确定全量索引;获取区块链数据对应的数据表的变更数据,根据变更数据确定增量索引;根据增量索引和全量索引确定目标索引;响应于接收到的检索请求,基于检索请求在目标索引中进行检索,得到检索结果。上述技术方案,实时同步的区块链数据保证了数据一致性,基于检索请求在目标索引中确定目标行,根据检索请求遍历数据库中的目标行,得到检索结果,减少了需要遍历的行数,提升检索效率,较好的解决检索效率与数据一致性的矛盾问题。

    技术研发人员:王睿杰
    受保护的技术使用者:北京沃东天骏信息技术有限公司
    技术研发日:
    技术公布日:2024/11/26
    转载请注明原文地址:https://tc.8miu.com/read-31969.html

    最新回复(0)