一种数据库的适配装置、装置、计算机设备和存储介质
技术领域
本发明涉及计算机
技术领域
,特别是涉及一种数据库的适配装置、一种计算机设备和一种存储介质。背景技术
现有数据库的多种多样,对用户而言,根据自身需求,选择使用合适的数据库是十分必要的;就使用而言,不同数据库间存在很大的差异性是非常大的,如语法之间的差异、使用方式之间的差异等。当用户需要使用多种数据库进行系统开发,在对数据进行读写操作时,需要保证不同数据库间的数据一致性,不然会导致访问缓慢、排队等问题,同时也使得不同数据库之间的数据同步缓慢。
发明内容
鉴于上述问题,提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种数据库的适配装置、一种计算机设备和一种存储介质。
为了解决上述问题,本发明实施例公开了一种数据库的适配装置,包括:
源代码修改模块,用于修改shardingjdbc框架组件源代码;
新增扩展模块,用于应用能加载特定数据库的数据元。
优选地,所述源代码修改模块包括:
第一修改子模块,用于、使其能加载到dm的数据元信息,支持特定数据库的子查询语句;
第二修改子模块,用于使其能通过分表条件找到逻辑表;
第三修改子模块,用于使其能根据sql条件找到路由后的表;
第四修改子模块,用于其支持非分表数据的正常归并。
优选地,所述新增扩展模块包括:
第一扩展子模块,用于通过DMDatabaseMetaDataDialectHandler采用spi方式扩展DatabaseMetaDataDialectHandler;
第二扩展子模块,用于通过DMDatabaseType以spi方式扩展BranchDatabaseType,新增一种数据库类型;
第三扩展子模块,用于通过DMDataSourceMetaData以spi方式扩展DataSourceMetaData支持扩展的数据库数据源数据加载。
本发明实施例公开了一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述的数据库的适配装置的对应步骤。
本发明实施例公开了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述的数据库的适配装置的对应步骤。
本发明实施例包括以下优点:
本发明实施例中,web应用数据库操作,sql先通过java jdbc到达数据库执行,集成shardingjdbc,sql经过shardingjdbc,shardingjdbc通过配置策略改写sql到分库分表去执行,分库分表技术方案对国产化数据库的支持,单库(表)的数据量得以减少,提高性能,提高了系统的稳定性和负载能力,切分出的表结构相同,程序改动较少,拆分后业务清晰,达到专库专用,可以实现热数据和冷数据的分离,将不经常变化的数据和变动较大的数据分散再不同的库/表中,便于维护。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图
图1是本发明实施例的一种数据库的适配装置实施例的结构框图;
图2是一个实施例的一种计算机设备的内部结构图。
具体实施方式
为了使本发明实施例所解决的技术问题、技术方案及有益效果更加清楚明白,以下结合附图及实施例,对本发明实施例进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
参照图1,示出了本发明实施例的一种数据库的适配装置实施例的结构框图,具体可以包括如下模块:
源代码修改模块301,用于修改shardingjdbc框架组件源代码;
新增扩展模块302,用于应用能加载特定数据库的数据元。
优选地,所述源代码修改模块包括:
第一修改子模块,用于、使其能加载到dm的数据元信息,支持特定数据库的子查询语句;
第二修改子模块,用于使其能通过分表条件找到逻辑表;
第三修改子模块,用于使其能根据sql条件找到路由后的表;
第四修改子模块,用于其支持非分表数据的正常归并。
优选地,所述新增扩展模块包括:
第一扩展子模块,用于通过DMDatabaseMetaDataDialectHandler采用spi方式扩展DatabaseMetaDataDialectHandler;
第二扩展子模块,用于通过DMDatabaseType以spi方式扩展BranchDatabaseType,新增一种当梦的数据库类型;
第三扩展子模块,用于通过DMDataSourceMetaData以spi方式扩展DataSourceMetaData支持扩展的达梦数据库数据源数据加载。
采用了分库分表的策略,分库分表的方式一种是水平划分,水平划分是根据一定规则,例如时间或id序列值等进行数据的拆分。比如根据年份来拆分不同的数据库。每个数据库结构一致,但是数据得以拆分,从而提升性能。又比如根据用户id的值,根据规则分成若干个表,每个表结构一致。二种是垂直划分,垂直划分数据库是根据业务进行划分,例如将shop库中涉及商品、订单、用户的表分别划分出成一个库,通过降低单库(表)的大小来提高性能,但这种方式并没有解决高数据量带来的性能损耗。同样的,分表的情况就是将一个大表根据业务功能拆分成一个个子表,例如用户表可根据业务分成基本信息表和详细信息表等。通过Sharding-JDBC框架集成,以及修改源代码:修改shardingjdbc源代码,修改多处源代码达到支持特定数据库,如达梦数据库的语法兼容。支:新增扩展模块,使应用能加载达梦数据库的数据元等信息。
第一方面,可以修改shardingjdbc源代码,具体地,修改适配jdbc模块,使其能加载到dm的数据元信息,支持达梦的子查询语句;修改SQL解析模块,使其能通过分表条件找到逻辑表;修改路由模块,使其能根据sql条件找到路由后的表;修改结果归并模块,使其支持非分表数据的正常归并。
第一方面,新增扩展模块,使应用能加载特定数据库,如达梦数据库的数据元等信息;
通过编写wethink-sharding-dm模块来扩展使得shardingjdbc支持达梦数据库,需要支持达梦数据库的模块引入此模块就能支持;研发DMDatabaseMetaDataDialectHandler采用spi方式扩展DatabaseMetaDataDialectHandler;研发DMDatabaseType以spi方式扩展BranchDatabaseType,新增一种当梦的数据库类型;研发DMDataSourceMetaData以spi方式扩展DataSourceMetaData支持扩展的达梦数据库数据源数据加载;
本发明实施例中,web应用数据库操作,sql先通过java jdbc到达数据库执行,集成shardingjdbc,sql经过shardingjdbc,shardingjdbc通过配置策略改写sql到分库分表去执行,分库分表技术方案对国产化数据库的支持,单库(表)的数据量得以减少,提高性能,提高了系统的稳定性和负载能力,切分出的表结构相同,程序改动较少,拆分后业务清晰,达到专库专用,可以实现热数据和冷数据的分离,将不经常变化的数据和变动较大的数据分散再不同的库/表中,便于维护。
上述数据库的适配装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图2所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种数据库的适配方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图2中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述数据库的适配装置的对应步骤。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述数据库的适配装置的对应步骤。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种数据库的适配方法、一种数据库的适配装置、一种计算机设备和一种存储介质,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。