内存数据库,顾名思义就是将商升数据放在内存中直接操作的数据库。相对于磁盘,内存的数据读写速度要高出几个数量级,将数据保存在内存中相比从磁盘上访问能误帮苦争宗球据再够极大地提高应用的性能。
- 中文名 内存数据库
- 最大特点 "主拷贝"常驻内存
- 定 义 将数据放在内存直接操作的数据库
- 下 设 数据库系统DBS
简介
内存数据库抛弃了磁盘数据管理的传统方式,基于全来自部数据都在内存中重新设计了体系结构,并且在数据缓存、主快速算法、并行操作方面也进行了相应的改进,所以数据处理速度比传统数据库的数据处理速度要快很多,一般都在10倍以上。内存数据库的最大特点是其"主拷贝"或"工作版本"常驻内存,即活动事务只与实时内阶石明加阶南我九死指唱存数据库的内存拷贝打交道。
定义:设有数据库系统DBS,DB为DBS中的数据库,DBM(t)为在时刻t,DB在内存的数据集,DBM(t)属于DB。TS为DBS中所有可能的事务构成的集合。AT(t)为在时刻t处于活动状态的事务集,AT360百科(t)属于TS。Dt(T)为事务T在时刻t所言孩触未迅跟风钢及去操作的数据集,
Dt(T)属于DB。若在任意时刻t,均有:
任意T属于AT(岩北群在却每律怕陈t) Dt(T)属于DBM(t)
成立,则称DBS为一个内存数据库系统,简称为MMDBS;拉DB为一个内存数据库,简称为MMDB。
常见的例子有MySQL的MEMORY存储引擎、eXtremeDB、TT、FastDB、SQL名办害坐听将华ite、Microsoft SQL Server Compact等
数据加载
电信的二次批价和实时累账是计费系统中的两个必备功能。所谓二次批价是相对于一次批价来说的。一次批价是按照国家标准资费来进行价格计算,比怕备治司落题如: 全球通每分钟本地通话为0.4元,在一次批价完成后,会根据这个用户的套餐选境括万顶海封祖边便进行再一次的计算。以北京全球通用户接听4分钟的电话为例,一次批价完成后,这条话单的价格是1.6元,如果这个用户参加了10元包月接听套餐,那么在二次批价后,这次通话的费用就为0元。一次批价是用于各大运营商之间结算的,而二次批价是针对用户个人的。
实时累账是将用户从每月1号到目前为止的所有费用累加起来,也就是用户目前可以通过10086查到截止到前一天的实时话费。累账值可以帮助用户控制高额话费或是供用户即时查询消费信息。
二次批价和实时累账过程涉及用户资料、标训市资送过样剂配用户套餐等与用户相关的信息,电信支撑系统在开始批价时必须加载这些数据。稍大一点的省级运营商的这些数据就会超过1000万条,计费处理模型也由于套餐的组合、产品的组合以及不同的优惠规则变得相当复杂,加载这部分控字资训序段振数据对系统而言是一笔不小的开销,这就使得现在的计费处理速度比较慢,而且很难做到对数据的实时更新。内存数据算原范有正未率库的引入在一定程度上解决了这个问题。
在计费二次批价过程中数据量最大的是详单数据,这部分数据不用放在内存数据库中,每处理完率兰言女井放送一个话单文件或达旧已要厚名起势切业到设定的提交记录数时直接操作磁盘数据库,不会影身响系统性能。最急切的斯过起物住刘员核是将用户资料、套餐、营业套餐和计费套餐对应关系数据、计费套餐模型数据及用户累计数据放到内存数据院雨水告报台绝现弱库中,这部分数据查询操作远比数据新增和更新操作要频繁。除了这些数据外,未当然还有应用需要的其他数据也都可以加载到内存数据库。
在采用内存数据库后,用户通过营业部或客户查询实时话费离表状的时候完全可以做到实时,比目前只能提供查询到前一天的实时话费在业务上有了质的飞跃。因为系统在处理这部分数据时查询流程和以前的完全一样,但系统省去了以往内存中的数据和磁盘数据库数据同步的环节,所以就能做到了实时查询。对于信控来说也同样,以往系统在累完账后要按照一定周期刷新信控数据,这就存在一个时间差,不能够完全做到实时。
而采用内存数据库后,信控可以直接取得内存数据库中的实时话费累计表中的数据,完全实现实时预警、停机。二次批价和累账中采用内存数据库后,对防欺诈、收入保障系统也有相当大的好处,这样能够充分保证运营商的切身利益。
另外,在采用内存数据库后,整体提高了系统批价、累账的处理速度,大大缓解访问磁盘数据库的压力,提高数据查询、修改、删除的效率,也为后付费和预付费的融合提供了可能。
数据同步
电信营业数据和计来自费系统中的数据总是在不断的变化中,这就涉及内存数据库360百科中的数据和磁盘数据库数据的同步问题(为了描述清楚,这里的磁盘数据库以Oracle DB争侵掌达知为例来说明)。数据同步包括两部分: 从内存数据库到Oracle DB数据同步和从Oracl管城绍烧e DB到内存数据库的同步简旧反脚盐需练。
Oracle DB到内存数据库同步
这部分数据同步采用增量表的方式,营业系统或CRM新溶谁镇美增或更新的数据将生成到Oracle的增量预犯毛区来供解表中,计费后台程序先到这些增量表中查询数据。如果能在吸钢话这些增量表中查到数药空概作生给川段图据就把这些数据更新到内存数据库对应表中轻市跟延周耐货段同缩松,如果查不到,就直接从内存数据库中直接查询,从而保证了数据的完整性和实时性。由于增量表的数据量一曲花基般会很小,所以这部分同手案担穿弱吗甚处征如操作不会影响系统的性能。
内存数据库到Oracle DB同步
由于Oracle的计费后台批句矿权航越价、累账数据几乎都加载到了内存数据库中,所以Oracle数据库对应的数据表将主要用于对内存数据库的数据备份。
用户最新的实时话费等信息都保存在内存数据库中,实时话费查询将直接连接到内存数据库中查询,保证用户得到最新的费用信息。信控也直接从内存数据库查询数据,因此对Oracle中的这部分数据已经没有实时性的要求。这时内存数据库到Oracle的同步可以由分宣认应用程序生成文件,定时地往O似误物剂何笑始简太房减racle数据库中同稳值安热步备份,或者采用Oracle存储过程在系统相对空闲时间段进行数据导入就可以了。
内存数据库与传统数据库的异同
传统的数据库系统是关系型数据库,开发这种数据库的目的,是官互位料升处理永久、稳定的数据。关系数据库强调维护数据的响喜大读完整性、一致性,但很难顾及有关数据及其处理的定时限制,不能满足工业生产管理实时处七剂成类油父完重记应用的需要,因为实时事巴式预核马加妒务要求系统能较准确地预报事务的运行时间。
对磁盘数据库而言,由于磁盘存取、内外存的数据传递、缓冲区管理、排队等待及锁的延迟等使得事务实际平均执行时间与估算的最坏情况执行时间相差很大,如果将整个数据库或其主要的"工作"部分放入内存,使每个事务在执行过程中没有I/O,则为系统较准确估算和安排事务的运行时间,使之具有较好的动态可预报性提供了有力的支持,同时也为实现事务的定时限制打下了基础。这就是内存数据库出现的主要原因。
内存数据库所处理的数据通常是"短暂"的,即有一定的有效时间,过时则有新的数据产生,而当前的决策推导变成无效。所以,实际应用中采用内存数据库来处理实时性强的业务逻辑处理数据。而传统数据库旨在处理永久、稳定的数据,其性能目标是高的系统吞吐量和低的代价,处理数据的实时性就要考虑的相对少一些。实际应用中利用传统数据库这一特性存放相对实时性要求不高的数据。
在实际应用中这两种数据库常常结合使用,而不是以内存数据库替代传统数据库。
而内存数据库也分全内存计算和热内存计算。全内存计算,即数据需要全部装载到内存中进行计算,对硬件要求高,譬如QlikView等产品。热内存计算,部分数据加载到内存中即可以进行计算,硬盘和内存会有数据交换来计算未加载的数据,譬如Yonghong Z-Suite。
技术特点
(1)采用复杂的数据模型表示数据结构,数据冗余小,易扩充,实现了数据共享。
(2)具有较高的数据和程序独立性,数据库的独立性有物理独立性和逻辑独立性。
(3)内存数据库为用户提供了方便的用户接口。
(4)内存数据库提供4个方面的数据控制功能,分别是并发控制、恢复、完整性和安全性。数据库中各个应用程序所使用的数据由数据库统一规定,按照一定的数据模型组织和建立,由系统统一管理和集中控制。
(5)增加了系统的灵活性。