数据库内存管理

发表时间: 2022-06-17 08:08

内存数据库从范型上可以分为关系型内存数据库和键值型内存数据库。

在实际应用中内存数据库主要是配合oracle或mysql等大型关系数据库使用,关注性能。

作用类似于缓存,并不注重数据完整性和数据一致性。

基于键值型的内存数据库比关系型更加易于使用,性能和可扩展性更好,因此在应用上比关系型的内存数据库使用更多。

比较FastDB、Memcached和Redis主流内存数据库的功能特性。

FastDB的特点包括如下方面:

1、FastDB不支持client-server架构因而所有使用FastDB的应用程序必须运行在同一主机上;

2、fastdb假定整个数据库存在于RAM中,并且依据这个假定优化了查询算法和接口。

3、fastdb没有数据库缓冲管理开销,不需要在数据库文件和缓冲池之间传输数据。

4、整个fastdb的搜索算法和结构是建立在假定所有的数据都存在于内存中的,因此数据换出的效率不会很高。

5、Fastdb支持事务、在线备份以及系统崩溃后的自动恢复。

6、fastdb是一个面向应用的数据库,数据库表通过应用程序的类信息来构造。

FastDB不能支持Java API接口,这使得在本应用下不适合使用FastDB。

Memcached

Memcached是一种基于Key-Value开源缓存服务器系统,主要用做数据库的数据高速缓冲,并不能完全称为数据库。

memcached的API使用三十二位元的循环冗余校验(CRC-32)计算键值后,将资料分散在不同的机器上。当表格满了以后,接下来新增的资料会以LRU机制替换掉。由于 memcached通常只是当作缓存系统使用,所以使用memcached的应用程式在写回较慢的系统时(像是后端的数据库)需要额外的程序更新memcached内的资料。

memcached具有多种语言的客户端开发包,包括:Perl、PHP、JAVA、C、Python、Ruby、C#。

Redis

Redis是一个高性能的key-value数据库。redis的出现,很大程度补偿了memcached这类keyvalue存储的不足,在部分场合可以对关系数据库起到很好的补充作用。它提供了C++、Java、Python,Ruby,Erlang,PHP客户端。

内存数据库是相对于磁盘数据库来说的。我们都知道我们经常使用的关系型数据库,比如MySQL,它的数据文件最终是存储到磁盘上的。而内存数据库则是将所有的数据存储在内存中,磁盘和内存在访问速率上不是一个量级的,完全没有可比性。

随着内存容量不断加大、价格不断下降,互联网的流量越来越大的情况下,内存数据库逐步被广泛应用起来。

应用场景

  1. 缓存数据:将高频访问的数据通过一定的机制加载到内存中,减少应用与数据库的连接,极大的提高了应用的性能;
  2. 内存计算:如果你的数据在内存中,那么你可以充分利用CPU的资源去做数据的计算、聚合、查询,而不用担心数据库是否能承受你的SQL查询。

主流的内存数据库

  1. 关系型内存数据库:H2、Apache Ignite、SQLite
  2. H2:支持嵌入式,服务器和集群模式,支持内存数据库,纯Java开发
  3. Apache Ignite:高性能、集成化、分布式的内存平台,他可以实时地在大数据集中执行事务和计算,可以像操作数据库一样,操作内存缓存
  4. SQLite:小而精美,iOS和Android开发本地数据库的不二之选
  5. Key-Value内存数据库:redis、Memcached
  6. redis:支持String、Set、Hash、Sorted Set、List
  7. Memcached:是一个简洁的、高性能的、分布式的内存对象缓存系统
  8. 传统数据库的内存数据库引擎:
  9. MySQL Memory Engine
  10. SQL Server 2016 In-Memory OLTP
  11. 传统数据库提供的内存数据库,将磁盘数据加载到内存中,利用查询引擎操作内存数据

总结

以上是个人整理的一些内存数据库,都是我们平常业务开发时候多少都有用到的内存数据库。了解每一种内存数据库的特性,结合它们的优缺点并应用于不同的业务场景,才是正确的编码之道。

内存数据库不是银弹,他也不能代替传统数据库,只有内存数据库与传统数据库(磁盘数据库)强强联手、互相补充才能发挥出数据存储技术的强大威力!