数据库 – 高性能持久键值存储大量的记录

MsSQL 前端之家
前端之家收集整理的这篇文章主要介绍了数据库 – 高性能持久键值存储大量的记录，前端之家小编觉得挺不错的，现在分享给大家，也给大家做个参考。
这种情况约为10亿条记录.每个记录具有1kb的数据大小,并存储在SSD中.
哪个kv存储可以提供最佳的随机读取性能？它需要减少每个查询只有1次的磁盘访问,并且所有的数据索引将被存储在内存中.

Redis很快,但是将1 TB数据存储在内存中太贵了.
LevelDB每个查询读取磁盘多次.
我发现最接近的一个是胖子,但它不是持久的.这是一个SSD支持的memcached.

有什么建议么？

解决方法

RocksDB可能是您的选择,其针对快速存储(如内存和闪存盘)及其高度可定制性进行了优化.如果您的应用程序在初始批量加载后是只读的,那么您可以将RocksDB配置为在一个单个大文件中压缩所有内容.以这种方式,读数保证至多具有单个I / O.但是,如果您的应用程序同时处理读写操作,那么为了每次读取最多有一个I / O,您需要牺牲写入性能,因为您需要配置rockdb以便经常压缩,并且会影响写入性能.

RocksDB的调试指南也可以在here找到.

猜你在找的MsSQL相关文章

SQL Server2012高可用之日志传送测试
（一）日志传送架构 （1.1）相关服务器 主服务器 ：用于生产的服务器，上面运行这生产SQL ...
SQL server事物复制报错：要复制的 LOB 数据的长度(xxxxx)超出了配置的最大值 65536
(一)事故背景 最近在SQL Server 2012生产数据库上配置完事物复制（发布订阅）后，生产数据...
SQL Server2012高可用之事物复制(发布订阅)测试
（一）测试目的 目前公司使用的SQL SERVER 2012高可用环境为主备模式，其中主库可执行读写...
使用zabbix监控sql server的发布订阅
（一）背景个人在使用sql server时，用到了sql server的发布订阅来做主从同步，类似MySQL的...
SQL学习（四）集合运算
UNION和OR谓词 找出 product 和 product2 中售价高于 500 的商品的基本信息. select * fro...
SQL学习（五） 高级处理
5.1 请说出针对本章中使用的 product（商品）表执行如下 SELECT 语句所能得到的结果。 SEL...
SQL学习(一）初识数据库
datawhale组队学习SQL task01
SQL学习(二）基础查询与排序
datawhale数据库组队学习第二天打卡
SQL Server 2005 返回修改后的数据
今天在公司看到同事写了个SQL2005的新特性的文章，觉得很实用，在这里和大家分享下。原著作...
SQL Server 数据库最小宕机迁移方案
一、目的 在做SQL Server数据库维护的时候，当上司要求我们把几十G的数据文件搬动到其它服...
MySQLMsSQLOracleSqlitePostgre SQLMariadbMongoDBNoSQLHBaseJDBC
undo日志persistent-cmysql-error-postal-codesql-match-almysql-5.6mysql-8.0database-tri安装路径系统错误data_dir丢失文件主从同步sql_mode数据库目录匿名用户character_seID归零数据库位置查询表重复字段查询字段截断日志SUSPECT7391Remote ServeLinked Serve玄学问题登录不上开启远程访问