首页 > 其他分享 >leveldb学习笔记之六——db/memtable.h

leveldb学习笔记之六——db/memtable.h

时间:2022-11-07 13:05:44浏览次数:45  
标签:memtable leveldb const MemTable db value Slice key size


db数据在内存中的存储格式,写操作的数据都会先写到memtable中

class MemTable {
public:
//构造函数,不允许隐式转换,参数为内部key比较器
explicit MemTable(const InternalKeyComparator& comparator);

//引用计数
void Ref() { ++refs_; }

//解引用
void Unref() {
--refs_;
assert(refs_ >= 0);
if (refs_ <= 0) {
delete this;
}
}

//评估当前的内存使用量
size_t ApproximateMemoryUsage();

//创建迭代器,用来遍历MemTable中的对象
Iterator* NewIterator();

//向MemTable中添加对象
void Add(SequenceNumber seq, ValueType type,
const Slice& key,
const Slice& value);

// 读取数据,提供查询键,输出对象值和状态
bool Get(const LookupKey& key, std::string* value, Status* s);

private:
~MemTable(); //析构函数私有化,使用者只能通过unref释放对象

//比较器
struct KeyComparator {
const InternalKeyComparator comparator;
explicit KeyComparator(const InternalKeyComparator& c) : comparator(c) { }
int operator()(const char* a, const char* b) const;
};
friend class MemTableIterator;
friend class MemTableBackwardIterator;

//定义skiplist
typedef SkipList<const char*, KeyComparator> Table;

//成员变量包括键值比较器、引用计数、内存管理和跳表
KeyComparator comparator_;
int refs_;
Arena arena_;
Table table_;

//禁止拷贝构造和赋值操作符
MemTable(const MemTable&);
void operator=(const MemTable&);
};

相关函数

主要分析以下几个函数:

  • 写入数据的函数
    memtable写入数据的格式如下:

    代码如下:
void MemTable::Add(SequenceNumber s, ValueType type,
const Slice& key,
const Slice& value) {
size_t key_size = key.size(); //key的长度
size_t val_size = value.size(); //value的长度
size_t internal_key_size = key_size + 8; //内部key的长度,因为内部key要加上序列号,序列号长度是8个字节
const size_t encoded_len = //编码后的总长度,key和value的长度分别用varint进行编码,所以总长度是此种计算方式
VarintLength(internal_key_size) + internal_key_size +
VarintLength(val_size) + val_size;
char* buf = arena_.Allocate(encoded_len); //分配空间
char* p = EncodeVarint32(buf, internal_key_size); //首先写入内部key的长度(varint编码)
memcpy(p, key.data(), key_size); //再写key的数据
p += key_size;
EncodeFixed64(p, (s << 8) | type); //然后写入类型数据
p += 8;
p = EncodeVarint32(p, val_size); //继续写入value的长度(varint编码)
memcpy(p, value.data(), val_size); //写入value的数据
assert(p + val_size == buf + encoded_len);
table_.Insert(buf); //将写入的数据插入到跳表中
}
  • 读取数据
//读数据为写数据的逆向过程
bool MemTable::Get(const LookupKey& key, std::string* value, Status* s) {
Slice memkey = key.memtable_key(); //获取memkey
Table::Iterator iter(&table_); //获取对应的跳表
iter.Seek(memkey.data()); //查找到memkey对应的数据
if (iter.Valid()) {
const char* entry = iter.key();
uint32_t key_length;
const char* key_ptr = GetVarint32Ptr(entry, entry+5, &key_length);
if (comparator_.comparator.user_comparator()->Compare(
Slice(key_ptr, key_length - 8),
key.user_key()) == 0) {

// Correct user key
const uint64_t tag = DecodeFixed64(key_ptr + key_length - 8);
switch (static_cast<ValueType>(tag & 0xff)) {
case kTypeValue: {//普通数据,直接查找后返回
Slice v = GetLengthPrefixedSlice(key_ptr + key_length);
value->assign(v.data(), v.size());
return true;
}
case kTypeDeletion://已经删除的数据,返回NotFound
*s = Status::NotFound(Slice());
return true;
}
}
}
return false;
}

学习是一种慰藉,编程是一种情怀,技术提升永不可辜负!


标签:memtable,leveldb,const,MemTable,db,value,Slice,key,size
From: https://blog.51cto.com/u_15862521/5828915

相关文章

  • leveldb学习笔记之一——clion调用leveldb使用示例
    前言2018年杀入区块链,算是接触了分布式、数据存储这一系列的知识,前段时间接触某手机厂商的技术人员,才发现自己在存储方面知识的不足,因此这段时间准备沉下心来学习学习。接下......
  • leveldb学习笔记之十——leveldb/util/cache.cc
    cache.cc中的代码是Cache的实现代码,其中主要涉及到LRUHandle、HandleTable、LRUCache以及ShardedLRUCache。它们与Cache的关系如下:ShardedLRUCache是抽象类Cache的实现,提供......
  • nginx 代理mongodb redis 配置
    worker_processes1;events{worker_connections1024;}stream{ upstreamapp-ssh{ server192.168.25.130:22; } upstreamapp-redis{ serve......
  • 9个GaussDB常用的对象语句
    摘要:本文介绍了9个GaussDB常用的对象语句,希望对大家有帮助。本文分享自华为云社区《GaussDB对象相关语句》,作者:酷哥。1.常用函数pg_database_size()--数据库使用的......
  • ubuntu下adb devices显示unauthorized解决方法
    找了好几篇文章,发现​​这篇文章​​的解决方式是靠谱的,解决方式如下:rm~/.android/adbkeyaptupdateaptinstalladb......
  • Rust 编程中使用 leveldb 的简单例子
    前言最近准备用Rust写一个完善的blockchain的教学demo,在持久化时考虑到使用leveldb。通过查阅文档,发现Rust中已经提供了使用leveldb的接口。将官方的例子修改了下,能够运行通......
  • JDBC和JPA关系
    1.JDBC和JPA的区别不同标准:jdbc是数据库的统一接口标准;jpa是orm框架的统一接口标准。用法区别:jdbc更注重数据库,orm则更注重于java代码,但是实际上jpa实现的框架底层还是......
  • redis的rdb与aof
    Redis持久化提供了多种不同级别的持久化方式:RDB持久化可以在指定的时间间隔内生成数据集的时间点快照(point-in-timesnapshot)。AOF持久化记录服务器执行的所有写操作......
  • EXCEL用DB函数计算商品房4年后每年的折旧额
    DB函数主要是用于计算通过固定余额递减法来计算某资产在一定时间内的折旧值,其语法结构为:DB(cost,salvage,life,period,month),各参数的含义如下:cost参数:该参数用于指定资产原值......
  • stm32cubeIDE STLINK连接SWD接口调试,启动GDB server失败的处理
    stm32cubeIDESTLINK连接SWD接口调试,启动GDBserver失败的处理报警提示Failedtobindtoport61234,errorcode-1:NoerrorFailurestartingGDBserver:TCPpor......