读WiscKey: Separating Keys from Values in SSD-conscious Storage
创始人
2024-06-01 13:58:25
0

在我看来本论文的主要贡献在于相对减轻了传统LSM compact所带来的写放大问题。其核心设计在于使key、value分离以及gc只保持有效数据

key、value分离

作者对于key、value分离策略的观察主要来自于排序是以往LSM性能消耗最大的地方,但是真正影响排序的与占用大储存的value没有什么关系,那么能不能将key和value分开储存,那么就可以仅仅只排序key了呢

具体作者是将key和value所在的地方储存到LSM tree,而value就储存到vlog文件中。那么每次搜索数据的时候就可以先搜索LSM tree找到value的地址,然后在vlog文件中找到对应的值。

当然这和传统LSM充分利用顺序读取不一样,这是作者基于SSD的随机读写性能已经比较强的情况下作出的适应性改进

此外作者为了防止key可能丢失,还在vlog中储存了value的key

gc保持有效数据

gc维护了一个有效数据的区间,无论是搜索还是释放空间都是在这个区间中进行的。这样就免去了合并、排序的大量消耗性能的过程,并且还不需要刻意取出所有有效的key,然后对比对应的value是不是在,不在就删除这种重量级的gc

大概过程是gc从区间找到有效的数据然后添加到空间尾部,最后更新区间范围,那么在这个区间之外的就是无效数据了。这样的过程也难怪叫做gc,确实和标记—整理十分类似

并且为了防止gc过程中突然crash,作者还确保新添加的有效值和更新的区间指针持久化后才真正释放空间

范围查找

范围查找我认为是这篇论文的弱点所在,作者虽然是通过充分利用SSD并行度来解决只能取key然后一次次查找value,最后得到一个范围结果

在这里插入图片描述

但是从图中仍然可知即使32线程在1kb请求大小的时候,性能仍然非常低。并且即使32线程取得了不弱于传统LSM范围读取的性能,那这样对于并行资源的消耗也是相当巨大的

写入

  1. 追加value到vlog
  2. 插入key以及value地址到LSM tree

作者还在这个写入过程做了一个优化,就是缓存要写入的数据直到到达阈值才一次写入

Ref

  1. https://www.usenix.org/system/files/conference/fast16/fast16-papers-lu.pdf

相关内容

热门资讯

常用商务英语口语   商务英语是以适应职场生活的语言要求为目的,内容涉及到商务活动的方方面面。下面是小编收集的常用商务...
六年级上册英语第一单元练习题   一、根据要求写单词。  1.dry(反义词)__________________  2.writ...
复活节英文怎么说 复活节英文怎么说?复活节的英语翻译是什么?复活节:Easter;"Easter,anniversar...
2008年北京奥运会主题曲 2008年北京奥运会(第29届夏季奥林匹克运动会),2008年8月8日到2008年8月24日在中华人...
英语道歉信 英语道歉信15篇  在日常生活中,道歉信的使用频率越来越高,通过道歉信,我们可以更好地解释事情发生的...
六年级英语专题训练(连词成句... 六年级英语专题训练(连词成句30题)  1. have,playhouse,many,I,toy,i...
上班迟到情况说明英语   每个人都或多或少的迟到过那么几次,因为各种原因,可能生病,可能因为交通堵车,可能是因为天气冷,有...
小学英语教学论文 小学英语教学论文范文  引导语:英语教育一直都是每个家长所器重的,那么有关小学英语教学论文要怎么写呢...
英语口语学习必看的方法技巧 英语口语学习必看的方法技巧如何才能说流利的英语? 说外语时,我们主要应做到四件事:理解、回答、提问、...
四级英语作文选:Birth ... 四级英语作文范文选:Birth controlSince the Chinese Governmen...
金融专业英语面试自我介绍 金融专业英语面试自我介绍3篇  金融专业的学生面试时,面试官要求用英语做自我介绍该怎么说。下面是小编...
我的李老师走了四年级英语日记... 我的李老师走了四年级英语日记带翻译  我上了五个学期的小学却换了六任老师,李老师是带我们班最长的语文...
小学三年级英语日记带翻译捡玉... 小学三年级英语日记带翻译捡玉米  今天,我和妈妈去外婆家,外婆家有刚剥的`玉米棒上带有玉米籽,好大的...
七年级英语优秀教学设计 七年级英语优秀教学设计  作为一位兢兢业业的人民教师,常常要写一份优秀的教学设计,教学设计是把教学原...
我的英语老师作文 我的英语老师作文(通用21篇)  在日常生活或是工作学习中,大家都有写作文的经历,对作文很是熟悉吧,...
英语老师教学经验总结 英语老师教学经验总结(通用19篇)  总结是指社会团体、企业单位和个人对某一阶段的学习、工作或其完成...
初一英语暑假作业答案 初一英语暑假作业答案  英语练习一(基础训练)第一题1.D2.H3.E4.F5.I6.A7.J8.C...
大学生的英语演讲稿 大学生的英语演讲稿范文(精选10篇)  使用正确的写作思路书写演讲稿会更加事半功倍。在现实社会中,越...
VOA美国之音英语学习网址 VOA美国之音英语学习推荐网址 美国之音网站已经成为语言学习最重要的资源站点,在互联网上还有若干网站...
商务英语期末试卷 Part I Term Translation (20%)Section A: Translate ...