中国存储论坛

 找回密码
 立即注册

手机号码,快捷登录

查看: 25868|回复: 86

Apache BookKeeper High-performance reliable write-ahead logging

[复制链接]
发表于 2014-12-28 14:43:27 | 显示全部楼层 |阅读模式
安全库半导体世界IT采购网半导体联盟
Apache的项目ZooKeeper有了一个兄弟项目: BookKeeper。
BookKeeper是一个可靠地记录日志流的一个系统, 它是被设计来记录Write Ahead Log的(操作具体数据结构之前先记录日志),Write Ahead Log在数据库里面很常见, 实际上BookKeeper的创意来自于hadoop里面的NameNode,NameNode在把数据写入内存之前先写入磁盘日志,但是写入本地磁盘有个问题:如果这台机器的磁盘坏了, 那么数据还是恢复不了。BookKeeper就是为了弥补这个缺陷的,这样之后NameNode不用写入自己的本地磁盘,而是写入BookKeeper系统,而可靠性则由BookKeeper来保证。虽然BookKeeper是为hadoop设计的,但是对于任何需要这种可靠性的日志的系统并且系统里面只有个线程写日志的话,那么都可以用这个系统。
BookKeeper里面的服务器叫做: bookies, 日志流叫做ledgers, BookKeeper被设计成高可靠性的, 即使有写bookie挂掉了,只要有足够数量的bookie还在正常工作的话,那么整个BookKeeper集群就可以正常工作。
跟大多数可靠性系统一样,BookKeeper为把同一份数据存多份在各个bookie上面。
BookKeeper的数据模型是一个扁平的结构,每个ledger由一个long型的key唯一确定。ledgers只支持append操作,而且同时只能有一个单线程来写。



本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
文明发言,共建绿色平台。
回复

使用道具 举报

发表于 2018-8-18 13:13:04 | 显示全部楼层
安全库半导体世界IT采购网半导体联盟
受教,谢谢分享~
文明发言,共建绿色平台。
回复

使用道具 举报

发表于 2020-11-5 21:50:13 | 显示全部楼层
好东东,谢谢老大分享!
文明发言,共建绿色平台。
回复

使用道具 举报

发表于 2020-11-5 23:02:55 | 显示全部楼层
好东东,谢谢老大分享!
文明发言,共建绿色平台。
回复

使用道具 举报

发表于 2020-11-5 23:03:01 | 显示全部楼层
感谢楼主分享!
文明发言,共建绿色平台。
回复

使用道具 举报

发表于 2020-11-5 23:17:05 | 显示全部楼层
这个不错,感谢分享啦
文明发言,共建绿色平台。
回复

使用道具 举报

发表于 2020-11-5 23:38:26 | 显示全部楼层
受教,谢谢分享~
文明发言,共建绿色平台。
回复

使用道具 举报

发表于 2020-11-7 21:49:58 | 显示全部楼层
楼主威武,谢谢分享
文明发言,共建绿色平台。
回复

使用道具 举报

发表于 2020-11-26 22:55:58 | 显示全部楼层
不错,支持支持。。。
文明发言,共建绿色平台。
回复

使用道具 举报

发表于 2020-12-3 21:15:37 | 显示全部楼层
不错,支持支持。。。
文明发言,共建绿色平台。
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|返回首页|中国存储论坛

GMT+8, 2024-4-26 11:38

Powered by Discuz

© 2001-2018 中国存储网Chinastor

快速回复 返回顶部 返回列表