bloomfilter 库比较

ephuizi

当前问题 存储服务部署时会规划的内存,但是运行一段时候后,会发生oom 很奇怪,存储oom时,dump的堆大小比规划的内存常常小几个GB 存储服务运行一段时候后,容易发生full gc 背景 存储是全局重删的. 每一个节点负责自身数据的重删索引管理. 目前直接把重删索引存储在ssd的文件上,并且使用开放寻址法处理hash冲突问题. 文件是否写满通过hash冲突次数和在这个文件已经保存的hash值总数. 一个索引文件保存的最大数量hash限制为: ((Integer.MAX_VALUE / ENTRY_SIZE) – 100 )的下个质数 ((2**31-1)/37.0-100)的下个质数 为 58039999…

Read More→

vmware vsan 磁盘故障更换

ephuizi

在混合群集中，磁盘用于提供容量，闪存设备用于提供读写缓存。vSAN 将所有可用缓存的 70% 分配为读取缓存，30% 分配为写入缓冲区。在混合配置中，闪存设备用作读取缓存和写入缓冲区。
vsan 存储容量变小. 主机出现告警: `vsan 数据出现错误`

重新认识CAP 定理.

ephuizi

1. 特指 linearizability Consistency
2. CAP根本没有提到延迟(latency),满足CAP可用性的系统可以花任意长的时间来回复一个请求.
3. CAP系统的模型是一个只能读写单个数据的寄存器,事务(transaction)不在这个定理的范围之内
4. 在设计分布式系统的时候，你需要考虑到更多得多的问题。如果太关注CAP就容易导致忽略了其他重要的问题

↑