memcached优化方法

短命女 2022-08-07 06:45 183阅读 0赞

工作原理

基本概念：slab，page，chunk。

slab，是一个逻辑概念。它是在启动memcached实例的时候预处理好的，每个slab对应一个chunk size，也就是说不同slab有不同的chunk size。具体分配多少个slab由参数 -f （增长因子）和 -n （chunk最小尺寸）决定的。

page，可以理解为内存页。大小固定为1m。slab会在存储请求时向系统申请page，并将page按chunk size进行切割。

chunk，是保存用户数据的最小单位。用户数据item（包括key，value）最终会保存到chunk内。chunk规格是固定的，如果用户数据放进来后还有剩余则这剩余部分不能做其他用途。

工作流程：memcahed实例启动，根据 -f 和 -n 进行预分配slab。以 -n 为最小值开始，以 -f 为比值生成等比数列，直到1m为止（每个slab的chunk size都要按8的倍数进行补全，比如：如果按比值算是556的话，会再加4到560成为8的整倍数）。然后每个slab分配一个page。当用户发来存储请求时（key,value），memcached会计算key+value的大小，看看属于哪个slab。确定slab后看里面的是否有空闲chunk放key+value，如果不够就再向系统申请一个page（如果此时已经达到 -m 参数设置的内存使用上限，则看是否设置了 -M 。如果设置了 -M 则返回错误提示，否则按LRU算法删除数据）。申请后将该page按本slab的chunk size 进行切割，然后分配一个来存放用户数据。

注意：

1，chunk是在page里面划分的，而page固定为1m，所以chunk最大不能超过1m。

2，chunk实际占用内存要加48B，因为chunk数据结构本身需要占用48B。

3，如果用户数据大于1m，则memcached会将其切割，放到多个chunk内。

4，已分配出去的page不能回收。

优化建议

1，-n 参数的设置，注意将此参数设置为1024可以整除的数（还要考虑48B的差值），否则余下来的部分就浪费了。

2，不要存储超过1m的数据。因为要拆成多个chunk，计算和时间成本都成倍增加。

3，善用stats命令查看memcached状态。

4，消灭eviction（被删除的数据）。造成eviction是因为内存不够，有三个思路：一是在CPU有余力的情况下开启压缩（PHP扩展）；二是增加内存；三是调整 -f 参数，减少内存浪费。

5，调整业务代码，提高命中率。

6，缓存小数据。省带宽，省网络I/O时间，省内存。

7，根据业务特点，为数据尺寸区间小的业务分配专用的memcached实例。这样可以调小 -f 参数，使数据集中存在少数几个slab上，内存浪费较少。

发表评论取消回复

表情：

评论列表（有 0 条评论，183人围观）

还没有评论，来说两句吧...

相关阅读

相关使用Memcached优化Python的Django框架

Memcached是一个高性能的分布式内存对象缓存系统，用于减轻数据库负载并加快Web应用程序的响应速度。在Python的Django框架中，我们可以利用Memcached来提

向右看齐/ 2024年03月02日 10:31/ 0 赞/ 4 阅读

相关 Memcache常用方法

Memcache::add — 添加一个值，如果已经存在，则返回false Memcache::addServer — 添加一个可供使用的服务器地址 Memcach

淡淡的烟草味﹌/ 2022年09月18日 12:49/ 0 赞/ 154 阅读

相关 Memcache 优化建议

一、memcached工作原理基本概念：slab，page，chunk。 slab，是一个逻辑概念。它是在启动memcached实例的时候预处理好的，每个slab对应一

以你之姓@/ 2022年08月07日 09:44/ 0 赞/ 249 阅读

相关 memcached优化方法

工作原理基本概念：slab，page，chunk。 slab，是一个逻辑概念。它是在启动memcached实例的时候预处理好的，每个slab对应

短命女/ 2022年08月07日 06:45/ 0 赞/ 184 阅读

相关 php浅析memcache和memcached模块比较以及安装方法

1.目前大多数php环境里使用的都是不带d的memcache版本，这个版本出的比较早，是一个原生版本，完全在php框架内开发的。与之对应的带d的memcached是建立在lib

清疚/ 2022年07月16日 07:49/ 0 赞/ 150 阅读

相关 MemCache 安装配置方法

最近在做项目的时候，遇到了需要使用memcached的情况，所以看了看网上的教程，很多情况都没有出现或者不详细。所以总结了一下，决定写一篇安装教程。以下方式适用于win10

系统管理员/ 2022年07月13日 02:46/ 0 赞/ 166 阅读

相关大型网站优化技术之memcache

Memcache命令大全 memcached的基本命令(安装、卸载、启动、配置相关)： > \-p 监听的端口 > \-l 连接的IP地址, 默认是本机 > \-

爱被打了一巴掌/ 2022年06月02日 02:14/ 0 赞/ 151 阅读

相关 memcache函数所有的方法

Memcache::add – 添加一个值，如果已经存在，则返回false Memcache::addServer – 添加一个可供使用的服务器地址 Memcache::c

怼烎@/ 2022年05月30日 07:39/ 0 赞/ 181 阅读

相关 memcache telnet命令行测试方法

1. cmd上登录memcache <table> <tbody> <tr> <td> </td> </tr> </tbody

喜欢ヅ旅行/ 2022年04月17日 04:47/ 0 赞/ 159 阅读

相关 php扩展memcached、memcache、redis的安装配置方法

php连接memcached缓存服务器的客户端有两个，一个是memcache是比较底层的开发库，memcached是比较新的开发库，php安装这两个扩展中的任意一个后就可以在编

逃离我推掉我的手/ 2022年02月05日 05:55/ 0 赞/ 302 阅读