Warning
此文件的目的是为让中文读者更容易阅读和理解,而不是作为一个分支。 因此, 如果您对此文件有任何意见或更新,请先尝试更新原始英文文件。
Note
如果您发现本文档与原始文件有任何不同或者有翻译问题,请联系该文件的译者, 或者请求时奎亮的帮助:<alexs@kernel.org>。
- Original:
- 翻译:
臧雷刚 Leigang Zang <zangleigang@hisilicon.com>
- 校译:
基于DAMON的LRU排序¶
基于DAMON的LRU排序是一个静态的内核模块,旨在用于以主动的、轻量级的数据访问模型 为基础的页面优先级处理的LRU链表上,以使得LRU上的数据访问模型更为可信。
哪里需要主动的LRU排序¶
在一个大型系统中,以页为粒度的访问检测会有比较显著的开销,LRU通常不会主动去排序, 而是对部分特殊事件进行部分的、响应式的排序,例如:特殊的用户请求,系统调用或者 内存压力。这导致,在有些场景下,LRU不能够完美的作为一个可信的数据访问模型,比如 在内存压力下对目标内存进行回收。
因为DAMON能够尽可能准确的识别数据访问模型,同时只引起用户指定范围的开销,主动的 执行DAMON_LRU_SORT让LRU变得更为可信是有益的,而且这只需要较少和可控的开销。
这是如何工作的¶
DAMON_LRU_SORT使用DAMON寻找热页(范围内的页面访问频率高于用户指定的阈值)和冷页 (范围内的页面在超过用户指定的时间无访问),并提高热页和降低冷页在LRU中的优先级。 为了避免在排序过程占用更多的CPU计算资源,可以设置一个CPU占用时间的约束值。在约 束下,分别提升或者降低更多的热页和冷页。系统管理员也可以配置三个内存水位以控制 在何种条件下自动激活或者停止这种机制。
冷热阈值和CPU约束的默认值是比较保守的。这意味着,在默认参数下,模块可以广泛且无 负作用的使用在常见环境中,同时在只消耗一小部分CPU时间的情况下,给有内存压力的系 统提供一定水平的冷热识别。
接口:模块参数¶
使用此特性,你首先需要确认你的系统中运行的内核在编译时启用了
CONFIG_DAMON_LRU_SORT=y
.
为了让系统管理员打开或者关闭并且调节指定的系统,DAMON_LRU_SORT设计了模块参数。
这意味着,你可以添加 damon_lru_sort.<parameter>=<value>
到内核的启动命令行
参数,或者在 /sys/modules/damon_lru_sort/parameters/<parameter>
写入正确的
值。
下边是每个参数的描述
enabled¶
打开或者关闭DAMON_LRU_SORT.
你可以通过设置这个参数为 Y
来打开DAMON_LRU_SORT。设置为 N
关闭
DAMON_LRU_SORT。注意,在基于水位的激活的情况下,DAMON_LRU_SORT有可能不会真正去
监测或者做LRU排序。对这种情况,参考下方关于水位的描述。
commit_inputs¶
让DAMON_LRU_SORT再次读取输入参数,除了 enabled
。
在DAMON_LRU_SORT运行时,新的输入参数默认不会被应用。一旦这个参数被设置为 Y
,DAMON_LRU_SORT会再次读取除了 enabled
之外的参数。读取完成后,这个参数会被
设置为 N
。如果在读取时发现有无效参数,DAMON_LRU_SORT会被关闭。
hot_thres_access_freq¶
热点内存区域的访问频率阈值,千分比。
如果一个内存区域的访问频率大于等于这个值,DAMON_LRU_SORT把这个区域看作热区,并 在LRU上把这个区域标记为已访问,因些在内存压力下这部分内存不会被回收。默认为50%。
cold_min_age¶
用于识别冷内存区域的时间阈值,单位是微秒。
如果一个内存区域在这个时间内未被访问过,DAMON_LRU_SORT把这个区域看作冷区,并在 LRU上把这个区域标记为未访问,因此在内存压力下这些内存会首先被回收。默认值为120 秒。
quota_ms¶
尝试LRU链表排序的时间限制,单位是毫秒。
DAMON_LRU_SORT在一个时间窗口内(quota_reset_interval_ms)内最多尝试这么长时间来 对LRU进行排序。这个可以用来作为CPU计算资源的约束。如果值为0,则表示无限制。
默认10毫秒。
quota_reset_interval_ms¶
配额计时重置周期,毫秒。
配额计时重置周期。即,在quota_reset_interval_ms毫秒内,DAMON_LRU_SORT对LRU进行 排序不会超过quota_ms或者quota_sz。
默认1秒。
wmarks_interval¶
水位的检查周期,单位是微秒。
当DAMON_LRU_SORT使能但是由于水位而不活跃时检查水位前最小的等待时间。默认值5秒。
wmarks_high¶
空闲内存高水位,千分比。
如果空闲内存水位高于这个值,DAMON_LRU_SORT停止工作,不做任何事,除了周期性的检 查水位。默认200(20%)。
wmarks_mid¶
空闲内存中间水位,千分比。
如果空闲内存水位在这个值与低水位之间,DAMON_LRU_SORT开始工作,开始检测并对LRU链 表进行排序。默认150(15%)。
wmarks_low¶
空闲内存低水位,千分比。
如果空闲内存小于这个值,DAMON_LRU_SORT不再工作,不做任何事,除了周期性的检查水 线。默认50(5%)。
sample_interval¶
监测的采样周期,微秒。
DAMON对冷内存监测的采样周期。更多细节请参考DAMON文档 (详细用法) 。默认5 毫秒。
aggr_interval¶
监测的收集周期,微秒。
DAMON对冷内存进行收集的时间周期。更多细节请参考DAMON文档 (详细用法) 。默认 100毫秒。
min_nr_regions¶
最小监测区域数量。
对冷内存区域监测的最小数量。这个值可以作为监测质量的下限。不过,这个值设置的过 大会增加开销。更多细节请参考DAMON文档 (详细用法) 。默认值为10。
max_nr_regions¶
最大监测区域数量。
对冷内存区域监测的最大数量。这个值可以作为监测质量的上限。然而,这个值设置的过 低会导致监测结果变差。更多细节请参考DAMON文档 (详细用法) 。默认值为1000。
monitor_region_start¶
目标内存区域的起始物理地址。
DAMON_LRU_SORT要处理的目标内存区域的起始物理地址。默认,使用系统最大内存。
monitor_region_end¶
目标内存区域的结束物理地址。
DAMON_LRU_SORT要处理的目标内存区域的结束物理地址。默认,使用系统最大内存。
kdamond_pid¶
DAMON线程的PID。
如果DAMON_LRU_SORT是使能的,这个表示任务线程的PID。其它情况为-1。
nr_lru_sort_tried_hot_regions¶
被尝试进行LRU排序的热内存区域的数量。
bytes_lru_sort_tried_hot_regions¶
被尝试进行LRU排序的热内存区域的大小(字节)。
nr_lru_sorted_hot_regions¶
成功进行LRU排序的热内存区域的数量。
bytes_lru_sorted_hot_regions¶
成功进行LRU排序的热内存区域的大小(字节)。
nr_hot_quota_exceeds¶
热区域时间约束超过限制的次数。
nr_lru_sort_tried_cold_regions¶
被尝试进行LRU排序的冷内存区域的数量。
bytes_lru_sort_tried_cold_regions¶
被尝试进行LRU排序的冷内存区域的大小(字节)。
nr_lru_sorted_cold_regions¶
成功进行LRU排序的冷内存区域的数量。
bytes_lru_sorted_cold_regions¶
成功进行LRU排序的冷内存区域的大小(字节)。
nr_cold_quota_exceeds¶
冷区域时间约束超过限制的次数。
Example¶
如下是一个运行时的命令示例,使DAMON_LRU_SORT查找访问频率超过50%的区域并对其进行 LRU的优先级的提升,同时降低那些超过120秒无人访问的内存区域的优先级。优先级的处 理被限制在最多1%的CPU以避免DAMON_LRU_SORT消费过多CPU时间。在系统空闲内存超过50% 时DAMON_LRU_SORT停止工作,并在低于40%时重新开始工作。如果DAMON_RECLAIM没有取得 进展且空闲内存低于20%,再次让DAMON_LRU_SORT停止工作,以此回退到以LRU链表为基础 以页面为单位的内存回收上。
# cd /sys/modules/damon_lru_sort/parameters
# echo 500 > hot_thres_access_freq
# echo 120000000 > cold_min_age
# echo 10 > quota_ms
# echo 1000 > quota_reset_interval_ms
# echo 500 > wmarks_high
# echo 400 > wmarks_mid
# echo 200 > wmarks_low
# echo Y > enabled