numactl命令介绍

刘泽宇 · 发表于 6 天前

一、介绍
numactl命令用于在NUMA架构下进行系统拓扑结构的查看，进程NUMA策略的设定。numactl通过一个指定的numa调度策略或者内存分配策略来控制应用程序的行为，对程序的设置将会被所有的子进程锁继承。numactl也可以控制共享内存段或者文件。

numactl使用的所有nodes参数可以以N或者N,N或者N-N或者+N的任意组合形式来表示，其中+N表示在当前默认的cpuset的基础上增加的偏移，同时也支持使用!作为取反操作。

所有使用nodes参数的位置都可以替换为如下值：

netdev:mydev node指定为网络设备mydev所在的node

file:PATH node指定为路径块设备对应的node

ip：HOST host网络设备所在的node

block：PATH 指定路径块设备所在的node

pci:[seg:]bus:dev[:func]：PCI设备所在的node

二、参数
--hardware，-H：用于显示系统上所有nodes的列表，包括每个node拥有的cpu，内存总量，空闲内存，以及node之间拓扑结构的相对距离distance

登录/注册后可看大图

563566e530322c072.png (144.94 KB, 下载次数: 5)

下载附件

6 天前上传

--show，-s：显示了当前系统下numa的设置

登录/注册后可看大图

6650366e5304311413.png (37.32 KB, 下载次数: 3)

下载附件

6 天前上传

--all，-a：取消所有的cpuset设置，这样就可以使用policy的所有可用CPUs/nodes

--interleave=nodes, -i nodes：交织内存分配策略。应用程序使用的内存将会在指定的nodes节点上交织分配，如果某个node节点上不能够分配内存，将会使用其他节点的内存。

例如指定一个测试程序t在node0和node8上交织分配内存

numactl --interleave 0,8 ./t

通过numastat命令查看进程t在node上内存的使用情况能够看到t使用的内存被平均分配到了两个node上

登录/注册后可看大图

2570666e530554697d.png (142.07 KB, 下载次数: 5)

下载附件

6 天前上传

--membind=nodes， -m nodes：指定进程只在指定的node上分配内存，如果指定节点上的node内存不够则会出现分配失败的错误

例如我们指定进程t在node0上分配内存

numactl -m 0 ./t

通过numastat能够看到进程t使用的内存都分布在node0上

--cpunodebind=nodes，-N nodes：在指定的node上运行程序

例如当前系统中有两个node，分别是node0和node8，有一个简单的测试程序t，执行

numactl -N 0 ./t

通过top查看进程t运行的cpu，能够看到t运行在cpu2上，属于node0的cpu

登录/注册后可看大图

5252166e5308f3eef0.png (22.7 KB, 下载次数: 5)

下载附件

6 天前上传

numactl -N 8 ./t

通过top查看进程t运行的cpu，能够看到t运行在cpu85上，属于node8的cpu

登录/注册后可看大图

9603166e5309be7855.png (22.01 KB, 下载次数: 4)

下载附件

6 天前上传

--physcpubind=cpus，-C cpus：指定当前进程能够运行的cpu列表，可以指定单个CPU，也可以指定一个CPU集合。例如

指定进程t运行在cpu12上

numactl -C 12 ./t

登录/注册后可看大图

6927566e530afcfd5e.png (23.23 KB, 下载次数: 5)