本文主要介绍如何使用平台提供的irqbalance\-ng功能，自动配置物理网卡中断（IRQ，interrupt request）的CPU亲和性（CPU affinity），提升网络性能。 ## 操作场景对于高网络流量场景，可能会出现大量网卡中断集中到某一CPU上，导致数据包收发出现延迟的问题。irqbalance\-ng可通过周期性扫描的运行方式，自动检查、配置物理网卡的CPU亲和性（/proc/irq/{irq_id}/smp_affinity），防止CPU在处理网络中断时负载不均，进而提升网络性能。同时针对配置了多个Network Namespace的场景，irqbalance\-ng支持自动解读各个namespace的网卡信息并为其进行中断绑定。 ## 注意事项本工具暂仅支持在如下镜像中安装使用： |镜像类型 |发行版本 | |---|---| |veLinux |* veLinux 1.0 64位

* veLinux 2.0 64位 | |CentOS |* CentOS 7.x 64位

* CentOS 8.3 64位

* CentOS Stream 9.x 64位 | |Ubuntu |* Ubuntu 18.04 64位

* Ubuntu 20.04 64位

* Ubuntu 22.04 64位

* Ubuntu 14.04 64位 | |Debian |* Debian 10 64位

* Debian 12 64位 | |RHEL（Red Hat Enterprise Linux） |* RHEL 7.8 64位

* RHEL 8.8 64位

* RHEL 9.2 64位

* RHEL 9.3 64位 | |AlmaLinux |* AlmaLinux 8.x 64位

* AlmaLinux 9.x 64位 | ## 基本概念 |概念 |说明 | |---|---| |IRQ |中断请求（interrupt request），指设备主动发送到CPU的电信号，CPU将停止当前任务处理接收的中断请求。 | |irqbalance |用于帮助平衡所有系统CPU上的中断所产生的CPU负载的一个守护进程。 | |CPU affinity |即CPU亲和性也称CPU绑定，指进程、中断在指定的CPU上长时间运行，不被迁移到其他处理器的倾向性。 | |NUMA |非均匀内存访问架构（Non\-Uniform Memory Access）是一种为多处理器的电脑设计的内存架构。内存访问时间取决于内存相对于处理器的位置。 | |Network Namespace |是Linux提供的一种对于系统全局资源的隔离方法，通过将系统的全局资源放在不同的namespace中，来实现资源隔离的目的。不同namespace的程序，可以享有一份独立的系统资源。 | ## 操作步骤 ### 安装irqbalance\-ng 您可以[登录目标Linux实例](https://www.volcengine.com/docs/6396/67747)，安装相应操作系统的irqbalance\-ng工具。 veLinux 1. 执行如下命令，为镜像配置extra\-tools软件源。 veLinux 1.0 ```Bash echo 'deb http://mirrors.ivolces.com/extra-tools/velinux/ orion main' >> /etc/apt/sources.list.d/extra-tools.list wget -O - http://mirrors.ivolces.com/extra-tools/velinux/GPG-KEY-system | apt-key add - ``` veLinux 2.0 ```Bash echo 'deb http://mirrors.ivolces.com/extra-tools/velinux/ lyra main' >> /etc/apt/sources.list.d/extra-tools.list wget -O - http://mirrors.ivolces.com/extra-tools/velinux/GPG-KEY-system | apt-key add - ``` 2. 执行如下命令，更新软件源信息。 ```Bash apt-get update ``` 3. 执行如下命令，安装irqbalance\-ng。 ```Bash apt-get install irqbalance-ng ``` CentOS 1. 执行如下命令，为镜像配置extra\-tools软件源。 CentOS 7.x ```Bash echo -e '[extra-tools]\nname= extra-tools\nbaseurl=http://mirrors.ivolces.com/extra-tools/centos/7/rpms/\nenabled=1\ngpgcheck=0' >> /etc/yum.repos.d/extra-tools.repo ``` CentOS 8.3 ```Bash echo -e '[extra-tools]\nname= extra-tools\nbaseurl=http://mirrors.ivolces.com/extra-tools/centos/8/rpms/\nenabled=1\ngpgcheck=0' >> /etc/yum.repos.d/extra-tools.repo ``` CentOS Stream 9.x ```Bash echo -e '[extra-tools]\nname= extra-tools\nbaseurl=http://mirrors.ivolces.com/extra-tools/centos/9/rpms/\nenabled=1\ngpgcheck=0' >> /etc/yum.repos.d/extra-tools.repo ``` 2. 执行如下命令，更新缓存。 ```Bash yum makecache ``` 3. 执行如下命令，安装irqbalance\-ng。 ```Bash yum -y remove irqbalance yum -y install irqbalance-ng ``` Debian 1. 执行如下命令，为镜像配置extra\-tools软件源。 Debian 10 ```Bash echo 'deb http://mirrors.ivolces.com/extra-tools/debian/ buster main' >> /etc/apt/sources.list.d/extra-tools.list wget -O - http://mirrors.ivolces.com/extra-tools/debian/GPG-KEY-system | apt-key add - ``` Debian 12 ```Bash echo 'deb http://mirrors.ivolces.com/extra-tools/debian/ bookworm main' >> /etc/apt/sources.list.d/extra-tools.list wget -O - http://mirrors.ivolces.com/extra-tools/debian/GPG-KEY-system | apt-key add - ``` 2. 执行如下命令，更新软件源信息。 ```Bash apt-get update ``` 3. 执行如下命令，安装irqbalance\-ng。 ```Bash apt-get install irqbalance-ng ``` Ubuntu 1. 执行如下命令，为镜像配置extra\-tools软件源。 Ubuntu 18.04 ```Bash echo 'deb http://mirrors.ivolces.com/extra-tools/ubuntu/ bionic main' >> /etc/apt/sources.list.d/extra-tools.list wget -O - http://mirrors.ivolces.com/extra-tools/ubuntu/GPG-KEY-system | apt-key add - ``` Ubuntu 20.04 ```Bash echo 'deb http://mirrors.ivolces.com/extra-tools/ubuntu/ focal main' >> /etc/apt/sources.list.d/extra-tools.list wget -O - http://mirrors.ivolces.com/extra-tools/ubuntu/GPG-KEY-system | apt-key add - ``` Ubuntu 22.04 ```Bash echo 'deb http://mirrors.ivolces.com/extra-tools/ubuntu/ jammy main' >> /etc/apt/sources.list.d/extra-tools.list wget -O - http://mirrors.ivolces.com/extra-tools/ubuntu/GPG-KEY-system | apt-key add - ``` Ubuntu 24.04 ```Bash echo 'deb http://mirrors.ivolces.com/extra-tools/ubuntu/ noble main' >> /etc/apt/sources.list.d/extra-tools.list wget -O - http://mirrors.ivolces.com/extra-tools/ubuntu/GPG-KEY-system | apt-key add - ``` 2. 执行如下命令，更新软件源信息。 ```Bash apt-get update ``` 3. 执行如下命令，安装irqbalance\-ng。 ```Bash apt-get install irqbalance-ng ``` Red Hat/AlmaLinux 请根据操作系统发行版本，安装相应的irqbalance\-ng工具。 Red Hat 7.8 1. 执行如下命令，下载irqbalance\-ng工具安装包。 ```Bash wget http://mirrors.ivolces.com/extra-tools/centos/7/rpms/irqbalance-ng-1.0.27-3.ve.noarch.rpm ``` 2. 执行如下命令，安装irqbalance\-ng。 ```Bash rpm -e irqbalance-ng irqbalance || true rpm -ivh irqbalance-ng-1.0.27-3.ve.noarch.rpm ``` Red Hat 8.8/AlmaLinux 8.x 1. 执行如下命令，下载irqbalance\-ng工具安装包。 ```Bash wget http://mirrors.ivolces.com/extra-tools/centos/8/rpms/irqbalance-ng-1.0.27-3.ve.noarch.rpm ``` 2. 执行如下命令，安装irqbalance\-ng。 ```Bash rpm -e $(rpm -qa | grep -E '^irqbalance(-ng)?') || true rpm -ivh irqbalance-ng-1.0.27-3.ve.noarch.rpm ``` Red Hat 9.2、9.3/AlmaLinux 9.x 1. 执行如下命令，下载irqbalance\-ng工具安装包。 ```Bash wget http://mirrors.ivolces.com/extra-tools/centos/9/rpms/irqbalance-ng-1.0.27-3.ve2.noarch.rpm ``` 2. 执行如下命令，安装irqbalance\-ng。 ```Bash rpm -e $(rpm -qa | grep -E '^irqbalance(-ng)?') || true rpm -ivh irqbalance-ng-1.0.27-3.ve2.noarch.rpm ``` ### 管理irqbalance\-ng #### 查看运行状态 1. [登录目标Linux实例](https://www.volcengine.com/docs/6396/67747)。 2. 执行如下命令，检查irqbalance\-ng是否正常运行。 ```Plain Text systemctl status irqbalance-ng.service ``` ![图片](https://portal.volccdn.com/obj/volcfe/cloud-universal-doc/upload_81e471dfc69e9ad090ba5de689bcdafa.png) #### 配置工具运行规则您可以修改irqbalance\-ng的配置文件，调整irqbalance\-ng检查/调整网卡中断绑定的周期、处理网卡中断的CPU列表等配置。 1. [登录目标Linux实例](https://www.volcengine.com/docs/6396/67747)。 2. 执行如下命令，编辑配置文件。 ```Plain Text vim /etc/default/irqbalance-ng ``` 3. 按`i`键进入编辑模式，根据需求调整irqbalance\-ng配置。 ![图片](https://portal.volccdn.com/obj/volcfe/cloud-universal-doc/upload_b5823973f2c7d417f8534402e3c3e421.png) **参数说明** |参数 |说明 |取值样例 | |---|---|---| |debug |irqbalance\-ng服务打印日志级别。支持配置：

* 0：表示打印error级别日志。

* 1：默认，表示打印info及error级别日志。

* 2：表示打印debug、info及error级别日志。

说明

irqbalance\-ng日志存储路径为：/var/log/irqbalance\-ng.log.

说明

您可以执行lscpu、numactl --hardware或lshw命令，查看CPU ID。以lscpu命令为例，0-7表示八个CPU的ID为0、1、2、3、4、5、6、7。

|"1,4,5,10\-15,20" | |lib_path |软件包安装的库文件路径，不建议修改。 |\- | |net_path |镜像中网络接口相关文件路径，不建议修改。 |\- | |cpu_path |镜像中CPU设备文件路径，不建议修改。 |\- | |numa_path |镜像中NUMA文件路径，不建议修改。 |\- | 4. 按`ecs`键，输入`:wq`按回车键，保存修改并退出文件。 5. 修改完成后，执行如下命令重启irqbalance\-ng，修改的配置才会生效。 ```Bash systemctl restart irqbalance-ng ``` 6. 您可以执行如下命令，查看中断与CPU的绑定信息。 > 本命令通过`/proc/interrupts`查看中断信息，同时结合`cat /proc/irq/$i/smp_affinity_list`设置/读取中断的CPU亲和性，您可以结合实际场景对命令进行调整。 ```Plain Text for i in `cat /proc/interrupts | grep -E "input|output" | awk -F ' ' '{print $1}' | awk -F ':' '{print $1}'` ;do echo "irq_"$i ":" `cat /proc/irq/$i/smp_affinity_list` ;done ``` ![图片](https://portal.volccdn.com/obj/volcfe/cloud-universal-doc/upload_3cc9182626dc35cc2f4b361beb92a76b.png) #### 停止irqbalance\-ng 您可以执行如下命令，暂停irqbalance\-ng周期性进行中断绑定。 ```Plain Text systemctl stop irqbalance-ng.service ``` 您还可以执行如下命令，取消irqbalance\-ng开机自动运行。 ```Plain Text systemctl disable irqbalance-ng.service ``` #### 卸载irqbalance\-ng * CentOS/AlmaLinux/RHEL ```Plain Text yum remove irqbalance-ng ``` * Debian/Ubuntu ```Plain Text apt-get remove --purge irqbalance-ng ```

云服务器