【详解】CGroup资源隔离(管理CPU资源、控制内存资源、控制可用CPU核心)
CGroup资源隔离：管理CPU资源、控制内存资源、控制可用CPU核心
引言
在现代操作系统中，资源管理是一个至关重要的组成部分。特别是在多任务和多用户环境中，如何有效地分配和限制资源的使用成为了一个挑战。Linux内核提供了一种强大的机制——控制组（Control Groups，简称cgroups），用于管理和限制进程组对系统资源的使用。本文将详细介绍如何使用cgroup来管理CPU资源、控制内存资源以及指定可用的CPU核心。
什么是cgroup？
控制组（cgroups）是Linux内核的一个特性，它提供了对进程组进行资源限制、优先级分配、资源统计等功能。通过cgroups，可以将一组进程绑定到一个特定的控制组，并对该组内的进程应用资源限制。
cgroup的主要功能包括：
- 资源限制：设置进程组可以使用的最大资源量。
- 优先级分配：为不同进程组分配不同的资源优先级。
- 资源统计：记录进程组的资源使用情况。
- 任务控制：挂起、恢复或终止进程组中的所有进程。
管理CPU资源
CPU带宽分配
cgroups允许你为进程组分配CPU带宽，这可以通过设置cpu.cfs_quota_us和cpu.cfs_period_us参数来实现。
-
cpu.cfs_period_us：定义了每个周期的时间长度（单位为微秒）。默认值为100000微秒（即100毫秒）。 -
cpu.cfs_quota_us：定义了在这个周期内，进程组可以使用的最大CPU时间。如果设置为-1，则表示没有限制。
例如，如果你想让一个进程组在一个100毫秒的周期内最多使用50%的CPU时间，可以这样设置：
echo 50000 > /sys/fs/cgroup/cpu/mygroup/cpu.cfs_quota_us
echo 100000 > /sys/fs/cgroup/cpu/mygroup/cpu.cfs_period_usCPU优先级
cgroups还支持设置进程组的CPU优先级，这可以通过cpu.shares参数来实现。cpu.shares的值越大，该进程组获得的CPU时间份额就越多。
例如，设置一个进程组的CPU优先级为1024：
echo 1024 > /sys/fs/cgroup/cpu/mygroup/cpu.shares控制内存资源
内存使用限制
cgroups可以限制进程组可以使用的最大内存，这可以通过设置memory.limit_in_bytes参数来实现。
例如，限制一个进程组的最大内存使用量为1GB：
echo 1073741824 > /sys/fs/cgroup/memory/mygroup/memory.limit_in_bytes内存使用统计
cgroups还提供了详细的内存使用统计信息，这些信息可以通过读取memory.stat文件来获取。
cat /sys/fs/cgroup/memory/mygroup/memory.stat控制可用CPU核心
指定可用CPU核心
你可以通过设置cpuset.cpus参数来指定进程组可以使用的CPU核心。cpuset.cpus接受一个逗号分隔的CPU列表或范围。
例如，限制一个进程组只能使用第0和第1个CPU核心：
echo 0-1 > /sys/fs/cgroup/cpuset/mygroup/cpuset.cpus指定可用内存节点
对于多NUMA节点的系统，还可以通过设置cpuset.mems参数来指定进程组可以使用的内存节点。
例如，限制一个进程组只能使用第0个内存节点：
echo 0 > /sys/fs/cgroup/cpuset/mygroup/cpuset.mems实践示例
假设我们有一个名为myapp的应用程序，我们希望为其创建一个cgroup，并设置以下限制：
- 最大CPU使用率为50%
- 最大内存使用量为1GB
- 只能使用第0和第1个CPU核心
首先，创建一个cgroup：
sudo mkdir -p /sys/fs/cgroup/cpu/myapp
sudo mkdir -p /sys/fs/cgroup/memory/myapp
sudo mkdir -p /sys/fs/cgroup/cpuset/myapp然后，设置CPU限制：
echo 50000 > /sys/fs/cgroup/cpu/myapp/cpu.cfs_quota_us
echo 100000 > /sys/fs/cgroup/cpu/myapp/cpu.cfs_period_us设置内存限制：
echo 1073741824 > /sys/fs/cgroup/memory/myapp/memory.limit_in_bytes设置可用CPU核心：
echo 0-1 > /sys/fs/cgroup/cpuset/myapp/cpuset.cpus最后，将应用程序的进程ID添加到cgroup中：
echo <PID> > /sys/fs/cgroup/cpu/myapp/tasks
echo <PID> > /sys/fs/cgroup/memory/myapp/tasks
echo <PID> > /sys/fs/cgroup/cpuset/myapp/tasks通过cgroups，我们可以非常灵活地管理和限制进程组对系统资源的使用。这对于优化系统性能、提高资源利用率以及确保系统的稳定性和安全性具有重要意义。CGroup（Control Group）是Linux内核的一个功能，用于限制、记录和隔离进程组使用的物理资源（如CPU、内存、磁盘I/O等）。下面我将提供几个示例代码，分别展示如何使用CGroup来管理CPU资源、控制内存资源以及控制可用CPU核心。
1. 管理CPU资源
假设我们有一个进程，我们希望它最多只能使用50%的CPU时间。我们可以使用CGroup的cpu.cfs_quota_us和cpu.cfs_period_us参数来实现这一点。
创建CGroup并设置CPU配额
# 创建CGroup
sudo mkdir /sys/fs/cgroup/cpu/mygroup
# 设置CPU配额（50%的CPU时间）
sudo sh -c 'echo 50000 > /sys/fs/cgroup/cpu/mygroup/cpu.cfs_quota_us'
sudo sh -c 'echo 100000 > /sys/fs/cgroup/cpu/mygroup/cpu.cfs_period_us'
# 将进程加入到CGroup
sudo sh -c 'echo <PID> > /sys/fs/cgroup/cpu/mygroup/tasks'2. 控制内存资源
假设我们希望限制某个进程的最大内存使用量为1GB。我们可以使用CGroup的memory.limit_in_bytes参数来实现这一点。
创建CGroup并设置内存限制
# 创建CGroup
sudo mkdir /sys/fs/cgroup/memory/mygroup
# 设置内存限制（1GB）
sudo sh -c 'echo 1073741824 > /sys/fs/cgroup/memory/mygroup/memory.limit_in_bytes'
# 将进程加入到CGroup
sudo sh -c 'echo <PID> > /sys/fs/cgroup/memory/mygroup/tasks'3. 控制可用CPU核心
假设我们希望某个进程只能在特定的CPU核心上运行，例如只在CPU核心0和1上运行。我们可以使用CGroup的cpuset子系统来实现这一点。
创建CGroup并设置CPU集
# 创建CGroup
sudo mkdir /sys/fs/cgroup/cpuset/mygroup
# 设置可用的CPU核心
sudo sh -c 'echo 0-1 > /sys/fs/cgroup/cpuset/mygroup/cpuset.cpus'
# 设置可用的内存节点（如果有多节点系统）
sudo sh -c 'echo 0 > /sys/fs/cgroup/cpuset/mygroup/cpuset.mems'
# 将进程加入到CGroup
sudo sh -c 'echo <PID> > /sys/fs/cgroup/cpuset/mygroup/tasks'示例脚本
为了方便管理和操作，我们可以编写一个简单的Shell脚本来创建CGroup并设置相应的资源限制。
#!/bin/bash
GROUP_NAME="mygroup"
PID=$1
# 检查参数
if [ -z "$PID" ]; then
echo "Usage: $0 <PID>"
exit 1
fi
# 创建CGroup
sudo mkdir -p /sys/fs/cgroup/cpu/$GROUP_NAME
sudo mkdir -p /sys/fs/cgroup/memory/$GROUP_NAME
sudo mkdir -p /sys/fs/cgroup/cpuset/$GROUP_NAME
# 设置CPU配额（50%的CPU时间）
sudo sh -c 'echo 50000 > /sys/fs/cgroup/cpu/$GROUP_NAME/cpu.cfs_quota_us'
sudo sh -c 'echo 100000 > /sys/fs/cgroup/cpu/$GROUP_NAME/cpu.cfs_period_us'
# 设置内存限制（1GB）
sudo sh -c 'echo 1073741824 > /sys/fs/cgroup/memory/$GROUP_NAME/memory.limit_in_bytes'
# 设置可用的CPU核心（0和1）
sudo sh -c 'echo 0-1 > /sys/fs/cgroup/cpuset/$GROUP_NAME/cpuset.cpus'
sudo sh -c 'echo 0 > /sys/fs/cgroup/cpuset/$GROUP_NAME/cpuset.mems'
# 将进程加入到CGroup
sudo sh -c 'echo $PID > /sys/fs/cgroup/cpu/$GROUP_NAME/tasks'
sudo sh -c 'echo $PID > /sys/fs/cgroup/memory/$GROUP_NAME/tasks'
sudo sh -c 'echo $PID > /sys/fs/cgroup/cpuset/$GROUP_NAME/tasks'
echo "Process $PID has been added to CGroup $GROUP_NAME with resource limits."使用示例
假设你有一个进程的PID为1234，你可以通过以下命令将其添加到CGroup中：
./manage_cgroup.sh 1234这样，该进程就会受到上述资源限制的管理。
希望这些示例对你有所帮助！如果有任何问题或需要进一步的解释，请随时告诉我。CGroups（Control Groups）是Linux内核提供的一种机制，用于限制、记录和隔离进程组使用的物理资源（如CPU时间、系统内存、网络带宽或这些资源的组合）。CGroups广泛应用于容器技术中，如Docker和Kubernetes，以确保每个容器都能获得其应有的资源份额，同时防止某个容器过度消耗资源而影响其他容器。
1. CPU资源管理
1.1 设置CPU配额
-
cpu.cfs_period_us: 控制CPU时间分配的基本周期，单位为微秒（us）。默认值为100000 us (100 ms)。 -
cpu.cfs_quota_us: 在一个周期内，该cgroup下的所有任务可以使用的最大CPU时间，单位为微秒。如果设置为-1，则没有限制；如果是正数，比如50000，表示在这个周期内，该cgroup下的任务最多可以使用50%的CPU时间。
# 设置cgroup的CPU周期为100ms
echo 100000 > /sys/fs/cgroup/cpu/mygroup/cpu.cfs_period_us
# 设置cgroup的CPU配额为50ms
echo 50000 > /sys/fs/cgroup/cpu/mygroup/cpu.cfs_quota_us1.2 设置CPU权重
-
cpu.shares: 定义了cgroup在竞争CPU资源时相对于其他cgroup的优先级。默认值为1024，范围从2到262144。
# 设置cgroup的CPU权重为2048
echo 2048 > /sys/fs/cgroup/cpu/mygroup/cpu.shares2. 内存资源管理
2.1 设置内存使用上限
-
memory.limit_in_bytes: 设置cgroup可以使用的最大内存大小。当达到这个限制时，新的内存请求会被拒绝，可能会导致进程被杀死。
# 设置cgroup的最大内存使用量为1GB
echo 1073741824 > /sys/fs/cgroup/memory/mygroup/memory.limit_in_bytes2.2 设置内存软限制
-
memory.soft_limit_in_bytes: 设置一个软限制，当系统内存紧张时，优先回收超过软限制的内存。
# 设置cgroup的内存软限制为512MB
echo 536870912 > /sys/fs/cgroup/memory/mygroup/memory.soft_limit_in_bytes3. 控制可用CPU核心
3.1 设置可使用的CPU核心
-
cpuset.cpus: 指定cgroup可以使用的CPU核心。例如，0-3,7 表示可以使用第0、1、2、3和7号CPU核心。
# 设置cgroup可以使用的CPU核心为0和1
echo 0-1 > /sys/fs/cgroup/cpuset/mygroup/cpuset.cpus-
cpuset.mems: 指定cgroup可以使用的NUMA节点。例如，0-1 表示可以使用第0和1号NUMA节点。
# 设置cgroup可以使用的NUMA节点为0
echo 0 > /sys/fs/cgroup/cpuset/mygroup/cpuset.mems示例：创建并配置一个CGroup
假设我们要创建一个名为mygroup的CGroup，并为其设置CPU和内存限制：
# 创建CGroup目录
sudo mkdir -p /sys/fs/cgroup/cpu/mygroup
sudo mkdir -p /sys/fs/cgroup/memory/mygroup
# 设置CPU周期和配额
echo 100000 > /sys/fs/cgroup/cpu/mygroup/cpu.cfs_period_us
echo 50000 > /sys/fs/cgroup/cpu/mygroup/cpu.cfs_quota_us
# 设置内存限制
echo 1073741824 > /sys/fs/cgroup/memory/mygroup/memory.limit_in_bytes
# 将当前shell进程加入到CGroup
echo $$ > /sys/fs/cgroup/cpu/mygroup/tasks
echo $$ > /sys/fs/cgroup/memory/mygroup/tasks通过上述命令，我们创建了一个名为mygroup的CGroup，并为其设置了CPU和内存的限制。当前shell进程被加入到这个CGroup中，因此它将受到这些限制的影响。
希望这些信息对你有所帮助！如果有更多问题，请随时提问。
- 点赞
- 收藏
- 关注作者
评论（0）