CentOS 7 PBS 集群部署与实践

PBS集群概述

PBS（Portable Batch System）是广泛应用于HPC（高性能计算）环境的开源作业调度系统，支持多节点任务分发与资源管理。在CentOS 7上部署PBS集群可有效提升计算资源利用率，适用于科研计算、大数据处理等场景。

环境准备

• 操作系统：CentOS 7 Minimal安装
• 节点规划：1个管理节点（Server）、N个计算节点（Client）
• 网络要求：节点间SSH免密通信
• 依赖包：EPEL仓库、gcc、make等开发工具

安装与配置流程

1. 安装PBS服务端

# 添加EPEL仓库
yum install -y epel-release
# 安装OpenPBS或TORQUE
yum install -y pbspro-server pbspro-client
# 初始化PBS服务
systemctl enable pbs
systemctl start pbs

2. 配置计算节点

# 所有节点安装客户端组件
yum install -y pbspro-client
# 编辑节点配置文件
echo "manager_node_ip" > /var/spool/pbs/mom_priv/config

3. 集群资源管理

通过qmgr命令定义计算节点与队列：

qmgr -c "create node compute_node1"
qmgr -c "create queue batch queue_type=execution"

集群验证与测试

# 提交测试作业
echo "sleep 60" | qsub
# 查看作业状态
qstat -a
# 检查计算节点负载
pbsnodes -a

性能优化建议

• 调整pbs_server和pbs_mom的线程参数
• 配置NUMA架构绑定提升内存访问效率
• 启用cgroups实现资源隔离
• 设置作业优先级策略与队列权重

常见问题排查

• 节点通信失败：检查15001-15004端口连通性
• 作业挂起：验证资源请求是否超出节点容量
• 权限错误：确保pbsusers组权限正确

监控与管理工具

推荐使用pbs_web可视化界面或集成Prometheus+Grafana实现实时监控，结合pbs_report生成资源利用率报表。