跳转至

9.1 本地作业

高能所本地计算集群主要有两个:

  • HTCondor 计算集群
  • Slurm 计算集群

HTCondor 集群支持高通量计算(High Throughput Computing),采用 HTCondor 作为负载管理系统,绝大多数作业为单核串行作业。Slurm 集群支持高性能作业(High Performance Computing),采用 Slurm 作为负载管理系统,绝大多数作业为多核并行作业。本节将介绍各集群的作业提交、查看等基本操作。

各实验 HTCondor Quota 份额

HTCondor 集群采用 三层组结构 (实验.组.队列)对资源进行划分与配额管理,例如 LHAASO.lhaaso.default 表示 LHAASO 实验 → lhaaso 组 → default 队列 的配额。

  • 第一层(实验):对应实验/项目,如 LHAASO、JUNO、BES 等。
  • 第二层(组/账户):同一实验下按用户组或用途划分,如 BES 下的 dqarun、offlinerun、physics。
  • 第三层(队列):一般为 default(普通作业)、mid(中等时长作业)、special(特殊作业)、long(长作业)四类;部分实验只使用其中若干队列。

下表汇总了各实验在 HTCondor 集群上的配额(单位:核数 / job slots),数据来源于配置管理节点 cm01 上 /etc/condor/config.d/41-GROUP-*.conf。

各实验配额总览

实验 实验总 Quota
AliCPT 120
ATLAS 1840
BES 20000
CC (u07) 25000
CEPC 832
CMS 836
COMET 1
CSNS 10
DYW 568
EP 128
eXTP 256
GECAM 576
HEPS 10
HERD 1268
HXMT 1936
JUNO 5936
LHAASO 12480
LHCb 584
MoEDAL 100
OTHERS 760
Panda 224
COMMON 131

各实验详细 Quota

以下按实验分别列出其在 HTCondor 集群上的配额分配。表中 - 表示该组未配置对应队列。

关于配额差异

个别实验第二层(组)Quota 之和与第一层(实验)总 Quota 存在差异(如 ATLAS 中 atlas 组总额显示为 140、但其 default 队列高达 1425),这是配置文件中允许通过 GROUP_ACCEPT_SURPLUS 借用其他组空闲资源的结果,实际以配置文件为准。

AliCPT

实验总 Quota:120

组 组总额 default mid special long
alicpt 120 88 12 10 10

ATLAS

实验总 Quota:1840

组 组总额 default mid special long
atlas 140 1425 43 10 60
combination 200 20 176 10 50

BES

实验总 Quota:20000

组 组总额 default mid special long
dqarun 500 430 50 10 10
offlinerun 1200 1060 120 10 10
physics 17104 15544 1500 50 10

CC

实验总 Quota:25000

组 组总额 default mid special long
u07 25000 24000 100 10 10

CEPC

实验总 Quota:832

组 组总额 default mid special long
higgs 832 750 62 10 10

CMS

实验总 Quota:836

组 组总额 default mid special long
cms 836 736 80 10 10

COMET

实验总 Quota:1

组 组总额 default mid special long
comet 1 1 1 1 1

CSNS

实验总 Quota:10

组 组总额 default mid special long
csns 10 10 - - -

DYW

实验总 Quota:568

组 组总额 default mid special long
dyw 568 348 200 10 10

EP

实验总 Quota:128

组 组总额 default mid special long
ep 128 116 12 10 10

eXTP

实验总 Quota:256

组 组总额 default mid special long
extp 1 1 1 1 1

GECAM

实验总 Quota:576

组 组总额 default mid special long
gecam 576 499 57 10 10

HEPS

实验总 Quota:10

组 组总额 default mid special long
heps 10 10 - - -

HERD

实验总 Quota:1268

组 组总额 default mid special long
herd 768 700 68 5 5
herdrun 500 500 - - -

HXMT

实验总 Quota:1936

组 组总额 default mid special long
hxmt 1936 1400 500 20 16

JUNO

实验总 Quota:5936

组 组总额 default mid special long
juno 2000 1900 50 30 20
dqmtest 0 0 0 0 0
dqmjuno 1024 1000 14 - 10
junospecial 0 0 0 0 0
junodc 1048 1048 0 0 0
junogns 1664 1600 50 10 4
tao 200 180 10 1 1

LHAASO

实验总 Quota:12480

组 组总额 default mid special long
lhaaso 12480 5480 2100 400 4500
lhaasorun 1 1 1 1 1

LHCb

实验总 Quota:584

组 组总额 default mid special long
lhcb 584 506 58 10 10

MoEDAL

实验总 Quota:100

组 组总额 default mid special long
moedal 100 90 5 - 5

OTHERS

实验总 Quota:760

组 组总额 default mid special long
ucas 760 664 76 10 10
guest 20 20 - - -

Panda

实验总 Quota:224

组 组总额 default mid special long
panda 224 184 20 10 10

COMMON(各实验共享的测试与短作业队列)

组总 Quota:131

COMMON 组比较特殊,其 第三层 不是队列级别(default/mid/...),而是 各实验代号,用于跨实验共享的测试作业(test.*)与短作业(short.*)。

组 组总额 每个子队列 Quota
COMMON.test 11 10
COMMON.short 120 100

子队列(第三层):alicpt, atlas, physics, cms, dyw, ep, extp, gecam, hxmt, juno, lhaaso, lhcb, panda, guest, higgs, u07, comet, herd

查询实时配置

以上数据基于集群管理节点 cm01 的当前配置,配额可能随实验需求或资源调整而变化。如需获取最新值,可在有管理员权限的账号下执行:

ssh cm01
ls /etc/condor/config.d/41-GROUP-*.conf
cat /etc/condor/config.d/41-GROUP-<实验名>.conf

常见问题(FAQ)

见常见问题。

🤖 AI 助手
💬 快速提问 ×

有问题?输入后跳转到对话页继续交流