9.1 本地作业¶
高能所本地计算集群主要有两个:
- HTCondor 计算集群
- Slurm 计算集群
HTCondor 集群支持高通量计算(High Throughput Computing),采用 HTCondor 作为负载管理系统,绝大多数作业为单核串行作业。Slurm 集群支持高性能作业(High Performance Computing),采用 Slurm 作为负载管理系统,绝大多数作业为多核并行作业。本节将介绍各集群的作业提交、查看等基本操作。
各实验 HTCondor Quota 份额¶
HTCondor 集群采用 三层组结构 (实验.组.队列)对资源进行划分与配额管理,例如 LHAASO.lhaaso.default 表示 LHAASO 实验 → lhaaso 组 → default 队列 的配额。
- 第一层(实验):对应实验/项目,如
LHAASO、JUNO、BES等。 - 第二层(组/账户):同一实验下按用户组或用途划分,如 BES 下的
dqarun、offlinerun、physics。 - 第三层(队列):一般为
default(普通作业)、mid(中等时长作业)、special(特殊作业)、long(长作业)四类;部分实验只使用其中若干队列。
下表汇总了各实验在 HTCondor 集群上的配额(单位:核数 / job slots),数据来源于配置管理节点 cm01 上 /etc/condor/config.d/41-GROUP-*.conf。
各实验配额总览¶
| 实验 | 实验总 Quota |
|---|---|
| AliCPT | 120 |
| ATLAS | 1840 |
| BES | 20000 |
| CC (u07) | 25000 |
| CEPC | 832 |
| CMS | 836 |
| COMET | 1 |
| CSNS | 10 |
| DYW | 568 |
| EP | 128 |
| eXTP | 256 |
| GECAM | 576 |
| HEPS | 10 |
| HERD | 1268 |
| HXMT | 1936 |
| JUNO | 5936 |
| LHAASO | 12480 |
| LHCb | 584 |
| MoEDAL | 100 |
| OTHERS | 760 |
| Panda | 224 |
| COMMON | 131 |
各实验详细 Quota¶
以下按实验分别列出其在 HTCondor 集群上的配额分配。表中 - 表示该组未配置对应队列。
关于配额差异
个别实验第二层(组)Quota 之和与第一层(实验)总 Quota 存在差异(如 ATLAS 中 atlas 组总额显示为 140、但其 default 队列高达 1425),这是配置文件中允许通过 GROUP_ACCEPT_SURPLUS 借用其他组空闲资源的结果,实际以配置文件为准。
AliCPT¶
实验总 Quota:120
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| alicpt | 120 | 88 | 12 | 10 | 10 |
ATLAS¶
实验总 Quota:1840
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| atlas | 140 | 1425 | 43 | 10 | 60 |
| combination | 200 | 20 | 176 | 10 | 50 |
BES¶
实验总 Quota:20000
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| dqarun | 500 | 430 | 50 | 10 | 10 |
| offlinerun | 1200 | 1060 | 120 | 10 | 10 |
| physics | 17104 | 15544 | 1500 | 50 | 10 |
CC¶
实验总 Quota:25000
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| u07 | 25000 | 24000 | 100 | 10 | 10 |
CEPC¶
实验总 Quota:832
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| higgs | 832 | 750 | 62 | 10 | 10 |
CMS¶
实验总 Quota:836
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| cms | 836 | 736 | 80 | 10 | 10 |
COMET¶
实验总 Quota:1
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| comet | 1 | 1 | 1 | 1 | 1 |
CSNS¶
实验总 Quota:10
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| csns | 10 | 10 | - | - | - |
DYW¶
实验总 Quota:568
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| dyw | 568 | 348 | 200 | 10 | 10 |
EP¶
实验总 Quota:128
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| ep | 128 | 116 | 12 | 10 | 10 |
eXTP¶
实验总 Quota:256
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| extp | 1 | 1 | 1 | 1 | 1 |
GECAM¶
实验总 Quota:576
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| gecam | 576 | 499 | 57 | 10 | 10 |
HEPS¶
实验总 Quota:10
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| heps | 10 | 10 | - | - | - |
HERD¶
实验总 Quota:1268
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| herd | 768 | 700 | 68 | 5 | 5 |
| herdrun | 500 | 500 | - | - | - |
HXMT¶
实验总 Quota:1936
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| hxmt | 1936 | 1400 | 500 | 20 | 16 |
JUNO¶
实验总 Quota:5936
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| juno | 2000 | 1900 | 50 | 30 | 20 |
| dqmtest | 0 | 0 | 0 | 0 | 0 |
| dqmjuno | 1024 | 1000 | 14 | - | 10 |
| junospecial | 0 | 0 | 0 | 0 | 0 |
| junodc | 1048 | 1048 | 0 | 0 | 0 |
| junogns | 1664 | 1600 | 50 | 10 | 4 |
| tao | 200 | 180 | 10 | 1 | 1 |
LHAASO¶
实验总 Quota:12480
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| lhaaso | 12480 | 5480 | 2100 | 400 | 4500 |
| lhaasorun | 1 | 1 | 1 | 1 | 1 |
LHCb¶
实验总 Quota:584
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| lhcb | 584 | 506 | 58 | 10 | 10 |
MoEDAL¶
实验总 Quota:100
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| moedal | 100 | 90 | 5 | - | 5 |
OTHERS¶
实验总 Quota:760
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| ucas | 760 | 664 | 76 | 10 | 10 |
| guest | 20 | 20 | - | - | - |
Panda¶
实验总 Quota:224
| 组 | 组总额 | default | mid | special | long |
|---|---|---|---|---|---|
| panda | 224 | 184 | 20 | 10 | 10 |
COMMON(各实验共享的测试与短作业队列)¶
组总 Quota:131
COMMON 组比较特殊,其 第三层 不是队列级别(default/mid/...),而是 各实验代号,用于跨实验共享的测试作业(test.*)与短作业(short.*)。
| 组 | 组总额 | 每个子队列 Quota |
|---|---|---|
| COMMON.test | 11 | 10 |
| COMMON.short | 120 | 100 |
子队列(第三层):alicpt, atlas, physics, cms, dyw, ep, extp, gecam, hxmt, juno, lhaaso, lhcb, panda, guest, higgs, u07, comet, herd
查询实时配置
以上数据基于集群管理节点 cm01 的当前配置,配额可能随实验需求或资源调整而变化。如需获取最新值,可在有管理员权限的账号下执行:
常见问题(FAQ)¶
见常见问题。
有问题?输入后跳转到对话页继续交流