首页/产品/衡控
BASE-01 已交付

衡控 · 异构资源与调度控制面

HENGKONG / RESOURCE CONTROL PLANE

把服务器、加速卡、NIC、交换机端口、本地盘与电力连接纳管成唯一资源事实库,在其之上提供跨池队列、配额与放置策略。架在既有调度器之上,不重写底层调度。

3层资源模型
12放置策略
50ms故障识别
2048单机房卡数上限

它解决什么

调得到,跑不稳。资源标签统一不等于运行语义统一。同一台机器今天给这个作业用得好,明天换个作业就慢 30%,而监控上一切正常——因为没人知道物理拓扑长什么样。

跨代跨品牌硬混,故障爆炸半径失控。H200 与国产卡放进同一个池,一个调度器决定一切,结果是训练任务被随机丢进通信能力不足的机器。故障不是随机发生的,是被调度出来的。

功能构成

资源事实与容量6 项

  • 统一资源 ID:服务器 / 加速卡 / CPU / 内存 / NIC / 交换机端口 / 本地盘 / BMC / 固件 / 机柜 / 电力连接
  • 拓扑关系:板内互联、跨机网络、存储挂载路径与故障域归属
  • 容量快照:可调度卡时、显存、本地盘与网络带宽的实时余量
  • 标签体系:按品牌、代际、精度能力、维护状态打标
  • 维护窗口:计划内下线不影响在跑作业的排布
  • 预留与配额:按项目 / 租户锁定资源,防止被抢

调度策略6 项

  • 队列与优先级:多队列并行,抢占与回填规则可配
  • 亲和与反亲和:同 NUMA、同交换机、同故障域三种粒度
  • 显存与拓扑约束:不满足即不调度,不做「先塞进去再说」
  • gang scheduling:整组作业同时起,避免占着卡等同伴
  • backfill:小作业填补大作业的空窗,不打断排队顺序
  • 预算上限:租户花费触顶后自动降级到低优队列

健康与自愈4 项

  • 故障识别:进程级事件 50ms 内感知,含掉卡、断连、高温、过载、IO 异常
  • 自动隔离:坏卡 / 坏节点即时摘除,不参与后续调度
  • 任务迁移建议:给出目标池与迁移代价,由人确认后执行
  • 集群重组:节点恢复后按策略灰度回池

技术规格

部署形态私有化高可用控制面,边节点轻量代理
底层依赖Kubernetes,或 Slurm / Volcano 等批处理调度器
接入方式调用既有调度器原生 API 作统一队列网关或调度扩展
资源规模面向 64–256 台整机(约 512–2,048 张加速卡)
数据存储资源事实库 + 时序库 + 配置策略库,均本地部署
网络要求控制面与数据面分离,无需外网连通

交付与验收

交付物控制面安装包、边节点代理、资源模型说明、策略配置手册
验收口径纳管资源与实际布线一致;不满足约束的作业不被调度到错误拓扑
性能口径调度决策 P99 延迟以现场基线为准,合同约定
报价逻辑按纳管节点数分档,不含 GPU 硬件与机房改造
报价按纳管规模分档,不按功能模块拆开卖。理由很简单:只卖调度不卖资源事实库,等于给你一个看不见地图的导航。