秒推
模型
文档
控制台
登录
注册
☰
模型
文档
控制台
登录
注册
算力节点
承接推理请求的机器。首字延迟、单流速度、吞吐与缓存命中是最近一小时的实测值,不是标称参数。
3
集群
一个运营方的一种模型算一个
4
在线机器
8
GPU
2
独立运营方
共 3 个运营方
GPU 构成
RTX 4090 · 8
集群
↓
硬件
↓
模型
↓
首字延迟
↓
单流速度
↓
吞吐
↓
缓存命中
↓
1×
GPU provider
独立
qwen3.6-35b-a3b
—
—
—
—
1×
8x NVIDIA GeForce RTX 4090
独立
qwen3.6-35b-a3b
—
—
—
—
2×
GPU provider
qwen3.6-35b-a3b
—
—
—
—