选择规格
实例的规格是一个带名字的选择。dcctl 每次都把这个名字展开成同一组设置,因此在一个集群上测得的数据可以在另一个集群上复现,而不必再靠一串覆盖条目和 TF_VAR_ 导出去重建。
规格是预设,而不是旋钮。它组合已有的设置,从不改变运行哪些服务(那仍由配置档决定),也从不开启某种行为:事件信封和 MQTT 故障关闭确认保持你设定的状态。它与 --ha 相互独立:--ha 决定运行几份副本,规格决定每份副本多大。
| 规格 | 适用场景 | 状态 |
|---|---|---|
base | 笔记本或小型集群。默认值:未指定规格的实例就是 base,渲染结果与规格出现之前完全相同。 | 标准规格,见服务规格。 |
compact | 资源很少的笔记本。这是集群级设置,在安装时选择;--compact 与之等价且会保留。 | 见 --compact。 |
perf-12k | 一个不带 --ha 的集群,平台节点池约 40 个 vCPU,在开启事件信封的情况下持续每秒 12,000 个事件。 | 配置形态已实测:在 GKE 上稳定处理每秒 12,000 个事件,所有事件均有对账。部分取值由该次运行推导而来,尚未按此取值实际运行;见下文。 |
只有在测量显示某个更高速率稳定之后,才会添加对应的规格。名字就是承诺,因此规格绝不会以“目标”的形式发布。
如何选择
dcctl install <provider> --kube-context <context>
dcctl bootstrap <provider> <instance> --size perf-12k
dcctl install 上的 --size compact 等同于 --compact。perf 规格按实例选择,在 dcctl bootstrap 上指定。紧凑集群会拒绝 perf 规格。
规格会记录在实例上,dcctl upgrade 每次都会重新应用它,因此升级绝不会改变实例的规格。某个版本如果调整了某个规格,用该规格记录的实例会在下一次升级时随之改变,该版本的升级说明会写明这一点。
perf-12k 设置了什么
每一行对应一个 Pod。--ha 决定 event-management 的副本数(两个)以及 Broker 服务器和数据库实例的数量(各三个);下面其他服务的副本数保持不变,每份副本的大小也保持不变。
| 服务 | 副本数 | CPU 上限 | 内存上限 | CPU 请求 |
|---|---|---|---|---|
device-management | 2 | 3 | - | 500m |
device-state | 2 | 3 | 512Mi | 250m |
event-management | - | 4 | 1Gi | 400m |
event-processing | - | 2 | 1Gi | 500m |
event-sources | 3 | 3 | 512Mi | 600m |
短横线表示该规格未作设定,沿用 Chart 自身的值。device-management 保留其内存下限而不设自己的上限,因为由规格写入的上限会绕过该下限。除非 --ha 另有决定,event-management 保持一个副本。
Broker、卷以及事件存储预写日志的额度:
| 设置 | 值 |
|---|---|
streamDesignRate | 12000 |
nats_cpu_request | 4 |
nats_memory_request | 4Gi |
nats_memory_limit | 8Gi |
nats_jetstream_storage | 28Gi |
timescale_storage | 160Gi |
timescale_max_wal_size_mib | 20480 |
JetStream 卷的大小按设计速率的预留量能装下来确定;升级绝不会调整实例已有的卷,因此把规格应用到现有实例时,会保留它创建时的卷。
实测与推导
配置形态(上面的副本数和 CPU 上限,以及每秒 12,000 个事件)是在 GKE 上以 40 个 vCPU 的平台节点池实测的;该集群 48 个 vCPU 中的其余部分是压测发生器。实测运行使用的 Broker 内存上限为 20Gi,事件库卷为 260Gi,预写日志额度为 46080 MiB,event-processing 为 4 CPU 和 768Mi。此规格改用的取值是由该次运行推导的,尚未按此取值实际运行:Broker 的 8Gi 上限、28Gi 的 JetStream 卷和 160Gi 的事件库卷、20480 MiB 的额度,以及 event-processing 的 2 CPU 和 1Gi。下一轮 GKE 测试会确认或修正它们,若有变动,升级说明会写明。
perf-12k 不设置什么
- 事件信封。 这些数据是在开启信封时测得的,信封约可降低五分之一的 CPU。它是单独的开关,所以当
perf规格在关闭信封的情况下运行时,dcctl bootstrap会提示你。 --ha。 该速率是在单个 Broker 服务器上测得的。这种组合是允许的,dcctl bootstrap会提示它尚未实测。- 共享数据库与节点。 关系型存储的卷和
max_wal_size、数据库的 CPU 与内存请求、监控卷以及节点池都属于集群,保持dcctl install和你的集群留下的状态。实测的集群使用三个节点池:服务用t2d-standard-8(两个节点),数据库用n2d-standard-8(两个节点),Broker 单独用一个t2d-standard-8,压测发生器在别处。
哪个值优先
从低到高:
- Chart 的默认值和 OpenTofu 变量的默认值;
- 规格;
dcctl自己算出的内容:HA 的副本数、信封开关、运行的服务、实例已有的卷;- 你的
--values覆盖文件; - 你在
TF_VAR_*、terraform.tfvars或*.auto.tfvars文件中声明的 OpenTofu 变量。
你声明的内容优先。当你已自行声明某个 OpenTofu 变量时,dcctl 根本不会传递规格的同名变量,否则 OpenTofu 会采用规格的值而非你的值。dcctl bootstrap 打印的那一行会写明所应用的规格。
更改运行中实例的规格
实例保留其 bootstrap 时的规格。把现有实例换到另一个规格不属于本版本;在此之前,请把想要的设置写进覆盖文件,它优先于任何规格。无论哪种规格,dcctl 都无法扩容 JetStream 卷,操作步骤见事件流能等待多久才扛过一次中断。