后端: 1. 服务级 outbox 基础设施全量落地——新增 service route / service catalog / route registry,重构 outbox engine、repository、event bus 和 model,按 `event_type -> service -> table/topic/group` 统一写入与投递,保留 `agent` 兼容壳但不再依赖共享 outbox 2. Kafka 投递、消费与启动装配同步切换——更新 kafka config、consumer、envelope,接入服务级 topic 与 consumer group,并同步调整 mysql 初始化、start/main/router 装配,保证各服务 relay / consumer 独立装配 3. 业务事件处理器按服务归属重接新 bus——`active-scheduler` 触发链路,以及 `agent` / `memory` / `notification` / `task` 相关 outbox handler 统一切到新路由注册与服务目录,避免新流量回流共享表 4. 同步更新《微服务四步迁移与第二阶段并行开发计划》,把阶段 1 改成当前基线并补齐结构图、阶段快照、风险回退和多代理执行口径
70 lines
2.0 KiB
Go
70 lines
2.0 KiB
Go
package kafka
|
||
|
||
import (
|
||
"strings"
|
||
"time"
|
||
|
||
"github.com/spf13/viper"
|
||
)
|
||
|
||
const (
|
||
DefaultTopic = "smartflow.agent.outbox"
|
||
DefaultGroup = "smartflow-agent-outbox-consumer"
|
||
)
|
||
|
||
// Config 描述 outbox 异步链路所需的 Kafka 配置。
|
||
// 说明:这些参数同时影响“发送端(producer)”与“消费端(consumer)”。
|
||
type Config struct {
|
||
Enabled bool
|
||
Brokers []string
|
||
Topic string
|
||
GroupID string
|
||
// ServiceName 表示当前进程所属的 outbox 服务;为空时保持单体全量模式。
|
||
ServiceName string
|
||
// RetryScanInterval/RetryBatchSize/MaxRetry 作用于 outbox 扫描与失败重试。
|
||
RetryScanInterval time.Duration
|
||
RetryBatchSize int
|
||
MaxRetry int
|
||
}
|
||
|
||
// LoadConfig 从配置中心读取 Kafka 配置,并做兜底默认值。
|
||
// 兼容性:优先读取 kafka.brokers(数组),为空时降级读取 kafka.broker(单值)。
|
||
func LoadConfig() Config {
|
||
brokers := viper.GetStringSlice("kafka.brokers")
|
||
if len(brokers) == 0 {
|
||
single := strings.TrimSpace(viper.GetString("kafka.broker"))
|
||
if single != "" {
|
||
brokers = []string{single}
|
||
}
|
||
}
|
||
cfg := Config{
|
||
Enabled: viper.GetBool("kafka.enabled"),
|
||
Brokers: brokers,
|
||
Topic: strings.TrimSpace(viper.GetString("kafka.topic")),
|
||
GroupID: strings.TrimSpace(viper.GetString("kafka.groupID")),
|
||
ServiceName: strings.TrimSpace(viper.GetString("outbox.serviceName")),
|
||
RetryScanInterval: viper.GetDuration("kafka.retryScanInterval"),
|
||
RetryBatchSize: viper.GetInt("kafka.retryBatchSize"),
|
||
MaxRetry: viper.GetInt("kafka.maxRetry"),
|
||
}
|
||
if cfg.ServiceName == "" {
|
||
cfg.ServiceName = strings.TrimSpace(viper.GetString("kafka.serviceName"))
|
||
}
|
||
if cfg.Topic == "" {
|
||
cfg.Topic = DefaultTopic
|
||
}
|
||
if cfg.GroupID == "" {
|
||
cfg.GroupID = DefaultGroup
|
||
}
|
||
if cfg.RetryScanInterval <= 0 {
|
||
cfg.RetryScanInterval = time.Second
|
||
}
|
||
if cfg.RetryBatchSize <= 0 {
|
||
cfg.RetryBatchSize = 100
|
||
}
|
||
if cfg.MaxRetry <= 0 {
|
||
cfg.MaxRetry = 20
|
||
}
|
||
return cfg
|
||
}
|