EMQX 5.x TCP 连接拥塞告警(conn_congestion)默认关闭:配置详解与源码实现
后端物联网消息队列通信【免费下载链接】emqxThe most scalable and reliable MQTT broker for AI, IoT, IIoT and connected vehicles项目地址https://gitcode.com/gh_mirrors/em/emqx点击查看免费下载本文基于当前仓库changes/ee/fix-16725.en.md的变更记录展开EMQX 5.x 已将 TCP 连接拥塞告警conn_congestion的enable_alarm默认值改为false默认 zone/全局配置下默认关闭。文章将完整梳理该告警的触发机制、两个核心配置参数、默认值变更的源码依据、底层告警激活与清除流程并给出重新启用与调优的实操建议帮助读者在订阅端连接出现发送队列积压时正确判断与处置。一、变更概述一条默认值变更本次变更记录changes/ee/fix-16725.en.md原文如下Disabled TCP connection congestion alarm by default by settingconn_congestion.enable_alarm falsein the default zone/global configuration.即在默认 zone即全局配置中将conn_congestion.enable_alarm置为false从而默认不再产生 TCP 连接拥塞告警。这是一条行为默认值层面的变更——功能本身依然完整保留只是默认策略从开启告警调整为关闭告警以避免在高并发、大流量场景下该告警被频繁触发而淹没在告警洪流中。二、conn_congestion 告警机制是什么在进入配置细节之前先理解这个告警解决什么问题。根据 emqx_schema.erl 中对conn_congestion配置组的官方描述MQTT 连接通常是 MQTT 订阅者连接可能因待发送报文过多而陷入拥塞congested状态连接对应的 socket 会先尝试将报文缓冲到缓冲区sndbuf中直到缓冲区写满缓冲区写满后仍有新报文到达时这些报文会进入发送待处理队列pending queue此时该连接即被视为拥塞描述中还特别提示如果该告警触发过于频繁可以将 socket 的sndbuf调大为突发流量提供更大的缓冲空间。拥塞本质上是发送能力跟不上订阅消费速度的信号常见于订阅端处理缓慢、网络带宽受限或消息速率远超订阅端消费能力等场景。它通常只影响单个连接因此告警名称按连接维度区分详见下文告警名称与详情。三、核心配置参数详解conn_congestion配置组定义在 emqx_schema.erl 的fields(conn_congestion)中仅包含两个参数参数类型默认值说明enable_alarmboolean()false本次变更后的默认值是否启用 TCP 连接拥塞告警min_alarm_sustain_durationduration()1m告警最短持续时长告警触发后若在持续时间内未再次触发才会被清除3.1 enable_alarm布尔开关控制是否对连接拥塞产生告警true当检测到连接拥塞时会通过 EMQX 告警系统激活conn_congestion/ClientID/Username告警false当前默认即使检测到拥塞也不产生任何告警模块直接返回源码中对应#{enable_alarm : false} - ok分支。3.2 min_alarm_sustain_duration时长型参数默认1m。它定义了告警的最小维持时间当拥塞缓解后告警并不会立刻清除而是要求距离上次告警触发的时间 ≥min_alarm_sustain_duration才允许清除见 emqx_congestion.erl 与long_time_since_last_alarm/2。这一机制用于抑制告警抖动flapping——如果拥塞在短时间内反复出现告警不会随之反复激活—清除而是保持激活状态避免告警风暴。四、默认值变更的源码依据本次变更默认关闭在源码中有三处明确证据全局根配置conn_congestion被声明为 EMQX 的 root 配置项见 emqx_schema.erl 的roots(low)且标记为?IMPORTANCE_HIDDEN隐藏级不进入普通文档展示但可正常配置。其字段默认值由 emqx_schema.erl 给出enable_alarm默认falsemin_alarm_sustain_duration默认1m。zone 级支持conn_congestion同时出现在 zone 级配置的 roots 列表中emqx_zone_schema.erl并与stats、overload_protection一起被列入hidden()emqx_zone_schema.erl。zone 级 schema 是全局同名配置的克隆但不允许携带默认值见 emqx_zone_schema.erl 的注释只有全局 zone默认 zone通过global_zone_with_default()引用 emqx_schema.erl 的字段定义从而获得默认值——这正是变更记录所说in the default zone/global configuration的源码出处。运行期读取告警检查运行时通过emqx_config:get_zone_conf(Zone, [conn_congestion])读取当前连接所属 zone 的配置因此每个 zone 都可以独立覆盖该设置见 emqx_congestion.erl。五、配置方法如何设置与重新启用5.1 全局/默认 zone 配置在 EMQX 配置文件安装目录下的etc/emqx.conf仓库内的配置示例可参考 rel/config 下的.example文件中写入conn_congestion { enable_alarm true min_alarm_sustain_duration 1m }当前仓库默认值即为enable_alarm false因此无需任何配置即可保持默认关闭需要启用时显式设置为true即可。5.2 按 zone 独立配置若希望对不同 zone例如核心业务 zone 与普通业务 zone采取差异化策略可在对应 zone 下覆盖zone { core_zone { conn_congestion { enable_alarm true } } default { conn_congestion { enable_alarm false } } }由于 zone 级结构不携带默认值未显式配置的 zone 会回落到全局默认值当前为关闭。5.3 动态调整配置修改后可通过 EMQX 的配置重载机制如 Dashboard 的配置页面或emqx ctl conf系列命令动态生效无需重启节点即可调整enable_alarm便于在线上按需开启、事后关闭。六、底层实现emqx_congestion 模块工作流程告警的全部逻辑集中在 emqx_congestion.erl对外仅暴露两个接口maybe_alarm_conn_congestion/2周期检查并视情况激活/取消告警cancel_alarms/2连接关闭等场景下强制清除全部相关告警。6.1 检查流程maybe_alarm_conn_congestion(ConnMod, State)emqx_congestion.erl的执行路径为通过ConnMod:info({channel, zone}, State)取得连接所属 zone读取该 zone 的conn_congestion配置若enable_alarm true调用is_transport_congested/2判断是否拥塞——是则激活告警否则按min_alarm_sustain_duration逻辑尝试清除若enable_alarm false直接返回ok不做任何告警操作本次变更后的默认路径。6.2 拥塞判定is_transport_congested/2emqx_congestion.erl的判定依据有两个满足其一即视为拥塞连接 socket 状态为congestedConnMod:info(sockstate, State)socket 统计中的send_pend待发送报文数大于 0。6.3 告警激活与清除激活emqx_congestion.erl调用emqx_alarm:safe_activate/3写入告警同时用进程字典记录本次触发时间戳update_alarm_sent_at。若告警已处于激活状态且再次检测到拥塞只更新时间戳、不重复激活。清除emqx_congestion.erl调用emqx_alarm:ensure_deactivated/3清除告警清除前会校验距上次触发已超过min_alarm_sustain_duration否则保持告警激活从而避免告警抖动。连接关闭清理cancel_alarms/2emqx_congestion.erl遍历所有告警原因将残留的拥塞告警一并清除防止连接断开后告警残留。6.4 触发时机emit_stats 周期检查拥塞检查并非实时逐包触发而是挂接在连接的**周期性统计任务emit_statstimeout**上每次触发handle_timeout(emit_stats, ...)时在更新通道统计后调用emqx_congestion:maybe_alarm_conn_congestion(?MODULE, NState)。该调用点分别存在于emqx_connection.erlMQTT over TCP/SSL/WS 等连接的通用实现emit_stats分支emqx_socket_connection.erl网关类 socket 连接的同一机制。对应地连接关闭时两个模块均会调用emqx_congestion:cancel_alarms(?MODULE, State)清理告警emqx_connection.erl、emqx_socket_connection.erl。七、告警名称与详情字段告警名称格式为conn_congestion/ClientID/Usernameemqx_congestion.erlClientID发生拥塞的 MQTT 连接的 Client IDUsername该连接的用户名若连接未携带用户名则为unknown_user。告警详情Details是一组与拥塞定位强相关的现场快照emqx_congestion.erl包括类别字段进程信息pid、message_queue_len、memory、reductionssocket 统计send_pend待发送数、recv_cnt、recv_oct、send_cnt、send_octsocket 选项high_watermark、high_msgq_watermark、sndbuf、recbuf、buffer连接信息socktype、sockname、peername、clientid、username、proto_name、proto_ver、connected_at、conn_state这些字段可直接用于判断拥塞根因例如send_pend 0且sndbuf已满说明是发送缓冲不足peername与clientid则用于快速定位具体连接。八、运维建议与影响评估默认关闭的影响升级后订阅端连接出现拥塞时不再自动产生告警但连接的拥塞状态检测与统计逻辑不受影响仅跳过告警写入。若你的告警策略依赖该信号请升级后显式配置conn_congestion.enable_alarm true。何时需要开启当需要监控订阅端消费能力不足/网络拥塞时开启反之若该告警此前在正常业务中频繁误报、造成告警疲劳可保持默认关闭。减少告警触发频率的调优按 emqx_schema.erl 的建议若开启后告警过于频繁可调大连接 socket 的sndbuf提供更大缓冲同时可适当调大min_alarm_sustain_duration进一步抑制短时抖动带来的反复告警。告警对象可预期告警按连接维度产生名称中携带 ClientID 与 Username配合详情中的现场快照字段可在 Dashboard 或告警通道中快速定位到具体连接实例。九、相关源码索引变更记录changes/ee/fix-16725.en.md配置定义与默认值emqx_schema.erlfields(conn_congestion)、emqx_schema.erlroots(low)配置官方描述emqx_schema.erlzone 级配置与隐藏策略emqx_zone_schema.erl、emqx_zone_schema.erl告警实现emqx_congestion.erl周期检查调用点emqx_connection.erl、emqx_socket_connection.erl告警基础设施emqx_alarm.erl赞分享后端物联网消息队列通信【免费下载链接】emqxThe most scalable and reliable MQTT broker for AI, IoT, IIoT and connected vehicles项目地址https://gitcode.com/gh_mirrors/em/emqx点击查看免费下载相关推荐axios 配置默认值详解全局默认值、实例默认值与配置优先级附源码解析axios 配置默认值详解全局默认值、实例默认值与配置优先级附源码解析 axios 允许为每个请求指定配置默认值包括 baseURL 、 headers网络后端前端Apache DolphinScheduler Email 邮件告警插件告警实例配置与源码实现详解Apache DolphinScheduler Email 邮件告警插件告警实例配置与源码实现详解 在 Apache DolphinScheduler数据编任务调度数据编排工作流自动化后端大数据EMQX 的 node.default_listener_address 配置详解掌控 MQTT、网关与 Dashboard 监听地址的默认绑定EMQX 的 node.default_listener_address 配置详解掌控 MQTT、网关与 Dashboard 监听地址的默认绑定 导读 nod后端物联网消息队列通信创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考