报告概述
本白皮书以新华三H3C交换机为对象，系统阐述其软件故障检测技术的分层设计理念。报告覆盖进程级、业务级和转发面三个层面的故障检测关键技术：进程级检测针对内核线程的死循环、饿死、异常崩溃与自动重启；业务级检测通过一键诊断、GOLD（通用在线诊断）和EAA（嵌入式自动化架构）实现健康检查、性能监控与自动化处理；转发面检测聚焦端口光功率、CRC错误、队列缓存、时延与丢包等指标的实时监测与处置。报告采用从内核到应用再到数据平面的立体化架构，旨在帮助运维人员从被动响应转向主动预防，提升设备可靠性与运维效率。
报告的核心结论
交换机软件故障检测实现运维模式从被动响应向主动预防转型。
传统运维依赖人工巡检，故障发现滞后。H3C交换机通过内置的多层级故障检测与自愈技术，具备自感知、自诊断、自优化、自恢复能力，能够在故障发生前发现性能劣化趋势，主动执行修复动作，从而显著降低业务中断风险。
进程级检测可精准定位内核线程死循环、饿死等深层故障。
通过为每个CPU核心上的内核线程维护计时器，系统能实时监测线程连续执行时长，一旦超过预设阈值即判定死循环；同时跟踪线程最后一次执行时间戳，判断饿死现象。这些功能为定位系统级疑难杂症提供关键证据，加速故障排查。
业务级检测通过一键诊断、GOLD和EAA联动实现自动化运维。
一键诊断24小时不间断检测业务模块健康度；GOLD按周期执行硬件和软件测试例，自动发现故障并执行预定义修复动作；EAA允许用户自定义监控策略，将事件与动作关联，实现自动化处置。三者组合使用，大幅提升运维智能化水平。
转发面检测通过实时监测光功率、丢包等指标快速隔离链路故障。
转发面技术针对物理端口和单板硬件，持续监控光功率异常、CRC错误、缓冲区丢包、转发时延等指标。当指标超过阈值时，可自动关闭问题端口或单板，避免故障扩散，为上层冗余协议切换提供底层支撑，保障业务连续性。
报告回答的关键问题
交换机如何实现软件故障的自动检测？
H3C交换机采用分层架构：进程级检测监控内核线程运行状态，死循环或饿死时生成记录；业务级检测通过一键诊断、GOLD和EAA功能，自动执行测试例并触发修复动作；转发面检测实时监测端口光功率、丢包等指标，异常时自动关闭端口。各层级协同，实现从内核到数据平面的全方位自动检测。
GOLD和EAA技术有什么不同？
GOLD是内置的通用在线诊断框架，以测试例形式检测硬件和软件故障，支持启动、监控和按需诊断，可自动修复但自愈动作较固定。EAA是嵌入式自动化架构，允许用户自定义监控策略，支持10种事件和5种动作组合。两者可联动：GOLD作为EAA的事件源，当测试例连续失败时触发EAA策略，实现更灵活的自愈。
转发面故障检测包含哪些关键指标？
转发面检测覆盖端口与链路状态：光功率异常、CRC错误、收/发错误报文、带宽利用率、PAUSE帧、SDH错误、缓冲区丢包；以及转发质量深度监测：接口队列缓存使用率（毫秒级采样）、报文转发时延等级分布、接口丢包率。这些指标实时监控，异常时自动告警或关闭端口。
一键诊断能诊断哪些业务模块？
一键诊断分为业务模块健康度和业务功能诊断。健康度诊断覆盖硬件（CPU、内存）和软件（AAA、PING、SNMP、BGP、DHCP、OSPF、IS-IS、组播、ARP、ND等）。功能诊断针对具体问题，如SNMP Trap发送失败、CPU利用率突增等。用户可通过命令行一键获取诊断结果。
完整报告包含什么
- 进程级故障检测的详细原理：包括内核线程死循环检测的计时器机制与阈值配置说明，以及饿死检测的判定逻辑和记录格式。
- 内核线程异常信息显示与重启信息查询功能：提供结构化诊断报告的字段说明，以及关键线程自动重启后的历史记录查看方法。
- 一键诊断的完整业务模块列表与诊断示例：涵盖硬件和软件业务模块的健康度诊断命令及输出解读。
- GOLD测试例的类别详解：启动诊断、监控诊断和按需诊断的配置方法，以及出厂自愈动作的查看命令。
- EAA监控策略的完整配置示例：包括基于Syslog、CLI、GOLD事件触发的策略，以及使用TCL/Python脚本创建复杂策略的说明。
- GOLD与EAA联动的详细配置步骤：以LIPCMonitor测试例为例说明事件传递与自愈动作定制。
- 一键诊断、GOLD、EAA三者的技术对比表格：从测试例管理、来源、自愈动作、多级调度等维度进行对比。
- 转发面故障检测的端口光功率异常检测模式：自动恢复与手动恢复模式的配置参数与恢复机制。
- 接口错误与性能告警的监控指标完整说明：包括CRC错误、带宽利用率、PAUSE帧等各指标的阈值设定与联动策略。
- 接口队列缓存监控的毫秒级采样与智能上报机制：通过gRPC接口外接分析平台进行深度性能分析的方法。
本页内容由川海智库整理，用于帮助读者快速了解报告主题、核心观点和主要内容。由于报告量大、人工能力有限，部分观点、数据、统计口径或表述可能存在偏差，具体内容请以完整报告原文为准。
