管理告警

告警管理允许您在管理平台上查看和管理告警。

限制与指导

在 RBAC 模式下,只有系统管理员可以管理主机资源、虚拟机资源、集群资源、故障、网络次优健康度以及其他异常告警。安全管理员可以管理安全告警。安全审计员可以查看所有告警。

功能

• 管理实时告警

• 管理告警阈值

• 管理已忽略告警

• 管理告警通知

管理实时告警

执行此任务筛选、忽略、查看、确认或清除最近生成的告警。过期的实时告警将被移至历史告警列表。

限制与指导

• 默认情况下,系统每 10 秒刷新告警信息页面。配置合适的刷新间隔以确保操作员在页面刷新前能够确认告警。

• 如果某主机仅作为管理平台使用,未被管理平台纳管,则该主机的 CPU 使用率和内存使用率告警不能被忽略。

筛选告警

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警」。

3. 配置筛选参数(详见「参数」),然后点击「筛选」。匹配的告警将被显示。

4. 要设置告警列表刷新间隔,从「刷新间隔」列表中选择一个选项。

查看历史告警

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警」。

3. 点击「历史告警」标签页。

4. 配置筛选参数(详见「参数」),然后点击「筛选」。匹配的告警将被显示。

5. 要设置告警列表刷新间隔,从「刷新间隔」列表中选择一个选项。

忽略告警

执行此任务将不需要关注的实时告警添加到已忽略告警列表。请勿忽略或删除实时主机多路径异常告警。如果您忽略或删除此类告警,存储运维中心无法同步存储链路状态,导致链路状态不一致和失败。

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警」。

3. 点击目标告警「操作」列中的「忽略」。

4. 输入描述,然后点击「OK」。

显示告警详细信息

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警」。

3. 点击目标告警「内容」列中的告警信息。

确认告警

执行此任务确认指定的告警。确认告警后,告警状态变为「已确认」。要确认告警:

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警」。

3. 选择目标告警,然后点击「确认」。

删除告警

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警」。

3. 选择目标告警,然后点击「删除」。

4. 在弹出的对话框中,点击「OK」。

编辑告警解决方案和备注

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警」。

3. 点击目标告警「内容」列中的告警信息。

4. 点击「编辑维护经验」。

5. 输入该告警的解决方案和备注。

6. 点击「OK」。

清除告警

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警」。

3. 点击「清除」。

4. 选择级别、类型、开始时间和结束时间。

5. 点击「OK」。

参数

• 刷新间隔:选择刷新告警列表的间隔。选项包括 5 秒、10 秒、30 秒、1 分钟和 5 分钟。

• 级别:选择告警级别。选项包括「全部」、「紧急」、「重要」、「次要」和「信息」。

○ 紧急:故障影响系统提供的业务,需要立即处理。例如,不可用的设备或资源需要恢复。即使发生在非工作时间,您也必须立即处理紧急告警。

○ 重要:故障降低业务质量,需要紧急处理。例如,设备或资源的业务质量下降,必须予以恢复。您必须在工作时间立即处理重要告警。

○ 次要:故障不会降低业务质量。为防止其恶化,需要进一步观察或在合适的时候采取行动。

○ 信息:潜在错误可能影响业务,采取行动前需要评估。

• 类型:选择告警类型。不同类型表示来自不同来源的告警。

• 来源:告警的源设备信息,包括设备类型、设备名称和管理 IP 地址。

• 内容:告警的详细内容。

• 最后触发时间:告警最后一次生成的时间。

• 首次触发时间:告警首次生成的时间。

• 告警次数:告警已被上报的次数。

• 影响:告警可能造成的影响。

• 告警原因:生成告警的原因。原因由系统预定义且不可修改。对于同类型的告警,该字段显示相同信息。

• 建议操作:针对告警的补救措施。补救措施由系统预定义且不可修改。对于同类型的告警,该字段显示相同信息。

• 备注:操作员记录的告警处理经验和解决方案。对于同类型的告警,该字段显示相同信息。

管理告警阈值

告警阈值定义触发告警的指定指标的最小值。您可以设置 CPU 使用率、内存使用率、磁盘使用率、磁盘 I/O 吞吐量和网络吞吐量告警阈值。

功能

• 配置默认阈值

• 管理自定义阈值

配置默认阈值

限制与指导

• 默认情况下,管理平台主机作为告警服务器运行。在主备系统中,主管理平台主机作为告警服务器运行。

• 要启用告警阈值,您必须完成告警阈值的配置。

• 告警阈值配置按虚拟机、主机、集群和运维中心的优先级顺序生效。如果您为虚拟机、主机、集群和运维中心启用并配置了相同的告警阈值,则只有具有最高优先级的配置生效。

• CVK 管理平台没有虚拟机逃逸告警开关。但是,在管理平台的「运维 > 告警管理 > 告警阈值 >默认阈值设置 > 安全告警」页面启用虚拟机逃逸告警后,虚拟机逃逸告警可以自动同步到 CVK管理平台。

显示告警阈值信息

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警阈值」。

3. 点击「折叠全部」以按告警类型折叠告警阈值配置列表。点击「展开全部」以展开整个告警阈值配置列表。

编辑告警阈值

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警阈值」。

3. 点击某指标「操作」列中的「编辑」。

4. 按「参数」所述配置参数。

5. 点击「OK」。

启用或禁用告警阈值

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警阈值」。

3. 要启用告警阈值,点击某告警阈值「操作」列中的「启用」。

4. 要禁用告警阈值,点击某告警阈值「操作」列中的「禁用」。

批量启用或禁用告警阈值

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警阈值」。

3. 选择目标告警阈值,然后选择「启用」或「禁用」。

4. 在弹出的对话框中,点击「OK」。

参数

• 指标:告警指标的名称。

• 紧急:触发紧急告警的指标最小值。

• 重要:触发重要告警的指标最小值。

• 次要:触发次要告警的指标最小值。

• 提示:触发提示的指标最小值。

• 持续时间:如果指标值持续高于阈值的时间达到此参数指定的时间段,系统会生成告警。此参数仅适用于主机资源告警、虚拟机资源告警和集群资源告警。

• 上报间隔:同一对象的同类告警的两次连续告警之间的间隔。此参数仅适用于主机资源告警、虚拟机资源告警、集群资源告警、故障告警和网络次优健康度告警。

• 状态:告警阈值的状态。

• 级别:告警级别。选项包括「紧急」、「重要」、「次要」和「提示」。对于主机资源、虚拟机资源或集群资源指标,您必须以百分比设置该指标的使用率。

管理自定义阈值

在为集群、主机或虚拟机配置并启用告警阈值后,您可以在自定义阈值管理页面查看自定义阈值并将其重置为默认值。您可以按告警类型、告警指标和范围筛选自定义阈值。

限制与指导

• 要管理自定义阈值,您必须先为集群、主机或虚拟机配置并启用告警阈值。

• 如果您为集群、主机或虚拟机同时配置默认阈值和自定义阈值,则自定义阈值优先于默认阈值。

重置自定义阈值

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警阈值」。

3. 点击「自定义阈值设置」标签页。

4. 选择一个或多个自定义阈值,然后点击「重置」。

5. 点击「OK」。

查看自定义阈值的配置

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 告警阈值」。

3. 点击「自定义阈值设置」标签页。

管理已忽略告警

已忽略告警管理允许您忽略不需要关注的告警。已忽略的告警不会被上报或显示在告警列表中。

限制与指导

如果某主机仅作为管理平台使用,未被管理平台管理,则该主机的 CPU 使用率和内存使用率告警不能被忽略。

显示告警阈值

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 已忽略告警」。

3. 点击已忽略告警的监控项。

筛选已忽略告警

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 已忽略告警」。

3. 配置筛选参数(详见「参数」),然后点击「筛选」。匹配的已忽略告警将被显示。

添加已忽略告警

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 已忽略告警」。

3. 点击「添加」。

4. 按「参数」所述配置参数,然后点击「下一步」。

5. 选择一个对象,然后点击「OK」。

删除已忽略告警

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 已忽略告警」。

3. 选择已忽略告警,然后点击「删除」,或点击某已忽略告警「操作」列中的「删除」。

4. 在弹出的对话框中,点击「OK」。

管理告警通知

执行此任务以在管理平台检测到异常时通过多种方式(如邮件、短信、syslog、企业微信和钉钉)及时通知相关人员告警。此功能支持分级告警管理、自定义通知策略和多渠道投递。它帮助运维人员及时获取系统状态并快速响应和处理故障,有效提升运维效率和系统可靠性。

功能

• 配置邮件通知参数

• 配置短信通知参数

• 配置 syslog 通知参数

• 配置企业微信通知参数

• 配置钉钉通知参数

• 配置告警服务器

配置邮件通知参数

执行此任务使系统能向用户发送告警的邮件通知。

限制与指导

要使系统能够发送邮件通知,您必须在「系统 > 参数 > 邮件服务器」页面配置邮件参数。

操作步骤

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 通知」。

3. 按「参数」所述配置参数。

4. 点击「邮件服务器」。

5. 按「配置邮件服务器」所述配置参数,然后点击「OK」。

6. 要检查邮件通知设置,点击「邮件测试」。

7. 要保存邮件通知设置,点击「保存」。

参数

• 发送给:选择要通知的对象。选项包括:

○ 用户——将告警发送到指定的邮箱地址。

○ 按对象权限发送——将告警发送到告警对象所在同一操作员组的所有操作员的邮箱地址。请确保组中的每个操作员都配置了邮箱地址。

• 关注对象:通过分别点击「选择主机」或「选择虚拟机」选择要监控的主机或虚拟机。如果您为「告警阈值」字段选择「已选择」,则系统仅在所选对象生成告警时发送邮件通知。

• 邮箱地址:输入目标邮箱地址并点击图标以将地址添加到下面的列表中。要删除目标邮箱地址,选择该地址并点击图标。此字段仅在通知对象为指定用户时可用。

• 级别:选择要监控的告警级别。选项包括「紧急」、「重要」、「次要」和「信息」。

○ 紧急——表示影响系统提供业务的问题,需要立即处理。例如,如果设备或资源不可用,必须立即采取行动,即使故障发生在工作时间之外。

配置短信通知参数

执行此任务使系统能向用户发送告警的短信通知。

限制与指导

• 要使系统能够发送短信通知,您必须在「系统 > 参数 > 短信」页面配置短信参数。

• 配置短信通知时,您可以指定多个电话号码接收告警。如果系统未能向多个电话号码发送消息,它会提示告警发送到第一个电话号码失败,然后等待一段时间(如几秒或几分钟)再提示第二个电话号码也未能接收告警。因此,失败短信告警的上报时间可能存在延迟。

操作步骤

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 通知」。

3. 点击「短信」标签页。

4. 按「参数」所述配置参数。

5. 点击「短信」。

6. 启用短信通知,然后按「配置短信参数」所述配置参数。

7. 点击「OK」。

8. 要检查短信通知设置,点击「短信测试」。

9. 要保存短信通知设置,点击「保存」。

参数

• 发送给:选择要通知的对象。选项包括:

○ 用户——将告警发送到指定的电话号码。

○ 按对象权限发送——将告警发送到告警对象所在同一操作员组的所有操作员的电话号码。请确保组中的每个操作员都配置了电话号码。

• 电话号码:输入电话号码。此字段仅在通知对象为指定用户时可用。

• 关注对象:通过分别点击「选择主机」或「选择虚拟机」选择要监控的主机或虚拟机。如果您为「告警阈值」字段选择「已选择」,则系统仅在所选对象生成告警时发送短信通知。

配置 syslog 通知参数

执行此任务使系统能向指定的 syslog 服务器发送告警通知。

限制与指导

要使系统能够发送 syslog 通知,您必须在「系统 > 参数 > Syslog 服务器」页面配置 syslog服务器参数。

操作步骤

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 通知」。

3. 点击「Syslog」标签页。

4. 按「参数」所述配置参数。

5. 点击「配置 Syslog 服务器」。

6. 按「配置 syslog 服务器」所述配置参数。

7. 点击「OK」。

8. 要检查 syslog 通知设置,点击「测试连通性」。

9. 要保存 syslog 通知设置,点击「保存」。

参数

• 级别:选择要监控的告警级别。选项包括「紧急」、「重要」、「次要」和「信息」。

○ 紧急——表示影响系统提供业务的问题,需要立即处理。例如,如果设备或资源不可用,必须立即采取行动,即使故障发生在工作时间之外。

配置企业微信通知参数

此功能实时发送告警,帮助用户及时获取平台运行状态和故障情况。通过与企业微信集成,系统自动向特定的企业微信群或个人用户发送各类告警。这有效提升告警响应效率并降低运维风险。此功能支持灵活配置多级告警类型。用户可以根据需要自定义告警级别、标记、类型和告警对象,以快速定位和处理故障。

前提条件

在将企业微信平台连接到管理平台之前,请参阅企业微信官方配置文档并完成可信 IP 地址配置。否则,系统无法正确向企业微信发送告警。

操作步骤

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 通知」。

3. 点击「企业微信」标签页。

4. 配置参数。

   ○ 发送给应用:

   ▪ 企业 ID:输入企业 ID。

   ▪ 应用 ID:输入为接收告警而创建的应用的 AgentID。

   ▪ Secret:输入为接收告警而创建的应用的 Secret。

   ○ (可选。)发送给机器人:

   ▪ 机器人设置:选择或添加企业微信群机器人。

   ▪ 名称:自定义机器人名称。

   ▪ WebHook:输入企业微信群机器人的 Webhook URL。

   ○ 级别:选择要监控的告警级别。选项包括「紧急」、「重要」、「次要」和「信息」。

   ○ 标记:选择企业微信通知中告警级别的标记。例如,如果您选择 [] 标记,则重要和次要告警的企业微信通知分别以 [Major] 和 [Minor] 开头。如果您选择 <> 标记,则重要和次要告警的企业微信通知分别以 <Major> 和 <Minor> 开头。选项包括 []、<> 和 ()。

   ○ 告警阈值:选择要监控的告警阈值。选项包括「全部」和「已选择」。如果您选择「已选择」,可以点击「添加」或「删除」以添加或删除告警阈值。

   ○ 关注对象:通过分别点击「选择主机」或「选择虚拟机」选择要监控的主机或虚拟机。要删除对象,选择目标对象,然后点击

配置钉钉通知参数

此功能实时发送告警,帮助用户及时获取平台运行状态和故障情况。通过与钉钉集成,系统自动向特定的钉钉群或个人用户发送各类告警。这有效提升告警响应效率并降低运维风险。此功能支持灵活配置多级告警类型。用户可以根据需要自定义告警级别、标记、告警阈值和告警对象,以快速定位和处理故障。

操作步骤

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 通知」。

3. 点击「钉钉」标签页。

4. 配置参数。

   ○ 发送给应用:

   ▪ 企业 ID:输入企业 ID。

   ▪ 应用 ID:输入为接收告警而创建的应用的 AgentID。

   ▪ App Key:输入为接收告警而创建的应用的 Key。

   ▪ Secret:输入为接收告警而创建的应用的 Secret。

   ○ (可选。)发送给机器人:

   ▪ 机器人设置:选择或添加钉钉群机器人。

   ▪ 名称:自定义机器人名称。

   ▪ WebHook:输入钉钉群机器人的 Webhook URL。

   ○ 级别:选择要监控的告警级别。选项包括「紧急」、「重要」、「次要」和「信息」。

   ○ 标记:选择钉钉通知中告警级别的标记。例如,如果您选择 [] 标记,则重要和次要告警的钉钉通知分别以 [Major] 和 [Minor] 开头。如果您选择 <> 标记,则重要和次要告警的钉钉通知分别以 <Major> 和 <Minor> 开头。选项包括 []、<> 和 ()。

   ○ 告警阈值:选择要监控的告警阈值。选项包括「全部」和「已选择」。如果您选择「已选择」,可以点击「添加」或「删除」以添加或删除告警阈值。

   ○ 关注对象:通过分别点击「选择主机」或「选择虚拟机」选择要监控的主机或虚拟机。要删除对象,选择目标对象,然后点击「删除」。要导出所选对象的资源信息,点击「导出」。如果您为「告警阈值」字段选择「已选择」,则系统仅在所选对象生成告警时发送钉钉通知。

5. 点击「代理设置」。在弹出的对话框中,启用代理设置并配置相关参数。

   ○ 代理设置:选择是否启用代理设置。

   ○ 地址:代理服务器的 IP 地址或域名,用于与钉钉接口通信。

   ○ 端口:代理服务器的端口号,用于与钉钉接口通信。

   ○ 用户名:代理服务器的认证用户名。

   ○ 密码:代理服务器的认证密码,与用户名一起用于身份认证。

6. 点击「测试代理」以验证钉钉通知配置。

7. 点击「OK」返回到钉钉通知配置页面。

8. (可选。)点击「Cancel」以取消当前配置并返回到钉钉通知配置页面。

9. 点击「保存」以完成钉钉通知配置。

10. (可选。)点击「重置」将钉钉通知配置恢复为系统默认值。

配置告警服务器

执行此任务将管理平台及其管理主机生成的告警转发到第三方告警服务器(如上级告警平台或运维监控系统),从而实现集中的告警监控和管理。

添加告警服务器

您可以配置第三方告警服务器的网络和协议参数,以便平台可以通过 SNMP 向其上报告警。

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 通知」。

3. 点击「告警服务器」标签页。

4. 点击「添加」。

5. 配置第三方告警服务器参数:

   ○ IP 地址:第三方告警服务器的 IP 地址。作为最佳实践,指定管理网段中的 IP,例如192.168.1.1 或 2001::85b:3c51:f5ff:ffdb。

   ○ 端口:第三方告警服务器的端口号。

   ○ 版本:第三方告警服务器使用的 SNMP 版本。选项包括 SNMPv1 和 SNMPv2c。

   ○ 读团体名:第三方告警服务器用于限制谁可以读取其信息的 SNMP 安全字符串,类似于密码。

6. 点击「OK」。

7. 点击「保存」。

删除第三方告警服务器

执行此任务移除第三方告警服务器配置,使该服务器不再接收来自平台的告警。

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 通知」。

3. 点击「告警服务器」标签页。

4. 点击某告警服务器「操作」列中的「删除」。

5. 点击「保存」。

保存操作结果

执行此任务将添加和删除等操作写入系统,以便配置能够真正生效。

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 通知」。

3. 点击「告警服务器」标签页。

4. 执行添加或删除操作后,点击「保存」。

重置第三方告警服务器

执行此任务清除系统中所有第三方告警服务器配置。

1. 在顶部导航栏中,点击「运维」。

2. 在左侧导航栏中,选择「告警管理 > 通知」。

3. 点击「告警服务器」标签页。