V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Aaron123
V2EX  ›  DevOps

搭建了大量的服务器,怎么去集中处理告警消息?

  •  
  •   Aaron123 · 2016-12-15 10:15:03 +08:00 · 5251 次点击
    这是一个创建于 2901 天前的主题,其中的信息可能已经有所发展或是发生改变。
    对于现在大部分监控软件都比较简单,如果想解决只有去做多点监测,多 IDC 去部署监控机,搭建多节点的监控网络问题,将要使用大量的服务器资源,有没有什么好的解决方案呢?
    13 条回复    2017-09-07 14:07:56 +08:00
    rtx3
        1
    rtx3  
       2016-12-15 11:37:15 +08:00
    ELK 可以做这个
    SharkIng
        2
    SharkIng  
       2016-12-15 12:59:28 +08:00 via iPhone
    Nagios 不是古老的服务器监控么
    StevenTong
        3
    StevenTong  
       2016-12-15 13:37:26 +08:00
    ELK 或者 sentry
    kozora
        4
    kozora  
       2016-12-15 13:38:42 +08:00
    zabbix 或者 open-falcon
    cloudwise
        5
    cloudwise  
       2016-12-15 14:48:49 +08:00
    监控宝可以多区域去监控服务器,网站的健康状况,还包含了一些国外节点(我们的业务涉及海外),而且阀值这块可以自己去定义。当然作为一个运维人员,我看中的其实并不是这些。其中最重要的就是 callback 告警消息。如果我们在服务器网络或者其他原因导致宕机,收到的不是告警消息,而让他们能够根据消息去自动处理是不是会更好呢。给大家一副图来理解下:
    ![]( )

    根据回调信息,事先将其定义成一些规则,当我们匹配到了告警信息中的特定信息可以自主切换
    foo2bar
        6
    foo2bar  
       2016-12-15 14:50:26 +08:00
    zabbix ,最近刚做了个服务器( 60+)的监视案件
    1. 一般的监视如 CPU ,内存,进程,服务等,其他的监视只要你能写出脚本获取数据,就能监视。
    2. 支持模板,如果监视项目都一样那么直接上模板,批量部署省去大量的重复工作
    3. 支持正则,对你要告警的条件细化到颗粒
    noahzh
        7
    noahzh  
       2016-12-15 15:04:39 +08:00
    @foo2bar zabbix 机器一多,数据库就是你的噩梦了。
    haitang
        8
    haitang  
       2016-12-16 03:16:26 +08:00 via iPhone
    zabbix ,另,楼上说的对。
    jyf007
        9
    jyf007  
       2016-12-16 08:20:06 +08:00 via Android
    @noahzh 求解释如何优化数据库,萌新不会 SQL,所以没有站稳脚跟。
    qiukun
        10
    qiukun  
       2016-12-16 08:41:52 +08:00 via Android
    bosun?
    异常走 sentry
    log 。。。啧啧我不懂
    noahzh
        11
    noahzh  
       2016-12-16 09:01:08 +08:00
    @jyf007 用 tokudb , history 表用分区,定时删除历史数据,上 ssd ,大内存。
    终极方案,机器多了别用 zabbix ,那就是个大坑。
    xderam
        12
    xderam  
       2017-03-04 16:38:29 +08:00
    glennxie
        13
    glennxie  
       2017-09-07 14:07:56 +08:00
    zabbix,每个 IDC 弄个虚机做 proxy,通过 proxy 把信息传到主的 zabbix 上,另一方面就是提升数据库效率和抑制告警风暴
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2702 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 22ms · UTC 10:23 · PVG 18:23 · LAX 02:23 · JFK 05:23
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.