“解密” nodequery三天两头的挂的背后故事和技术内幕

Eric.c

经常出问题的背后我认为主要有2点在捣鬼：

1.      （按最大值估算，不JJ ）Nodequery 如果没记错，应该是服务了28万左右服务器监控，按3分钟一次的频率，每小时产生560万条记录，每天1亿3千万的数据。 一个月就是50亿数据。   保存3个月就是150亿。
          ps：如果我把服务器数量记错，比如是2.8w左右，那对应数据下降一个量级。


        这个数据库用mysql是不可能的，早期时序库并没发展，所以预估应该是上了mongodb，然后mongodb早期的一些版本在n亿级的数据处理并不是十分优秀（目前也是），在技术上，上了量级，一个处理不好，容易挂也是理所当然的事情，比如内存爆了，cpu高了，硬盘io跟不上，架构某节点挂了等等。纯监控而言，其实几十上百台的监控并不是啥难事，初级程序员都可以写出来，难的是上了量级后带来的架构变化



2.       站长靠爱发电，并不做任何盈利计划，这nodequery更像他的试验田。去年还是今年其也曾经说过没有过多的精力在上面了。




替代方案的选择

1.  自己有稳定的机器，机器很多，某台机器十分稳定，那用它，自部署模式也是不错的，此类很多方案软件提供，优秀绝笔的很多，可供选择，比如群里的哪吒探针就很不错。或者即将推出的论坛大佬的高仿nodequery，应该也可以。为大佬们点赞  唯一的一个缺点就是有问题的话可能要自己维护，毕竟属于自己的东西了。

2.  嫌麻烦的，用http://eheh.org ，也是高仿nodequery，并有所改进和演化（没错，就是我和pony提供的）。 我们采用了最新时序数据库 ，起点亿级数据是标配，没有mongodb，没有mysql等，同时引入了证书监控等，未来路线也在mjj的监督下制定了。。。 。（目前缺美女前端，诚招。。。）    同时缺点也是有的，作为不断调整优化的架构，哪天中断服务了一下，也是有可能出现的，但这种情况我们一经发现，基本都在几个小时内处理完毕，同时有所交代！ Pony总提供的机器无需担心配置不够，或者忘记续费，这块他完全承包，否则就把服务器寄给你。

latiao88

看了半天，然后发现是个广告，现在的广告真高级

Helios

hetrix.tools不香吗？
https://hetrix.tools/u-855726

gcp

https://hetrixtools.tk/

xixi3

虽然我也在用eh，但这广告，竖大拇指。

pony

额
照这么说
我是妥妥的背锅侠了

xshell

前排支持大佬

Eric.c

latiao88 发表于 2021-1-5 20:52
看了半天，然后发现是个广告，现在的广告真高级

为啥大家这么厉害，都看出来了

我能说只是在科普……

whe

可以透露下是哪个时序数据库那么强嘛

Eric.c

whe 发表于 2021-1-5 21:37
可以透露下是哪个时序数据库那么强嘛

时序现在都比较牛逼，都号称百亿，比如Prometheus,influxdb...

架构不够，硬件来凑，哈哈

cnly1987

Eric.c 发表于 2021-1-5 21:53
时序现在都比较牛逼，都号称百亿，比如Prometheus,influxdb...

架构不够，硬件来凑，哈哈 ...

牛B牛B，小打小闹我们用mongodb

Eric.c

cnly1987 发表于 2021-1-5 21:56
牛B牛B，小打小闹我们用mongodb

mongodb比较考究开发者实力，优化得好啥都不是事，nq应该就是了。你的monitorx看起来很赞呀。有机会试试你的产品

有时间搞个docker呗，这样安装就简单了，