V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  chi1st  ›  全部回复第 8 页 / 共 29 页
回复总数  576
1 ... 4  5  6  7  8  9  10  11  12  13 ... 29  
2022-08-11 23:14:45 +08:00
回复了 chi1st 创建的主题 Kafka 如何从 Kafka 消费的数据中取最大值存储?
@Jooooooooo 再次感谢,“监控是为了告警后续再人工解决”,我也是这么理解的,对于网络相关数据的监控确实也不需要非常实时,重要的是相对及时的告警,和使用趋势图。
如果要有完整的曲线图,那么还要保证消费数据的及时性,如果我现在消费的是半小时前的数据,那么肯定计算不到当前时间前几分钟的数据,那么告警和趋势图数据也都没了。。。
2022-08-11 22:49:33 +08:00
回复了 chi1st 创建的主题 Kafka 如何从 Kafka 消费的数据中取最大值存储?
@Jooooooooo 感谢大佬回复,完全理解了我问题的痛点,我目前的思路和你说的基本一致, 目前我有存一份全量数据在 MongoDB 中,想着从这份数据中定时查询当前时间- n 分钟中的 max value ip, 因为数据量比较大,查询速度有待测试,可能放在 Redis 里查比较好。
最大值是为了推到监控中,所以时效性还是要求比较高的,这个 n 分钟具体数值目前也不太能确定。

在这之前我有考虑过将所有数据接收后都传到一个专门的处理程序里,对相同( ip ,time )的 value 进行取最大值的操作,这个程序对同一( ip ,time )的处理设置一个超时时间,超过两分钟就认为没有其他数据了,直接将最大值推送至监控。
如果这样做的话感觉写起来比较困难,需要对记录进行轮询(不知道有没有更好的处理手段),处理数据的时间有可能会很长反而更影响时效性
2022-08-07 22:59:44 +08:00
回复了 helloword001 创建的主题 PHP Java , PHP , Go,哪种语言和框架更适合开发 API 接口?
Django
2022-07-05 18:53:23 +08:00
回复了 GCP 创建的主题 分享发现 手环界的天花板,值得拥有
我不承认它是个手环
2022-06-30 10:15:33 +08:00
回复了 fiypig 创建的主题 随想 说真的,单身万岁
记得 OP 就是前段时间相亲后就结婚了吧,心态转变太真实了。。。
2022-06-28 18:58:55 +08:00
回复了 greatHair 创建的主题 分享发现 深圳电信城中村迁移小区攻略
@legendORld 深圳电信么?咋聊的?
不是大富人家红米就行,老人就是打电话,最多最多微信视频
2022-06-11 20:21:18 +08:00
回复了 vain 创建的主题 Apple better365.cn 这家开发商有什么问题吗?
@chi1st 刚开始应该只是个人兴趣做的软件,后来才有其他人加入,拆分了软件的功能
2022-06-11 20:18:41 +08:00
回复了 vain 创建的主题 Apple better365.cn 这家开发商有什么问题吗?
@AlexShui bab 一开始是个年龄比较大的教师写的(应该不是教计算机的),当时不知道有没有退休,bab 里集成了很多功能,后来才拆分成现在的各个软件
@piglei 哈哈,没想到这贴里能看到两位熟悉的大佬,楼上也是我初学 Python 时的启蒙老师
从 github 看过后已经买了实体书,感谢大佬的分享,要是能给我签个名就更好了
2022-06-05 10:37:07 +08:00
回复了 acctv2 创建的主题 Python 有没有一些高质量的 Python 内容推荐?
看 b 站 码农高天
2022-06-03 01:10:35 +08:00
回复了 Goooooogle 创建的主题 买买买 网红空调
@Legman 就和师傅聊了会天,我说抽真空要计时,我说二十分钟,实际上让师傅在高空抽了半小时😂
2022-06-02 12:36:53 +08:00
回复了 Goooooogle 创建的主题 买买买 网红空调
去年 618 入手两台 he1 1899 ,制冷效果非常好。
当然在安装空调的时候一定要抽真空 20 分钟以上
2022-05-08 05:01:10 +08:00
回复了 ikidou 创建的主题 智能家电 智能家居小白求教
我家用的是智能灯+凌动开关,同时做了双控
2022-05-06 22:57:33 +08:00
回复了 zxCoder 创建的主题 问与答 Python 读取文件请教
用 pandas
2022-04-28 23:55:43 +08:00
回复了 1000copy 创建的主题 程序员 大家工作用 2 个显示器的多吗?
@devswork 还在看这个吊毛的视频啊。。。
直接 USB 传不行么?
2022-04-27 13:39:58 +08:00
回复了 mooczz 创建的主题 生活 最近没事,聊聊一个潜在丁克的心态和状态
看来夫妻双方都不是独生子吧,如果是的话,真的很难说服父母
2022-04-11 22:24:11 +08:00
回复了 lizhiqing 创建的主题 分享发现 [必学] V2EX 发布图文帖子的方法
1 ... 4  5  6  7  8  9  10  11  12  13 ... 29  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   886 人在线   最高记录 6543   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 37ms · UTC 20:59 · PVG 04:59 · LAX 13:59 · JFK 16:59
Developed with CodeLauncher
♥ Do have faith in what you're doing.