fanfank's recent timeline updates fanfank's recent timeline updates |
fanfankV2EX member #116341, joined on 2015-05-11 15:24:38 +08:00 |
| 推荐大家一个对日志文件进行二分查找的工具
2 DevOps • fanfank • Apr 6, 2016 • Lastly replied by jedihy
|
11 |
fanfank's recent replies
Apr 5, 2016 Replied to a topic by fanfank › DevOps › 推荐大家一个对日志文件进行二分查找的工具 |
@hustlike 我在这个帖子的追加内容中补充了一下， splunk 我不太了解，是不是和 ELK 等工具差不多的日志解决方案？如果是的话那起码它需要额外的机器资源，或者需要在线上服务的机器中部署收集日志的 agent 或在业务代码 /框架中发送消息到日志收集器，体量上相对大一点
Apr 5, 2016 Replied to a topic by fanfank › DevOps › 推荐大家一个对日志文件进行二分查找的工具 |
@suduo1987 对日志文件中的每一行都用正则去判断（例如用 grep ）是非常耗资源的， benchamark 参见： http://blog.reetsee.com/archives/502
Apr 5, 2016 Replied to a topic by fanfank › DevOps › 推荐大家一个对日志文件进行二分查找的工具 |
@vus520 grep 、 awk 、 timecat 的 benchmark 参见这个地址中的第 4 部分，我就是怕发太多了没人看所以没有在这里贴 benchmark ： http://blog.reetsee.com/archives/502
Apr 5, 2016 Replied to a topic by fanfank › DevOps › 推荐大家一个对日志文件进行二分查找的工具 |
@iambic 对，按日志切分也会非常大，日志文件也可能非常大，尤其是最前面做 Load balance 的机器。实时搜索速度是很重要的，尤其你可能需要使用 logid 去关联整个调用链，数十个日志文件，即便切分过，每个都全量去 grep 耗时会比较长
Select Language