文章列表

使用 ClickHouse 处理离线半结构化日志

, , , , ,
介绍了基于 ClickHouse 处理离线半结构化日志的完整方案。针对现有开源工具存在的弃坑、通用性差或流程复杂等问题,提出组合 Linux 命令、liblognorm 的 lognormalizer 工具与自定义脚本的处理流程:先通过 c 阅读全文

个人开发者的服务器日志收集

, , ,
针对个人开发者多云主机场景,提出一套基于家庭宽带与闲置设备的轻量级日志采集方案。通过frp构建公网与内网的数据桥梁,以群晖syslog-ng作为日志采集服务端,配合rsyslog客户端实现跨厂商云主机的日志归集。 阅读全文