falcon-log-agent

日志采集工具 falcon-log-agent

MIT
Google Go 查看源码»
Linux
滴滴出行
2019-02-21
段段段落

falcon-log-agent 简介

falcon-log-agent 是一个开源版的日志采集工具,旨在从流式的日志中抓取、统计日志中的特征信息。

获取的特征信息,与开源版 Open-Falcon 监控系统打通。可用于业务指标的衡量、也可用于稳定性的建设。

特性

  • 准确可依赖:历经滴滴线上业务近一年考验,统计准确性高。

  • 性能高、资源消耗可控:性能优化程度高,单核单策略可支撑日志分析:20W条/秒

  • 接入成本低:外挂式采集,只需要标准化日志即可;输出数据直接对接 open-falcon。

附:滴滴公司 agent 升级前后资源占用对比图 资源对比图

什么是日志采集

日志采集,是一种外挂式的采集。通过读取进程打印的日志,来进行监控数据的采集与汇聚计算。

falcon-log-agent如何工作

本 agent 即日志采集场景下的实时计算。实时读取文件内容,实时计算,将计算结果直接推送至falcon。

限定条件

  • 要求日志必须包含时间:不包含时间的日志,只能根据当前时间统计日志条数,结果非常不准确。

  • 不支持文件软链

  • 日志时间必须有序:为了应对日志延迟落盘等,agent会根据日志的时间来判断某一周期的数据是否采集完成,如果日志时间顺序错乱,可能导致采集不准。

的码云指数为
超过 的项目
加载中
请先登录后再评论。

暂无资讯

暂无问答

open-falcon的falcon-log-agent日志监控

falcon-log-agent 简介 falcon-log-agent是一个开源版的日志采集工具,旨在从流式的日志中抓取、统计日志中的特征信息。 获取的特征信息,与开源版Open-Falcon监控系统打通。可用于业务指标的...

2018/08/02 18:38
34
0
open-falcon

https://github.com/open-falcon

2015/05/10 13:45
353
0
【Open-Falcon】Linux下安装Open-Falcon

一、Open-Falcon组件简述 【Open-Falcon绘图相关组件】 Agent: 部署在目标机器采集机器监控项 Transfer : 数据接收端,转发数据到后端Graph和Judge Graph:操作rrd文件存储监控数据 Query:查...

2018/03/11 21:34
77
0
Falcon安装

1 安装需要准备: (1)Python2.7.9 下载地址:https://docs.continuum.io/anaconda/install (2)pypeFLOW https://github.com/pb-jchin/pypeFLOW (3)DAZZ_DB https://github.com/pb-jchin/DAZZ...

2018/01/09 19:04
32
0
falcon的api

一、判断session是否有效 # -*- coding: UTF-8 -*- #!/usr/bin/env python # Created by Administrator on 2017/12/15 import json import requests user = 'admin' sig = '1a7521a...

2019/08/16 10:46
5
0
open-falcon

之前看到了这个监控工具,在这里记录一下,相关的介绍以及基础操作在gitbook里都有介绍,链接如下 open-falcon

2018/08/07 14:39
174
0
Falcon安装

Falcon是一款基于inotify-tools 开发的Web服务器文件监控平台 能够实时监控Web目录文件变化(新增,修改,删除),判断文件内容是否包含恶意代码,自动隔离常见Webshell,保证Web目录文件安全...

2013/12/26 11:24
978
0
falcon 监控

版权声明:转载请标明原文链接。 https://blog.csdn.net/happy_85/article/details/71302220 CPU.xxx cpu.idle cpu.idle表示除硬盘IO等待时间以外其它等待时间,这个值越大,表示cpu越空闲,...

2019/07/15 14:42
47
0
Open-Falcon部署

概述 一、 介绍   监控系统是整个运维环节,乃至整个产品生命周期中最重要的一环,事前及时预警发现故障,事后提供翔实的数据用于追查定位问题。监控系统作为一个成熟的运维产品,业界有很...

2018/05/16 13:18
17
0
02:openf-falcon安装

open-falcon其他篇 目录: 1.1 安装open-falcon环境准备 1.2 部署open-falcon后端 1.2.1 agent配置文件 1.2.2 transfer(数据上报) 1.2.3 judge(告警判断) 1.2.4 Alarm(告警) 1.2.5 gr...

2019/03/21 09:29
13
0

没有更多内容

加载失败,请刷新页面

返回顶部
顶部