Fluentd 正在参加 2020 年度 OSC 中国开源项目评选,请投票支持!
Fluentd 在 2020 年度 OSC 中国开源项目评选 中已获得 {{ projectVoteCount }} 票,请投票支持!
投票让它出道
已投票
Fluentd 获得 2020 年度 OSC 中国开源项目评选「最佳人气项目」 !
Fluentd 获得 2020 年度 OSC 中国开源项目评选「最佳人气项目」「最积极运营项目」 !
Fluentd 获得 2020 年度 OSC 中国开源项目评选「最积极运营项目」 !
授权协议 Apache
开发语言 Ruby
操作系统 跨平台
软件类型 开源软件
开源组织 CNCF
地区 不详
投 递 者 红薯
适用人群 未知
收录时间 2011-12-06

软件简介

Fluentd 是一个免费,而且完全开源的日志管理工具,简化了日志的收集、处理、和存储,你可以不需要在维护编写特殊的日志处理脚本。

展开阅读全文

代码

的 Gitee 指数为
超过 的项目

评论 (0)

加载中
更多评论
发表于AI & 大数据专区
2019/04/13 07:25

Fluentd 成为 CNCF 第 6 个毕业项目

当地时间 4 月 11 日,CNCF 宣布 Fluentd 顺利从孵化器毕业。目前 CNCF 一共有 6 个毕业项目,分别是 Kubernetes、Prometheus、Envoy、CoreDNS 和 containerd,以及此次毕业的 Fluentd。 Fluentd 是一个用于统一日志记录层的数据收集系统,Fluentd 从各种数据源收集事件并将其写入文件、RDBMS、NoSQL、IaaS、SaaS 与 Hadoop 等地,它不仅适用于独立应用程序,而且简化了分布式架构的组件,使其成为了任何云原生组织不可或缺的工...

1
24
发表于软件架构专区
2018/05/25 07:59

Fluentd 1.2.1 正式发布,开源日志数据收集器

Fluentd 1.2.1 已发布,Fluentd 是一个统一日志记录层的数据收集器,可以从 RDBMS、NoSQL、IaaS、SaaS、Hadoop 等各种数据源收集事件并将其写入文件。它是 CNCF 旗下的一个开源项目。 更新内容: Counter: 客户端新增 wait API in_tcp/in_udp: 修复 source_hostname_key 以正确设置主机名 in_monitor_agent: 修复 buffer_total_queued_size 计算 out_file: 使用 Tempfile 进行 gzip 压缩以避免压缩损坏 test: 修复不稳定的备份测...

0
6
发表了资讯
2017/12/08 07:52

Fluentd v1.0.0 正式发布,开源日志数据收集器

Fluentd 1.0.0 正式发布,Fluentd 是一个统一日志记录层的数据收集器,可以从 RDBMS、NoSQL、IaaS、SaaS、Hadoop 等各种数据源收集事件并将其写入文件。它是 CNCF 旗下的一个开源项目。 新特性/改进 out_copy: 支持 ignore_error 参数 server helper:提高 TLS 的资源使用率 禁用不必要的 tracepoint 功能 Bug 修复 out_forward: 当接收 ack 响应失败时,不更新重试状态的问题 plugin: 在同一序列中关联 before_shutdown 和 shut...

2
28
没有更多内容
加载失败,请刷新页面
点击加载更多
加载中
下一页
发表于DevOps专区
2020/04/06 17:30

Fluentd部署:如何监控Fluentd

今天的文章主要介绍一下如何监控Fluentd。监控的目的是确保日志采集能稳定高效运行。 Fluentd内部运行指标 Fluentd内部保存着一些运行指标,这些指标可通过REST api直接获取,也支持通过第三方工具,如Prometheus,来访问。Prometheus是官方推荐的监控工具。我们会在今天第二篇文章中简单介绍。 进程监控 Fluentd运行后会产生两个ruby进程,需要确保这两个进程运行正常。对于td-agent,会是如下两个进程: /opt/td-agent/embedd...

0
0
2020/04/06 17:30

Fluentd部署:通过Prometheus监控Fluentd

本文简单介绍一下如何通过Prometheus监控Fluentd。 Prometheus也是CNCF成员项目之一,所以Fluentd官方推荐使用Prometheus作为监控工具。 安装 fluent-plugin-prometheus $ sudo td-agent-gem install fluent-plugin-prometheus --version='~>1.6.1' Fluentd示例配置 为了向Prometheus暴露Fluentd的统计指标,我们需要对Fluentd做一些配置,主要包含3步: 使用Prometheus过滤插件对输入消息进行计数 首先,按照...

0
0
2018/01/16 18:45

Fluentd简介

Fluentd是一个开源的通用日志采集和分发系统,可以从多个数据源采集日志,并将日志过滤和加工后分发到多种存储和处理系统。 套一句广告语:Fluentd不生产日志,Fluentd只是日志的搬运工。 先来看一张官网介绍的图片: 从图中可以看出,Fluentd居于日志采集流程的中间层。它可以从Apache/Nginx等广泛应用的系统、数据库、自定义系统中采集日志,数据进入Fluentd后可根据配置进行过滤、修改、缓存,最终分发到各种后端系统中。这些...

0
0
发表于开源治理专区
2020/04/20 23:41

Fluentd项目

名称:Fluentd 类型:日志 说明:Fluentd是一个开源的数据收集器,它允许您统一数据收集和消耗,以便更好地使用和理解数据。Fluentd从各种数据源收集事件,将其写入文件、RDBMS、NoSQL、IaaS、SaaS和Hadoop等。Fluentd可帮助您统一日志记录基础结构(了解有关统一日志记录层的详细信息:https://www.fluentd.org/blog/unified-logging-layer)。 网站/代码: https://www.fluentd.org/ https://github.com/fluent 文档: https:...

0
0
发表于DevOps专区
2020/04/06 17:30

Fluentd部署:使用REST接口监控Fluentd

Fluentd提供了REST风格的监控接口,我们简单介绍一下相关用法。 监控代理 Fluentd提供了一个HTTP代理用于接收内部的统计数据。在配置文件中增加以下配置项启用此代理。 <source> @type monitor_agent bind 0.0.0.0 port 24220</source> 重启td-agent,就可以通过HTTP获取内部统计数据。 $ curl http://host:24220/api/plugins.json{ "plugins":[ { "plugin_id":"object:3fec669d6ac4", "type":"forward", ...

0
0
发表于DevOps专区
2020/03/29 14:25

Fluentd部署:日志

Fluentd是用来处理其他系统产生的日志的,它本身也会产生一些运行时日志。我们一起来了解一下Fluentd本身的日志机制。 Fluentd包含两个日志层:全局日志和插件级日志。每个层次的日志都可以进行单独配置。 日志级别 Fluentd的日志包含6个级别:fatal、error、warn、info、debug和trace。级别依次递增,高级别的日志包含低级别的日志。默认为info,所以默认情况下,日志中包含info、warn、error、fatal这4个级别的日志。 全局日志...

0
0
2020/03/06 15:28

Fluentd配置详解

Fluentd的运行是以配置文件为基础的。从现在开始,我们来一起学习配置文件的编写方法。这其中包含以下几部分: 配置文件语法 路由示例 通用配置参数 解析器(Parse)配置项 缓存(Buffer)配置项 格式化(Format)配置项 解压(Extract)配置项 注入(Inject)配置项 传输(Transport)配置项 存储(Storage)配置项 服务发现(Service Discover)配置项 需要说明的是,这些配置项适用于Fluentd v1版本。关于Fluentd和td-agent版...

0
0
发表于DevOps专区
2020/05/05 18:34

Fluentd插件:概述

Fluentd是一个强大的日志采集系统,其强大之处在于两点: 稳定且高效 丰富的插件 Fluentd支持8种类型的插件: Input:输入插件 Parser:解析插件 Filter:过滤插件 Formatter:格式化插件 Buffer:缓存插件 Output:输出插件 Storage:存储插件 Service Discover:服务发现插件 我们从现在开始对这些插件进行逐一介绍,欢迎持续关注,共同学习。 本文分享自微信公众号 - Fluentd学习交流(fluentd)。 如有侵权,请联系 suppor...

0
0
发表于开源治理专区
2020/10/20 11:30

Fluentd简明教程

如果你的应用运行在分布式架构上,你很可能会使用集中式日志系统来收集它们的日志,其中我们使用比较广泛的一个工具就是 fluentd,包括在容器化时代用来收集 Kubernetes 集群应用日志 fluentd 也是使用非常多的。我们将解释它是如何工作的,以及如何根据需求来调整配置 fluentd。 基本概念 我们可能有在 bash 中执行过 tail -f myapp.log | grep "what I want" > example.log这样的命令,这其实就是 fluentd 比较擅长做的事情,...

0
0
发表于云计算专区
2020/04/28 00:12

浅谈 fluentd 使用

fluentd 作为开源的数据收集框架。C/Ruby开发,支持使用JSON文件来统一日志数据。可插拔架构,支持各种不同种类和格式的数据源和数据输出。最后它也同时提供了高可靠和很好的扩展性,fluentd 的性能已在许多大型服务中得到检验。实际上,一个普通的 PC 机一次可以处理18,000 条消息/秒。 Treasure Data, Inc 对该产品提供支持和维护。fluent-bit 是一个用 C 写成的插件式、轻量级、多平台开源日志收集工具。它允许从不同的源收集...

0
0
没有更多内容
加载失败,请刷新页面
点击加载更多
加载中
下一页
发表了问答
2015/09/22 09:19

fluentd自带收集系统信息发送到influxdb的功能吗?

我想用fluentd收集系统信息,如cpu、内存、磁盘等使用率或使用情况 然后发送给influxdb 请问,它有自带的功能吗?

1
0
发表了问答
2011/12/06 00:35

使用Fluentd + MongoDB构建实时日志收集系统

Fluentd是一个日志收集系统,它的特点在于其各部分均是可定制化的,你可以通过简单的配置,将日志收集到不同的地方。 目前开源社区已经贡献了下面一些存储插件:MongoDB, Redis, CouchDB,Amazon S3, Amazon SQS, Scribe, 0MQ, AMQP, Delayed, Growl 等等。 本文要介绍的是在Fluentd的最新版中已经内置的MongoDB支持。主要通过一个收集Apache日志的例子来说明其使用方法: 机制图解 安装 为了完成相关的测试,需要安装下面一些组...

5
13
没有更多内容
加载失败,请刷新页面
点击加载更多
加载中
下一页
0 评论
78 收藏
分享
OSCHINA
登录后可查看更多优质内容
返回顶部
顶部