百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

用于时间序列数据的Graphite监视工具

off999 2025-05-16 15:35 19 浏览 0 评论

结合第三方工具,Graphite为IT性能监控提供了许多好处。本文介绍其核心组件,包括Carbon、Whisper以及安装的基本准则。

Graphite监视工具可实时或按需,大规模地绘制来自多个来源的时间序列数据。该工具支持IT系统监视和业务中的各种用例,并支持各种应用程序。

Graphite的文档几乎完全集中于如何使用该工具进行性能监控。但是,该工具适合任何类型的时间序列数据。例如,用户可以跟踪:

  • 进出零售商店的顾客数量,这将指示何时该开设另一个收银台;
  • 机器的工作温度,该温度指示何时需要更换过滤器或进行其他维护;
  • 航班到达和离开的统计信息,以跟踪航空旅行。

另一个Graphite用例是将分析应用于数据Feed,仅突出显示Graphite图表中具有统计意义的内容。例如,企业可以将来自应用程序或系统监视工具的数据馈送到Apache Spark或其他大数据数据库中,运行异常检测,然后将该信息馈入Graphite。

Graphite数据易于可视化,其格式为<value or metric>:<a count, sum, average, etc.>:<time of event>

尽管Graphite的安装很复杂,但IT管理员可以对其进行设置并与Docker一起运行,以简化该过程。无需设置任何搭建或数据保留策略:该工具可保存指标并针对该指标运行各种聚合功能。

用Python编写的Graphite监视工具可以平均数据,每分钟或以任何用户定义的时间间隔存储一次。用户可以对数据应用内置或自定义功能,还可以创建散点图,折线图和直方图。可以在一个时间序列图表上绘制多个指标的图形,并在一个画布(也称为仪表板)上堆叠多个图表。这些功能均不需要编程。

Graphite series

在Graphite监视工具中,series是命名层次结构,类似于其他工具中的文件夹。series可以具有任何名称,带有句点(。)可以分隔用户将绘制的度量的每个进一步划分。首先,请为series设置一个值。

在安装时会根据用户选择的选项和他们安装的第三方工具来设置某些series。图1显示了Graphite主屏幕的一部分的series示例。

使用句点将series分组为层次结构。没有层次结构的规则,因此请使用对你的IT团队或组织有意义的内容。此功能使企业可以使用通配符同时收集多个系列的指标,例如stats_count。示例包括:

  • graphiteStats.calculationtime
  • response.auth.200
  • response.auth.302
  • delays.united
  • position.flight304
  • sales.socks
  • sales.shoes


statsd守护程序收集的指标将以statsd开头。我们将在下面详细介绍的Statsd侦听度量标准数据,然后将其写入Graphite或其他后端。

如果使用statsd,请发出以下命令将数据添加到series中:

Graphite 架构

Graphite监视工具由statsd以外的三个主要组件组成,用户通常随Graphite一起安装。

  1. Graphite-web:由Nginx,Apache或其他具有图形插件的Web服务器提供支持的Web界面。
  2. Carbon:存储组件。
  3. Whisper:时间序列数据库。

Graphite web

图2显示了Graphite web的示例图,该图绘制了时间和价值点。时间沿底部的x轴,而值(在这种情况下为指标)沿y轴。

绘制的度量标准用颜色表示。图例位于底部。用户可以调整其仪表板的设计元素,例如字体大小和配色方案。

图2是折线图:图形从一个点到下一个点画一条线。石墨文档包括一个堆积图的示例,其中值不重叠。

Carbon

Carbon是Graphite监视工具的另一个核心组件,它通过网络接收指标,然后使用时间序列数据库Whisper将其写入磁盘。它将每个系列存储在自己的.wsp数据文件中。它可以支持纯文本,Pickle(Python对象)和Advanced Message Queuing Protocol。

在配置过程中,列出要汇总和计算的指标。使用aggregation-rules.conf文件定义一个时间窗口(例如5分钟)以及聚合方法,例如sum,avg,min,max或p75。在此,p75表示第75个百分位。这些方法有助于在性能监视期间设置阈值。

将statsd与Graphite一起使用

Statsd是Python API和NodeJS守护程序。它会收集和汇总数据,并每30秒将其发送到Graphite。

Statsd用户通过统一格式<metricname>:<value> | <time>请求Graphite中的指标。例如,响应web.server.error.500:1:17:00表示在17:00收到错误500。

下面的Python代码显示了使用起来很简单。在这里,我们建立与服务器的连接,然后将some.event系列增加一个。

statsd数据类型可以更好地了解Graphite的功能。数据类型包括:

  • 计数器:简单序数。
  • 计时器:显示完成某件事所需的时间。此数据类型适用于性能监视。
  • 量规:函数中使用的常数。
  • 集合:不允许重复值的数据集。

Graphite数据源

图3显示了Graphite的主要数据来源:日志,传感器输出和网络连接。各种开源工具可以从这些来源中获取数据,进行解析,然后将其发送到另一个数据收集守护程序statsd或收集。这些都将数据推送到Carbon。

图3中的示例描述了用户如何发出nc命令以将数据推送到Carbon,后者侦听端口8125。在这里,Graphite使用Django(Django,这是一个显示网页的Python框架)。

使用Docker进行安装

根据Graphite文档,安装过程非常“复杂”。例如,两种安装技术要求用户在VM中运行Graphite。但是,用户无法在云服务器中的另一个VM上运行VM,因为虚拟化在硬件层而不是软件层上运行-因此,在这种情况下,安装必须在本地计算机上进行。

相反,使用Docker安装Graphite监视工具更为简单。

首先,停止任何在端口80上运行的Web服务器或进程。然后,运行以下命令以启动Docker容器。

接下来,在localhost:80打开浏览器以查看Graphite界面。

该服务器使用公共IP地址。默认密码是root/root,但是请考虑更改该密码,以确保黑客不会访问服务器。

原文链接:

https://searchitoperations.techtarget.com/tip/Try-out-the-Graphite-monitoring-tool-for-time-series-data?

相关推荐

pip的使用及配置_pip怎么配置

要使用python必须要学会使用pip,pip的全称:packageinstallerforpython,也就是Python包管理工具,主要是对python的第三方库进行安装、更新、卸载等操作,...

Anaconda下安装pytorch_anaconda下安装tensorflow

之前的文章介绍了tensorflow-gpu的安装方法,也介绍了许多基本的工具与使用方法,具体可以看Ubuntu快速安装tensorflow2.4的gpu版本。pytorch也是一个十分流行的机器学...

Centos 7 64位安装 python3的教程

wgethttps://www.python.org/ftp/python/3.10.13/Python-3.10.13.tgz#下载指定版本软件安装包tar-xzfPython-3.10.1...

如何安装 pip 管理工具_pip安装详细步骤

如何安装pip管理工具方法一:yum方式安装Centos安装python3和python3-devel开发包>#yuminstallgcclibffi-develpy...

Python入门——从开发环境搭建到hello world

一、Python解释器安装1、在windows下步骤1、下载安装包https://www.python.org/downloads/打开后选择【Downloads】->【Windows】小编是一...

生产环境中使用的十大 Python 设计模式

在软件开发的浩瀚世界中,设计模式如同指引方向的灯塔,为我们构建稳定、高效且易于维护的系统提供了经过验证的解决方案。对于Python开发者而言,理解和掌握这些模式,更是提升代码质量、加速开发进程的关...

如何创建和管理Python虚拟环境_python怎么创建虚拟环境

在Python开发中,虚拟环境是隔离项目依赖的关键工具。下面介绍创建和管理Python虚拟环境的主流方法。一、内置工具:venv(Python3.3+推荐)venv是Python标准...

初学者入门Python的第一步——环境搭建

Python如今成为零基础编程爱好者的首选学习语言,这和Python语言自身的强大功能和简单易学是分不开的。今天千锋武汉Python培训小编将带领Python零基础的初学者完成入门的第一步——环境搭建...

全网最简我的世界Minecraft搭建Python编程环境

这篇文章将给大家介绍一种在我的世界minecraft里搭建Python编程开发环境的操作方法。目前看起来应该是全网最简单的方法。搭建完成后,马上就可以利用python代码在我的世界自动创建很多有意思的...

Python开发中的虚拟环境管理_python3虚拟环境

Python开发中,虚拟环境管理帮助隔离项目依赖,避免不同项目之间的依赖冲突。虚拟环境的作用隔离依赖:不同项目可能需要不同版本的库,虚拟环境可以为每个项目创建独立的环境。避免全局污染:全局安装的库可...

Python内置zipfile模块:操作 ZIP 归档文件详解

一、知识导图二、知识讲解(一)zipfile模块概述zipfile模块是Python内置的用于操作ZIP归档文件的模块。它提供了创建、读取、写入、添加及列出ZIP文件的功能。(二)ZipFile类1....

Python内置模块pydoc :文档生成器和在线帮助系统详解

一、引言在Python开发中,良好的文档是提高代码可读性和可维护性的关键。pydoc是Python自带的一个强大的文档生成器和在线帮助系统,它可以根据Python模块自动生成文档,并支持多种输出格式...

Python sys模块使用教程_python system模块

1.知识导图2.sys模块概述2.1模块定义与作用sys模块是Python标准库中的一个内置模块,提供了与Python解释器及其环境交互的接口。它包含了许多与系统相关的变量和函数,可以用来控制P...

Python Logging 模块完全解读_python logging详解

私信我,回复:学习,获取免费学习资源包。Python中的logging模块可以让你跟踪代码运行时的事件,当程序崩溃时可以查看日志并且发现是什么引发了错误。Log信息有内置的层级——调试(deb...

软件测试|Python logging模块怎么使用,你会了吗?

Pythonlogging模块使用在开发和维护Python应用程序时,日志记录是一项非常重要的任务。Python提供了内置的logging模块,它可以帮助我们方便地记录应用程序的运行时信息、错误和调...

取消回复欢迎 发表评论: