prometheus诞生2012，许多公司采用，并且该项目目前非常活跃。具有由度量名称和键/值对标识的时间序列数据的多维数据模型。查询语言非常灵活，可以定义已有的各种信息组合不依赖于分布式存储时间序列通过http拉取模型可以通过中间网关(pushgateway)完成托送模型支持服务发现或者静态配置发
2023-07-15
cAdvisor（Container Advisor）为容器用户提供了对其运行容器的资源使用和性能特征的理解。它是一个运行守护程序，用于收集，聚合，处理和导出有关正在运行的容器的信息。具体来说，对于每个容器，它保留资源隔离参数，历史资源使用，完整历史资源使用的直方图和网络统计。此数据按容器和机器范围
2023-07-15
node_exporter用Go编写的一个收集器，主要指标来在*NIX内核公开的硬件和操作系统指标。但是每个操作系统上都有不同的支持。如：linux系统的地址解析arp,bcache,开机时间，链接跟踪，cpu信息，磁盘i/o，文件系统，netstat，stat，sockstat，系统时间，vmst
2023-07-15
开始配置filebeat，在这之前，你或许需要了解下之前的配置结构[ELK6.3.2安装与配置[跨网络转发思路]](https://www.linuxea.com/1889.html)，我又将配置优化了下。仅仅因为我一个目录下有多个nginx日志。配置filebeat之前使用过用一个个日志来做单个的
2023-07-15
zabbix 配置 Zabbix-in-Telegram加入你在香港或者其他地方，需要使用Telegram完成zabbix监控告警功能，你可以参考本章。如果在国内，推荐使用丁丁，或者微信，以及QQ等通讯工具。先决条件1，打开zabbix配置AlertScriptsPath=/usr/lib/zabb
2023-07-15
此前做了Telegram的警报发送，发现误报较多，尝试使用slack的方式，发现简洁明了，颇为好用。代码来自github，可参阅本章。此前的Telegram和slack都没有做警报收敛，在github之上有现成的警报收敛，感兴趣可以看看。zabbix配置下载slack.sh脚本，存放在/usr/li
2023-07-15
prometheus自动发现(scrape them)在官网中方式有很多，我这里介绍的是使用consul_sd_config配合registrator来做，registrator作为node节点端，发现容器，且将发现信息注册给consul。拓扑如下：而prometheus中使用consul_sd_c
2023-07-15
我花了一点时间整理了一套zabbix的安装脚本，便于部署和安装。它包括了zabbix-server,zabbix-agent的安装，初始化配置，在4.0之后加入了docker-compose，随后的server端都采用了docker安装。在最新的更新中，引入了elasticsearch:6.1.4。
2023-07-15
Zabbix发布了4.2版本，带有一系列新功能。在Zabbix自己的网站上有一个很好的概述，但一定要检查文档中的“Zabbix 4.2中的新功能”部分，因为它更完整！ 一个新功能是TimescaleDB的实验支持。一个当前流行的开源时间序列的SQL数据库 ，TimescaleDB打包为Post
2023-07-15
在实际使用中，通常我们会对一些端口进行监控，比如nginx，mariadb,php等。要完成一个端口监控是简单容易的。net.tcp.listen[80]如上，既可对tcp 80获取状态，而后配置Triggeres做告警处理即可{HOST.NAME} nginx is not running
2023-07-15
我们遇到的场景是CPUThrottlingHigh 警报被正常触发，而触发的对象的CPU本身并不高，或者空闲。鉴于此，我们开始怀疑这个警报的必然性。通常在许多情况下，会将此警报修改或者沉默，因为应用程序对延迟不敏感，即使受到限制也可以正常工作，警报基于原因而非症状。因此警报的级别是Info。但是并不
2023-07-15
通常在k8s中，pod是随时可以被替换的，在整个环境里往往我们不太关注某一条鱼，只关注整个鱼群的状态，因此监控数据不会存储太长，因为借鉴意义并不大。但是有时的确想要从 Prometheus 中删除一些指标，如果这些指标不需要，或者只需要释放一些磁盘空间。Prometheus 中的时间序列只能通过管理
2023-07-15
promscale 是一个开源的可观察性后端，用于由 SQL 提供支持的指标和跟踪。它建立在 PostgreSQL 和 TimescaleDB 的强大和高性能基础之上。它通过 OpenTelemetry Collector 原生支持 Prometheus 指标和 OpenTelemetry 跟踪以及
2023-07-15
我们知道，在使用promentheus的过程中，默认的数据量一旦到一个量级后，查询区间的数据会非常缓慢，甚至一个查询就可能导致promentheus的崩溃，尽管我们不需要存储多久的数据，但是集群pod在一定的数量后，短期的数据仍然非常多，对于Promentheus本身的存储引擎来讲，仍是一个不小的问
2023-07-15
PXE and Cobbler 1，pxe PEX全称：预引导执行环境（Preboot execute environment） PXE依赖ftp,http,tftp,dhcp 搭建dhcp：dynamin host configur
2023-07-15
Cobbler：补鞋匠 Cobbler二次封装的PXE，只是 pxe更高级的封装方式 Cobbler，集成pxe，dhcp,kickstarter,yum仓库等，结合kickstarter能够完成centos，redhat系统安装的，并支持多个版本的并存，便于实现系统部署的一个环境。
2023-07-15
saltstacksaltstack主要用来远程执行，配置管理和云管理1，更新yum源wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-6.repo 2，更新epel源mkdir /home
2023-07-15
在上篇文章中的返回结果是已经安装过的！通过salt在尝试安装sl，返回结果如下：[root@master init]# salt 'minios.10.0.0.8.com' state.sls init.pkg minios.10.0.0.8.com: ---------- I
2023-07-15
minion认证[root@minion minion]# ll /etc/salt/pki/minion/ 总用量 12 -rw-r--r--. 1 root root 451 12月 8 06:11 minion_master.pub -r--------. 1 root root 1675
2023-07-15
远程执行第三功能，输出！可以写入到数据库里，文件里！匹配ID：正则表达式：不同的匹配方式需要加不同参数！-E：正则 -L：列出，多个用逗号分隔， -G: grain -N: 节点组 -R: 范围 -C：混合 -I：pillar -S: ipv4 子网掩码的形式 salt ‘*.doam.net’
2023-07-15