Thanos是一个基于Prometheus实现的监控方案，其主要设计目的是解决原生Prometheus上的痛点，并且做进一步的提升，主要的特性有：全局查询，高可用，动态拓展，长期存储。下图是Thanos官方的架构图： 安装组件 Thanos主要由如下几个特定功能的组件组成： Sidecar：连接Prometheus，并把Prometheus暴露给查询网关（Querier/Query），以供实时查询，并且可以上传Prometheus数据给云存储，以供长期保存 Querier/Query：实现了PrometheusAPI，与汇集底层组件（如边车组件Sidecar，或是存储网关Store...

1.导入配置 Grafana可以通过json/id直接生成dashboard。 配置数据源 2.添加数据源 根据实际情况配置链接地址用户名密码 3.大屏展示 通过playlists设置大屏展示 展示内容设置 4.外链 5.自定义创建dashboard 创建图表 node_memory_MemFree_bytes 修改标题 修改指标的名字 样式 计算内存的使用率 (node_memory_MemTotal_bytes(node_memory_MemFree_bytes+node_memory_Buffers_bytes+...

告警配置文件 prometheus截图： AlertManager配置文件： global: ... route: receiver:default group_by: alertname根据此标签分组，可以使用别的标签 continue:false routes: receiver:critical_alerts接受者的名字 match: severity:critical路由匹配的标签 continue:false不继续匹配 group_wait:1m分组等待 group_interval:1m组间隔 repeat_interval:5m重复通知间隔 receiver:warning...

PrometheusAlert PrometheusAlert是开源的运维告警中心消息转发系统，支持主流的监控系统Prometheus、Zabbix，日志系统Graylog2，Graylog3、数据可视化系统Grafana、SonarQube。阿里云-云监控，以及所有支持WebHook接口的系统发出的预警消息，支持将收到的这些消息发送到钉钉，微信，email，飞书，腾讯短信，腾讯电话，阿里云短信，阿里云电话，百度云短信，容联云电话，七陌短信，七陌语音，TeleGram，百度Hi(如流)等。 部署 参考官方文档 在kubernetes中运行 Kubernetes中运行可以直接执行以下命...

Alertsnitch可以捕获PrometheusAlertManager警报并将它们写入MySQL或Postgres数据库以供将来检查。 部署流程 部署mysql 创建alertsnitch的用户名，密码，数据库。 导入初始化sql文件（sql文件见gitlab）。 过程略。 部署Alertsnitch Deployment如下： 修改下面ALERTSNITCH_DSN的值。 alertsnitch-deployment.yaml apiVersion:apps/v1 kind:Deployment metadata: name:alertsnitch namespace:al...

什么是Terraform？ HashiCorpTerraform是一种基础设施即代码工具，可让您在人类可读的配置文件中定义云和本地资源，您可以对这些文件进行版本控制、重用和共享。然后，您可以使用一致的工作流程来配置和管理所有基础设施的整个生命周期。Terraform可以管理计算、存储和网络资源等低级组件，以及DNS条目和SaaS功能等高级组件。 Terraform是如何工作的？ Terraform通过应用程序编程接口(API)创建和管理云平台和其他服务上的资源。提供商使Terraform能够通过可访问的API与几乎任何平台或服务配合使用。 核心Terraform工作流程由三个阶段组...

安装Terraform 安装Terraform根据官方文档来操作。这里使用MacOS安装latest版本v1.5.6版本。 brewTaphashicorp/tap brewinstallhashicorp/tap/terraform 验证是否安装成功 $terraformversion Terraformv1.5.6 ondarwin_arm64 Terraform多版本管理工具tfenv tfenv：Terraform versionmanagerinspiredbyrbenv 安装tfenv brewinstalltfenv 如果安装过Terraform，...

亲爱的读者， 我希望首先感谢您对我博客的持续支持和关注。我的博客账号创建于2015年12月28日，初期主要是分享一些基础内容。我很高兴看到这些内容已经为许多同行和读者提供了帮助，并且吸引了超过39.1万次的阅读。 然而，时光荏苒，我决定给博客注入新的生机。我计划继续使用这个博客账号，分享全新的内容和见解。这些新的文章将涵盖各种主题，包括最新的趋势、技术、观点和个人见解。我希望这些文章能够激发思考、启发灵感，以及提供有价值的信息。 尽管我将发布新的内容，但我不会删除或修改以前的文章。我认为这些旧的基础内容可能仍然对某些读者有价值，因此我将保留它们。您可以随时访问这些旧文档，以获取相关信息。 为了...

背景 目前有RabbitMQ异常导致业务中断的问题，所有有监控RabbitMQ的需求。在此记录配置监控RabbitMQ的过程。 查找文档 通过Prometheus文档找到Exporter可以对第三方服务导出为Prometheus指标。滚动页面找到RabbitMQExporter。根据此项目的README文件，可以使用RabbitMQ官网插件。 开启RabbitMQ_Prometheus插件 如果rabbitmq_prometheus已经开启可以跳过这一步。 rabbitmq-pluginsenablerabbitmq_prometheus 查看RabbitMQPrometheus...

1变量定义变量 Terraform可以将变量的内容写到一个单独的文件中，是main文件引用此文件的定义的变量的值，便于使用阅读。 上接 Terraform创建第一个云基础设施(3)创建云基础设施的Terraform文件的基础上进行修改。 $catvariables.tf variable"region"{//变量名region，不可用重复。花括号里面是参数 type=string//输入变量的类型 default="us-west-2"//变量的默认值 description="AWSregion"//变量的描述 } variable"amis"{ type=map defau...

模版文件 模版允许使用变量定制文件中的部分内容，可以适应更广泛的使用场景。 比如可以通过变量的方式渲染模板文件的内容。 创建模板文件 使用Terraform变量的使用(4)中的创建ec2并安装nginx的案例。将nginxindex页面作为模板文件渲染的对象。 修改setup_nginx.sh文件的内容 !/bin/bash sudoyuminstall-ynginx sudonginx echoCerated:${time}|sudotee/usr/share/nginx/html/index.html渲染index文件 exit0 time为变量。通过${}的方式引用。将Cer...

Graphviz介绍 在使用Terraform部署基础设施时，各个资源之间存在依赖关系，代码月复杂，依赖关系就越难辨别。 Graphviz可以让我们通过图形的方式，直观的了解各个资源之间的依赖关系。 下载安装Graphviz 根据Graphviz下载页面进行下载安装。 mac： brewinstallgraphviz 使用graph生成依赖关系可视化图片 在代码目录下执行： terraformgraph|dot-Tpng>graph.png

Provisioner介绍 当虚拟服务器创建完成后，通常需要执行一些初始化的操作。例如：安装软件，配置系统，服务等。 在前面的案例中使用云商的user_data用户数据来执行shell脚本来安装nginx服务器。 Terraform也提供了Provisioner来完成这种场景。通过Provisioner可以在基础设施资源创建或销毁时，执行定制化的操作。Provisioner可以于 ansible，puppet，saltstack配置管理工具结合使用，利用现有的配置管理工具管理资源。 Provisioner使用案例 使用Provisioner购买基础设施并搭建一个服务。使用3个文件...

准备工作 内容来自：腾讯云云资源自动化forTerraform快速开始 1创建凭证 在首次使用Terraform之前，请前往 云API密钥页面 申请安全凭证SecretId和SecretKey。若已有可使用的安全凭证，则跳过该步骤。 登录 访问管理控制台，在左侧导航栏，选择访问密钥 > API密钥管理。  在API密钥管理页面，单击新建密钥，即可以创建一对SecretId/SecretKey。 2配置凭证鉴权 2.1静态凭证鉴权 在用户目录下创建 provider.tf 文件，输入如下内容： my-...