博客/工程

介绍针对Grafana云的新的Confluent云集成

2022年4月27日4分钟

在Grbob电竞频道afana实验室,我们正在继续扩展我们的平台Grafana云集成这使得连接和监视外部系统比以往任何时候都更容易。这些集成使您能够回答组织中的大局问题,并讲述您的可观察性故事。

我们很高兴介绍Grafana Cloud中可用的最新集成:汇合的云,一个完全托管的集成,使监视和可视化您的汇合的云Grafana中的平台资源。

合流云+ Grafana云

Confluent Cloud是一个完全管理的云原生数据流平台,它开创了一种全新的数据基础设施类别,使数据运行起来,由Apache Kafka®的创始人构建。它被设计成智能结缔组织,使来自多个来源的实时数据能够在组织中不断流动。如果您还没有使用Confluent Cloud它是免费的开始

使用Confluent云集成,您可以监视内部的所有Confluent资源Grafana云.您可以通过几次简单的单击连接您的Confluent Cloud帐户,开始导入Kafka集群、连接器、ksqlDB应用程序和模式注册中心的指标。我们的可伸缩的,管理Grafana云指标服务与普罗米修斯标准兼容-不需要代理或定制出口商。因此,存储在Grafana Cloud中的数据可以长期保存,并且可以使用PromQL语言进行查询,并使用预构建的Grafana仪表板进行可视化。

设置Confluent云集成

在Confluent Cloud中,使用控制台或CLI创建并记录一个云API密匙与一个MetricsViewer的角色。这个API密钥用于授权Grafana刮取Kafka指标,因此我们建议您专门为Grafana云集成创建一个新密钥。

另外,请注意要监视的资源的合流云资源id。您可以监视Kafka、Kafka Connect、ksqlDB和Schema Registry组件。合并云资源id命名为"ID在Confluent Cloud UI中,也可以从CLI中使用。您还可以使用Confluent Cloud描述符端点列出要监视的可用资源.Confluent Cloud集群的资源ID示例为lkc-or7g9这个存储库包含一些用于生成API密钥和获取资源id的简单脚本。

如何在Grafana Cloud中设置API密钥和查找资源id

导航到集成和连接部分的Grafana云,并在列表中选择合流云。在这里,您可以创建和管理任意数量的作业,或指定为哪些资源获取指标的配置集。

为作业指定名称,并提供您在上面创建的Confluent Cloud API密钥。一定要测试连接,以确保所有配置都正确!

接下来,选择希望从中收集度量的资源。选择资源类型,并提供要监视的资源的ID。

最后,点击保存刮工作完成连接您的帐户。此时,Confluent Cloud将开始将您的Confluent资源指标推送到Grafana Cloud帐户中。

监视合流云与Grafana云

设置完成后,将安装预先构建的Confluent Cloud仪表板,使您能够快速进入并可视化您的资源。仪表板立即开始填充,但完全填充可能需要几分钟。使用提供的选择器,您可以进行筛选以查看特定的资源。

首先是Kafka集群的概述(如上所述),提供一些关键指标,如主题的读写速率、分区数量和活动连接计数。更详细地说,您可以找到特定于主题的信息(例如发送、接收和保留的字节以及请求速率),这有助于识别热门主题。

仪表板还可视化连接器活动(如上),因此您可以一眼看到它们正在处理的记录量。

最后,显示每个模式注册表中包含的KSQL流和模式的概述(如上所示)。

与所有Grafana云集成一样,收集的Confluent云指标存储在您的托管Prometheus服务中,因此您可以继续使用PromQL构建新的仪表板和警报。有关可用度量的更多信息,请参阅Confluent云集成文档

了解关于Confluent云集成的更多信息

Grafana Cloud的新的Confluent Cloud集成使监视您的Confluent Cloud设置比以往任何时候都更容易,只需几个简单的步骤。使用预构建的仪表板,您将只关注最重要的指标—并且很容易发现事情不正确的时候。

想了解更多,请登录我们的Confluent云集成文档

我们很高兴听到您的想法,并欢迎您的反馈#集成频道的bob电竞频道Grafana实验室社区Slack

以Confluent Cloud集成为例Grafana云,这是开始使用度量、日志、跟踪和仪表板的最简单方法。要查看我们慷慨的永久免费层和每个用例的计划,现在报名