Offset explorer как пользоваться

Offset Explorer is an open source tool for monitoring and managing consumer group offsets in an Apache Kafka cluster. It provides a simple and intuitive user interface for viewing and managing the details of Kafka consumer group offsets.

Offset Explorer has the following main functions and features:

Real-time monitoring: Offset Explorer can monitor the consumer group offset in the Kafka cluster in real time. It is able to track the consumer group from the earliest offset to the latest offset and show the progress of the consumer group consuming messages.

Offset Management: Offset Explorer allows users to view and modify offsets of consumer groups. Users can manually reset the consumer group’s offsets, if needed to re-consume some messages, or roll back the offsets to their previous state.

Topic and partition information: Offset Explorer provides detailed information about topics and partitions in the Kafka cluster. Users can view the offset of each partition, the first offset, the latest offset, etc.

Utilities: Offset Explorer provides some utilities to help users monitor and manage Kafka clusters. For example, users can export offset information as a CSV file, or search for specific consumer groups and topics.

User-Friendly Interface: Offset Explorer’s user interface is designed to be simple and intuitive, making it easy to use. Users can access the Web interface of Offset Explorer through a browser, and view and manage offsets through simple operations.

Overall, Offset Explorer is a powerful and easy-to-use Kafka monitoring tool that helps users monitor consumer group offsets in real time and provides convenient management functions. By using Offset Explorer, users can better understand and manage the consumption progress of Kafka consumer groups, ensuring reliable data processing and stable operation of consumers.

2. Use of Offset Explorer

(1) Install Offset Explorer
insert image description here
(2) Configure local Kafka

(3) Configure the specified Topic Configure
to use String to view data

(4) Get data

(5) Set to JSON format

Kafka Offset Explorer 2.3.1

There are multiple ways to connect to kafka topic. One way to do it is using SSL connection. This is How to do:

Requirements:

Kafka Truststore (.jks) and password & private password, Kafka KeyStore (.jks) and password

Kafka Offset Explorer/

Bootstrap servers (comma separated)

Open Offset Explorer and in security tab, enter Trtuststore and Keystoredetails.

Then on Advanced tab, enter the Bootsrap servers separated by commas

Then click on test connection to verify the trust and key store files and passwords.

When the connection is through, it will ask to add, the below details will be added to your offset explorer.

With Avatar promise �� on coming up with more How to-do’s — signing off for now.

software configuration

1. Start offsetexplorer.exe, and fill in the Cluster name and other parameter information under the Properties option in the Add Cluster windowIf the zookeeper service is not set up, no need to modify the configuration parameters of zookeeper, even if the pop-up box on the following page reports an error prompt Unable to connection zookeeper server, it will not affect

If the Zookeeper service is not configured, you need to configure the IP port of the Kafka service.

Under the Advanced option in the Add Cluster window, fill in the Bootstrap servers parameter, the ip and port for kafka serviceAfter configuration, you can click the Test button to test whether it can connect normally.

2. After kafka is successfully connected, you can see the Topics information of the kafka, etc. If it is a cluster kafka, you can see the information of all nodes under the cluster.

Open a topic, click Data to view the data, and click the green play button to display the data

Seeing that the displayed data is all byte type, you need to convert it to a character type to view, modify the Content Types, the default is Byte Array, modify them to String, and then update

After selecting the topic, enter the Data tab page, view the message, filter the message through Filter, and set the type of received message in Message. To view the specific message, you need to open the message display form first, select the message and enter the Value tab below to view the specific message, if it is JSON data, you can display the type through the message type on the rightNote that if you only modify the Content Types on a certain topic, only the current topic encoding method will take effect, and the other topic encoding methods will remain unchanged. If you need to modify all topics to take effect, you can set Default in Tools->Settings->Topics Content Types. Both Key and Value are set to String.create topic

send topic message

Использование Offset Explorer

Offset Explorer (ранее Kafka Tool) — это приложение с графическим интерфейсом для управления и использования кластеров Apache Kafka. Он предоставляет интуитивно понятный пользовательский интерфейс, который позволяет быстро просматривать объекты в кластере Kafka,
а также сообщения, хранящиеся в темах кластера. Он содержит функции, ориентированные как на разработчиков, так и на администраторов. Вот некоторые из ключевых особенностей:【 Больше никаких материалов на китайском языке, размещенных непосредственно на английском языке 】

Offset Explorer бесплатен только для личного использования. Любое неличное использование, включая коммерческое, образовательное и некоммерческое использование, без приобретения лицензии не допускается. Неличное использование разрешено в ознакомительных целях в течение 30 дней после загрузки Offset Explorer, после чего вы должны приобрести действующую лицензию или удалить программное обеспечение.

Offset Explorer (front Kafka Tool) — это инструмент для управления и использования кластерных приложений с графическим интерфейсом Apache Kafka. Он предоставляет интуитивно понятный пользовательский интерфейс. Вы можете быстро просматривать объекты Kafka в кластере и сообщения, хранящиеся в темах кластера. Он содержит функции для разработчиков и администраторов. Основные функции включают:

Быстрый просмотр всей колонии Кафки, включая их агентов, темы и потребителей;
Просмотреть содержимое сообщения в разделе и добавить новое сообщение;
Просмотреть смещение потребителя , включить потребителя носика Apache Storm Kafka ;
Улучшить отображение новостей JSON, XML и Avro ;
Добавлять и удалять темы и другие административные функции;
Сохраняйте каждое сообщение из раздела на локальный жесткий диск;
Создание собственных подключаемых модулей, позволяет просматривать пользовательские форматы данных;
Offset Explorer поддерживает операционные системы Windows, Linux и Mac.

Offset Explorer бесплатен для личного использования. Любое не физическое лицо, в том числе бизнес, образование и некоммерческая деятельность не могут использоваться без лицензии. В скачанном Offset Explorer через 30 дней. , Разрешить не физическим лицам использовать программное обеспечение для оценки , После этого вы должны приобрести действующую лицензию или удалить программное обеспечение .

2. Установка и простота использования

Windows При установке версии не на что обращать внимание ,Linux Версия не может быть загружена с официального сайта Оставьте здесь структуру каталогов , Скачал до дополнения .