Was sind die Themen __consumer_offsets und _schema in Kafka?

8

Nach dem Einrichten des Kafka Broker Clusters und dem Erstellen einiger Themen haben wir festgestellt, dass die folgenden zwei Themen automatisch von Kafka erstellt wurden:

  1. __ consumer_offsets
  2. _schema

Was ist die Bedeutung und Verwendung dieser Themen?

    
Anveshak 16.09.2016, 10:42
quelle

1 Antwort

16

__ consumer_offsets wird verwendet, um Informationen über festgeschriebene Offsets für jedes Thema zu speichern: partition pro Benutzergruppe (groupID). Es ist kompaktiert Thema, so dass Daten regelmäßig komprimiert werden und nur die neuesten Offsets Informationen verfügbar sind.

_schema - ist kein Standard-Kafka-Thema (zumindest bei Kafka 8,9). Es wird von Confluet hinzugefügt. Mehr dazu: Confluent Schema Registry - github.com/conflutinc/schema-registry (Danke @serejja)

    
Natalia 16.09.2016, 11:04
quelle

Tags und Links

Django: Verwenden von Annotate, Count und Distinct in einem Queryset Unterschiede zwischen Native Script und nativem und ionischen Framework reagieren