Чем отличается Журнал коммитов и Топик в Kafka Apache?

Question

[Danil2134]

Чем отличается Журнал коммитов и Топик в Kafka Apache?
Везде написано по разному что это и чем отличается
Где-то написано что Топик это виртуальное хранилище сообщений
И про журнал коммитов написано что он используется для хранения истории сообщений. Не сильно вижу разницу между двумя понятиями обьясните пожалуйста

Answer 1

[Saboteur]

Ну собственно в топике хранятся данные, которые оттуда забираешь.
А в логе в течение некоторого retention периода хранятся метаданные данных. Можно посмотреть историю, или просто список сообщений. Вдобавок логи в целом меньше самих данных и хранятся целиком на каждом сервере, что позволяет быстрые операции со списком.

Можно официальную документацию, раздел topics and logs
https://kafka.apache.org/08/documentation.html#int...