Что произойдёт, если шедулер отправил событие в Kafka, но упал до того, как пометил запись в outbox как отправленную?

Если шедулер отправил событие в Kafka, но упал до того, как пометил запись в outbox как отправленную, то при следующем запуске или повторной попытке обработки этот event может быть отправлен повторно.

Короткий ответ

Что ответить на собеседовании

Если шедулер отправил событие в Kafka, но упал до того, как пометил запись в outbox как отправленную, то при следующем запуске или повторной попытке обработки этот event может быть отправлен повторно. Это происходит потому, что запись в outbox не была обновлена, и система считает, что событие еще не отправлено.

Подробный разбор

Ответ с пояснениями

Условие

Что произойдёт, если шедулер отправил событие в Kafka, но упал до того, как пометил запись в outbox как отправленную?

Ответ

Если шедулер отправил событие в Kafka, но упал до того, как пометил запись в outbox как отправленную, то при следующем запуске или повторной попытке обработки этот event может быть отправлен повторно. Это происходит потому, что запись в outbox не была обновлена, и система считает, что событие еще не отправлено.

Такой сценарий приводит к возможной дубликации сообщений в Kafka, если не реализованы дополнительные механизмы идемпотентности или дедупликации на стороне потребителя или продюсера.

Для предотвращения подобных проблем обычно применяют паттерн "Outbox" с транзакционным обновлением базы и отправкой сообщений, либо используют механизмы подтверждения доставки и идемпотентные операции.

ИИ-помощник для собеседований

Хочешь уверенно проходить собеседования?

Попробуй ИИ-помощник для собеседований: слышит вас и собеседника, анализирует экран, подсказывает ответы в реальном времени, работает без VPN и не попадает в захват экрана.

Подробнее