Расскажи про инцидент с базой данных, когда коллега случайно удалил данные (rm -rf) и кластер упал

Первым делом необходимо остановить работу базы данных, чтобы предотвратить дальнейшее повреждение данных. Затем:

1. Оценить ситуацию: проверить, какие именно данные и файлы были удалены.
2. Восстановить из резервных копий: если есть актуальные бэкапы, восстановить директорию мастер-ноды из них.
3. Если бэкапы отсутствуют, попытаться использовать инструменты восстановления данных, но шансы успешного восстановления низкие.
4. После восстановления проверить целостность и работоспособность базы.
5. Внедрить меры для предотвращения подобных инцидентов в будущем: ограничить права доступа, настроить защиту от случайного удаления, автоматизировать бэкапы.

Важно действовать быстро, но аккуратно, чтобы не усугубить ситуацию.