I have a flink job running with the following settings: * CheckpointingMode.EXACTLY_ONCE * RocksDB backend (Modified with TtlDB usage) * CheckpointConfig.ExternalizedCheckpointCleanup.DELETE_ON_CANCELLATION * 60 sec interval * Asnyc snapshots * Incremental checkpoints * Queryable State enabled
After a few days I have ~5000 files in the checkpoints shared directory. It grows by ~1000 files/day. Now I have the following questions: 1. What kind of information is stored in the shared subdirectory 2. Is it safe to delete old files or do we have to restart the job from a savepoint chk-9798: 139 shared: 4840 taskowned: 0 Regards Bernd ________________________________ Landesbank Hessen-Thueringen Girozentrale Anstalt des oeffentlichen Rechts Sitz: Frankfurt am Main / Erfurt Amtsgericht Frankfurt am Main, HRA 29821 / Amtsgericht Jena, HRA 102181 Bitte nutzen Sie die E-Mail-Verbindung mit uns ausschliesslich zum Informationsaustausch. Wir koennen auf diesem Wege keine rechtsgeschaeftlichen Erklaerungen (Auftraege etc.) entgegennehmen. Der Inhalt dieser Nachricht ist vertraulich und nur fuer den angegebenen Empfaenger bestimmt. Jede Form der Kenntnisnahme oder Weitergabe durch Dritte ist unzulaessig. Sollte diese Nachricht nicht fur Sie bestimmt sein, so bitten wir Sie, sich mit uns per E-Mail oder telefonisch in Verbindung zu setzen. Please use your E-mail connection with us exclusively for the exchange of information. We do not accept legally binding declarations (orders, etc.) by this means of communication. The contents of this message is confidential and intended only for the recipient indicated. Taking notice of this message or disclosure by third parties is not permitted. In the event that this message is not intended for you, please contact us via E-mail or phone.
