Hi, I would recommend upgrading to Flink 1.15, given the changes that were made in 1.15 make ownership more understandable. See https://flink.apache.org/2022/05/06/restore-modes.html
Best regards, Martijn On Fri, Nov 25, 2022 at 9:33 AM Evgeniy Lyutikov <eblyuti...@avito.ru> wrote: > Hello > We use Flink 1.14.4 in kubernetes operator (version 1.2.0), all chepoint > data store in s3 bucket. > > If parse _metadata file of checkpoint it contains links to objects in the > shared directory and their number is much less than the total number of > objects in the directory. > > For example, the number of links in _metadata file is 24000, and the > total number of objects in shared directory is about 100000. What is the > safest way to delete unused files and free up space? > > * ------------------------------ *“This message contains confidential > information/commercial secret. If you are not the intended addressee of > this message you may not copy, save, print or forward it to any third party > and you are kindly requested to destroy this message and notify the sender > thereof by email. > Данное сообщение содержит конфиденциальную информацию/информацию, > являющуюся коммерческой тайной. Если Вы не являетесь надлежащим адресатом > данного сообщения, Вы не вправе копировать, сохранять, печатать или > пересылать его каким либо иным лицам. Просьба уничтожить данное сообщение и > уведомить об этом отправителя электронным письмом.” >