Опорная идея
Пайплайн должен безопасно запускаться повторно. Если загрузка за 1 августа упала, её нужно переиграть без дублей и ручной чистки. Для этого используют ключи, партиции, upsert, truncate-insert для временных слоёв и контрольные суммы.
Идемпотентность — свойство операции давать один и тот же результат при повторении. Это основа backfill, восстановления после сбоя и доверия к витринам.