3 вопросов
-
senior theory CDC (Change Data Capture): зачем, какие бывают подходы (log-based, trigger-based, polling)? Как работает Debezium? Какие подводные камни на проде?
-
senior theory Идемпотентность ETL-job: что это, почему критично, как реализовать? Расскажи про UPSERT, watermark, dedup и retry-логику.
-
senior theory Как тестировать data pipelines? Unit, integration, data-quality тесты. Great Expectations, dbt tests, Soda — что и когда?