Контракты данных. Разработка конвейеров продакшен-уровня

Низкое качество данных создает серьезные проблемы — от сбоев в конвейерах данных, приносящих прибыль, до потери доверия со стороны потребителей. Команды, работающие с данными, до сих пор пытаются избежать этих проблем, особенно когда данные приходят из внешних источников. Решение — контракты данных. Они обеспечивают высокое качество данных и полный контроль над ними: описывают ожидания от данных, закрепляют владельцев активов, а их условия автоматически проверяются прямо в процессе CI/CD. В книге представлена архитектура контрактов данных, дается их четкое определение, объясняется, почему индустрия в них нуждается, и приводятся реальные примеры использования контрактов в продакшене. Вы узнаете, как внедрять компоненты этой архитектуры и как они используются на всех этапах жизненного цикла данных в компании.