Раздел базы знаний

Наблюдаемость и происхождение данных (lineage)

Метрики, логи, трассировка, происхождение, SLO данных, оповещения и управление инцидентами.

Наблюдаемость и происхождение данных (lineage)
Наблюдаемость и происхождение данных (lineage)Раздел базы знаний
ВсеДиагностика 178
01
Диагностика

Метрики повторные попытки (retries)

Метрики повторные попытки (retries): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
02
Диагностика

SLO полноты данных

SLO полноты данных: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
03
Диагностика

Происхождение на уровне полей (Field-level lineage)

Происхождение на уровне полей (Field-level lineage): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
04
Диагностика

Business metadata границы

Business metadata границы: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
05
Диагностика

Аудит доступа к данным

Аудит доступа к данным: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
06
Диагностика

Тест недоступности приёмника

Тест недоступности приёмника: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
07
Диагностика

Мониторинг Argo Workflows: метрики и алерты

Мониторинг Argo Workflows: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
08
Диагностика

Мониторинг Redpanda: метрики и алерты

Мониторинг Redpanda: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
09
Диагностика

Мониторинг Debezium: метрики и алерты

Мониторинг Debezium: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
10
Диагностика

Мониторинг OpenMetadata: метрики и алерты

Мониторинг OpenMetadata: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
11
Диагностика

Наблюдаемость конвейер данных (data pipeline)

Наблюдаемость конвейер данных (data pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
12
Диагностика

Метрики конвейер (pipeline)

Метрики конвейер (pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
13
Диагностика

Логи конвейер (pipeline)

Логи конвейер (pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
14
Диагностика

Трассировка конвейер (pipeline)

Трассировка конвейер (pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
15
Диагностика

OpenTelemetry для конвейер данных (data pipeline)

OpenTelemetry для конвейер данных (data pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
16
Диагностика

Correlation ID в конвейер (pipeline)

Correlation ID в конвейер (pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
17
Диагностика

Run ID и интервал данных (data interval)

Run ID и интервал данных (data interval): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
18
Диагностика

Метрики свежести данных

Метрики свежести данных: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
19
Диагностика

Метрики объёма данных

Метрики объёма данных: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
20
Диагностика

Метрики длительности задание (job)

Метрики длительности задание (job): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
21
Диагностика

Метрики ошибок задание (job)

Метрики ошибок задание (job): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
22
Диагностика

Метрики дозагрузка истории (backfill)

Метрики дозагрузка истории (backfill): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
23
Диагностика

Метрики задержка потребителя (consumer lag)

Метрики задержка потребителя (consumer lag): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
24
Диагностика

Метрики Kafka Connect

Метрики Kafka Connect: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
25
Диагностика

Метрики Spark

Метрики Spark: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
26
Диагностика

Метрики Flink

Метрики Flink: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
27
Диагностика

Метрики Airflow

Метрики Airflow: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
28
Диагностика

Метрики Dagster

Метрики Dagster: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
29
Диагностика

Метрики Prefect

Метрики Prefect: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
30
Диагностика

Prometheus для платформа данных (data platform)

Prometheus для платформа данных (data platform): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
31
Диагностика

Grafana для конвейер данных (data pipeline)

Grafana для конвейер данных (data pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
32
Диагностика

Централизованные логи

Централизованные логи: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
33
Диагностика

Структурированные журналы конвейера (Structured logging pipeline)

Структурированные журналы конвейера (Structured logging pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
34
Диагностика

Логирование без PII

Логирование без PII: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
35
Диагностика

Лимиты cardinality метрик

Лимиты cardinality метрик: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
36
Диагностика

Service level indicator данных

Service level indicator данных: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
37
Диагностика

SLO свежести данных

SLO свежести данных: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
38
Диагностика

SLO успешности конвейер (pipeline)

SLO успешности конвейер (pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
39
Диагностика

Бюджет ошибок платформы данных (Error budget data platform)

Бюджет ошибок платформы данных (Error budget data platform): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
40
Диагностика

Усталость от оповещений (Alert fatigue)

Усталость от оповещений (Alert fatigue): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
41
Диагностика

Маршрутизация алертов

Маршрутизация алертов: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
42
Диагностика

Severity алертов

Severity алертов: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
43
Диагностика

Pager для инцидент с данными (data incident)

Pager для инцидент с данными (data incident): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
44
Диагностика

Инструкция реагирования (Runbook) алерта

Инструкция реагирования (Runbook) алерта: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
45
Диагностика

Автоматическая диагностика конвейер (pipeline)

Автоматическая диагностика конвейер (pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
46
Диагностика

Root cause analysis данных

Root cause analysis данных: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
47
Диагностика

Анализ влияния по происхождению данных (Impact analysis lineage)

Анализ влияния по происхождению данных (Impact analysis lineage): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
48
Диагностика

Upstream и downstream зависимости

Upstream и downstream зависимости: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
49
Диагностика

OpenLineage интеграция

OpenLineage интеграция: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
50
Диагностика

Marquez происхождение данных (Marquez lineage)

Marquez происхождение данных (lineage): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
51
Диагностика

DataHub происхождение данных (DataHub lineage)

DataHub происхождение данных (lineage): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
52
Диагностика

OpenMetadata происхождение данных (OpenMetadata lineage)

OpenMetadata происхождение данных (lineage): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
53
Диагностика

Происхождение на уровне столбцов (Column-level lineage)

Происхождение на уровне столбцов (Column-level lineage): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
54
Диагностика

Происхождение данных (Lineage) для dbt

Происхождение данных (Lineage) для dbt: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
55
Диагностика

Происхождение данных (Lineage) для Airflow

Происхождение данных (Lineage) для Airflow: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
56
Диагностика

Происхождение данных (Lineage) для Spark

Происхождение данных (Lineage) для Spark: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
57
Диагностика

Происхождение данных (Lineage) для Kafka

Происхождение данных (Lineage) для Kafka: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
58
Диагностика

Происхождение данных (Lineage) для NiFi

Происхождение данных (Lineage) для NiFi: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
59
Диагностика

Происхождение данных (Lineage) для API приём данных (ingestion)

Происхождение данных (Lineage) для API приём данных (ingestion): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
60
Диагностика

Происхождение данных (Lineage) для Excel-файла

Происхождение данных (Lineage) для Excel-файла: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
61
Диагностика

Происхождение данных (Lineage) для ручной загрузки

Происхождение данных (Lineage) для ручной загрузки: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
62
Диагностика

Каталог конвейер (pipeline)

Каталог конвейер (pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
63
Диагностика

Каталог датасетов

Каталог датасетов: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
64
Диагностика

Каталог владельцев

Каталог владельцев: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
65
Диагностика

Каталог SLA

Каталог SLA: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
66
Диагностика

Метаданные владельцев (Ownership metadata)

Метаданные владельцев (Ownership metadata): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
67
Диагностика

Доменные метаданные (Domain metadata)

Доменные метаданные (Domain metadata): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
68
Диагностика

Эксплуатационные метаданные (Operational metadata)

Эксплуатационные метаданные (Operational metadata): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
69
Диагностика

Технические метаданные (Technical metadata)

Технические метаданные (Technical metadata): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
70
Диагностика

Инцидент актуальности (Freshness incident)

Инцидент актуальности (Freshness incident): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
71
Диагностика

Инцидент объёма (Volume incident)

Инцидент объёма (Volume incident): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
72
Диагностика

Инцидент схемы (Schema incident)

Инцидент схемы (Schema incident): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
73
Диагностика

Инцидент распределения (Distribution incident)

Инцидент распределения (Distribution incident): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
74
Диагностика

Незаметное повреждение данных (Silent data corruption)

Незаметное повреждение данных (Silent data corruption): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
75
Диагностика

Конвейер (Pipeline) success но данные плохие

Конвейер (Pipeline) success но данные плохие: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
76
Диагностика

Конвейер-зомби (Zombie pipeline)

Конвейер-зомби (Zombie pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
77
Диагностика

Stale dashboard как симптом

Stale dashboard как симптом: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
78
Диагностика

Пропущенный schedule

Пропущенный schedule: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
79
Диагностика

Двойной запуск конвейер (pipeline)

Двойной запуск конвейер (pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
80
Диагностика

Зависший дозагрузка истории (backfill)

Зависший дозагрузка истории (backfill): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
81
Диагностика

Неконтролируемый шторм повторных попыток (retry storm)

Неконтролируемый шторм повторных попыток (retry storm): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
82
Диагностика

Стоимость наблюдаемость (observability)

Стоимость наблюдаемость (observability): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
83
Диагностика

Sampling логов

Sampling логов: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
84
Диагностика

Retention логов

Retention логов: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
85
Диагностика

Retention метрик

Retention метрик: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
86
Диагностика

Аудит запуска конвейер (pipeline)

Аудит запуска конвейер (pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
87
Диагностика

Аудит ручного rerun

Аудит ручного rerun: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
88
Диагностика

Audit trail изменения конфигурации

Audit trail изменения конфигурации: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
89
Диагностика

Дежурство команды инженерии данных (On-call data engineering)

Дежурство команды инженерии данных (On-call data engineering): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
90
Диагностика

Управление инцидентами с данными (Data incident management)

Управление инцидентами с данными (Data incident management): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
91
Диагностика

Разбор инцидента с данными (Data incident postmortem)

Разбор инцидента с данными (Data incident postmortem): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
92
Диагностика

Среднее время обнаружения (Mean time to detect)

Среднее время обнаружения (Mean time to detect): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
93
Диагностика

Среднее время восстановления (Mean time to recovery)

Среднее время восстановления (Mean time to recovery): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
94
Диагностика

Доля неудачных изменений конвейера (Change failure rate pipeline)

Доля неудачных изменений конвейера (Change failure rate pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
95
Диагностика

Частота выпусков конвейера (Deployment frequency pipeline)

Частота выпусков конвейера (Deployment frequency pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
96
Диагностика

DORA для платформа данных (data platform)

DORA для платформа данных (data platform): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
97
Диагностика

Проверка надёжности конвейера (Reliability review pipeline)

Проверка надёжности конвейера (Reliability review pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
98
Диагностика

Проверка готовности к промышленной эксплуатации (Production readiness review)

Проверка готовности к промышленной эксплуатации (Production readiness review): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
99
Диагностика

Chaos engineering для конвейер данных (data pipeline)

Chaos engineering для конвейер данных (data pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
100
Диагностика

Внедрение отказов (Failure injection)

Внедрение отказов (Failure injection): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
101
Диагностика

Тест отключения источника

Тест отключения источника: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
102
Диагностика

Тест задержки сети

Тест задержки сети: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
103
Диагностика

Тест переполнения диска

Тест переполнения диска: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
104
Диагностика

Тест нехватки памяти

Тест нехватки памяти: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
105
Диагностика

Тест изменения схемы

Тест изменения схемы: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
106
Диагностика

Тест дублирования событий

Тест дублирования событий: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
107
Диагностика

Тест потери контрольная точка (checkpoint)

Тест потери контрольная точка (checkpoint): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
108
Диагностика

Синтетический мониторинг конвейера (Synthetic monitoring pipeline)

Синтетический мониторинг конвейера (Synthetic monitoring pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
109
Диагностика

Канареечный набор данных (Canary dataset)

Канареечный набор данных (Canary dataset): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
110
Диагностика

Теневой конвейер (Shadow pipeline)

Теневой конвейер (Shadow pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
111
Диагностика

Сине-зелёный конвейер данных (Blue green data pipeline)

Сине-зелёный конвейер данных (Blue green data pipeline): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
112
Диагностика

Сквозной контрольный сигнал данных (End-to-end data heartbeat)

Сквозной контрольный сигнал данных (End-to-end data heartbeat): сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
113
Диагностика

Мониторинг Apache Airflow: метрики и алерты

Мониторинг Apache Airflow: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
114
Диагностика

Мониторинг Dagster: метрики и алерты

Мониторинг Dagster: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
115
Диагностика

Мониторинг Prefect: метрики и алерты

Мониторинг Prefect: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
116
Диагностика

Мониторинг Kestra: метрики и алерты

Мониторинг Kestra: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
117
Диагностика

Мониторинг Flyte: метрики и алерты

Мониторинг Flyte: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
118
Диагностика

Мониторинг Mage: метрики и алерты

Мониторинг Mage: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
119
Диагностика

Мониторинг Metaflow: метрики и алерты

Мониторинг Metaflow: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
120
Диагностика

Мониторинг Apache DolphinScheduler: метрики и алерты

Мониторинг Apache DolphinScheduler: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
121
Диагностика

Мониторинг Apache NiFi: метрики и алерты

Мониторинг Apache NiFi: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
122
Диагностика

Мониторинг Airbyte: метрики и алерты

Мониторинг Airbyte: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
123
Диагностика

Мониторинг Fivetran: метрики и алерты

Мониторинг Fivetran: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
124
Диагностика

Мониторинг Meltano: метрики и алерты

Мониторинг Meltano: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
125
Диагностика

Мониторинг dlt: метрики и алерты

Мониторинг dlt: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
126
Диагностика

Мониторинг Talend Data Integration: метрики и алерты

Мониторинг Talend Data Integration: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
127
Диагностика

Мониторинг StreamSets: метрики и алерты

Мониторинг StreamSets: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
128
Диагностика

Мониторинг Matillion: метрики и алерты

Мониторинг Matillion: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
129
Диагностика

Мониторинг Estuary Flow: метрики и алерты

Мониторинг Estuary Flow: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
130
Диагностика

Мониторинг RudderStack: метрики и алерты

Мониторинг RudderStack: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
131
Диагностика

Мониторинг Twilio Segment: метрики и алерты

Мониторинг Twilio Segment: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
132
Диагностика

Мониторинг Apache Kafka: метрики и алерты

Мониторинг Apache Kafka: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
133
Диагностика

Мониторинг Confluent Platform: метрики и алерты

Мониторинг Confluent Platform: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
134
Диагностика

Мониторинг Apache Pulsar: метрики и алерты

Мониторинг Apache Pulsar: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
135
Диагностика

Мониторинг RabbitMQ: метрики и алерты

Мониторинг RabbitMQ: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
136
Диагностика

Мониторинг NATS: метрики и алерты

Мониторинг NATS: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
137
Диагностика

Мониторинг Amazon Kinesis: метрики и алерты

Мониторинг Amazon Kinesis: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
138
Диагностика

Мониторинг Azure Event Hubs: метрики и алерты

Мониторинг Azure Event Hubs: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
139
Диагностика

Мониторинг Google Cloud Pub/Sub: метрики и алерты

Мониторинг Google Cloud Pub/Sub: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
140
Диагностика

Мониторинг Yandex Data Streams: метрики и алерты

Мониторинг Yandex Data Streams: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
141
Диагностика

Мониторинг Apache Spark: метрики и алерты

Мониторинг Apache Spark: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
142
Диагностика

Мониторинг Apache Flink: метрики и алерты

Мониторинг Apache Flink: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
143
Диагностика

Мониторинг Apache Beam: метрики и алерты

Мониторинг Apache Beam: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
144
Диагностика

Мониторинг Apache Hadoop: метрики и алерты

Мониторинг Apache Hadoop: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
145
Диагностика

Мониторинг Ray: метрики и алерты

Мониторинг Ray: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
146
Диагностика

Мониторинг Dask: метрики и алерты

Мониторинг Dask: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
147
Диагностика

Мониторинг Polars: метрики и алерты

Мониторинг Polars: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
148
Диагностика

Мониторинг DuckDB: метрики и алерты

Мониторинг DuckDB: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
149
Диагностика

Мониторинг Trino: метрики и алерты

Мониторинг Trino: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
150
Диагностика

Мониторинг Kafka Connect: метрики и алерты

Мониторинг Kafka Connect: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
151
Диагностика

Мониторинг AWS Database Migration Service: метрики и алерты

Мониторинг AWS Database Migration Service: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
152
Диагностика

Мониторинг Yandex Data Transfer: метрики и алерты

Мониторинг Yandex Data Transfer: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
153
Диагностика

Мониторинг Oracle GoldenGate: метрики и алерты

Мониторинг Oracle GoldenGate: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
154
Диагностика

Мониторинг Qlik Replicate: метрики и алерты

Мониторинг Qlik Replicate: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
155
Диагностика

Мониторинг dbt Core: метрики и алерты

Мониторинг dbt Core: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
156
Диагностика

Мониторинг SQLMesh: метрики и алерты

Мониторинг SQLMesh: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
157
Диагностика

Мониторинг Google Cloud Dataform: метрики и алерты

Мониторинг Google Cloud Dataform: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
158
Диагностика

Мониторинг Soda Core: метрики и алерты

Мониторинг Soda Core: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
159
Диагностика

Мониторинг Great Expectations: метрики и алерты

Мониторинг Great Expectations: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
160
Диагностика

Мониторинг Deequ: метрики и алерты

Мониторинг Deequ: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
161
Диагностика

Мониторинг Pandera: метрики и алерты

Мониторинг Pandera: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
162
Диагностика

Мониторинг Elementary: метрики и алерты

Мониторинг Elementary: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
163
Диагностика

Мониторинг OpenLineage: метрики и алерты

Мониторинг OpenLineage: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
164
Диагностика

Мониторинг Marquez: метрики и алерты

Мониторинг Marquez: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
165
Диагностика

Мониторинг DataHub: метрики и алерты

Мониторинг DataHub: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
166
Диагностика

Мониторинг Monte Carlo: метрики и алерты

Мониторинг Monte Carlo: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
167
Диагностика

Мониторинг Datadog Наблюдаемость данных (Data Observability): метрики и алерты

Мониторинг Datadog Наблюдаемость данных (Data Observability): метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
168
Диагностика

Мониторинг Prometheus: метрики и алерты

Мониторинг Prometheus: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
169
Диагностика

Мониторинг Grafana: метрики и алерты

Мониторинг Grafana: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
170
Диагностика

Мониторинг Apache Iceberg: метрики и алерты

Мониторинг Apache Iceberg: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
171
Диагностика

Мониторинг Delta Lake: метрики и алерты

Мониторинг Delta Lake: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
172
Диагностика

Мониторинг Apache Hudi: метрики и алерты

Мониторинг Apache Hudi: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
173
Диагностика

Мониторинг lakeFS: метрики и алерты

Мониторинг lakeFS: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
174
Диагностика

Мониторинг Confluent Реестр схем (Schema Registry): метрики и алерты

Мониторинг Confluent Реестр схем (Schema Registry): метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
175
Диагностика

Мониторинг Apicurio Registry: метрики и алерты

Мониторинг Apicurio Registry: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
176
Диагностика

Мониторинг Protocol Buffers: метрики и алерты

Мониторинг Protocol Buffers: метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
177
Диагностика

Мониторинг Формат Apache Avro (Apache Avro): метрики и алерты

Мониторинг Формат Apache Avro (Apache Avro): метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →
178
Диагностика

Мониторинг Формат Apache Parquet (Apache Parquet): метрики и алерты

Мониторинг Формат Apache Parquet (Apache Parquet): метрики и алерты: сигналы, происхождение данных (lineage) и диагностика влияния отказа, практическая схема реализации, контрольные точки и границы применения в промышленном конвейере данных (production data pipeline).

Открыть материал →