Apache Iceberg: Индиана Джонс и Каталог судьбы

Автор популярно объясняет, что такое Apache Iceberg и почему его каталог — ключевой компонент. Файлы Parquet могут храниться в открытом формате, но без правильного каталога вы увидите лишь мусор из файлов. Каталог определяет, какие таблицы доступны и кто к ним имеет доступ.

Для медиа-архивов и киностудий, работающих с большими объёмами данных (исходники, метаданные, эффекты), понимание каталогизации критично. Текст даёт базовое представление о том, как Iceberg решает проблему согласованности и безопасности данных. Подробности — на Хабре.