Apache Iceberg: Индиана Джонс и Каталог судьбы в Lakehouse

Дата публикации: 20-09-2026 13:03:35

В феврале этого года проект с красивым именем Polaris незаметно стал полноценным проектом фонда Apache. Новость прошла как-то мимо, ну стал и стал, мало ли. Между тем это одна из тех новостей, которые лет через пять, возможно, будут называть поворотной точкой. Потому что Polaris — это каталог. А каталог в мире Iceberg — то самое место, где на самом деле лежит власть над вашими данными.Звучит громко, понимаю. Поясню, откуда такая уверенность.Последние несколько лет хранилища данных строят по новой схеме: файлы лежат в объектном хранилище, поверх них открытый формат в виде метаданных, движки обработки живут отдельно в виде федеративного обработчика и ходят за данными. Схему назвали лейкхаусом (Data LakeHouse), а формат в ней почти везде один и тот же — Apache Iceberg. Вендоры за него отвоевались, открыли и согласовали, и все выдохнули. Данные наконец-то ничьи (формат parquet): лежат у вас, читаются чем угодно, никакой платформы-хозяина.Выдохнули рано. Зависимость от вендора никуда не делась, она переехала на другой уровень — в каталог. Сервис с виду лаконичный, держит одну-единственную вещь, указатель на актуальную версию таблицы. Заодно через него идут права доступа и временные ключи от хранилища. Получается, кто держит каталог, тот и решает, какие движки увидят ваши данные, а какие останутся снаружи.Начнём даже не с каталогов, а на шаг раньше — с того, что такое вообще Iceberg, вокруг которого последний год прыгают все вендоры. Читать далее

Схожие новости

#	Наименование новости	Тональность	Информативность	Дата публикации
1	Платформа данных на минималках. Часть 2. Практика: разворачиваем и настраиваем каталог метаданных	0	8.35	19-08-2026
2	Postgresso #5 (90)	0	6	08-07-2026
3	Postgresso #5 (90)	1	11.73	08-07-2026
4	Промышленный Lakehouse на Машине больших данных Скала^р: минимум настройки, максимум данных	0	6.13	21-05-2026
5	Why AI Will Reward Open Data Architectures, and Not Closed Platforms	0	6	07-07-2026
6	Как новые сущности Arenadata Catalog превращают данные в управляемый актив	0	8.83	24-06-2026
7	Как мы перестали гонять данные туда-сюда и подружили OLTP с аналитикой: знакомьтесь, Postgres Pro AXE	5	7	23-06-2026
8	Как уронить базу данных	0	6.72	17-08-2026
9	ClickHouse: сценарии, сильные стороны, лучшие практики работы в 2026 году	0	10.84	21-07-2026

Классификация: . Схожих патентов: 0. Схожих новостей: 9. Тональность: 0. Информативность: 7.86. Источник: habr.com.