Выбирайте свой путь с Unity Catalog: Delta Lake + Iceberg

Unity Catalog обеспечивает управление, безопасность и совместимость между Delta Lake, Apache Iceberg, данными и рабочими нагрузками ИИ. Скотт Хейнс и Роберт Пак, разработчики-евангелисты из Databricks, объясняют, как Unity Catalog управляет метаданными, разрешениями, правами собственности, происхождением и кратковременными учетными данными в таблицах, представлениях, представлениях метрик, томах, функциях и моделях. В докладе рассматриваются детальный контроль доступа, механизмы политик, такие как Cedar, потоки событий OpenLineage, транзакции на стороне сервера и метки, принадлежащие каталогу, для метаданных, таких как персональные данные и идентификаторы центров затрат. В докладе также рассматриваются планирование сканирования на стороне сервера и транзакции, представленные в версии 0.5, предварительный обзор экспериментальной поддержки Iceberg, запланированной на версию 0.7, и обсуждается будущая конвергенция между Iceberg v4 и Delta v5 посредством адаптивных деревьев метаданных. Мероприятие: Open Lakehouse + встреча разработчиков ИИ в Париже Дата: 23 сентября 2026 г. #UnityCatalog #DeltaLake #ApacheIceberg