Архитектура медальона, Проектирование с помощью Delta Lake и Spark, Стренгхольт П., 2026

Архитектура медальона, Проектирование с помощью Delta Lake и Spark, Стренгхольт П., 2026.

   Объемы данных растут экспоненциально, а опасность оказаться в «болоте данных» (data swamp) подстерегает на каждом шагу? Чтобы получить ценную аналитику, которая обеспечит конкурентное преимущество, можно обратиться к проверенной модели архитектуры медальона. Однако реализовать надежную архитектуру данных довольно сложно, особенно бронзовый, серебряный и золотой уровни.
Опираясь на свой богатый практический опыт, Питхейн Стренгхольт развеивает распространенные заблуждения и объясняет сложные проблемы, с которыми вы столкнетесь, начиная работу над новой архитектурой данных. Архитекторы и инженеры любого профиля найдут здесь ответы на свои частые вопросы, а также юзкейсы реальных компаний с примерами того, что сработало, а что нет и почему.
Вы получаете не очередную «теорию уровней», а полное практическое руководство, позволяющее разобраться, как правильно проектировать и реализовывать каждый уровень на Microsoft Fabric и Azure Databricks (с готовыми примерами кода и GitHub-репозиторием); реальные кейсы внедрения в АР Pension, Amadeus и ZEISS; рекомендации о том, как вписать медальон в data mesh; разбор таких вопросов, как контракты данных, безопасность и генеративный ИИ (включая RAG и работу с неструктурированными данными).
Для дата-инженеров, архитекторов данных, глав дата-офисов и всех, кто устал от «еще одного озера, которое никто не может использовать».




Область промежуточного хранения.
Область, или уровень, промежуточного хранения может быть реализована разными способами, которые не ограничиваются реляционными базами данных и файловыми репозиториями. Реляционные базы данных гибкие, но дорогие. Файловые репозитории дешевы, но ограничены по функциональности. Области промежуточного хранения также обычно используются для хранения исторических копий. Это полезно для повторного воспроизведения сценариев, когда поврежденное хранилище данных необходимо восстановить. Количество старых поставок данных (исторических копий) в разных областях промежуточного хранения разных организаций может различаться. Мне знакомы сценарии, когда все поставки данных, включая исправления, должны были храниться для целей аудита в течение нескольких лет. И наоборот, я видел, как область промежуточного хранения очищалась после успешной обработки или по истечении фиксированного периода времени. В этом контексте очистка производится для снижения затрат на хранение или может быть обусловлена требованиями к управлению данными.

Сложности с извлечением и промежуточным хранением связаны с тем, что разные системы-источники могут использовать разные типы формата данных. Следовательно, реальный процесс загрузки данных будет значительно изменяться в зависимости от типа источника данных. Некоторые системы допускают прямые обращения к базе данных, другие требуют, чтобы загрузка, или прием (ingestion), данных производилась через API. Несмотря на технологические достижения, многие процессы сбора данных продолжают зависеть от извлечения файлов, поскольку этот способ оказался более экономичным и простым в реализации для больших объемов данных.

ОГЛАВЛЕНИЕ.
От издательства.
О научном редакторе русского издания.
Предисловие.
Введение.
Для кого эта книга.
Структура книги.
Условные обозначения.
Использование исходного кода примеров.
Благодарности.
ЧАСТЬ I ОСНОВНЫЕ ПРИНЦИПЫ АРХИТЕКТУРЫ МЕДАЛЬОНА.
Глава 1. Эволюция архитектуры данных.
Глава 2. Закладка фундамента.
Глава 3. Секреты архитектуры медальона.
ЧАСТЬ II ПОСТРОЕНИЕ УРОВНЕЙ МЕДАЛЬОНА.
Глава 4. Строим основу архитектуры медальона с посмощью Microsoft Fabric.
Глава 5. Строим бронзовый уровень.
Глава 6. Строим серебряный уровень.
Глава 7. Строим золотой уровень.
ЧАСТЬ III РЕАЛЬНЫЕ ПРИМЕРЫ.
Глава 8. Пример: данные, аналитика и бизнес-стратегия в AP Pension.
Глава 9. Пример: Amadeus, технологический лидер туристической отрасли.
Глава 10. Пример: стратегические преобразования данных в ZEISS.
ЧАСТЬ IV МАСШТАБИРОВАНИЕ, УПРАВЛЕНИЕ ДАННЫМИ И БУДУЩЕЕ АРХИТЕКТУР МЕДАЛЬОНА
Глава 11. Масштабирование архитектур медальона.
Глава 12. Управление данными и безопасность в архитектуре медальона.
Глава 13. Будущее архитектур медальона с генеративным ИИ.



Бесплатно скачать электронную книгу в удобном формате, смотреть и читать:
Скачать книгу Архитектура медальона, Проектирование с помощью Delta Lake и Spark, Стренгхольт П., 2026 - fileskachat.com, быстрое и бесплатное скачивание.

Скачать pdf
Ниже можно купить эту книгу, если она есть в продаже, и похожие книги по лучшей цене со скидкой с доставкой по всей России.Купить книги


Скачать - pdf - Яндекс.Диск.




Теги: учебник по информатике :: информатика :: компьютеры :: Стренгхольт