![Building an Event-Driven Data Mesh Adam Bellemare - okładka ebooka](https://static01.helion.com.pl/global/okladki/326x466/e_37pr.png)
![Building an Event-Driven Data Mesh Adam Bellemare - tył okładki ebooka](https://static01.helion.com.pl/global/okladki-tyl/326x466/e_37pr.png)
- Ocena:
- Bądź pierwszym, który oceni tę książkę
- Stron:
- 262
- Dostępne formaty:
-
ePubMobi
Opis ebooka: Building an Event-Driven Data Mesh
The exponential growth of data combined with the need to derive real-time business value is a critical issue today. An event-driven data mesh can power real-time operational and analytical workloads, all from a single set of data product streams. With practical real-world examples, this book shows you how to successfully design and build an event-driven data mesh.
Building an Event-Driven Data Mesh provides:
- Practical tips for iteratively building your own event-driven data mesh, including hurdles you'll experience, possible solutions, and how to obtain real value as soon as possible
- Solutions to pitfalls you may encounter when moving your organization from monoliths to event-driven architectures
- A clear understanding of how events relate to systems and other events in the same stream and across streams
- A realistic look at event modeling options, such as fact, delta, and command type events, including how these choices will impact your data products
- Best practices for handling events at scale, privacy, and regulatory compliance
- Advice on asynchronous communication and handling eventual consistency
Wybrane bestsellery
-
To praktyczny przewodnik, dzięki któremu samodzielnie ocenisz, jak dużą wartość biznesową mogą zyskać duże wolumeny danych, jeśli są wykorzystywane w organizacji przy użyciu architektury mikrousług opartych na zdarzeniach. Dowiesz się także, jak przygotować i przeprowadzić proces budowania organi...
Mikrousługi oparte na zdarzeniach. Wykorzystywanie danych w organizacji na dużą skalę Mikrousługi oparte na zdarzeniach. Wykorzystywanie danych w organizacji na dużą skalę
(34.50 zł najniższa cena z 30 dni)34.50 zł
69.00 zł(-50%) -
Organizations today often struggle to balance business requirements with ever-increasing volumes of data. Additionally, the demand for leveraging large-scale, real-time data is growing rapidly among the most competitive digital industries. Conventional system architectures may not be up to the ta...(173.84 zł najniższa cena z 30 dni)
173.74 zł
219.00 zł(-21%) -
Statystyka to dziedzina wiedzy, która bazuje na danych – przedmiotem jej zainteresowania są metody ich pozyskiwania i prezentacji, a przede wszystkim analizy. W ostatnich latach mocno zyskuje na popularności i dziś niemal każda uczelnia w Polsce oferuje możliwość studiowania na kierunku zwi...
Statystyka. Kurs video. Przewodnik dla studentów kierunków ścisłych Statystyka. Kurs video. Przewodnik dla studentów kierunków ścisłych
(70.95 zł najniższa cena z 30 dni)83.85 zł
129.00 zł(-35%) -
Mastering Data transformation is essential for enhancing their data models and business intelligence. The Definitive Guide to Power Query equips you with the knowledge and skills to master the tool while leveraging its remarkable capabilities.
The Definitive Guide to Power Query (M). Mastering complex data transformation with Power Query The Definitive Guide to Power Query (M). Mastering complex data transformation with Power Query
Gregory Deckler, Rick de Groot, Melissa de Korte, Brian Julius
-
Jeśli w swojej pracy masz lub miewasz do czynienia z danymi, z pewnością orientujesz się, że do tego celu stworzono dotąd całkiem sporo narzędzi. Nic dziwnego – przy tej liczbie danych, z jaką spotykamy się w dzisiejszym cyfrowym świecie, zdolność do ich sprawnego analizowania i wyciągania ...
Grafana. Kurs video. Monitorowanie, analiza i wizualizacja danych w czasie rzeczywistym Grafana. Kurs video. Monitorowanie, analiza i wizualizacja danych w czasie rzeczywistym
(39.90 zł najniższa cena z 30 dni)62.55 zł
139.00 zł(-55%) -
Oto praktyczny przewodnik po nauce o danych w miejscu pracy. Dowiesz się stąd wszystkiego, co ważne na początku Twojej drogi jako danologa: od osobowości, z którymi przyjdzie Ci pracować, przez detale analizy danych, po matematykę stojącą za algorytmami i uczeniem maszynowym. Nauczysz się myśleć ...
Analityk danych. Przewodnik po data science, statystyce i uczeniu maszynowym Analityk danych. Przewodnik po data science, statystyce i uczeniu maszynowym
(41.40 zł najniższa cena z 30 dni)41.40 zł
69.00 zł(-40%) -
Autorzy, Joe Reis i Matt Housley, przeprowadzą Cię przez cykl życia inżynierii danych i pokażą, jak połączyć różne technologie chmurowe, aby spełnić potrzeby konsumentów danych w dolnej części strumienia przetwarzania. Dzięki lekturze tej książki dowiesz się, jak zastosować koncepcje generowania,...
Inżynieria danych w praktyce. Kluczowe koncepcje i najlepsze technologie Inżynieria danych w praktyce. Kluczowe koncepcje i najlepsze technologie
(71.40 zł najniższa cena z 30 dni)71.40 zł
119.00 zł(-40%) -
Big data pokazuje, jak postęp technologiczny spowodowany rozwojem Internetu i cyfrowego wszechświata wpłynął na radykalną transformację nauki o danych. Czym są duże zbiory danych i jak zmieniają świat? Jaki mają wpływ na nasze codzienne życie, a jaki na świat biznesu? W tej książce czytelnik znaj...(19.25 zł najniższa cena z 30 dni)
12.55 zł
27.90 zł(-55%) -
W złożonej rzeczywistości myślenie systemowe jest kluczowym narzędziem pozwalającym odnieść się do licznych wyzwań: gospodarczych, ekologicznych, politycznych czy społecznych. Tylko w ten sposób w codziennych wiadomościach można dostrzec przejawy trendów, a w trendach — przeja...(29.94 zł najniższa cena z 30 dni)
29.94 zł
49.90 zł(-40%)
O autorze ebooka
Adam Bellemare jest inżynierem kadrowym platformy danych w firmie Shopify. Wcześniej był programistą w BlackBerry, gdzie zaczął zajmować się systemami opartymi na zdarzeniach. Zdobył duże doświadczenie z zakresu zarządzania technicznego, przetwarzania rozproszonego i asynchronicznego oraz inżynierii danych behawioralnych.
Ebooka "Building an Event-Driven Data Mesh" przeczytasz na:
-
czytnikach Inkbook, Kindle, Pocketbook, Onyx Boox i innych
-
systemach Windows, MacOS i innych
-
systemach Windows, Android, iOS, HarmonyOS
-
na dowolnych urządzeniach i aplikacjach obsługujących formaty: PDF, EPub, Mobi
Masz pytania? Zajrzyj do zakładki Pomoc »
Audiobooka "Building an Event-Driven Data Mesh" posłuchasz:
-
w aplikacji Ebookpoint na Android, iOS, HarmonyOs
-
na systemach Windows, MacOS i innych
-
na dowolnych urządzeniach i aplikacjach obsługujących format MP3 (pliki spakowane w ZIP)
Masz pytania? Zajrzyj do zakładki Pomoc »
Kurs Video "Building an Event-Driven Data Mesh" zobaczysz:
-
w aplikacjach Ebookpoint i Videopoint na Android, iOS, HarmonyOs
-
na systemach Windows, MacOS i innych z dostępem do najnowszej wersji Twojej przeglądarki internetowej
Szczegóły ebooka
- ISBN Ebooka:
- 978-10-981-2756-5, 9781098127565
- Data wydania ebooka:
-
2023-04-04
Data wydania ebooka często jest dniem wprowadzenia tytułu do sprzedaży i może nie być równoznaczna z datą wydania książki papierowej. Dodatkowe informacje możesz znaleźć w darmowym fragmencie. Jeśli masz wątpliwości skontaktuj się z nami sklep@ebookpoint.pl.
- Język publikacji:
- angielski
- Rozmiar pliku ePub:
- 6.4MB
- Rozmiar pliku Mobi:
- 14.6MB
Spis treści ebooka
- Preface
- Conventions Used in This Book
- OReilly Online Learning
- How to Contact Us
- Acknowledgments
- 1. Event-Driven Data Communication
- What Is Data Mesh?
- An Event-Driven Data Mesh
- Using Data in the Operational Plane
- The Data Monolith
- The Difficulties of Communicating Data for Operational Concerns
- Strategy 1: Replicate data between services
- Strategy 2: Use APIs to avoid data replication needs
- The Analytical Plane: Data Warehouses and Data Lakes
- The Organizational Impact of Schema on Read
- Problem 1: Violated data model boundaries
- Problem 2: Lack of single ownership
- Problem 3: Do-it-yourself and custom point-to-point data connections
- Bad Data: The Costs of Inaction
- Can We Unify Analytical and Operational Workflows?
- Rethinking Data with Data Mesh
- Common Objections to an Event-Driven Data Mesh
- Producers Cannot Model Data for Everyones Use Cases
- Making Multiple Copies of Data Is Bad
- There should only be a single master copy of the data, and all systems should reference it directly
- Its too computationally expensive to create, store, and update multiple copies of the same data
- Managing information security policies across systems and distributed data sets is too hard
- Eventual Consistency Is Too Difficult to Manage
- Summary
- 2. Data Mesh
- Principle 1: Domain Ownership
- Domain-Driven Design in Brief
- Selecting the Data to Expose from Your Domain
- Principle 1: Domain Ownership
- Principle 2: Data as a Product
- Data Products Provide Immutable and Time-Stamped Data
- Data Products Are Multimodal
- Accessing a Data Product Via Push or Pull
- The Three Data Product Alignment Types
- Source-aligned data products
- Aggregate-aligned data products
- Consumer-aligned data products
- Event-Driven Data Products as Inputs for Operational Systems
- Principle 3: Federated Governance
- Specifying Data Product Language, Framework, and API Support
- Establishing Data Product Life Cycle Requirements
- Establishing Data Handling and Infosec Policies
- Identifying and Standardizing Cross-Domain Polysemes
- Formalizing Self-Service Platform Requirements
- Principle 4: Self-Service Platform
- Discovering Data Products and Dependencies
- Data Product Management Controls
- Data Product Access Controls
- Compute and Storage Resources for Building and Using Data Products
- Providing Self-Service Through SaaS
- Summary
- 3. Event Streams for Data Mesh
- Events, Messages, and Records
- Whats an Event Stream? What Is It Not?
- Ephemeral Message-Passing
- Queuing
- Consuming and Using Event-Driven Data Products
- State Events and Event-Carried State Transfer
- Materializing Events
- Aggregating Events
- The Kappa Architecture
- The Lambda Architecture and Why It Doesnt Work for Data Mesh
- Supporting the Requirements for Kappa Architecture
- Selecting an Event Broker
- Summary
- 4. Federated Governance
- Forming a Federated Governance Team
- Implementing Standards
- Supporting Multimodal Data Product Types
- Supporting Data Product Schemas
- Supporting Programming Languages and Frameworks
- Metadata Standards and Requirements
- Domain and owner
- Tiered service levels
- Data quality classifications
- Privacy, financial, and custom tagging
- Upstream metadata dependencies
- Metadata wrap-up example
- Ensuring Cross-Domain Data Product Compatibility
and Interoperability
- Defining and Using Common Entities
- Event Stream Keying and Partitioning
- Time and Time Zones
- What Does a Governance Meeting Look Like?
- 1. Identifying Existing Problems
- 2. Drafting Proposals
- 3. Reviewing Proposals
- 4. Implementing Proposals
- 5. Archiving Proposals
- Data Security and Access Policies
- Disable Data Product Access by Default
- Consider End-to-End Encryption
- Field-Level Encryption
- Data Privacy, the Right to Be Forgotten, and Crypto-Shredding
- Data Product Lineage
- Topology-Based Lineage
- Record-Based Lineage
- Summary
- 5. Self-Service Data Platform
- The Self-Service Platform Maturity Model
- Level 1: The Minimal Viable Platform
- The Schema Registry
- An Extremely Basic Metadata Catalog
- Connectors
- Level 1 Wrap-Up: How Does It Work?
- Level 2: The Expanded Platform
- Full-Featured Metadata Catalog
- The Data Product Management Service and UI
- Service and User Identities
- Basic Access Controls
- Stream Processing for Building Data Products
- Level 2 Wrap-Up: How Does It Work?
- Level 3: The Mature Platform
- Authentication, Identification, and Access Management
- Integration with Existing Application Delivery Processes
- Programmatic Data Product Management API
- Monitoring and Alerting
- Multiregion and Multicloud Data Products
- Level 3 Wrap-Up: How Does It Work?
- Summary
- 6. Event Schemas
- A Brief Introduction to Serialization and Deserialization
- What Is a Schema?
- What Are Our Schema Technology Options?
- Googles Protocol Buffers, aka Protobuf
- Apache Avro
- JSON Schema
- Schema Evolution: Changing Your Schemas Through Time
- Negotiating a Breaking Schema Change
- Step 1: Design the New Data Model
- Step 2: Iterate with Your Existing Consumers and the Federated Governance Team
- Step 3. Create a Release Schedule, a Data Migration Plan, and a Deprecation Plan
- Step 4. Execute the Release
- The Role of the Schema Registry
- Best Practices for Managing Schemas in Your Codebase
- Choosing a Schema Technology
- Summary
- 7. Designing Events
- Introduction to Event Types
- Expanding on State Events and Event-Carried
State Transfer
- Current State Events
- Before/After State Events
- Delta Events
- Event Sourcing with Delta Events
- Why Delta Events Dont Work for Event-Driven Data Products
- There is an infinite set of possible event types
- The logic to interpret the events must be replicated to each consumer
- These events map poorly to event streams
- Inversion of ownership: Consumers put their business logic into the producer
- Inability to maintain historical data without excessive complications
- Measurement Events
- Measurement Events Often Form Aggregate-Aligned Data Products
- Measurement Event Sources May Be Lossy
- Measurement Events May Power Time-Sensitive Applications
- Hybrid EventsState with a Bit of Delta
- Notification Events
- Summary
- 8. Bootstrapping Data Products
- Getting Started: Bootstrapping with Connectors
- Dual Writes
- Polling the Database to Create Data Products
- Change-Data Capture
- Change-Data Capture Using a Transactional Outbox
- Denormalization and Eventification
- Eventification at the Transactional Outbox
- Eventification in a Dedicated Service
- What Should Go In the Event? And What Should Stay Out?
- Slowly Changing Dimensions
- Type 1: Overwrite with the new value
- Type 2: Append the new value
- Bootstrapping Cloud Storage Files to an Event Stream
- Summary
- 9. Integrating Event-Driven Data
into Data at Rest
- Analytics and the Medallion Architecture
- Connecting Event Streams Into Existing Batch-Data Flows
- Through the Lens of Data Mesh: Whats Going On?
- Through the Lens of Data Mesh: How Do We Solve It?
- Balancing File Sizes, SLAs, and Latency
- Budget Blues: A Tale of Overspending
- Extending the Self-Service Platform for Nonstreaming Data Products
- Summary
- 10. Eventual Consistency
- Converging on Consistency, One Event at a Time
- Strategies for Dealing with Eventual Consistency
- Prevent Failures to Avoid Inconsistency
- Use Event-Driven Data Products Instead of Request-Response Server API Calls
- Expose Eventual Consistency in the Server Response
- Plan for New Services and Reprocessing of Data
- Synchronize Data Products on Time Boundaries
- Out-of-Order Events
- Resolving Late-Arriving Events
- Summary
- 11. Bringing It All Together
- Event Streams for Data Mesh
- Integrating with Existing Systems
- Operations, Analytics, and Everything in Between
- Summary
- Index
O'Reilly Media - inne książki
-
Keeping up with the Python ecosystem can be daunting. Its developer tooling doesn't provide the out-of-the-box experience native to languages like Rust and Go. When it comes to long-term project maintenance or collaborating with others, every Python project faces the same problem: how to build re...(201.03 zł najniższa cena z 30 dni)
200.93 zł
239.00 zł(-16%) -
Bringing a deep-learning project into production at scale is quite challenging. To successfully scale your project, a foundational understanding of full stack deep learning, including the knowledge that lies at the intersection of hardware, software, data, and algorithms, is required.This book il...(241.36 zł najniższa cena z 30 dni)
241.26 zł
289.00 zł(-17%) -
Frontend developers have to consider many things: browser compatibility, usability, performance, scalability, SEO, and other best practices. But the most fundamental aspect of creating websites is one that often falls short: accessibility. Accessibility is the cornerstone of any website, and if a...(200.59 zł najniższa cena z 30 dni)
200.09 zł
239.00 zł(-16%) -
In this insightful and comprehensive guide, Addy Osmani shares more than a decade of experience working on the Chrome team at Google, uncovering secrets to engineering effectiveness, efficiency, and team success. Engineers and engineering leaders looking to scale their effectiveness and drive tra...(114.93 zł najniższa cena z 30 dni)
114.88 zł
149.00 zł(-23%) -
Data modeling is the single most overlooked feature in Power BI Desktop, yet it's what sets Power BI apart from other tools on the market. This practical book serves as your fast-forward button for data modeling with Power BI, Analysis Services tabular, and SQL databases. It serves as a starting ...(199.08 zł najniższa cena z 30 dni)
198.88 zł
239.00 zł(-17%) -
C# is undeniably one of the most versatile programming languages available to engineers today. With this comprehensive guide, you'll learn just how powerful the combination of C# and .NET can be. Author Ian Griffiths guides you through C# 12.0 and .NET 8 fundamentals and techniques for building c...(241.02 zł najniższa cena z 30 dni)
240.92 zł
289.00 zł(-17%) -
Learn how to get started with Futures Thinking. With this practical guide, Phil Balagtas, founder of the Design Futures Initiative and the global Speculative Futures network, shows you how designers and futurists have made futures work at companies such as Atari, IBM, Apple, Disney, Autodesk, Luf...(148.10 zł najniższa cena z 30 dni)
148.00 zł
179.00 zł(-17%) -
Augmented Analytics isn't just another book on data and analytics; it's a holistic resource for reimagining the way your entire organization interacts with information to become insight-driven.Moving beyond traditional, limited ways of making sense of data, Augmented Analytics provides a dynamic,...(174.74 zł najniższa cena z 30 dni)
174.54 zł
219.00 zł(-20%) -
Learn how to prepare for—and pass—the Kubernetes and Cloud Native Associate (KCNA) certification exam. This practical guide serves as both a study guide and point of entry for practitioners looking to explore and adopt cloud native technologies. Adrián González Sánchez ...
Kubernetes and Cloud Native Associate (KCNA) Study Guide Kubernetes and Cloud Native Associate (KCNA) Study Guide
(169.14 zł najniższa cena z 30 dni)177.65 zł
199.00 zł(-11%) -
Python is an excellent way to get started in programming, and this clear, concise guide walks you through Python a step at a time—beginning with basic programming concepts before moving on to functions, data structures, and object-oriented design. This revised third edition reflects the gro...(140.34 zł najniższa cena z 30 dni)
140.14 zł
179.00 zł(-22%)
Dzieki opcji "Druk na żądanie" do sprzedaży wracają tytuły Grupy Helion, które cieszyły sie dużym zainteresowaniem, a których nakład został wyprzedany.
Dla naszych Czytelników wydrukowaliśmy dodatkową pulę egzemplarzy w technice druku cyfrowego.
Co powinieneś wiedzieć o usłudze "Druk na żądanie":
- usługa obejmuje tylko widoczną poniżej listę tytułów, którą na bieżąco aktualizujemy;
- cena książki może być wyższa od początkowej ceny detalicznej, co jest spowodowane kosztami druku cyfrowego (wyższymi niż koszty tradycyjnego druku offsetowego). Obowiązująca cena jest zawsze podawana na stronie WWW książki;
- zawartość książki wraz z dodatkami (płyta CD, DVD) odpowiada jej pierwotnemu wydaniu i jest w pełni komplementarna;
- usługa nie obejmuje książek w kolorze.
Masz pytanie o konkretny tytuł? Napisz do nas: sklep[at]helion.pl.
Książka, którą chcesz zamówić pochodzi z końcówki nakładu. Oznacza to, że mogą się pojawić drobne defekty (otarcia, rysy, zagięcia).
Co powinieneś wiedzieć o usłudze "Końcówka nakładu":
- usługa obejmuje tylko książki oznaczone tagiem "Końcówka nakładu";
- wady o których mowa powyżej nie podlegają reklamacji;
Masz pytanie o konkretny tytuł? Napisz do nas: sklep[at]helion.pl.
Książka drukowana
![Loader](https://static01.helion.com.pl/ebookpoint/img/ajax-loader.gif)
![ajax-loader](https://static01.helion.com.pl/ebookpoint/img/ajax-loader.gif)
Oceny i opinie klientów: Building an Event-Driven Data Mesh Adam Bellemare (0)
Weryfikacja opinii następuję na podstawie historii zamówień na koncie Użytkownika umieszczającego opinię. Użytkownik mógł otrzymać punkty za opublikowanie opinii uprawniające do uzyskania rabatu w ramach Programu Punktowego.