- Ocena:
- Bądź pierwszym, który oceni tę książkę
- Stron:
- 262
- Dostępne formaty:
-
ePubMobi
Opis ebooka: Building an Event-Driven Data Mesh
The exponential growth of data combined with the need to derive real-time business value is a critical issue today. An event-driven data mesh can power real-time operational and analytical workloads, all from a single set of data product streams. With practical real-world examples, this book shows you how to successfully design and build an event-driven data mesh.
Building an Event-Driven Data Mesh provides:
- Practical tips for iteratively building your own event-driven data mesh, including hurdles you'll experience, possible solutions, and how to obtain real value as soon as possible
- Solutions to pitfalls you may encounter when moving your organization from monoliths to event-driven architectures
- A clear understanding of how events relate to systems and other events in the same stream and across streams
- A realistic look at event modeling options, such as fact, delta, and command type events, including how these choices will impact your data products
- Best practices for handling events at scale, privacy, and regulatory compliance
- Advice on asynchronous communication and handling eventual consistency
Wybrane bestsellery
-
To praktyczny przewodnik, dzięki któremu samodzielnie ocenisz, jak dużą wartość biznesową mogą zyskać duże wolumeny danych, jeśli są wykorzystywane w organizacji przy użyciu architektury mikrousług opartych na zdarzeniach. Dowiesz się także, jak przygotować i przeprowadzić proces budowania organi...
Mikrousługi oparte na zdarzeniach. Wykorzystywanie danych w organizacji na dużą skalę Mikrousługi oparte na zdarzeniach. Wykorzystywanie danych w organizacji na dużą skalę
(29.90 zł najniższa cena z 30 dni)34.50 zł
69.00 zł(-50%) -
Organizations today often struggle to balance business requirements with ever-increasing volumes of data. Additionally, the demand for leveraging large-scale, real-time data is growing rapidly among the most competitive digital industries. Conventional system architectures may not be up to the ta...(186.15 zł najniższa cena z 30 dni)
186.15 zł
219.00 zł(-15%) -
Mastering Data transformation is essential for enhancing their data models and business intelligence. The Definitive Guide to Power Query equips you with the knowledge and skills to master the tool while leveraging its remarkable capabilities.
The Definitive Guide to Power Query (M). Mastering complex data transformation with Power Query The Definitive Guide to Power Query (M). Mastering complex data transformation with Power Query
Gregory Deckler, Rick de Groot, Melissa de Korte, Brian Julius
-
Jeśli w swojej pracy masz lub miewasz do czynienia z danymi, z pewnością orientujesz się, że do tego celu stworzono dotąd całkiem sporo narzędzi. Nic dziwnego – przy tej liczbie danych, z jaką spotykamy się w dzisiejszym cyfrowym świecie, zdolność do ich sprawnego analizowania i wyciągania ...
Grafana. Kurs video. Monitorowanie, analiza i wizualizacja danych w czasie rzeczywistym Grafana. Kurs video. Monitorowanie, analiza i wizualizacja danych w czasie rzeczywistym
(39.90 zł najniższa cena z 30 dni)39.90 zł
139.00 zł(-71%) -
Dzisiejszą gospodarką rządzi informacja. Kto potrafi ją wyłuskać z zalewu danych, ten zyskuje konkurencyjną przewagę. Świadomi tego twórcy oprogramowania komputerowego stworzyli szereg narzędzi służących wyszukiwaniu informacji, ich przetwarzaniu, analizowaniu i prezentowaniu w sposób dostępny dl...
Elasticsearch. Kurs video. Pozyskiwanie i analiza danych Elasticsearch. Kurs video. Pozyskiwanie i analiza danych
(39.90 zł najniższa cena z 30 dni)99.59 zł
249.00 zł(-60%) -
Power Apps to platforma stworzona przez Microsoft, umożliwiająca łatwe projektowanie, tworzenie i dostosowywanie aplikacji bez konieczności posiadania głębokiej wiedzy programistycznej. Z użyciem Power Apps można budować niestandardowe aplikacje, które efektywnie wspierają i automatyzują różne pr...
Power Apps. Kurs video. Tworzenie biznesowych aplikacji no-code Power Apps. Kurs video. Tworzenie biznesowych aplikacji no-code
(39.90 zł najniższa cena z 30 dni)69.65 zł
199.00 zł(-65%) -
Tę książkę docenią wszyscy zainteresowani eksploracją danych i uczeniem maszynowym, którzy chcieliby pewnie poruszać się w świecie nauki o danych. Pokazano tu, w jaki sposób Excel pozwala zobrazować proces ich eksplorowania i jak działają poszczególne techniki w tym zakresie. Przejrzyście wyjaśni...
Eksploracja danych za pomocą Excela. Metody uczenia maszynowego krok po kroku Eksploracja danych za pomocą Excela. Metody uczenia maszynowego krok po kroku
(40.20 zł najniższa cena z 30 dni)46.90 zł
67.00 zł(-30%) -
Oto zwięzłe i równocześnie praktyczne kompendium, w którym znajdziesz 20 praktyk udanego planowania, analizy, specyfikacji, walidacji i zarządzania wymaganiami. Praktyki te są odpowiednie dla projektów zarządzanych zarówno w tradycyjny, jak i zwinny sposób, niezależnie od branży. Sprawią, że zesp...
Specyfikacja wymagań oprogramowania. Kluczowe praktyki analizy biznesowej Specyfikacja wymagań oprogramowania. Kluczowe praktyki analizy biznesowej
(40.20 zł najniższa cena z 30 dni)46.90 zł
67.00 zł(-30%) -
W dzisiejszej praktyce biznesowej duże znaczenie mają dane i ich analiza. W analizie zastosowanie znajduje wiele modeli statystycznych, implementowanych w różnych programach komputerowych. Na przykład Excel ma specjalny dodatek, nazwany po prostu Analiza Danych. Bardzo popularne narzędzie stanowi...
R i pakiet shiny. Kurs video. Interaktywne aplikacje w analizie danych R i pakiet shiny. Kurs video. Interaktywne aplikacje w analizie danych
(39.90 zł najniższa cena z 30 dni)74.50 zł
149.00 zł(-50%) -
Oto drugie, zaktualizowane i uzupełnione wydanie przewodnika po bibliotece Pandas. Dzięki tej przystępnej książce nauczysz się w pełni korzystać z możliwości oferowanych przez bibliotekę, nawet jeśli dopiero zaczynasz przygodę z analizą danych w Pythonie. Naukę rozpoczniesz z użyciem rzeczywisteg...
Jak analizować dane z biblioteką Pandas. Praktyczne wprowadzenie. Wydanie II Jak analizować dane z biblioteką Pandas. Praktyczne wprowadzenie. Wydanie II
(65.40 zł najniższa cena z 30 dni)76.30 zł
109.00 zł(-30%)
O autorze ebooka
Adam Bellemare jest inżynierem kadrowym platformy danych w firmie Shopify. Wcześniej był programistą w BlackBerry, gdzie zaczął zajmować się systemami opartymi na zdarzeniach. Zdobył duże doświadczenie z zakresu zarządzania technicznego, przetwarzania rozproszonego i asynchronicznego oraz inżynierii danych behawioralnych.
Ebooka "Building an Event-Driven Data Mesh" przeczytasz na:
-
czytnikach Inkbook, Kindle, Pocketbook, Onyx Boox i innych
-
systemach Windows, MacOS i innych
-
systemach Windows, Android, iOS, HarmonyOS
-
na dowolnych urządzeniach i aplikacjach obsługujących formaty: PDF, EPub, Mobi
Masz pytania? Zajrzyj do zakładki Pomoc »
Audiobooka "Building an Event-Driven Data Mesh" posłuchasz:
-
w aplikacji Ebookpoint na Android, iOS, HarmonyOs
-
na systemach Windows, MacOS i innych
-
na dowolnych urządzeniach i aplikacjach obsługujących format MP3 (pliki spakowane w ZIP)
Masz pytania? Zajrzyj do zakładki Pomoc »
Kurs Video "Building an Event-Driven Data Mesh" zobaczysz:
-
w aplikacjach Ebookpoint i Videopoint na Android, iOS, HarmonyOs
-
na systemach Windows, MacOS i innych z dostępem do najnowszej wersji Twojej przeglądarki internetowej
Szczegóły ebooka
- ISBN Ebooka:
- 978-10-981-2756-5, 9781098127565
- Data wydania ebooka:
- 2023-04-04 Data wydania ebooka często jest dniem wprowadzenia tytułu do sprzedaży i może nie być równoznaczna z datą wydania książki papierowej. Dodatkowe informacje możesz znaleźć w darmowym fragmencie. Jeśli masz wątpliwości skontaktuj się z nami sklep@ebookpoint.pl.
- Język publikacji:
- angielski
- Rozmiar pliku ePub:
- 6.4MB
- Rozmiar pliku Mobi:
- 14.6MB
Spis treści ebooka
- Preface
- Conventions Used in This Book
- OReilly Online Learning
- How to Contact Us
- Acknowledgments
- 1. Event-Driven Data Communication
- What Is Data Mesh?
- An Event-Driven Data Mesh
- Using Data in the Operational Plane
- The Data Monolith
- The Difficulties of Communicating Data for Operational Concerns
- Strategy 1: Replicate data between services
- Strategy 2: Use APIs to avoid data replication needs
- The Analytical Plane: Data Warehouses and Data Lakes
- The Organizational Impact of Schema on Read
- Problem 1: Violated data model boundaries
- Problem 2: Lack of single ownership
- Problem 3: Do-it-yourself and custom point-to-point data connections
- Bad Data: The Costs of Inaction
- Can We Unify Analytical and Operational Workflows?
- Rethinking Data with Data Mesh
- Common Objections to an Event-Driven Data Mesh
- Producers Cannot Model Data for Everyones Use Cases
- Making Multiple Copies of Data Is Bad
- There should only be a single master copy of the data, and all systems should reference it directly
- Its too computationally expensive to create, store, and update multiple copies of the same data
- Managing information security policies across systems and distributed data sets is too hard
- Eventual Consistency Is Too Difficult to Manage
- Summary
- 2. Data Mesh
- Principle 1: Domain Ownership
- Domain-Driven Design in Brief
- Selecting the Data to Expose from Your Domain
- Principle 1: Domain Ownership
- Principle 2: Data as a Product
- Data Products Provide Immutable and Time-Stamped Data
- Data Products Are Multimodal
- Accessing a Data Product Via Push or Pull
- The Three Data Product Alignment Types
- Source-aligned data products
- Aggregate-aligned data products
- Consumer-aligned data products
- Event-Driven Data Products as Inputs for Operational Systems
- Principle 3: Federated Governance
- Specifying Data Product Language, Framework, and API Support
- Establishing Data Product Life Cycle Requirements
- Establishing Data Handling and Infosec Policies
- Identifying and Standardizing Cross-Domain Polysemes
- Formalizing Self-Service Platform Requirements
- Principle 4: Self-Service Platform
- Discovering Data Products and Dependencies
- Data Product Management Controls
- Data Product Access Controls
- Compute and Storage Resources for Building and Using Data Products
- Providing Self-Service Through SaaS
- Summary
- 3. Event Streams for Data Mesh
- Events, Messages, and Records
- Whats an Event Stream? What Is It Not?
- Ephemeral Message-Passing
- Queuing
- Consuming and Using Event-Driven Data Products
- State Events and Event-Carried State Transfer
- Materializing Events
- Aggregating Events
- The Kappa Architecture
- The Lambda Architecture and Why It Doesnt Work for Data Mesh
- Supporting the Requirements for Kappa Architecture
- Selecting an Event Broker
- Summary
- 4. Federated Governance
- Forming a Federated Governance Team
- Implementing Standards
- Supporting Multimodal Data Product Types
- Supporting Data Product Schemas
- Supporting Programming Languages and Frameworks
- Metadata Standards and Requirements
- Domain and owner
- Tiered service levels
- Data quality classifications
- Privacy, financial, and custom tagging
- Upstream metadata dependencies
- Metadata wrap-up example
- Ensuring Cross-Domain Data Product Compatibility
and Interoperability
- Defining and Using Common Entities
- Event Stream Keying and Partitioning
- Time and Time Zones
- What Does a Governance Meeting Look Like?
- 1. Identifying Existing Problems
- 2. Drafting Proposals
- 3. Reviewing Proposals
- 4. Implementing Proposals
- 5. Archiving Proposals
- Data Security and Access Policies
- Disable Data Product Access by Default
- Consider End-to-End Encryption
- Field-Level Encryption
- Data Privacy, the Right to Be Forgotten, and Crypto-Shredding
- Data Product Lineage
- Topology-Based Lineage
- Record-Based Lineage
- Summary
- 5. Self-Service Data Platform
- The Self-Service Platform Maturity Model
- Level 1: The Minimal Viable Platform
- The Schema Registry
- An Extremely Basic Metadata Catalog
- Connectors
- Level 1 Wrap-Up: How Does It Work?
- Level 2: The Expanded Platform
- Full-Featured Metadata Catalog
- The Data Product Management Service and UI
- Service and User Identities
- Basic Access Controls
- Stream Processing for Building Data Products
- Level 2 Wrap-Up: How Does It Work?
- Level 3: The Mature Platform
- Authentication, Identification, and Access Management
- Integration with Existing Application Delivery Processes
- Programmatic Data Product Management API
- Monitoring and Alerting
- Multiregion and Multicloud Data Products
- Level 3 Wrap-Up: How Does It Work?
- Summary
- 6. Event Schemas
- A Brief Introduction to Serialization and Deserialization
- What Is a Schema?
- What Are Our Schema Technology Options?
- Googles Protocol Buffers, aka Protobuf
- Apache Avro
- JSON Schema
- Schema Evolution: Changing Your Schemas Through Time
- Negotiating a Breaking Schema Change
- Step 1: Design the New Data Model
- Step 2: Iterate with Your Existing Consumers and the Federated Governance Team
- Step 3. Create a Release Schedule, a Data Migration Plan, and a Deprecation Plan
- Step 4. Execute the Release
- The Role of the Schema Registry
- Best Practices for Managing Schemas in Your Codebase
- Choosing a Schema Technology
- Summary
- 7. Designing Events
- Introduction to Event Types
- Expanding on State Events and Event-Carried
State Transfer
- Current State Events
- Before/After State Events
- Delta Events
- Event Sourcing with Delta Events
- Why Delta Events Dont Work for Event-Driven Data Products
- There is an infinite set of possible event types
- The logic to interpret the events must be replicated to each consumer
- These events map poorly to event streams
- Inversion of ownership: Consumers put their business logic into the producer
- Inability to maintain historical data without excessive complications
- Measurement Events
- Measurement Events Often Form Aggregate-Aligned Data Products
- Measurement Event Sources May Be Lossy
- Measurement Events May Power Time-Sensitive Applications
- Hybrid EventsState with a Bit of Delta
- Notification Events
- Summary
- 8. Bootstrapping Data Products
- Getting Started: Bootstrapping with Connectors
- Dual Writes
- Polling the Database to Create Data Products
- Change-Data Capture
- Change-Data Capture Using a Transactional Outbox
- Denormalization and Eventification
- Eventification at the Transactional Outbox
- Eventification in a Dedicated Service
- What Should Go In the Event? And What Should Stay Out?
- Slowly Changing Dimensions
- Type 1: Overwrite with the new value
- Type 2: Append the new value
- Bootstrapping Cloud Storage Files to an Event Stream
- Summary
- 9. Integrating Event-Driven Data
into Data at Rest
- Analytics and the Medallion Architecture
- Connecting Event Streams Into Existing Batch-Data Flows
- Through the Lens of Data Mesh: Whats Going On?
- Through the Lens of Data Mesh: How Do We Solve It?
- Balancing File Sizes, SLAs, and Latency
- Budget Blues: A Tale of Overspending
- Extending the Self-Service Platform for Nonstreaming Data Products
- Summary
- 10. Eventual Consistency
- Converging on Consistency, One Event at a Time
- Strategies for Dealing with Eventual Consistency
- Prevent Failures to Avoid Inconsistency
- Use Event-Driven Data Products Instead of Request-Response Server API Calls
- Expose Eventual Consistency in the Server Response
- Plan for New Services and Reprocessing of Data
- Synchronize Data Products on Time Boundaries
- Out-of-Order Events
- Resolving Late-Arriving Events
- Summary
- 11. Bringing It All Together
- Event Streams for Data Mesh
- Integrating with Existing Systems
- Operations, Analytics, and Everything in Between
- Summary
- Index
O'Reilly Media - inne książki
-
Software as a service (SaaS) is on the path to becoming the de facto model for building, delivering, and operating software solutions. Adopting a multi-tenant SaaS model requires builders to take on a broad range of new architecture, implementation, and operational challenges. How data is partiti...(237.15 zł najniższa cena z 30 dni)
245.65 zł
289.00 zł(-15%) -
Great engineers don't necessarily make great leaders—at least, not without a lot of work. Finding your path to becoming a strong leader is often fraught with challenges. It's not easy to figure out how to be strategic, successful, and considerate while also being firm. Whether you're on the...(118.15 zł najniższa cena z 30 dni)
126.65 zł
149.00 zł(-15%) -
Data science happens in code. The ability to write reproducible, robust, scaleable code is key to a data science project's success—and is absolutely essential for those working with production code. This practical book bridges the gap between data science and software engineering,and clearl...(211.65 zł najniższa cena z 30 dni)
220.15 zł
259.00 zł(-15%) -
With the massive adoption of microservices, operators and developers face far more complexity in their applications today. Service meshes can help you manage this problem by providing a unified control plane to secure, manage, and monitor your entire network. This practical guide shows you how th...(194.65 zł najniższa cena z 30 dni)
211.65 zł
249.00 zł(-15%) -
Get practical advice on how to leverage AI development tools for all stages of code creation, including requirements, planning, design, coding, debugging, testing, and documentation. With this book, beginners and experienced developers alike will learn how to use a wide range of tools, from gener...(164.25 zł najniższa cena z 30 dni)
186.15 zł
219.00 zł(-15%) -
Rust's popularity is growing, due in part to features like memory safety, type safety, and thread safety. But these same elements can also make learning Rust a challenge, even for experienced programmers. This practical guide helps you make the transition to writing idiomatic Rust—while als...(164.25 zł najniższa cena z 30 dni)
186.15 zł
219.00 zł(-15%) -
Advance your Power BI skills by adding AI to your repertoire at a practice level. With this practical book, business-oriented software engineers and developers will learn the terminologies, practices, and strategy necessary to successfully incorporate AI into your business intelligence estate. Je...(211.65 zł najniższa cena z 30 dni)
220.15 zł
259.00 zł(-15%) -
Microservices can be a very effective approach for delivering value to your organization and to your customers. If you get them right, microservices help you to move fast by making changes to small parts of your system hundreds of times a day. But if you get them wrong, microservices will just ma...(203.15 zł najniższa cena z 30 dni)
211.65 zł
249.00 zł(-15%) -
JavaScript gives web developers great power to create rich interactive browser experiences, and much of that power is provided by the browser itself. Modern web APIs enable web-based applications to come to life like never before, supporting actions that once required browser plug-ins. Some are s...(186.15 zł najniższa cena z 30 dni)
186.15 zł
219.00 zł(-15%) -
How will software development and operations have to change to meet the sustainability and green needs of the planet? And what does that imply for development organizations? In this eye-opening book, sustainable software advocates Anne Currie, Sarah Hsu, and Sara Bergman provide a unique overview...(169.14 zł najniższa cena z 30 dni)
177.65 zł
209.00 zł(-15%)
Dzieki opcji "Druk na żądanie" do sprzedaży wracają tytuły Grupy Helion, które cieszyły sie dużym zainteresowaniem, a których nakład został wyprzedany.
Dla naszych Czytelników wydrukowaliśmy dodatkową pulę egzemplarzy w technice druku cyfrowego.
Co powinieneś wiedzieć o usłudze "Druk na żądanie":
- usługa obejmuje tylko widoczną poniżej listę tytułów, którą na bieżąco aktualizujemy;
- cena książki może być wyższa od początkowej ceny detalicznej, co jest spowodowane kosztami druku cyfrowego (wyższymi niż koszty tradycyjnego druku offsetowego). Obowiązująca cena jest zawsze podawana na stronie WWW książki;
- zawartość książki wraz z dodatkami (płyta CD, DVD) odpowiada jej pierwotnemu wydaniu i jest w pełni komplementarna;
- usługa nie obejmuje książek w kolorze.
Masz pytanie o konkretny tytuł? Napisz do nas: sklep[at]helion.pl.
Książka, którą chcesz zamówić pochodzi z końcówki nakładu. Oznacza to, że mogą się pojawić drobne defekty (otarcia, rysy, zagięcia).
Co powinieneś wiedzieć o usłudze "Końcówka nakładu":
- usługa obejmuje tylko książki oznaczone tagiem "Końcówka nakładu";
- wady o których mowa powyżej nie podlegają reklamacji;
Masz pytanie o konkretny tytuł? Napisz do nas: sklep[at]helion.pl.
Książka drukowana
Oceny i opinie klientów: Building an Event-Driven Data Mesh Adam Bellemare (0) Weryfikacja opinii następuję na podstawie historii zamówień na koncie Użytkownika umieszczającego opinię. Użytkownik mógł otrzymać punkty za opublikowanie opinii uprawniające do uzyskania rabatu w ramach Programu Punktowego.