Stream Processing with Apache Flink. Fundamentals, Implementation, and Operation of Streaming Applications
- Autorzy:
- Fabian Hueske, Vasiliki Kalavri
- Ocena:
- Bądź pierwszym, który oceni tę książkę
- Stron:
- 310
- Dostępne formaty:
-
ePubMobi
Opis ebooka: Stream Processing with Apache Flink. Fundamentals, Implementation, and Operation of Streaming Applications
Get started with Apache Flink, the open source framework that powers some of the world’s largest stream processing applications. With this practical book, you’ll explore the fundamental concepts of parallel stream processing and discover how this technology differs from traditional batch data processing.
Longtime Apache Flink committers Fabian Hueske and Vasia Kalavri show you how to implement scalable streaming applications with Flink’s DataStream API and continuously run and maintain these applications in operational environments. Stream processing is ideal for many use cases, including low-latency ETL, streaming analytics, and real-time dashboards as well as fraud detection, anomaly detection, and alerting. You can process continuous data of any kind, including user interactions, financial transactions, and IoT data, as soon as you generate them.
- Learn concepts and challenges of distributed stateful stream processing
- Explore Flink’s system architecture, including its event-time processing mode and fault-tolerance model
- Understand the fundamentals and building blocks of the DataStream API, including its time-based and statefuloperators
- Read data from and write data to external systems with exactly-once consistency
- Deploy and configure Flink clusters
- Operate continuously running streaming applications
Wybrane bestsellery
-
Jak sądzisz, co stanowi bazę informatyki? Od czego powinien zacząć przyszły programista? Może od opanowania jednego z najpopularniejszych języków programowania? Oczywiście mógłby od tego rozpocząć, tyle że to trochę tak, jakby uczyć się korzystać z narzędzia bez świadomości, do czego ono właściwi...
Informacja i kodowanie. Krótkie wprowadzenie z przykładami zastosowań Informacja i kodowanie. Krótkie wprowadzenie z przykładami zastosowań
(47.20 zł najniższa cena z 30 dni)47.20 zł
59.00 zł(-20%) -
Książkę szczególnie docenią analitycy bezpieczeństwa, którzy chcą się zapoznać z zestawem poleceń ARM i zdobyć wiedzę umożliwiającą im efektywne korzystanie z technik inżynierii wstecznej. Poza zestawem potrzebnych poleceń znalazło się w niej mnóstwo przydatnych informacji. Znajdziesz tu przegląd...
Niebieski lis. Polecenia procesorów Arm i inżynieria wsteczna Niebieski lis. Polecenia procesorów Arm i inżynieria wsteczna
(62.30 zł najniższa cena z 30 dni)57.84 zł
89.00 zł(-35%) -
Ewolucja formularzy internetowych zaczęła się od prostych znaczników języka HTML 2.0 opublikowanego w 1993 roku. Z czasem HTML oferował bardziej zaawansowane funkcje obsługi formularzy. Późniejsze wersje, HTML4, a następnie HTML5, wprowadziły nowe typy pól, takie jak pola daty, koloru czy też adr...
Angular i formularze reaktywne. Praktyczny przewodnik Angular i formularze reaktywne. Praktyczny przewodnik
(48.30 zł najniższa cena z 30 dni)44.85 zł
69.00 zł(-35%) -
Jeśli w swojej pracy masz lub miewasz do czynienia z danymi, z pewnością orientujesz się, że do tego celu stworzono dotąd całkiem sporo narzędzi. Nic dziwnego – przy tej liczbie danych, z jaką spotykamy się w dzisiejszym cyfrowym świecie, zdolność do ich sprawnego analizowania i wyciągania ...
Grafana. Kurs video. Monitorowanie, analiza i wizualizacja danych w czasie rzeczywistym Grafana. Kurs video. Monitorowanie, analiza i wizualizacja danych w czasie rzeczywistym
(39.90 zł najniższa cena z 30 dni)90.34 zł
139.00 zł(-35%) -
Tę książkę docenią praktycy: inżynierowie uczenia maszynowego i analitycy danych, poszukujący sposobu praktycznego zaadaptowania modeli transformacyjnych do swoich potrzeb. Autorzy skupili się na praktycznej stronie tworzenia aplikacji językowych, a w poszczególnych rozdziałach ujęto wszystkie na...
Przetwarzanie języka naturalnego z wykorzystaniem transformerów. Budowanie aplikacji językowych za pomocą bibliotek Hugging Face Przetwarzanie języka naturalnego z wykorzystaniem transformerów. Budowanie aplikacji językowych za pomocą bibliotek Hugging Face
(59.40 zł najniższa cena z 30 dni)64.35 zł
99.00 zł(-35%) -
Czym jest inżynieria wymagań? To systematyczne podejście do pozyskiwania i dokumentowania wymagań, a także zarządzania nimi. Polega na zrozumieniu potrzeb i oczekiwań interesariuszy, a następnie opisaniu, za pomocą wymagań, systemu, który je spełnia.
Certyfikowany inżynier wymagań. Na podstawie IREB CPRE. Poziom podstawowy Certyfikowany inżynier wymagań. Na podstawie IREB CPRE. Poziom podstawowy
(41.40 zł najniższa cena z 30 dni)44.85 zł
69.00 zł(-35%) -
To drugie, zaktualizowane wydanie przewodnika po systemie Prometheus. Znajdziesz w nim wyczerpujące wprowadzenie do tego oprogramowania, a także wskazówki dotyczące monitorowania aplikacji i infrastruktury, tworzenia wykresów, przekazywania ostrzeżeń, bezpośredniej instrumentacji kodu i pobierani...
Prometheus w pełnej gotowości. Jak monitorować pracę infrastruktury i wydajność działania aplikacji. Wydanie II Prometheus w pełnej gotowości. Jak monitorować pracę infrastruktury i wydajność działania aplikacji. Wydanie II
(53.40 zł najniższa cena z 30 dni)57.84 zł
89.00 zł(-35%) -
Czy wiesz, że większość ruchu w sieci pochodzi z urządzeń mobilnych? Smartfon stał się wiodącym urządzeniem do przeglądania Internetu i nadal przybiera na sile. Dzięki tej popularności dynamicznie rozwija się także rynek aplikacji mobilnych. W sklepach takich jak App Store i Google Play mamy do w...
iOS Developer. Kurs video. Opanuj Swift, framework UIKit i środowisko Xcode iOS Developer. Kurs video. Opanuj Swift, framework UIKit i środowisko Xcode
(39.90 zł najniższa cena z 30 dni)70.95 zł
129.00 zł(-45%) -
Power Apps to platforma stworzona przez Microsoft, umożliwiająca łatwe projektowanie, tworzenie i dostosowywanie aplikacji bez konieczności posiadania głębokiej wiedzy programistycznej. Z użyciem Power Apps można budować niestandardowe aplikacje, które efektywnie wspierają i automatyzują różne pr...
Power Apps. Kurs video. Tworzenie biznesowych aplikacji no-code Power Apps. Kurs video. Tworzenie biznesowych aplikacji no-code
(39.90 zł najniższa cena z 30 dni)129.35 zł
199.00 zł(-35%) -
Ta książka będzie świetnym uzupełnieniem wiedzy o Flutterze i Darcie, sprawdzi się również jako wsparcie podczas rozwiązywania konkretnych problemów. Znalazło się tu ponad sto receptur, dzięki którym poznasz tajniki pisania efektywnego kodu, korzystania z narzędzi udostępnianych przez framework F...
Flutter i Dart. Receptury. Tworzenie chmurowych aplikacji full stack Flutter i Dart. Receptury. Tworzenie chmurowych aplikacji full stack
(41.40 zł najniższa cena z 30 dni)44.85 zł
69.00 zł(-35%)
Ebooka "Stream Processing with Apache Flink. Fundamentals, Implementation, and Operation of Streaming Applications" przeczytasz na:
-
czytnikach Inkbook, Kindle, Pocketbook, Onyx Boox i innych
-
systemach Windows, MacOS i innych
-
systemach Windows, Android, iOS, HarmonyOS
-
na dowolnych urządzeniach i aplikacjach obsługujących formaty: PDF, EPub, Mobi
Masz pytania? Zajrzyj do zakładki Pomoc »
Audiobooka "Stream Processing with Apache Flink. Fundamentals, Implementation, and Operation of Streaming Applications" posłuchasz:
-
w aplikacji Ebookpoint na Android, iOS, HarmonyOs
-
na systemach Windows, MacOS i innych
-
na dowolnych urządzeniach i aplikacjach obsługujących format MP3 (pliki spakowane w ZIP)
Masz pytania? Zajrzyj do zakładki Pomoc »
Kurs Video "Stream Processing with Apache Flink. Fundamentals, Implementation, and Operation of Streaming Applications" zobaczysz:
-
w aplikacjach Ebookpoint i Videopoint na Android, iOS, HarmonyOs
-
na systemach Windows, MacOS i innych z dostępem do najnowszej wersji Twojej przeglądarki internetowej
Szczegóły ebooka
- ISBN Ebooka:
- 978-14-919-7424-7, 9781491974247
- Data wydania ebooka:
- 2019-04-11 Data wydania ebooka często jest dniem wprowadzenia tytułu do sprzedaży i może nie być równoznaczna z datą wydania książki papierowej. Dodatkowe informacje możesz znaleźć w darmowym fragmencie. Jeśli masz wątpliwości skontaktuj się z nami sklep@ebookpoint.pl.
- Język publikacji:
- angielski
- Rozmiar pliku ePub:
- 6.9MB
- Rozmiar pliku Mobi:
- 15.9MB
Spis treści ebooka
- Preface
- What You Will Learn in This Book
- Conventions Used in This Book
- Using Code Examples
- OReilly Online Learning
- How to Contact Us
- Acknowledgments
- 1. Introduction to Stateful Stream Processing
- Traditional Data Infrastructures
- Transactional Processing
- Analytical Processing
- Traditional Data Infrastructures
- Stateful Stream Processing
- Event-Driven Applications
- Data Pipelines
- Streaming Analytics
- The Evolution of Open Source Stream Processing
- A Bit of History
- A Quick Look at Flink
- Running Your First Flink Application
- Summary
- 2. Stream Processing Fundamentals
- Introduction to Dataflow Programming
- Dataflow Graphs
- Data Parallelism and Task Parallelism
- Data Exchange Strategies
- Introduction to Dataflow Programming
- Processing Streams in Parallel
- Latency and Throughput
- Latency
- Throughput
- Latency Versus Throughput
- Latency and Throughput
- Operations on Data Streams
- Data ingestion and data egress
- Transformation operations
- Rolling aggregations
- Window operations
- Time Semantics
- What Does One Minute Mean in Stream Processing?
- Processing Time
- Event Time
- Watermarks
- Processing Time Versus Event Time
- State and Consistency Models
- Task Failures
- What is a task failure?
- Task Failures
- Result Guarantees
- At-most-once
- At-least-once
- Exactly-once
- End-to-end exactly-once
- Summary
- 3. The Architecture of Apache Flink
- System Architecture
- Components of a Flink Setup
- Application Deployment
- Task Execution
- Highly Available Setup
- TaskManager failures
- JobManager failures
- System Architecture
- Data Transfer in Flink
- Credit-Based Flow Control
- Task Chaining
- Event-Time Processing
- Timestamps
- Watermarks
- Watermark Propagation and Event Time
- Timestamp Assignment and Watermark Generation
- State Management
- Operator State
- Keyed State
- State Backends
- Scaling Stateful Operators
- Checkpoints, Savepoints, and State Recovery
- Consistent Checkpoints
- Recovery from a Consistent Checkpoint
- Flinks Checkpointing Algorithm
- Performace Implications of Checkpointing
- Savepoints
- Using savepoints
- Starting an application from a savepoint
- Summary
- 4. Setting Up a Development Environment for Apache Flink
- Required Software
- Run and Debug Flink Applications in an IDE
- Import the Books Examples in an IDE
- Run Flink Applications in an IDE
- Debug Flink Applications in an IDE
- Bootstrap a Flink Maven Project
- Summary
- 5. The DataStream API (v1.7)
- Hello, Flink!
- Set Up the Execution Environment
- Read an Input Stream
- Apply Transformations
- Output the Result
- Execute
- Hello, Flink!
- Transformations
- Basic Transformations
- Map
- Filter
- FlatMap
- Basic Transformations
- KeyedStream Transformations
- keyBy
- Rolling aggregations
- Reduce
- Multistream Transformations
- Union
- Connect, coMap, and coFlatMap
- Split and select
- Distribution Transformations
- Setting the Parallelism
- Types
- Supported Data Types
- Creating Type Information for Data Types
- Explicitly Providing Type Information
- Defining Keys and Referencing Fields
- Field Positions
- Field Expressions
- Key Selectors
- Implementing Functions
- Function Classes
- Lambda Functions
- Rich Functions
- Including External and Flink Dependencies
- Summary
- 6. Time-Based and Window Operators
- Configuring Time Characteristics
- Assigning Timestamps and Generating Watermarks
- Assigner with periodic watermarks
- Assigner with punctuated watermarks
- Assigning Timestamps and Generating Watermarks
- Watermarks, Latency, and Completeness
- Configuring Time Characteristics
- Process Functions
- TimerService and Timers
- Emitting to Side Outputs
- CoProcessFunction
- Window Operators
- Defining Window Operators
- Built-in Window Assigners
- Tumbling windows
- Sliding windows
- Session windows
- Applying Functions on Windows
- ReduceFunction
- AggregateFunction
- ProcessWindowFunction
- Incremental aggregation and ProcessWindowFunction
- Customizing Window Operators
- Window lifecycle
- Window assigners
- Triggers
- Evictors
- Joining Streams on Time
- Interval Join
- Window Join
- Handling Late Data
- Dropping Late Events
- Redirecting Late Events
- Updating Results by Including Late Events
- Summary
- 7. Stateful Operators and Applications
- Implementing Stateful Functions
- Declaring Keyed State at RuntimeContext
- Implementing Operator List State with the ListCheckpointed Interface
- Using Connected Broadcast State
- Using the CheckpointedFunction Interface
- Receiving Notifications About Completed Checkpoints
- Implementing Stateful Functions
- Enabling Failure Recovery for Stateful Applications
- Ensuring the Maintainability of Stateful Applications
- Specifying Unique Operator Identifiers
- Defining the Maximum Parallelism of Keyed State Operators
- Performance and Robustness of Stateful Applications
- Choosing a State Backend
- Choosing a State Primitive
- Preventing Leaking State
- Evolving Stateful Applications
- Updating an Application without Modifying Existing State
- Removing State from an Application
- Modifying the State of an Operator
- Queryable State
- Architecture and Enabling Queryable State
- Exposing Queryable State
- Querying State from External Applications
- Summary
- 8. Reading from and Writing to External Systems
- Application Consistency Guarantees
- Idempotent Writes
- Transactional Writes
- Application Consistency Guarantees
- Provided Connectors
- Apache Kafka Source Connector
- Apache Kafka Sink Connector
- Filesystem Source Connector
- Filesystem Sink Connector
- Apache Cassandra Sink Connector
- Implementing a Custom Source Function
- Resettable Source Functions
- Source Functions, Timestamps, and Watermarks
- Implementing a Custom Sink Function
- Idempotent Sink Connectors
- Transactional Sink Connectors
- GenericWriteAheadSink
- TwoPhaseCommitSinkFunction
- Asynchronously Accessing External Systems
- Summary
- 9. Setting Up Flink for Streaming Applications
- Deployment Modes
- Standalone Cluster
- Docker
- Apache Hadoop YARN
- Kubernetes
- Deployment Modes
- Highly Available Setups
- HA Standalone Setup
- HA YARN Setup
- HA Kubernetes Setup
- Integration with Hadoop Components
- Filesystem Configuration
- System Configuration
- Java and Classloading
- CPU
- Main Memory and Network Buffers
- Disk Storage
- Checkpointing and State Backends
- Security
- Summary
- 10. Operating Flink and Streaming Applications
- Running and Managing Streaming Applications
- Savepoints
- Managing Applications with the Command-Line Client
- Starting an application
- Listing running applications
- Taking and disposing of a savepoint
- Canceling an application
- Starting an application from a savepoint
- Scaling an Application In and Out
- Managing Applications with the REST API
- Managing and monitoring a Flink cluster
- Managing and montioring Flink applications
- Running and Managing Streaming Applications
- Bundling and Deploying Applications in Containers
- Building a job-specific Flink Docker image
- Running a job-specific Docker image on Kubernetes
- Controlling Task Scheduling
- Controlling Task Chaining
- Defining Slot-Sharing Groups
- Tuning Checkpointing and Recovery
- Configuring Checkpointing
- Enabling checkpoint compression
- Retaining checkpoints after an application has stopped
- Configuring Checkpointing
- Configuring State Backends
- Configuring Recovery
- Restart strategies
- Local recovery
- Monitoring Flink Clusters and Applications
- Flink Web UI
- Metric System
- Registering and using metrics
- Metric groups
- Scoping and formatting metrics
- Exposing metrics
- Monitoring Latency
- Configuring the Logging Behavior
- Summary
- 11. Where to Go from Here?
- The Rest of the Flink Ecosystem
- The DataSet API for Batch Processing
- Table API and SQL for Relational Analysis
- FlinkCEP for Complex Event Processing and Pattern Matching
- Gelly for Graph Processing
- The Rest of the Flink Ecosystem
- A Welcoming Community
- Mailing lists
- Blogs
- Meetups and conferences
- Index
O'Reilly Media - inne książki
-
Software as a service (SaaS) is on the path to becoming the de facto model for building, delivering, and operating software solutions. Adopting a multi-tenant SaaS model requires builders to take on a broad range of new architecture, implementation, and operational challenges. How data is partiti...(237.15 zł najniższa cena z 30 dni)
245.65 zł
289.00 zł(-15%) -
Great engineers don't necessarily make great leaders—at least, not without a lot of work. Finding your path to becoming a strong leader is often fraught with challenges. It's not easy to figure out how to be strategic, successful, and considerate while also being firm. Whether you're on the...(118.15 zł najniższa cena z 30 dni)
126.65 zł
149.00 zł(-15%) -
Data science happens in code. The ability to write reproducible, robust, scaleable code is key to a data science project's success—and is absolutely essential for those working with production code. This practical book bridges the gap between data science and software engineering,and clearl...(211.65 zł najniższa cena z 30 dni)
220.15 zł
259.00 zł(-15%) -
With the massive adoption of microservices, operators and developers face far more complexity in their applications today. Service meshes can help you manage this problem by providing a unified control plane to secure, manage, and monitor your entire network. This practical guide shows you how th...(194.65 zł najniższa cena z 30 dni)
211.65 zł
249.00 zł(-15%) -
Get practical advice on how to leverage AI development tools for all stages of code creation, including requirements, planning, design, coding, debugging, testing, and documentation. With this book, beginners and experienced developers alike will learn how to use a wide range of tools, from gener...(177.65 zł najniższa cena z 30 dni)
164.25 zł
219.00 zł(-25%) -
Rust's popularity is growing, due in part to features like memory safety, type safety, and thread safety. But these same elements can also make learning Rust a challenge, even for experienced programmers. This practical guide helps you make the transition to writing idiomatic Rust—while als...(177.65 zł najniższa cena z 30 dni)
164.25 zł
219.00 zł(-25%) -
Advance your Power BI skills by adding AI to your repertoire at a practice level. With this practical book, business-oriented software engineers and developers will learn the terminologies, practices, and strategy necessary to successfully incorporate AI into your business intelligence estate. Je...(211.65 zł najniższa cena z 30 dni)
220.15 zł
259.00 zł(-15%) -
Microservices can be a very effective approach for delivering value to your organization and to your customers. If you get them right, microservices help you to move fast by making changes to small parts of your system hundreds of times a day. But if you get them wrong, microservices will just ma...(203.15 zł najniższa cena z 30 dni)
211.65 zł
249.00 zł(-15%) -
JavaScript gives web developers great power to create rich interactive browser experiences, and much of that power is provided by the browser itself. Modern web APIs enable web-based applications to come to life like never before, supporting actions that once required browser plug-ins. Some are s...(186.15 zł najniższa cena z 30 dni)
186.15 zł
219.00 zł(-15%) -
How will software development and operations have to change to meet the sustainability and green needs of the planet? And what does that imply for development organizations? In this eye-opening book, sustainable software advocates Anne Currie, Sarah Hsu, and Sara Bergman provide a unique overview...(160.65 zł najniższa cena z 30 dni)
169.14 zł
199.00 zł(-15%)
Dzieki opcji "Druk na żądanie" do sprzedaży wracają tytuły Grupy Helion, które cieszyły sie dużym zainteresowaniem, a których nakład został wyprzedany.
Dla naszych Czytelników wydrukowaliśmy dodatkową pulę egzemplarzy w technice druku cyfrowego.
Co powinieneś wiedzieć o usłudze "Druk na żądanie":
- usługa obejmuje tylko widoczną poniżej listę tytułów, którą na bieżąco aktualizujemy;
- cena książki może być wyższa od początkowej ceny detalicznej, co jest spowodowane kosztami druku cyfrowego (wyższymi niż koszty tradycyjnego druku offsetowego). Obowiązująca cena jest zawsze podawana na stronie WWW książki;
- zawartość książki wraz z dodatkami (płyta CD, DVD) odpowiada jej pierwotnemu wydaniu i jest w pełni komplementarna;
- usługa nie obejmuje książek w kolorze.
Masz pytanie o konkretny tytuł? Napisz do nas: sklep[at]helion.pl.
Książka, którą chcesz zamówić pochodzi z końcówki nakładu. Oznacza to, że mogą się pojawić drobne defekty (otarcia, rysy, zagięcia).
Co powinieneś wiedzieć o usłudze "Końcówka nakładu":
- usługa obejmuje tylko książki oznaczone tagiem "Końcówka nakładu";
- wady o których mowa powyżej nie podlegają reklamacji;
Masz pytanie o konkretny tytuł? Napisz do nas: sklep[at]helion.pl.
Książka drukowana
Oceny i opinie klientów: Stream Processing with Apache Flink. Fundamentals, Implementation, and Operation of Streaming Applications Fabian Hueske, Vasiliki Kalavri (0) Weryfikacja opinii następuję na podstawie historii zamówień na koncie Użytkownika umieszczającego opinię. Użytkownik mógł otrzymać punkty za opublikowanie opinii uprawniające do uzyskania rabatu w ramach Programu Punktowego.