Apache Kafka Quick Start Guide: Leverage Apache Kafka 2.0 to simplify real-time data processing for distributed applications

ویرایش:  
نویسندگان: Raul Estrada  
سری:  
ISBN (شابک) : 9781788992251, 9781788997829 
ناشر: Packt Publishing 
سال نشر: 2018 
تعداد صفحات:  
زبان: English 
فرمت فایل : EPUB (درصورت درخواست کاربر به PDF، EPUB یا AZW3 تبدیل می شود) 
حجم فایل: 5 Mb 

قیمت کتاب (تومان) : 73,000



با استفاده از آخرین آپاچی کافکا 2.0، حجم زیادی از داده را در زمان واقعی پردازش کنید و در عین حال خط لوله پردازش جریان داده با کارایی بالا و قوی ایجاد کنید. ویژگی های کلیدی

با کافکا چالش های عملی بزرگ داده و پردازش را حل کنید

با چالش‌های پردازش داده‌ها مانند رویدادهای دیرهنگام، پنجره‌بندی و واترمارک مقابله کنید

درک پردازش برنامه‌های پخش جریانی بلادرنگ با استفاده از رجیستری Schema، اتصال کافکا، جریان‌های کافکا و KSQL

توضیحات کتاب

آپاچی کافکا یک پلت فرم منبع باز عالی برای مدیریت خط لوله داده های بلادرنگ شما برای اطمینان از فیلتر کردن با سرعت بالا و تطبیق الگو در ?y است. در این کتاب نحوه استفاده از آپاچی کافکا برای پردازش کارآمد برنامه های کاربردی توزیع شده را یاد می گیرید و با حل مسائل روزمره در داده های سریع و خطوط لوله پردازش آشنا می شوید.

این کتاب به جای مدیریت پیکربندی خوشه‌های کافکا یا DevOps، بر برنامه‌نویسی تمرکز دارد. با نصب و راه اندازی محیط توسعه شروع می شود، قبل از اینکه به سرعت به انجام عملیات پیام رسانی اساسی مانند اعتبار سنجی و غنی سازی بپردازد.

در اینجا با ترکیب پیام با API خالص Kafka و Kafka Streams آشنا خواهید شد. شما به تغییر شکل پیام ها در قالب های مختلف مانند asext، باینری، XML، JSON و AVRO نگاه خواهید کرد. در مرحله بعد، یاد خواهید گرفت که چگونه طرحواره های موجود در کافکا را با ثبت طرحواره آشکار کنید. سپس یاد خواهید گرفت که چگونه با کافکا کانکت با همه کانکتورهای مرتبط کار کنید. در حین کار با Kafka Streams، عملیات های مختلف جالبی را روی استریم ها انجام خواهید داد، مانند پنجره، اتصال و تجمع. در نهایت، از طریق KSQL، نحوه بازیابی، درج، اصلاح و حذف جریان های داده و نحوه دستکاری واترمارک ها و پنجره ها را خواهید آموخت.

آنچه خواهید آموخت

نحوه اعتبارسنجی داده ها با کافکا

اطلاعات را به داده های موجود اضافه کنید

اطلاعات جدید را از طریق ترکیب پیام ایجاد کنید

اعتبار سنجی داده ها و نسخه سازی را با رجیستری طرحواره انجام دهید

نحوه انجام Serialization و Deserialization پیام

نحوه انجام Serialization و Deserialization پیام

جریان های داده را با Kafka Streams پردازش کنید

دوگانگی بین جداول و جریان ها را با KSQL درک کنید

این کتاب برای چه کسی است

این کتاب برای توسعه دهندگانی است که می خواهند به سرعت بر مفاهیم عملی پشت آپاچی کافکا مسلط شوند. لازم نبود مخاطب قبلاً با آپاچی کافکا برخورد کرده باشد. با این حال، آشنایی با جاوا یا هر زبان JVM برای درک کد موجود در این کتاب مفید خواهد بود.

Process large volumes of data in real-time while building high performance and robust data stream processing pipeline using the latest Apache Kafka 2.0

Key Features

Solve practical large data and processing challenges with Kafka

Tackle data processing challenges like late events, windowing, and watermarking

Understand real-time streaming applications processing using Schema registry, Kafka connect, Kafka streams, and KSQL

Book Description

Apache Kafka is a great open source platform for handling your real-time data pipeline to ensure high-speed filtering and pattern matching on the ?y. In this book, you will learn how to use Apache Kafka for efficient processing of distributed applications and will get familiar with solving everyday problems in fast data and processing pipelines.

This book focuses on programming rather than the configuration management of Kafka clusters or DevOps. It starts off with the installation and setting up the development environment, before quickly moving on to performing fundamental messaging operations such as validation and enrichment.

Here you will learn about message composition with pure Kafka API and Kafka Streams. You will look into the transformation of messages in different formats, such asext, binary, XML, JSON, and AVRO. Next, you will learn how to expose the schemas contained in Kafka with the Schema Registry. You will then learn how to work with all relevant connectors with Kafka Connect. While working with Kafka Streams, you will perform various interesting operations on streams, such as windowing, joins, and aggregations. Finally, through KSQL, you will learn how to retrieve, insert, modify, and delete data streams, and how to manipulate watermarks and windows.

What you will learn

How to validate data with Kafka

Add information to existing data ?ows

Generate new information through message composition

Perform data validation and versioning with the Schema Registry

How to perform message Serialization and Deserialization

How to perform message Serialization and Deserialization

Process data streams with Kafka Streams

Understand the duality between tables and streams with KSQL

Who this book is for

This book is for developers who want to quickly master the practical concepts behind Apache Kafka. The audience need not have come across Apache Kafka previously; however, a familiarity of Java or any JVM language will be helpful in understanding the code in this book.