kafka چیه؟

اگر بخواهیم خیلی ساده بگوییم:

RabbitMQ بیشتر یک Message Queue است، ولی Kafka بیشتر یک Event Streaming Platform است.

تفاوت اصلی

ویژگیRabbitMQKafka
مدل اصلیMessage QueueEvent Stream
پیام بعد از مصرفمعمولاً از Queue حذف می‌شودباقی می‌ماند
مصرف مجدد پیاممحدودتربسیار راحت
ترتیب پیام‌هادر Queueدر هر Partition
حجم بسیار زیادخوبعالی
پردازش Real-timeخوبعالی
Task Queueعالیمعمولاً انتخاب اول نیست
Event-driven architectureخوبعالی
Replay کردن رویدادهانه به شکل طبیعیبله
Routing پیچیدهعالیساده‌تر
راه‌اندازینسبتاً سادهپیچیده‌تر

یک مثال خیلی مهم

فرض کن در Odoo یک سفارش ثبت می‌شود:

Order Created

با RabbitMQ

Odoo
 │
 ▼
RabbitMQ
 │
 ├── Payment Service
 ├── Email Service
 └── Shipping Service

هر Consumer پیام را دریافت و پردازش می‌کند.

مثلاً Email Service پیام را مصرف کرد؛ پیام از Queue مربوطه دیگر برای آن Consumer قابل مصرف نیست.


Kafka

در Kafka اتفاق متفاوتی می‌افتد:

Odoo
 │
 ▼
Kafka
 │
 ▼
Topic: orders
 │
 ├── Payment Service
 ├── Email Service
 ├── Analytics Service
 └── Recommendation Service

پیام مثلاً:

{
  "event": "order_created",
  "order_id": 123
}

در Kafka ذخیره می‌شود.

مثلاً:

orders topic

0  Order 101
1  Order 102
2  Order 103
3  Order 104
4  Order 105

Consumer می‌تواند بگوید:

من از پیام شماره 2 شروع می‌کنم.

حتی اگر قبلاً پیام‌های 2 تا 4 را خوانده باشد، می‌تواند دوباره آن‌ها را بخواند.

این قابلیت در Kafka بسیار مهم است.


یک تشبیه ساده

RabbitMQ = صف رستوران

مشتری‌ها سفارش می‌دهند:

Queue

[سفارش 1] [سفارش 2] [سفارش 3] [سفارش 4]
              ↓
           آشپز

آشپز سفارش را برمی‌دارد → پردازش می‌کند → از صف خارج می‌شود.


Kafka = دفتر ثبت وقایع

Kafka بیشتر شبیه یک دفتر بزرگ است:

Event Log

1. User Registered
2. Order Created
3. Payment Completed
4. Order Shipped
5. Order Delivered

رویدادها در دفتر باقی می‌مانند.

Consumerها موقعیت خودشان را دارند:

Payment Service      → event 3
Analytics Service    → event 1
Shipping Service     → event 4

بنابراین هر Consumer می‌تواند با سرعت و موقعیت خودش جلو برود.


پس چه زمانی RabbitMQ؟

مثلاً:

«این کار را انجام بده.»

Generate PDF
Send Email
Resize Image
Process Payment

یعنی یک Task داری و می‌خواهی یکی از Workerها آن را انجام دهد.

RabbitMQ خیلی مناسب است:

Application
    ↓
RabbitMQ
    ↓
Worker
    ↓
Task Done

چه زمانی Kafka؟

وقتی می‌گویی:

«این اتفاق افتاد.»

مثلاً:

UserRegistered
OrderCreated
PaymentCompleted
ProductViewed
InvoiceCreated

و چند سیستم مختلف باید از این اتفاق مطلع شوند.

                    ┌── Analytics
                    │
OrderCreated ──► Kafka ──► Recommendation
                    │
                    ├── Notification
                    │
                    └── Fraud Detection

و ممکن است ماه‌ها بعد بخواهی دوباره این Eventها را پردازش کنی.


یک تفاوت بسیار مهم

در RabbitMQ معمولاً ذهنیت این است:

Message → Process → Done

ولی در Kafka:

Event → Store → Process
              ↓
           Replay
              ↓
        Process again

به همین دلیل Kafka برای Event Sourcing، Data Pipeline، Analytics و سیستم‌های بزرگ Event-driven خیلی قدرتمند است.

اگر بخواهم در یک جمله بگویم:

RabbitMQ می‌گوید «چه کسی این کار را انجام دهد؟»
Kafka می‌گوید «چه اتفاقی افتاده و چه کسانی می‌خواهند آن را ببینند؟»

و یک نکته مهم: این دو کاملاً رقیب مستقیم نیستند؛ در یک معماری بزرگ حتی ممکن است هم RabbitMQ و هم Kafka داشته باشی.

دیدگاه‌ها

دیدگاهتان را بنویسید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *