আপনি কীভাবে ব্যাকগ্রাউন্ড জব এবং কিউ পরিচালনা করেন?

Question

Accepted Answer

**ব্যাকগ্রাউন্ড জব**এর জন্য (এমন কাজ যা HTTP প্রতিক্রিয়া ব্লক করা উচিত নয়), NestJS **BullMQ** (একটি Redis-ব্যাকড কিউ) এর সাথে `@nestjs/bullmq` এর মাধ্যমে একীভূত হয়। আপনি একটি কিউতে জব যোগ করেন এবং সেগুলি আলাদা ওয়ার্কারদের মধ্যে অ্যাসিঙ্ক্রোনাসভাবে প্রক্রিয়া করেন — অনুরোধগুলি দ্রুত রেখে এবং ভারী বা বিলম্বিত কাজ নির্ভরযোগ্যভাবে পরিচালনা করে।

## কিউ যে সমস্যা সমাধান করে

```text
Some work is too slow or shouldn't block the request:
  ✗ sending emails, processing images/video, generating reports, calling slow APIs
  → doing it inline makes the user wait and risks timeouts/failures
  ✓ QUEUE the work → respond immediately → a worker processes it in the background
```

## একটি কিউ সেট আপ করা

```ts
@Module({
  imports: [
    BullModule.forRoot({ connection: { host: "localhost", port: 6379 } }),  // Redis
    BullModule.registerQueue({ name: "email" }),                            // a named queue
  ],
})
export class AppModule {}
```

## কিউতে জব যোগ করা (প্রোডিউসার)

```ts
@Injectable()
export class NotificationService {
  constructor(@InjectQueue("email") private emailQueue: Queue) {}

async register(user: User) {
    await this.saveUser(user);
    // queue the email INSTEAD of sending it inline → respond to the user immediately
    await this.emailQueue.add("welcome", { userId: user.id }, {
      attempts: 3,                          // retry up to 3 times on failure
      backoff: { type: "exponential", delay: 5000 },
      delay: 60000,                          // optionally delay the job
    });
  }
}
```

প্রোডিউসার একটি জব যোগ করে (রিট্রাই, ব্যাকঅফ, বিলম্বের মতো বিকল্প সহ) এবং অবিলম্বে ফেরত আসে — ব্যবহারকারী ইমেল পাঠানোর জন্য অপেক্ষা করে না।

## জব প্রক্রিয়া করা (ওয়ার্কার/কনজিউমার)

```ts
@Processor("email")
export class EmailProcessor extends WorkerHost {
  async process(job: Job) {
    switch (job.name) {
      case "welcome":
        await this.sendWelcomeEmail(job.data.userId);   // the actual work, in the background
        break;
    }
  }
}
```

একটি `@Processor` ওয়ার্কার কিউ থেকে জব খরচ করে এবং প্রকৃত কাজ অ্যাসিঙ্ক্রোনাসভাবে করে — অনুরোধ/প্রতিক্রিয়া চক্রের বাইরে (এবং এমনকি একটি আলাদা প্রক্রিয়ায় চলতে পারে)।

## কিউ যা প্রদান করে

```text
✓ Async processing — offload slow work, respond to users instantly
✓ Retries & backoff — failed jobs retry automatically (reliability)
✓ Delayed/scheduled jobs — run work later or on a schedule (repeatable jobs)
✓ Rate limiting & concurrency control — bound how fast/many jobs run
✓ Persistence (via Redis) — jobs survive restarts; not lost if the app crashes
✓ Decoupling — producers and workers scale independently
```

## এটি কেন গুরুত্বপূর্ণ

কিউ দিয়ে ব্যাকগ্রাউন্ড জব প্রক্রিয়াকরণ শক্তিশালী, প্রতিক্রিয়াশীল, স্কেলেবল ব্যাক-এন্ড তৈরি করার জন্য অপরিহার্য — এবং NestJS এর BullMQ ইন্টিগ্রেশন বোঝা গুরুত্বপূর্ণ সিনিয়র-স্তরের জ্ঞান।

মূল মূল্য হল এমন কাজ অপসারণ করা যা HTTP প্রতিক্রিয়া ব্লক করা উচিত নয়: ইমেল পাঠানো, ছবি/ভিডিও প্রক্রিয়া করা, রিপোর্ট তৈরি করা, ডেটা সিঙ্ক করা, বা ধীর বাহ্যিক সেবা কল করা।

এমন কাজ ইনলাইন করলে ব্যবহারকারীদের অপেক্ষা করতে হয়, অনুরোধ টাইমআউটের ঝুঁকি থাকে, এবং ব্যর্থ হলে কাজ হারায় — অথচ **কিউইং** এটি আপনাকে অবিলম্বে উত্তর দেওয়ার অনুমতি দেয় যখন একটি পটভূমি **ওয়ার্কার** এটি নির্ভরযোগ্যভাবে প্রক্রিয়া করে।

অ্যাসিঙ্ক অপসারণের বাইরে, কিউ গুরুত্বপূর্ণ উৎপাদন বৈশিষ্ট্য প্রদান করে: **ব্যাকঅফ সহ স্বয়ংক্রিয় রিট্রাই** (অস্থায়ী ব্যর্থতার বিরুদ্ধে স্থিতিস্থাপকতা), **বিলম্বিত এবং নির্ধারিত জব**, **সমসাময়িকতা/হার-সীমাবদ্ধকরণ নিয়ন্ত্রণ**, এবং **স্থিতিশীলতা** (Redis-ব্যাকড জব ক্র্যাশ/পুনরায় চালু হওয়ার পরেও বেঁচে থাকে, তাই কাজ হারায় না)।

ওয়ার্কার তৈরি এবং স্কেল করতে জানা মূল্যবান।

কিউ সেট আপ করতে, উপযুক্ত বিকল্প সহ জব যোগ করতে (রিট্রাই, বিলম্ব), এবং ওয়ার্কারদের মধ্যে তাদের প্রক্রিয়া করতে জানা বাস্তব অ্যাপ্লিকেশন স্থাপত্য করার জন্য মূল্যবান যা ভারী বা বিলম্বিত কাজ কমনীয়ভাবে পরিচালনা করে।

এটি উৎপাদন NestJS সিস্টেমে একটি সাধারণ, গুরুত্বপূর্ণ প্যাটার্ন এবং প্রতিক্রিয়াশীল, নির্ভরযোগ্য ব্যাক-এন্ড তৈরির পরিপক্ক বোঝাপড়া প্রতিফলিত করে যা সাধারণ অনুরোধ-প্রতিক্রিয়া পরিচালনার বাইরে যায়।