Bull di lavoro non sempre attivato in cron[Node.js]

0

Domanda

Ho più processi in background, processori di impostare utilizzando il toro pacchetto come di seguito

import { CronJob } from 'cron';

import Queue from 'bull';

let queue = new Queue('workers', {
  //  settings: { lockDuration: 60 * 20000 },
  defaultJobOptions: {
    removeOnComplete: true
  },
});


queue
  .on('waiting', function(jobId) {
    // A Job is waiting to be processed as soon as a worker is idling.
    // workerLogger.info(`Job ${jobId} waiting to be processed `);
  })
  .on('completed', async(job, result) => {
    workerLogger.info(`Job ID: ${job.id}, Result: ${result}`);
    try {
      const jobbed = await queue.getJob(job.id);
      if (jobbed) {
        await jobbed.remove();
        workerLogger.info(`removed completed job ${job.id}`);
      }
    } catch (error) {
      throw new Error(error);
    }
  })
  .on('failed', function(job, err) {
    workerLogger.error('job ' + job.id + ' in queue failed... ' + err);
  })
  .on('error', function(err) {
    workerLogger.error('Queue Error... ' + err);
  })
  .on('stalled', function(job) {
    workerLogger.info(
      `stalled job, restarting it again! ${job.queue.name} ${JSON.stringify(
          job.data,
        )} ${job.id} ${job.name}`,
    );
  });

queue.process('healthCheckPing', concurrency, function(job, done) {
  jobs.healthCheckPing(job.data, done);
});

queue.process('test', concurrency, function(job, done) {
  jobs.test(job.data, done);
});

Ho provato a eseguire il lavoro in base a un Crontime utilizzando il cron pacchetto, ma solo un lavoro viene elaborato, si prega di controllare l'esempio riportato di seguito

  const cron = new CronJob({
    cronTime: '* * * * *',
    onTick: function() {
      (() => {
        workerLogger.info('Pushing test to queue...');

        queue.add('test');

        queue.add(
          'healthCheckPing',
          {
            jobName: 'test',
          },
        );
      })();
    },
    start: true,
    timeZone: 'Africa/Lagos',
  });

Ho provato un sacco di cose per farlo funzionare, ma nessuno sembra funzionare, vi elenco di seguito

  • in esecuzione attendono coda.cancellare({ vigore: true });
  • esecuzione del lavoratore processore su un'istanza separata
  • aggiungere un ritardo per il lavoro - coda.add('test',{}, {ritardo:500});
  • l'aggiunta di priorità per il lavoro - coda.add('test',{}, {priorità:1});

Fuori i due Lavori(test, healthCheckPing) di cui sopra, solo uno viene sempre attivato.

che è, il processo denominato test di elaborati, mentre l'altro non lo è, o il nome del lavoro healthCheckPing di elaborati, mentre l'altro non è

Questo è il lavoro del processore funzioni di seguito

const jobs = {};

jobs.test = (_, done) => {
  try {
    workerLogger.error('test');

    done(false, 'ok');
  } catch (e) {
    done(e);
  }
};

jobs.healthCheckPing = async({
  jobName
}, done) => {
  try {
    workerLogger.info('health check pinger');

    if (!jobName) throw new Error('uuid not passed');

    // jobname is the slug for monitor

    // use pingkey to negate between staging and prod monitors
    const pingKey = !process.env.NODE_ENV || process.env.NODE_ENV !== 'production' ?
      process.env.STAGING_HEALTH_CHECK_KEY :
      process.env.PROD_HEALTH_CHECK_KEY;

    const url = `https://hc-ping.com/${pingKey}/${jobName}`;

    await axios.get(url);

    done(false, `pinged ${jobName}!`);
  } catch (error) {
    done(error);
  }
};

export default jobs;

Questo codice funziona perfettamente sul mio computer locale, ma questo problema solo si verifica quando la produzione. Il nodo server viene eseguito utilizzando pm2(cluster modalità di istanza = 1)

bull bullmq cron javascript
2021-11-20 16:34:11
1

Migliore risposta

0

il problema era perché stavo usando lo stesso nome della coda in un altro servizio di condivisione della stessa Redis connessione,

let queue = new Queue('workers', {
  //  settings: { lockDuration: 60 * 20000 },
  defaultJobOptions: {
    removeOnComplete: true
  },
});

cambiando i lavoratori a qualcos'altro risolto il problema

2021-11-20 19:22:17

In altre lingue

Questa pagina è in altre lingue

Русский
..................................................................................................................
Polski
..................................................................................................................
Română
..................................................................................................................
한국어
..................................................................................................................
हिन्दी
..................................................................................................................
Français
..................................................................................................................
Türk
..................................................................................................................
Česk
..................................................................................................................
Português
..................................................................................................................
ไทย
..................................................................................................................
中文
..................................................................................................................
Español
..................................................................................................................
Slovenský
..................................................................................................................

Popolare in questa categoria

Domande popolari in questa categoria