misc/background_jobs_worker.pl

   1 #!/usr/bin/perl
   2
   3 # This file is part of Koha.
   4 #
   5 # Koha is free software; you can redistribute it and/or modify it
   6 # under the terms of the GNU General Public License as published by
   7 # the Free Software Foundation; either version 3 of the License, or
   8 # (at your option) any later version.
   9 #
  10 # Koha is distributed in the hope that it will be useful, but
  11 # WITHOUT ANY WARRANTY; without even the implied warranty of
  12 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the
  13 # GNU General Public License for more details.
  14 #
  15 # You should have received a copy of the GNU General Public License
  16 # along with Koha; if not, see <http://www.gnu.org/licenses>.
  17
  18 use Modern::Perl;
  19 use JSON qw( decode_json );
  20 use Try::Tiny qw( catch try );
  21
  22 use Koha::BackgroundJobs;
  23
  24 my $conn;
  25 try {
  26     $conn = Koha::BackgroundJob->connect;
  27 } catch {
  28     warn sprintf "Cannot connect to the message broker, the jobs will be processed anyway (%s)", $_;
  29 };
  30
  31 my @job_types = qw(
  32     batch_biblio_record_modification
  33     batch_authority_record_modification
  34     batch_biblio_record_deletion
  35     batch_authority_record_deletion
  36 );
  37
  38 if ( $conn ) {
  39     # FIXME cf note in Koha::BackgroundJob about $namespace
  40     my $namespace = C4::Context->config('memcached_namespace');
  41     for my $job_type ( @job_types ) {
  42         $conn->subscribe({ destination => sprintf("/queue/%s-%s", $namespace, $job_type), ack => 'client' });
  43     }
  44 }
  45 while (1) {
  46     if ( $conn ) {
  47         my $frame = $conn->receive_frame;
  48         if ( !defined $frame ) {
  49             # maybe log connection problems
  50             next;    # will reconnect automatically
  51         }
  52
  53         my $body = $frame->body;
  54         my $args = decode_json($body);
  55
  56         # FIXME This means we need to have create the DB entry before
  57         # It could work in a first step, but then we will want to handle job that will be created from the message received
  58         my $job = Koha::BackgroundJobs->find($args->{job_id});
  59
  60         process_job( $job, $args );
  61         $conn->ack( { frame => $frame } ); # FIXME depending on success?
  62
  63     } else {
  64         my $jobs = Koha::BackgroundJobs->search({ status => 'new' });
  65         while ( my $job = $jobs->next ) {
  66             my $args = decode_json($job->data);
  67             process_job( $job, { job_id => $job->id, %$args } );
  68         }
  69         sleep 10;
  70     }
  71 }
  72 $conn->disconnect;
  73
  74 sub process_job {
  75     my ( $job, $args ) = @_;
  76
  77     my $pid;
  78     if ( $pid = fork ) {
  79         wait;
  80         return;
  81     }
  82
  83     die "fork failed!" unless defined $pid;
  84
  85     $job->process( $args );
  86     exit;
  87 }