acqui/addorderiso2709.pl

   1 #!/usr/bin/perl
   2
   3 #A script that lets the user populate a basket from an iso2709 file
   4 #the script first displays a list of import batches, then when a batch is selected displays all the biblios in it.
   5 #The user can then pick which biblios they want to order
   6
   7 # Copyright 2008 - 2011 BibLibre SARL
   8 #
   9 # This file is part of Koha.
  10 #
  11 # Koha is free software; you can redistribute it and/or modify it
  12 # under the terms of the GNU General Public License as published by
  13 # the Free Software Foundation; either version 3 of the License, or
  14 # (at your option) any later version.
  15 #
  16 # Koha is distributed in the hope that it will be useful, but
  17 # WITHOUT ANY WARRANTY; without even the implied warranty of
  18 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the
  19 # GNU General Public License for more details.
  20 #
  21 # You should have received a copy of the GNU General Public License
  22 # along with Koha; if not, see <http://www.gnu.org/licenses>.
  23
  24 use Modern::Perl;
  25 use CGI qw ( -utf8 );
  26 use YAML::XS;
  27 use List::MoreUtils;
  28 use Encode;
  29
  30 use C4::Context;
  31 use C4::Auth qw( get_template_and_user );
  32 use C4::Output qw( output_html_with_http_headers );
  33 use C4::ImportBatch qw( GetImportRecordsRange GetImportRecordMarc GetImportRecordMatches SetImportRecordStatus SetMatchedBiblionumber SetImportBatchStatus GetImportBatch GetImportBatchRangeDesc GetNumberOfNonZ3950ImportBatches GetImportBatchOverlayAction GetImportBatchNoMatchAction GetImportBatchItemAction );
  34 use C4::Matcher;
  35 use C4::Search qw( FindDuplicate );
  36 use C4::Acquisition qw( populate_order_with_prices );
  37 use C4::Biblio qw(
  38     AddBiblio
  39     GetMarcFromKohaField
  40     GetMarcPrice
  41     GetMarcQuantity
  42     TransformHtmlToXml
  43 );
  44 use C4::Items qw( PrepareItemrecordDisplay AddItemFromMarc );
  45 use C4::Budgets qw( GetBudget GetBudgets GetBudgetHierarchy CanUserUseBudget GetBudgetByCode );
  46 use C4::Acquisition qw( populate_order_with_prices );
  47 use C4::Suggestions;    # GetSuggestion
  48 use C4::Members;
  49
  50 use Koha::Number::Price;
  51 use Koha::Libraries;
  52 use Koha::Acquisition::Baskets;
  53 use Koha::Acquisition::Currencies;
  54 use Koha::Acquisition::Orders;
  55 use Koha::Acquisition::Booksellers;
  56 use Koha::Patrons;
  57
  58 my $input = CGI->new;
  59 my ($template, $loggedinuser, $cookie, $userflags) = get_template_and_user({
  60     template_name => "acqui/addorderiso2709.tt",
  61     query => $input,
  62     type => "intranet",
  63     flagsrequired   => { acquisition => 'order_manage' },
  64 });
  65
  66 my $cgiparams = $input->Vars;
  67 my $op = $cgiparams->{'op'} || '';
  68 my $booksellerid  = $input->param('booksellerid');
  69 my $allmatch = $input->param('allmatch');
  70 my $bookseller = Koha::Acquisition::Booksellers->find( $booksellerid );
  71
  72 $template->param(scriptname => "/cgi-bin/koha/acqui/addorderiso2709.pl",
  73                 booksellerid => $booksellerid,
  74                 booksellername => $bookseller->name,
  75                 );
  76
  77 if ($cgiparams->{'import_batch_id'} && $op eq ""){
  78     $op = "batch_details";
  79 }
  80
  81 #Needed parameters:
  82 if (! $cgiparams->{'basketno'}){
  83     die "Basketnumber required to order from iso2709 file import";
  84 }
  85 my $basket = Koha::Acquisition::Baskets->find( $cgiparams->{basketno} );
  86
  87 #
  88 # 1st step = choose the file to import into acquisition
  89 #
  90 if ($op eq ""){
  91     $template->param("basketno" => $cgiparams->{'basketno'});
  92 #display batches
  93     import_batches_list($template);
  94 #
  95 # 2nd step = display the content of the chosen file
  96 #
  97 } elsif ($op eq "batch_details"){
  98 #display lines inside the selected batch
  99
 100     $template->param("batch_details" => 1,
 101                      "basketno"      => $cgiparams->{'basketno'},
 102                      # get currencies (for change rates calcs if needed)
 103                      currencies => Koha::Acquisition::Currencies->search,
 104                      bookseller => $bookseller,
 105                      "allmatch" => $allmatch,
 106                      );
 107     import_biblios_list($template, $cgiparams->{'import_batch_id'});
 108     if ( $basket->effective_create_items eq 'ordering' && !$basket->is_standing ) {
 109         # prepare empty item form
 110         my $cell = PrepareItemrecordDisplay( '', '', undef, 'ACQ' );
 111
 112         #     warn "==> ".Data::Dumper::Dumper($cell);
 113         unless ($cell) {
 114             $cell = PrepareItemrecordDisplay( '', '', undef, '' );
 115             $template->param( 'NoACQframework' => 1 );
 116         }
 117         my @itemloop;
 118         push @itemloop, $cell;
 119
 120         $template->param( items => \@itemloop );
 121     }
 122 #
 123 # 3rd step = import the records
 124 #
 125 } elsif ( $op eq 'import_records' ) {
 126 #import selected lines
 127     $template->param('basketno' => $cgiparams->{'basketno'});
 128 # Budget_id is mandatory for adding an order, we just add a default, the user needs to modify this aftewards
 129     my $budgets = GetBudgets();
 130     if (scalar @$budgets == 0){
 131         die "No budgets defined, can't continue";
 132     }
 133     my $budget_id = @$budgets[0]->{'budget_id'};
 134 #get all records from a batch, and check their import status to see if they are checked.
 135 #(default values: quantity 1, uncertainprice yes, first budget)
 136
 137     # retrieve the file you want to import
 138     my $import_batch_id = $cgiparams->{'import_batch_id'};
 139     my $biblios = GetImportRecordsRange($import_batch_id);
 140     my $duplinbatch;
 141     my $imported = 0;
 142     my @import_record_id_selected = $input->multi_param("import_record_id");
 143     my @quantities = $input->multi_param('quantity');
 144     my @prices = $input->multi_param('price');
 145     my @orderreplacementprices = $input->multi_param('replacementprice');
 146     my @budgets_id = $input->multi_param('budget_id');
 147     my @discount = $input->multi_param('discount');
 148     my @sort1 = $input->multi_param('sort1');
 149     my @sort2 = $input->multi_param('sort2');
 150     my $matcher_id = $input->param('matcher_id');
 151     my $active_currency = Koha::Acquisition::Currencies->get_active;
 152     my $biblio_count = 0;
 153     for my $biblio (@$biblios){
 154         $biblio_count++;
 155         my $duplifound = 0;
 156         # Check if this import_record_id was selected
 157         next if not grep { $_ eq $$biblio{import_record_id} } @import_record_id_selected;
 158         my ( $marcblob, $encoding ) = GetImportRecordMarc( $biblio->{'import_record_id'} );
 159         my $marcrecord = MARC::Record->new_from_usmarc($marcblob) || die "couldn't translate marc information";
 160         my $match = GetImportRecordMatches( $biblio->{'import_record_id'}, 1 );
 161         my $biblionumber=$#$match > -1?$match->[0]->{'biblionumber'}:0;
 162         my $c_quantity = shift( @quantities ) || GetMarcQuantity($marcrecord, C4::Context->preference('marcflavour') ) || 1;
 163         my $c_budget_id = shift( @budgets_id ) || $input->param('all_budget_id') || $budget_id;
 164         my $c_discount = shift ( @discount);
 165         my $c_sort1 = shift( @sort1 ) || $input->param('all_sort1') || '';
 166         my $c_sort2 = shift( @sort2 ) || $input->param('all_sort2') || '';
 167         my $c_replacement_price = shift( @orderreplacementprices );
 168         my $c_price = shift( @prices ) || GetMarcPrice($marcrecord, C4::Context->preference('marcflavour'));
 169
 170         # Insert the biblio, or find it through matcher
 171         unless ( $biblionumber ) {
 172             if ($matcher_id) {
 173                 if ( $matcher_id eq '_TITLE_AUTHOR_' ) {
 174                     $duplifound = 1 if FindDuplicate($marcrecord);
 175                 }
 176                 else {
 177                     my $matcher = C4::Matcher->fetch($matcher_id);
 178                     my @matches = $matcher->get_matches( $marcrecord, my $max_matches = 1 );
 179                     $duplifound = 1 if @matches;
 180                 }
 181
 182                 $duplinbatch = $import_batch_id and next if $duplifound;
 183             }
 184
 185             # add the biblio
 186             my $bibitemnum;
 187
 188             # remove ISBN -
 189             my ( $isbnfield, $isbnsubfield ) = GetMarcFromKohaField( 'biblioitems.isbn' );
 190             if ( $marcrecord->field($isbnfield) ) {
 191                 foreach my $field ( $marcrecord->field($isbnfield) ) {
 192                     foreach my $subfield ( $field->subfield($isbnsubfield) ) {
 193                         my $newisbn = $field->subfield($isbnsubfield);
 194                         $newisbn =~ s/-//g;
 195                         $field->update( $isbnsubfield => $newisbn );
 196                     }
 197                 }
 198             }
 199             ( $biblionumber, $bibitemnum ) = AddBiblio( $marcrecord, $cgiparams->{'frameworkcode'} || '' );
 200             SetImportRecordStatus( $biblio->{'import_record_id'}, 'imported' );
 201         } else {
 202             SetImportRecordStatus( $biblio->{'import_record_id'}, 'imported' );
 203         }
 204
 205         SetMatchedBiblionumber( $biblio->{import_record_id}, $biblionumber );
 206
 207         # Add items from MarcItemFieldsToOrder
 208         my @homebranches = $input->multi_param('homebranch_' . $biblio_count);
 209         my $count = scalar @homebranches;
 210         my @holdingbranches = $input->multi_param('holdingbranch_' . $biblio_count);
 211         my @itypes = $input->multi_param('itype_' . $biblio_count);
 212         my @nonpublic_notes = $input->multi_param('nonpublic_note_' . $biblio_count);
 213         my @public_notes = $input->multi_param('public_note_' . $biblio_count);
 214         my @locs = $input->multi_param('loc_' . $biblio_count);
 215         my @ccodes = $input->multi_param('ccode_' . $biblio_count);
 216         my @notforloans = $input->multi_param('notforloan_' . $biblio_count);
 217         my @uris = $input->multi_param('uri_' . $biblio_count);
 218         my @copynos = $input->multi_param('copyno_' . $biblio_count);
 219         my @budget_codes = $input->multi_param('budget_code_' . $biblio_count);
 220         my @itemprices = $input->multi_param('itemprice_' . $biblio_count);
 221         my @replacementprices = $input->multi_param('replacementprice_' . $biblio_count);
 222         my @itemcallnumbers = $input->multi_param('itemcallnumber_' . $biblio_count);
 223         my $itemcreation = 0;
 224
 225         my @itemnumbers;
 226         for (my $i = 0; $i < $count; $i++) {
 227             $itemcreation = 1;
 228             my $item = Koha::Item->new(
 229                 {
 230                     biblionumber        => $biblionumber,
 231                     homebranch          => $homebranches[$i],
 232                     holdingbranch       => $holdingbranches[$i],
 233                     itemnotes_nonpublic => $nonpublic_notes[$i],
 234                     itemnotes           => $public_notes[$i],
 235                     location            => $locs[$i],
 236                     ccode               => $ccodes[$i],
 237                     itype               => $itypes[$i],
 238                     notforloan          => $notforloans[$i],
 239                     uri                 => $uris[$i],
 240                     copynumber          => $copynos[$i],
 241                     price               => $itemprices[$i],
 242                     replacementprice    => $replacementprices[$i],
 243                     itemcallnumber      => $itemcallnumbers[$i],
 244                 }
 245             )->store;
 246             push( @itemnumbers, $item->itemnumber );
 247         }
 248         if ($itemcreation == 1) {
 249             # Group orderlines from MarcItemFieldsToOrder
 250             my $budget_hash;
 251             for (my $i = 0; $i < $count; $i++) {
 252                 $budget_hash->{$budget_codes[$i]}->{quantity} += 1;
 253                 $budget_hash->{$budget_codes[$i]}->{price} = $itemprices[$i];
 254                 $budget_hash->{$budget_codes[$i]}->{replacementprice} = $replacementprices[$i];
 255                 $budget_hash->{$budget_codes[$i]}->{itemnumbers} //= [];
 256                 push @{ $budget_hash->{$budget_codes[$i]}->{itemnumbers} }, $itemnumbers[$i];
 257             }
 258
 259             # Create orderlines from MarcItemFieldsToOrder
 260             while(my ($budget_id, $infos) = each %$budget_hash) {
 261                 if ($budget_id) {
 262                     my %orderinfo = (
 263                         biblionumber       => $biblionumber,
 264                         basketno           => $cgiparams->{'basketno'},
 265                         quantity           => $infos->{quantity},
 266                         budget_id          => $budget_id,
 267                         currency           => $cgiparams->{'all_currency'},
 268                     );
 269
 270                     my $price = $infos->{price};
 271                     if ($price){
 272                         # in France, the cents separator is the , but sometimes, ppl use a .
 273                         # in this case, the price will be x100 when unformatted ! Replace the . by a , to get a proper price calculation
 274                         $price =~ s/\./,/ if C4::Context->preference("CurrencyFormat") eq "FR";
 275                         $price = Koha::Number::Price->new($price)->unformat;
 276                         $orderinfo{tax_rate} = $bookseller->tax_rate;
 277                         my $c = $c_discount ? $c_discount : $bookseller->discount;
 278                         $orderinfo{discount} = $c;
 279                         if ( $c ) {
 280                             $orderinfo{ecost} = $price * ( 1 - $c / 100 );
 281                             $orderinfo{rrp}   = $price;
 282                         }
 283                         $orderinfo{listprice} = $orderinfo{rrp} / $active_currency->rate;
 284                         $orderinfo{unitprice} = $orderinfo{ecost};
 285                         $orderinfo{total} = $orderinfo{ecost} * $infos->{quantity};
 286                     } else {
 287                         $orderinfo{listprice} = 0;
 288                     }
 289                     $orderinfo{replacementprice} = $infos->{replacementprice} || 0;
 290
 291                     # remove uncertainprice flag if we have found a price in the MARC record
 292                     $orderinfo{uncertainprice} = 0 if $orderinfo{listprice};
 293
 294                     %orderinfo = %{
 295                         C4::Acquisition::populate_order_with_prices(
 296                             {
 297                                 order        => \%orderinfo,
 298                                 booksellerid => $booksellerid,
 299                                 ordering     => 1,
 300                                 receiving    => 1,
 301                             }
 302                         )
 303                     };
 304
 305                     my $order = Koha::Acquisition::Order->new( \%orderinfo )->store;
 306                     $order->add_item( $_ ) for @{ $budget_hash->{$budget_id}->{itemnumbers} };
 307                 }
 308             }
 309         } else {
 310             # 3rd add order
 311             my $patron = Koha::Patrons->find( $loggedinuser );
 312             # get quantity in the MARC record (1 if none)
 313             my $quantity = GetMarcQuantity($marcrecord, C4::Context->preference('marcflavour')) || 1;
 314             my %orderinfo = (
 315                 biblionumber       => $biblionumber,
 316                 basketno           => $cgiparams->{'basketno'},
 317                 quantity           => $c_quantity,
 318                 branchcode         => $patron->branchcode,
 319                 budget_id          => $c_budget_id,
 320                 uncertainprice     => 1,
 321                 sort1              => $c_sort1,
 322                 sort2              => $c_sort2,
 323                 order_internalnote => $cgiparams->{'all_order_internalnote'},
 324                 order_vendornote   => $cgiparams->{'all_order_vendornote'},
 325                 currency           => $cgiparams->{'all_currency'},
 326                 replacementprice   => $c_replacement_price,
 327             );
 328             # get the price if there is one.
 329             if ($c_price){
 330                 # in France, the cents separator is the , but sometimes, ppl use a .
 331                 # in this case, the price will be x100 when unformatted ! Replace the . by a , to get a proper price calculation
 332                 $c_price =~ s/\./,/ if C4::Context->preference("CurrencyFormat") eq "FR";
 333                 $c_price = Koha::Number::Price->new($c_price)->unformat;
 334                 $orderinfo{tax_rate} = $bookseller->tax_rate;
 335                 my $c = $c_discount ? $c_discount : $bookseller->discount;
 336                 $orderinfo{discount} = $c;
 337                 if ( $c ) {
 338                     $orderinfo{ecost} = $c_price * ( 1 - $c / 100 );
 339                     $orderinfo{rrp}   = $c_price;
 340                 }
 341                 $orderinfo{listprice} = $orderinfo{rrp} / $active_currency->rate;
 342                 $orderinfo{unitprice} = $orderinfo{ecost};
 343                 $orderinfo{total} = $orderinfo{ecost} * $c_quantity;
 344             } else {
 345                 $orderinfo{listprice} = 0;
 346             }
 347
 348         # remove uncertainprice flag if we have found a price in the MARC record
 349         $orderinfo{uncertainprice} = 0 if $orderinfo{listprice};
 350
 351         %orderinfo = %{
 352             C4::Acquisition::populate_order_with_prices(
 353                 {
 354                     order        => \%orderinfo,
 355                     booksellerid => $booksellerid,
 356                     ordering     => 1,
 357                     receiving    => 1,
 358                 }
 359             )
 360         };
 361
 362         my $order = Koha::Acquisition::Order->new( \%orderinfo )->store;
 363
 364         # 4th, add items if applicable
 365         # parse the item sent by the form, and create an item just for the import_record_id we are dealing with
 366         # this is not optimised, but it's working !
 367         if ( $basket->effective_create_items eq 'ordering' && !$basket->is_standing ) {
 368             my @tags         = $input->multi_param('tag');
 369             my @subfields    = $input->multi_param('subfield');
 370             my @field_values = $input->multi_param('field_value');
 371             my @serials      = $input->multi_param('serial');
 372             my $xml = TransformHtmlToXml( \@tags, \@subfields, \@field_values );
 373             my $record = MARC::Record::new_from_xml( $xml, 'UTF-8' );
 374             for (my $qtyloop=1;$qtyloop <= $c_quantity;$qtyloop++) {
 375                 my ( $biblionumber, $bibitemnum, $itemnumber ) = AddItemFromMarc( $record, $biblionumber );
 376                 $order->add_item( $itemnumber );
 377                 }
 378             } else {
 379                 SetImportRecordStatus( $biblio->{'import_record_id'}, 'imported' );
 380             }
 381         }
 382         $imported++;
 383     }
 384
 385     # If all bibliographic records from the batch have been imported we modifying the status of the batch accordingly
 386     SetImportBatchStatus( $import_batch_id, 'imported' )
 387         if    @{ GetImportRecordsRange( $import_batch_id, undef, undef, 'imported' )}
 388            == @{ GetImportRecordsRange( $import_batch_id )};
 389
 390     # go to basket page
 391     if ( $imported ) {
 392         print $input->redirect("/cgi-bin/koha/acqui/basket.pl?basketno=".$cgiparams->{'basketno'}."&amp;duplinbatch=$duplinbatch");
 393     } else {
 394         print $input->redirect("/cgi-bin/koha/acqui/addorderiso2709.pl?import_batch_id=$import_batch_id&amp;basketno=".$cgiparams->{'basketno'}."&amp;booksellerid=$booksellerid&amp;allmatch=1");
 395     }
 396     exit;
 397 }
 398
 399 my $budgets = GetBudgets();
 400 my $budget_id = @$budgets[0]->{'budget_id'};
 401 # build bookfund list
 402 my $patron = Koha::Patrons->find( $loggedinuser )->unblessed;
 403 my $budget = GetBudget($budget_id);
 404
 405 # build budget list
 406 my $budget_loop = [];
 407 my $budgets_hierarchy = GetBudgetHierarchy;
 408 foreach my $r ( @{$budgets_hierarchy} ) {
 409     next unless (CanUserUseBudget($patron, $r, $userflags));
 410     push @{$budget_loop},
 411       { b_id  => $r->{budget_id},
 412         b_txt => $r->{budget_name},
 413         b_code => $r->{budget_code},
 414         b_sort1_authcat => $r->{'sort1_authcat'},
 415         b_sort2_authcat => $r->{'sort2_authcat'},
 416         b_active => $r->{budget_period_active},
 417         b_sel => ( $r->{budget_id} == $budget_id ) ? 1 : 0,
 418       };
 419 }
 420
 421 @{$budget_loop} =
 422   sort { uc( $a->{b_txt}) cmp uc( $b->{b_txt}) } @{$budget_loop};
 423
 424 $template->param( budget_loop    => $budget_loop,);
 425
 426 output_html_with_http_headers $input, $cookie, $template->output;
 427
 428
 429 sub import_batches_list {
 430     my ($template) = @_;
 431     my $batches = GetImportBatchRangeDesc();
 432
 433     my @list = ();
 434     foreach my $batch (@$batches) {
 435         if ( $batch->{'import_status'} =~ /^staged$|^reverted$/ && $batch->{'record_type'} eq 'biblio') {
 436             # check if there is at least 1 line still staged
 437             my $stagedList=GetImportRecordsRange($batch->{'import_batch_id'}, undef, 1, $batch->{import_status}, { order_by_direction => 'ASC' });
 438             if (scalar @$stagedList) {
 439                 push @list, {
 440                         import_batch_id => $batch->{'import_batch_id'},
 441                         num_records => $batch->{'num_records'},
 442                         num_items => $batch->{'num_items'},
 443                         staged_date => $batch->{'upload_timestamp'},
 444                         import_status => $batch->{'import_status'},
 445                         file_name => $batch->{'file_name'},
 446                         comments => $batch->{'comments'},
 447                 };
 448             } else {
 449                 # if there are no more line to includes, set the status to imported
 450                 # FIXME This should be removed in the future.
 451                 SetImportBatchStatus( $batch->{'import_batch_id'}, 'imported' );
 452             }
 453         }
 454     }
 455     $template->param(batch_list => \@list);
 456     my $num_batches = GetNumberOfNonZ3950ImportBatches();
 457     $template->param(num_results => $num_batches);
 458 }
 459
 460 sub import_biblios_list {
 461     my ($template, $import_batch_id) = @_;
 462     my $batch = GetImportBatch($import_batch_id,'staged');
 463     return () unless $batch and $batch->{import_status} =~ /^staged$|^reverted$/;
 464     my $biblios = GetImportRecordsRange($import_batch_id,'','',$batch->{import_status});
 465     my @list = ();
 466     my $item_error = 0;
 467
 468     my $ccodes = { map { $_->{authorised_value} => $_->{opac_description} } Koha::AuthorisedValues->get_descriptions_by_koha_field( { frameworkcode => '', kohafield => 'items.ccode' } ) };
 469     my $locations = { map { $_->{authorised_value} => $_->{opac_description} } Koha::AuthorisedValues->get_descriptions_by_koha_field( { frameworkcode => '', kohafield => 'items.location' } ) };
 470     my $notforloans = { map { $_->{authorised_value} => $_->{lib} } Koha::AuthorisedValues->get_descriptions_by_koha_field( { frameworkcode => '', kohafield => 'items.notforloan' } ) };
 471     # location list
 472     my @locations;
 473     foreach (sort keys %$locations) {
 474         push @locations, { code => $_, description => "$_ - " . $locations->{$_} };
 475     }
 476     my @ccodes;
 477     foreach (sort {$ccodes->{$a} cmp $ccodes->{$b}} keys %$ccodes) {
 478         push @ccodes, { code => $_, description => $ccodes->{$_} };
 479     }
 480     my @notforloans;
 481     foreach (sort {$notforloans->{$a} cmp $notforloans->{$b}} keys %$notforloans) {
 482         push @notforloans, { code => $_, description => $notforloans->{$_} };
 483     }
 484
 485     my $biblio_count = 0;
 486     foreach my $biblio (@$biblios) {
 487         my $item_id = 1;
 488         $biblio_count++;
 489         my $citation = $biblio->{'title'};
 490         $citation .= " $biblio->{'author'}" if $biblio->{'author'};
 491         $citation .= " (" if $biblio->{'issn'} or $biblio->{'isbn'};
 492         $citation .= $biblio->{'isbn'} if $biblio->{'isbn'};
 493         $citation .= ", " if $biblio->{'issn'} and $biblio->{'isbn'};
 494         $citation .= $biblio->{'issn'} if $biblio->{'issn'};
 495         $citation .= ")" if $biblio->{'issn'} or $biblio->{'isbn'};
 496         my $match = GetImportRecordMatches($biblio->{'import_record_id'}, 1);
 497         my %cellrecord = (
 498             import_record_id => $biblio->{'import_record_id'},
 499             citation => $citation,
 500             import  => 1,
 501             status => $biblio->{'status'},
 502             record_sequence => $biblio->{'record_sequence'},
 503             overlay_status => $biblio->{'overlay_status'},
 504             match_biblionumber => $#$match > -1 ? $match->[0]->{'biblionumber'} : 0,
 505             match_citation     => $#$match > -1 ? $match->[0]->{'title'} || '' . ' ' . $match->[0]->{'author'} || '': '',
 506             match_score => $#$match > -1 ? $match->[0]->{'score'} : 0,
 507         );
 508         my ( $marcblob, $encoding ) = GetImportRecordMarc( $biblio->{'import_record_id'} );
 509         my $marcrecord = MARC::Record->new_from_usmarc($marcblob) || die "couldn't translate marc information";
 510
 511         my $infos = get_infos_syspref('MarcFieldsToOrder', $marcrecord, ['price', 'quantity', 'budget_code', 'discount', 'sort1', 'sort2','replacementprice']);
 512         my $price = $infos->{price};
 513         my $replacementprice = $infos->{replacementprice};
 514         my $quantity = $infos->{quantity};
 515         my $budget_code = $infos->{budget_code};
 516         my $discount = $infos->{discount};
 517         my $sort1 = $infos->{sort1};
 518         my $sort2 = $infos->{sort2};
 519         my $budget_id;
 520         if($budget_code) {
 521             my $biblio_budget = GetBudgetByCode($budget_code);
 522             if($biblio_budget) {
 523                 $budget_id = $biblio_budget->{budget_id};
 524             }
 525         }
 526
 527         # Items
 528         my @itemlist = ();
 529         my $all_items_quantity = 0;
 530         my $alliteminfos = get_infos_syspref_on_item('MarcItemFieldsToOrder', $marcrecord, ['homebranch', 'holdingbranch', 'itype', 'nonpublic_note', 'public_note', 'loc', 'ccode', 'notforloan', 'uri', 'copyno', 'price', 'replacementprice', 'itemcallnumber', 'quantity', 'budget_code']);
 531         if ($alliteminfos != -1) {
 532             foreach my $iteminfos (@$alliteminfos) {
 533                 my $item_homebranch = $iteminfos->{homebranch};
 534                 my $item_holdingbranch = $iteminfos->{holdingbranch};
 535                 my $item_itype = $iteminfos->{itype};
 536                 my $item_nonpublic_note = $iteminfos->{nonpublic_note};
 537                 my $item_public_note = $iteminfos->{public_note};
 538                 my $item_loc = $iteminfos->{loc};
 539                 my $item_ccode = $iteminfos->{ccode};
 540                 my $item_notforloan = $iteminfos->{notforloan};
 541                 my $item_uri = $iteminfos->{uri};
 542                 my $item_copyno = $iteminfos->{copyno};
 543                 my $item_quantity = $iteminfos->{quantity} || 1;
 544                 my $item_budget_code = $iteminfos->{budget_code};
 545                 my $item_budget_id;
 546                 if ( $iteminfos->{budget_code} ) {
 547                     my $item_budget = GetBudgetByCode( $iteminfos->{budget_code} );
 548                     if ( $item_budget ) {
 549                         $item_budget_id = $item_budget->{budget_id};
 550                     }
 551                 }
 552                 my $item_price = $iteminfos->{price};
 553                 my $item_replacement_price = $iteminfos->{replacementprice};
 554                 my $item_callnumber = $iteminfos->{itemcallnumber};
 555
 556                 for (my $i = 0; $i < $item_quantity; $i++) {
 557
 558                     my %itemrecord = (
 559                         'item_id' => $item_id++,
 560                         'biblio_count' => $biblio_count,
 561                         'homebranch' => $item_homebranch,
 562                         'holdingbranch' => $item_holdingbranch,
 563                         'itype' => $item_itype,
 564                         'nonpublic_note' => $item_nonpublic_note,
 565                         'public_note' => $item_public_note,
 566                         'loc' => $item_loc,
 567                         'ccode' => $item_ccode,
 568                         'notforloan' => $item_notforloan,
 569                         'uri' => $item_uri,
 570                         'copyno' => $item_copyno,
 571                         'quantity' => $item_quantity,
 572                         'budget_id' => $item_budget_id || $budget_id,
 573                         'itemprice' => $item_price || $price,
 574                         'replacementprice' => $item_replacement_price || $replacementprice,
 575                         'itemcallnumber' => $item_callnumber,
 576                     );
 577                     $all_items_quantity++;
 578                     push @itemlist, \%itemrecord;
 579
 580                 }
 581             }
 582
 583             $cellrecord{'iteminfos'} = \@itemlist;
 584         } else {
 585             $cellrecord{'item_error'} = 1;
 586         }
 587         push @list, \%cellrecord;
 588
 589         if ($alliteminfos == -1 || scalar(@$alliteminfos) == 0) {
 590             $cellrecord{price} = $price || '';
 591             $cellrecord{replacementprice} = $replacementprice || '';
 592             $cellrecord{quantity} = $quantity || '';
 593             $cellrecord{budget_id} = $budget_id || '';
 594             $cellrecord{discount} = $discount || '';
 595             $cellrecord{sort1} = $sort1 || '';
 596             $cellrecord{sort2} = $sort2 || '';
 597         } else {
 598             $cellrecord{quantity} = $all_items_quantity;
 599         }
 600
 601     }
 602     my $num_records = $batch->{'num_records'};
 603     my $overlay_action = GetImportBatchOverlayAction($import_batch_id);
 604     my $nomatch_action = GetImportBatchNoMatchAction($import_batch_id);
 605     my $item_action = GetImportBatchItemAction($import_batch_id);
 606     $template->param(biblio_list => \@list,
 607                         num_results => $num_records,
 608                         import_batch_id => $import_batch_id,
 609                         "overlay_action_${overlay_action}" => 1,
 610                         overlay_action => $overlay_action,
 611                         "nomatch_action_${nomatch_action}" => 1,
 612                         nomatch_action => $nomatch_action,
 613                         "item_action_${item_action}" => 1,
 614                         item_action => $item_action,
 615                         item_error => $item_error,
 616                         libraries => Koha::Libraries->search,
 617                         locationloop => \@locations,
 618                         itemtypes => Koha::ItemTypes->search,
 619                         ccodeloop => \@ccodes,
 620                         notforloanloop => \@notforloans,
 621                     );
 622     batch_info($template, $batch);
 623 }
 624
 625 sub batch_info {
 626     my ($template, $batch) = @_;
 627     $template->param(batch_info => 1,
 628                                       file_name => $batch->{'file_name'},
 629                                           comments => $batch->{'comments'},
 630                                           import_status => $batch->{'import_status'},
 631                                           upload_timestamp => $batch->{'upload_timestamp'},
 632                                           num_records => $batch->{'num_records'},
 633                                           num_items => $batch->{'num_items'});
 634     if ($batch->{'num_records'} > 0) {
 635         if ($batch->{'import_status'} eq 'staged' or $batch->{'import_status'} eq 'reverted') {
 636             $template->param(can_commit => 1);
 637         }
 638         if ($batch->{'import_status'} eq 'imported') {
 639             $template->param(can_revert => 1);
 640         }
 641     }
 642     if (defined $batch->{'matcher_id'}) {
 643         my $matcher = C4::Matcher->fetch($batch->{'matcher_id'});
 644         if (defined $matcher) {
 645             $template->param('current_matcher_id' => $batch->{'matcher_id'},
 646                                               'current_matcher_code' => $matcher->code(),
 647                                               'current_matcher_description' => $matcher->description());
 648         }
 649     }
 650     add_matcher_list($batch->{'matcher_id'}, $template);
 651 }
 652
 653 sub add_matcher_list {
 654     my ($current_matcher_id, $template) = @_;
 655     my @matchers = C4::Matcher::GetMatcherList();
 656     if (defined $current_matcher_id) {
 657         for (my $i = 0; $i <= $#matchers; $i++) {
 658             if ($matchers[$i]->{'matcher_id'} == $current_matcher_id) {
 659                 $matchers[$i]->{'selected'} = 1;
 660             }
 661         }
 662     }
 663     $template->param(available_matchers => \@matchers);
 664 }
 665
 666 sub get_infos_syspref {
 667     my ($syspref_name, $record, $field_list) = @_;
 668     my $syspref = C4::Context->preference($syspref_name);
 669     $syspref = "$syspref\n\n"; # YAML is anal on ending \n. Surplus does not hurt
 670     my $yaml = eval {
 671         YAML::XS::Load(Encode::encode_utf8($syspref));
 672     };
 673     if ( $@ ) {
 674         warn "Unable to parse $syspref syspref : $@";
 675         return ();
 676     }
 677     my $r;
 678     for my $field_name ( @$field_list ) {
 679         next unless exists $yaml->{$field_name};
 680         my @fields = split /\|/, $yaml->{$field_name};
 681         for my $field ( @fields ) {
 682             my ( $f, $sf ) = split /\$/, $field;
 683             next unless $f and $sf;
 684             if ( my $v = $record->subfield( $f, $sf ) ) {
 685                 $r->{$field_name} = $v;
 686             }
 687             last if $yaml->{$field};
 688         }
 689     }
 690     return $r;
 691 }
 692
 693 sub equal_number_of_fields {
 694     my ($tags_list, $record) = @_;
 695     my $tag_fields_count;
 696     for my $tag (@$tags_list) {
 697         my @fields = $record->field($tag);
 698         $tag_fields_count->{$tag} = scalar @fields;
 699     }
 700
 701     my $tags_count;
 702     foreach my $key ( keys %$tag_fields_count ) {
 703         if ( $tag_fields_count->{$key} > 0 ) { # Having 0 of a field is ok
 704             $tags_count //= $tag_fields_count->{$key}; # Start with the count from the first occurrence
 705             return -1 if $tag_fields_count->{$key} != $tags_count; # All counts of various fields should be equal if they exist
 706         }
 707     }
 708
 709     return $tags_count;
 710 }
 711
 712 sub get_infos_syspref_on_item {
 713     my ($syspref_name, $record, $field_list) = @_;
 714     my $syspref = C4::Context->preference($syspref_name);
 715     $syspref = "$syspref\n\n"; # YAML is anal on ending \n. Surplus does not hurt
 716     my $yaml = eval {
 717         YAML::XS::Load(Encode::encode_utf8($syspref));
 718     };
 719     if ( $@ ) {
 720         warn "Unable to parse $syspref syspref : $@";
 721         return ();
 722     }
 723     my @result;
 724     my @tags_list;
 725
 726     # Check tags in syspref definition
 727     for my $field_name ( @$field_list ) {
 728         next unless exists $yaml->{$field_name};
 729         my @fields = split /\|/, $yaml->{$field_name};
 730         for my $field ( @fields ) {
 731             my ( $f, $sf ) = split /\$/, $field;
 732             next unless $f and $sf;
 733             push @tags_list, $f;
 734         }
 735     }
 736     @tags_list = List::MoreUtils::uniq(@tags_list);
 737
 738     my $tags_count = equal_number_of_fields(\@tags_list, $record);
 739     # Return if the number of these fields in the record is not the same.
 740     return -1 if $tags_count == -1;
 741
 742     # Gather the fields
 743     my $fields_hash;
 744     foreach my $tag (@tags_list) {
 745         my @tmp_fields;
 746         foreach my $field ($record->field($tag)) {
 747             push @tmp_fields, $field;
 748         }
 749         $fields_hash->{$tag} = \@tmp_fields;
 750     }
 751
 752     for (my $i = 0; $i < $tags_count; $i++) {
 753         my $r;
 754         for my $field_name ( @$field_list ) {
 755             next unless exists $yaml->{$field_name};
 756             my @fields = split /\|/, $yaml->{$field_name};
 757             for my $field ( @fields ) {
 758                 my ( $f, $sf ) = split /\$/, $field;
 759                 next unless $f and $sf;
 760                 my $v = $fields_hash->{$f}[$i] ? $fields_hash->{$f}[$i]->subfield( $sf ) : undef;
 761                 $r->{$field_name} = $v if (defined $v);
 762                 last if $yaml->{$field};
 763             }
 764         }
 765         push @result, $r;
 766     }
 767     return \@result;
 768 }