Bug 35918: Fix auto library connect (AutoLocation)
[koha.git] / acqui / addorderiso2709.pl
1 #!/usr/bin/perl
2
3 #A script that lets the user populate a basket from an iso2709 file
4 #the script first displays a list of import batches, then when a batch is selected displays all the biblios in it.
5 #The user can then pick which biblios they want to order
6
7 # Copyright 2008 - 2011 BibLibre SARL
8 #
9 # This file is part of Koha.
10 #
11 # Koha is free software; you can redistribute it and/or modify it
12 # under the terms of the GNU General Public License as published by
13 # the Free Software Foundation; either version 3 of the License, or
14 # (at your option) any later version.
15 #
16 # Koha is distributed in the hope that it will be useful, but
17 # WITHOUT ANY WARRANTY; without even the implied warranty of
18 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the
19 # GNU General Public License for more details.
20 #
21 # You should have received a copy of the GNU General Public License
22 # along with Koha; if not, see <http://www.gnu.org/licenses>.
23
24 use Modern::Perl;
25 use CGI qw ( -utf8 );
26 use YAML::XS;
27 use List::MoreUtils;
28 use Encode;
29
30 use C4::Context;
31 use C4::Auth qw( get_template_and_user );
32 use C4::Output qw( output_html_with_http_headers );
33 use C4::ImportBatch qw( SetImportBatchStatus GetImportBatch GetImportBatchRangeDesc GetNumberOfNonZ3950ImportBatches GetImportBatchOverlayAction GetImportBatchNoMatchAction GetImportBatchItemAction );
34 use C4::Matcher;
35 use C4::Search qw( FindDuplicate );
36 use C4::Biblio qw(
37     AddBiblio
38     GetMarcFromKohaField
39     GetMarcPrice
40     GetMarcQuantity
41     TransformHtmlToXml
42 );
43 use C4::Items qw( PrepareItemrecordDisplay AddItemFromMarc );
44 use C4::Budgets qw( GetBudget GetBudgets GetBudgetHierarchy CanUserUseBudget GetBudgetByCode );
45 use C4::Suggestions;    # GetSuggestion
46 use C4::Members;
47
48 use Koha::Number::Price;
49 use Koha::Libraries;
50 use Koha::Acquisition::Baskets;
51 use Koha::Acquisition::Currencies;
52 use Koha::Acquisition::Orders;
53 use Koha::Acquisition::Booksellers;
54 use Koha::ImportBatches;
55 use Koha::Import::Records;
56 use Koha::Patrons;
57
58 my $input = CGI->new;
59 my ($template, $loggedinuser, $cookie, $userflags) = get_template_and_user({
60     template_name => "acqui/addorderiso2709.tt",
61     query => $input,
62     type => "intranet",
63     flagsrequired   => { acquisition => 'order_manage' },
64 });
65
66 my $cgiparams = $input->Vars;
67 my $op = $cgiparams->{'op'} || '';
68 my $booksellerid  = $input->param('booksellerid');
69 my $allmatch = $input->param('allmatch');
70 my $bookseller = Koha::Acquisition::Booksellers->find( $booksellerid );
71
72 $template->param(scriptname => "/cgi-bin/koha/acqui/addorderiso2709.pl",
73                 booksellerid => $booksellerid,
74                 booksellername => $bookseller->name,
75                 );
76
77 if ($cgiparams->{'import_batch_id'} && $op eq ""){
78     $op = "batch_details";
79 }
80
81 #Needed parameters:
82 if (! $cgiparams->{'basketno'}){
83     die "Basketnumber required to order from iso2709 file import";
84 }
85 my $basket = Koha::Acquisition::Baskets->find( $cgiparams->{basketno} );
86
87 #
88 # 1st step = choose the file to import into acquisition
89 #
90 if ($op eq ""){
91     $template->param("basketno" => $cgiparams->{'basketno'});
92 #display batches
93     import_batches_list($template);
94 #
95 # 2nd step = display the content of the chosen file
96 #
97 } elsif ($op eq "batch_details"){
98 #display lines inside the selected batch
99
100     $template->param("batch_details" => 1,
101                      "basketno"      => $cgiparams->{'basketno'},
102                      # get currencies (for change rates calcs if needed)
103                      currencies => Koha::Acquisition::Currencies->search,
104                      bookseller => $bookseller,
105                      "allmatch" => $allmatch,
106                      );
107     import_biblios_list($template, $cgiparams->{'import_batch_id'});
108     if ( $basket->effective_create_items eq 'ordering' && !$basket->is_standing ) {
109         # prepare empty item form
110         my $cell = PrepareItemrecordDisplay( '', '', undef, 'ACQ' );
111
112         #     warn "==> ".Data::Dumper::Dumper($cell);
113         unless ($cell) {
114             $cell = PrepareItemrecordDisplay( '', '', undef, '' );
115             $template->param( 'NoACQframework' => 1 );
116         }
117         my @itemloop;
118         push @itemloop, $cell;
119
120         $template->param( items => \@itemloop );
121     }
122 #
123 # 3rd step = import the records
124 #
125 } elsif ( $op eq 'import_records' ) {
126 #import selected lines
127     $template->param('basketno' => $cgiparams->{'basketno'});
128 # Budget_id is mandatory for adding an order, we just add a default, the user needs to modify this aftewards
129     my $budgets = GetBudgets();
130     if (scalar @$budgets == 0){
131         die "No budgets defined, can't continue";
132     }
133     my $budget_id = @$budgets[0]->{'budget_id'};
134 #get all records from a batch, and check their import status to see if they are checked.
135 #(default values: quantity 1, uncertainprice yes, first budget)
136
137     # retrieve the file you want to import
138     my $import_batch_id = $cgiparams->{'import_batch_id'};
139     my $import_batch = Koha::ImportBatches->find( $import_batch_id );
140     my $overlay_action = $import_batch->overlay_action;
141     my $import_records = Koha::Import::Records->search({
142         import_batch_id => $import_batch_id,
143     });
144     my $duplinbatch;
145     my $imported = 0;
146     my @import_record_id_selected = $input->multi_param("import_record_id");
147     my $matcher_id = $input->param('matcher_id');
148     my $active_currency = Koha::Acquisition::Currencies->get_active;
149     my $biblio_count = 0;
150     while( my $import_record = $import_records->next ){
151         $biblio_count++;
152         my $duplifound = 0;
153         # Check if this import_record_id was selected
154         next if not grep { $_ eq $import_record->import_record_id } @import_record_id_selected;
155         my $marcrecord = $import_record->get_marc_record || die "couldn't translate marc information";
156         my $matches = $import_record->get_import_record_matches({ chosen => 1 });
157         my $match = $matches->count ? $matches->next : undef;
158         my $biblionumber = $match ? $match->candidate_match_id : 0;
159         my $c_quantity =
160                $input->param( 'quantity_' . $import_record->import_record_id )
161             || GetMarcQuantity( $marcrecord, C4::Context->preference('marcflavour') )
162             || 1;
163         my $c_budget_id =
164                $input->param( 'budget_id_' . $import_record->import_record_id )
165             || $input->param('all_budget_id')
166             || $budget_id;
167         my $c_discount = $input->param( 'discount_' . $import_record->import_record_id );
168         my $c_sort1 = $input->param( 'sort1_' . $import_record->import_record_id ) || $input->param('all_sort1') || '';
169         my $c_sort2 = $input->param( 'sort2_' . $import_record->import_record_id ) || $input->param('all_sort2') || '';
170         my $c_replacement_price = $input->param( 'replacementprice_' . $import_record->import_record_id );
171         my $c_price             = $input->param( 'price_' . $import_record->import_record_id )
172             || GetMarcPrice( $marcrecord, C4::Context->preference('marcflavour') );
173
174         # Insert the biblio, or find it through matcher
175         if ( $biblionumber ) { # If matched during staging we can continue
176             $import_record->status('imported')->store;
177             if( $overlay_action eq 'replace' ){
178                 my $biblio = Koha::Biblios->find( $biblionumber );
179                 $import_record->replace({ biblio => $biblio });
180             }
181         } else { # Otherwise we check for duplicates, and skip if they exist
182             if ($matcher_id) {
183                 if ( $matcher_id eq '_TITLE_AUTHOR_' ) {
184                     $duplifound = 1 if FindDuplicate($marcrecord);
185                 }
186                 else {
187                     my $matcher = C4::Matcher->fetch($matcher_id);
188                     my @matches = $matcher->get_matches( $marcrecord, my $max_matches = 1 );
189                     $duplifound = 1 if @matches;
190                 }
191
192                 $duplinbatch = $import_batch_id and next if $duplifound;
193             }
194
195             # remove hyphens (-) from ISBN
196             # FIXME: This should probably be optional
197             my ( $isbnfield, $isbnsubfield ) = GetMarcFromKohaField( 'biblioitems.isbn' );
198             if ( $marcrecord->field($isbnfield) ) {
199                 foreach my $field ( $marcrecord->field($isbnfield) ) {
200                     foreach my $subfield ( $field->subfield($isbnsubfield) ) {
201                         my $newisbn = $field->subfield($isbnsubfield);
202                         $newisbn =~ s/-//g;
203                         $field->update( $isbnsubfield => $newisbn );
204                     }
205                 }
206             }
207
208             # add the biblio
209             ( $biblionumber, undef ) = AddBiblio( $marcrecord, $cgiparams->{'frameworkcode'} || '' );
210             $import_record->status('imported')->store;
211         }
212
213         $import_record->import_biblio->matched_biblionumber($biblionumber)->store;
214
215         # Add items from MarcItemFieldsToOrder
216         my @homebranches = $input->multi_param('homebranch_' . $import_record->import_record_id);
217         my $count = scalar @homebranches;
218         my @holdingbranches = $input->multi_param('holdingbranch_' . $import_record->import_record_id);
219         my @itypes = $input->multi_param('itype_' . $import_record->import_record_id);
220         my @nonpublic_notes = $input->multi_param('nonpublic_note_' . $import_record->import_record_id);
221         my @public_notes = $input->multi_param('public_note_' . $import_record->import_record_id);
222         my @locs = $input->multi_param('loc_' . $import_record->import_record_id);
223         my @ccodes = $input->multi_param('ccode_' . $import_record->import_record_id);
224         my @notforloans = $input->multi_param('notforloan_' . $import_record->import_record_id);
225         my @uris = $input->multi_param('uri_' . $import_record->import_record_id);
226         my @copynos = $input->multi_param('copyno_' . $import_record->import_record_id);
227         my @budget_ids =
228             $input->multi_param( 'budget_code_' . $import_record->import_record_id ); # bad field name used in template!
229         my @itemprices = $input->multi_param('itemprice_' . $import_record->import_record_id);
230         my @replacementprices = $input->multi_param('replacementprice_' . $import_record->import_record_id);
231         my @itemcallnumbers = $input->multi_param('itemcallnumber_' . $import_record->import_record_id);
232         my $itemcreation = 0;
233
234         my @itemnumbers;
235         for (my $i = 0; $i < $count; $i++) {
236             $itemcreation = 1;
237             my $item = Koha::Item->new(
238                 {
239                     biblionumber        => $biblionumber,
240                     homebranch          => $homebranches[$i],
241                     holdingbranch       => $holdingbranches[$i],
242                     itemnotes_nonpublic => $nonpublic_notes[$i],
243                     itemnotes           => $public_notes[$i],
244                     location            => $locs[$i],
245                     ccode               => $ccodes[$i],
246                     itype               => $itypes[$i],
247                     notforloan          => $notforloans[$i],
248                     uri                 => $uris[$i],
249                     copynumber          => $copynos[$i],
250                     price               => $itemprices[$i],
251                     replacementprice    => $replacementprices[$i],
252                     itemcallnumber      => $itemcallnumbers[$i],
253                 }
254             )->store;
255             push( @itemnumbers, $item->itemnumber );
256         }
257         if ($itemcreation == 1) {
258             # Group orderlines from MarcItemFieldsToOrder
259             my $budget_hash;
260             for (my $i = 0; $i < $count; $i++) {
261                 $budget_ids[$i] = $budget_id if !$budget_ids[$i];   # Use default budget if no budget selected in the UI
262                 $budget_hash->{ $budget_ids[$i] }->{quantity} += 1;
263                 $budget_hash->{ $budget_ids[$i] }->{price} = $itemprices[$i];
264                 $budget_hash->{ $budget_ids[$i] }->{replacementprice} =
265                   $replacementprices[$i];
266                 $budget_hash->{ $budget_ids[$i] }->{itemnumbers} //= [];
267                 push @{ $budget_hash->{ $budget_ids[$i] }->{itemnumbers} },
268                   $itemnumbers[$i];
269             }
270
271             # Create orderlines from MarcItemFieldsToOrder
272             while(my ($budget_id, $infos) = each %$budget_hash) {
273                 if ($budget_id) {
274                     my %orderinfo = (
275                         biblionumber       => $biblionumber,
276                         basketno           => $cgiparams->{'basketno'},
277                         quantity           => $infos->{quantity},
278                         budget_id          => $budget_id,
279                         currency           => $cgiparams->{'all_currency'},
280                     );
281
282                     my $price = $infos->{price};
283                     if ($price){
284                         # in France, the cents separator is the , but sometimes, ppl use a .
285                         # in this case, the price will be x100 when unformatted ! Replace the . by a , to get a proper price calculation
286                         $price =~ s/\./,/ if C4::Context->preference("CurrencyFormat") eq "FR";
287                         $price = Koha::Number::Price->new($price)->unformat;
288                         $orderinfo{tax_rate_on_ordering} = $bookseller->tax_rate;
289                         $orderinfo{tax_rate_on_receiving} = $bookseller->tax_rate;
290                         my $order_discount = $c_discount ? $c_discount : $bookseller->discount;
291                         $orderinfo{discount} = $order_discount;
292                         $orderinfo{rrp} = $price;
293                         $orderinfo{ecost} = $order_discount ? $price * ( 1 - $order_discount / 100 ) : $price;
294                         $orderinfo{listprice} = $orderinfo{rrp} / $active_currency->rate;
295                         $orderinfo{unitprice} = $orderinfo{ecost};
296                         $orderinfo{sort1} = $c_sort1;
297                         $orderinfo{sort2} = $c_sort2;
298                     } else {
299                         $orderinfo{listprice} = 0;
300                     }
301                     $orderinfo{replacementprice} = $infos->{replacementprice} || 0;
302
303                     # remove uncertainprice flag if we have found a price in the MARC record
304                     $orderinfo{uncertainprice} = 0 if $orderinfo{listprice};
305
306                     my $order = Koha::Acquisition::Order->new( \%orderinfo );
307                     $order->populate_with_prices_for_ordering();
308                     $order->populate_with_prices_for_receiving();
309                     $order->store;
310                     $order->add_item( $_ ) for @{ $budget_hash->{$budget_id}->{itemnumbers} };
311                 }
312             }
313         } else {
314             # 3rd add order
315             my $patron = Koha::Patrons->find( $loggedinuser );
316             # get quantity in the MARC record (1 if none)
317             my $quantity = GetMarcQuantity($marcrecord, C4::Context->preference('marcflavour')) || 1;
318             my %orderinfo = (
319                 biblionumber       => $biblionumber,
320                 basketno           => $cgiparams->{'basketno'},
321                 quantity           => $c_quantity,
322                 branchcode         => $patron->branchcode,
323                 budget_id          => $c_budget_id,
324                 uncertainprice     => 1,
325                 sort1              => $c_sort1,
326                 sort2              => $c_sort2,
327                 order_internalnote => $cgiparams->{'all_order_internalnote'},
328                 order_vendornote   => $cgiparams->{'all_order_vendornote'},
329                 currency           => $cgiparams->{'all_currency'},
330                 replacementprice   => $c_replacement_price,
331             );
332             # get the price if there is one.
333             if ($c_price){
334                 # in France, the cents separator is the , but sometimes, ppl use a .
335                 # in this case, the price will be x100 when unformatted ! Replace the . by a , to get a proper price calculation
336                 $c_price =~ s/\./,/ if C4::Context->preference("CurrencyFormat") eq "FR";
337                 $c_price = Koha::Number::Price->new($c_price)->unformat;
338                 $orderinfo{tax_rate_on_ordering} = $bookseller->tax_rate;
339                 $orderinfo{tax_rate_on_receiving} = $bookseller->tax_rate;
340                 my $order_discount = $c_discount ? $c_discount : $bookseller->discount;
341                 $orderinfo{discount} = $order_discount;
342                 $orderinfo{rrp}   = $c_price;
343                 $orderinfo{ecost} = $order_discount ? $c_price * ( 1 - $order_discount / 100 ) : $c_price;
344                 $orderinfo{listprice} = $orderinfo{rrp} / $active_currency->rate;
345                 $orderinfo{unitprice} = $orderinfo{ecost};
346             } else {
347                 $orderinfo{listprice} = 0;
348             }
349
350             # remove uncertainprice flag if we have found a price in the MARC record
351             $orderinfo{uncertainprice} = 0 if $orderinfo{listprice};
352
353             my $order = Koha::Acquisition::Order->new( \%orderinfo );
354             $order->populate_with_prices_for_ordering();
355             $order->populate_with_prices_for_receiving();
356             $order->store;
357
358             # 4th, add items if applicable
359             # parse the item sent by the form, and create an item just for the import_record_id we are dealing with
360             # this is not optimised, but it's working !
361             if ( $basket->effective_create_items eq 'ordering' && !$basket->is_standing ) {
362                 my @tags         = $input->multi_param('tag');
363                 my @subfields    = $input->multi_param('subfield');
364                 my @field_values = $input->multi_param('field_value');
365                 my @serials      = $input->multi_param('serial');
366                 my $xml = TransformHtmlToXml( \@tags, \@subfields, \@field_values );
367                 my $record = MARC::Record::new_from_xml( $xml, 'UTF-8' );
368                 for (my $qtyloop=1;$qtyloop <= $c_quantity;$qtyloop++) {
369                     my ( $biblionumber, undef, $itemnumber ) = AddItemFromMarc( $record, $biblionumber );
370                     $order->add_item( $itemnumber );
371                 }
372             }
373         }
374         $imported++;
375     }
376
377     # If all bibliographic records from the batch have been imported we modifying the status of the batch accordingly
378     SetImportBatchStatus( $import_batch_id, 'imported' )
379         if Koha::Import::Records->search({import_batch_id => $import_batch_id, status => 'imported' })->count
380            == Koha::Import::Records->search({import_batch_id => $import_batch_id})->count;
381
382     # go to basket page
383     if ( $imported ) {
384         print $input->redirect("/cgi-bin/koha/acqui/basket.pl?basketno=".$cgiparams->{'basketno'}."&amp;duplinbatch=$duplinbatch");
385     } else {
386         print $input->redirect("/cgi-bin/koha/acqui/addorderiso2709.pl?import_batch_id=$import_batch_id&amp;basketno=".$cgiparams->{'basketno'}."&amp;booksellerid=$booksellerid&amp;allmatch=1");
387     }
388     exit;
389 }
390
391 my $budgets = GetBudgets();
392 my $budget_id = @$budgets[0]->{'budget_id'};
393 # build bookfund list
394 my $patron = Koha::Patrons->find( $loggedinuser )->unblessed;
395 my $budget = GetBudget($budget_id);
396
397 # build budget list
398 my $budget_loop = [];
399 my $budgets_hierarchy = GetBudgetHierarchy;
400 foreach my $r ( @{$budgets_hierarchy} ) {
401     next unless (CanUserUseBudget($patron, $r, $userflags));
402     push @{$budget_loop},
403       { b_id  => $r->{budget_id},
404         b_txt => $r->{budget_name},
405         b_code => $r->{budget_code},
406         b_sort1_authcat => $r->{'sort1_authcat'},
407         b_sort2_authcat => $r->{'sort2_authcat'},
408         b_active => $r->{budget_period_active},
409         b_sel => ( $r->{budget_id} == $budget_id ) ? 1 : 0,
410       };
411 }
412
413 @{$budget_loop} =
414   sort { uc( $a->{b_txt}) cmp uc( $b->{b_txt}) } @{$budget_loop};
415
416 $template->param( budget_loop    => $budget_loop,);
417
418 output_html_with_http_headers $input, $cookie, $template->output;
419
420
421 sub import_batches_list {
422     my ($template) = @_;
423     my $batches = GetImportBatchRangeDesc();
424
425     my @list = ();
426     foreach my $batch (@$batches) {
427         if ( $batch->{'import_status'} =~ /^staged$|^reverted$/ && $batch->{'record_type'} eq 'biblio') {
428             # check if there is at least 1 line still staged
429             my $import_records_count = Koha::Import::Records->search({
430                 import_batch_id => $batch->{'import_batch_id'},
431                 status          => $batch->{import_status}
432             })->count;
433             if ( $import_records_count ) {
434                 push @list, {
435                         import_batch_id => $batch->{'import_batch_id'},
436                         num_records => $batch->{'num_records'},
437                         num_items => $batch->{'num_items'},
438                         staged_date => $batch->{'upload_timestamp'},
439                         import_status => $batch->{'import_status'},
440                         file_name => $batch->{'file_name'},
441                         comments => $batch->{'comments'},
442                 };
443             } else {
444                 # if there are no more line to includes, set the status to imported
445                 # FIXME This should be removed in the future.
446                 SetImportBatchStatus( $batch->{'import_batch_id'}, 'imported' );
447             }
448         }
449     }
450     $template->param(batch_list => \@list); 
451     my $num_batches = GetNumberOfNonZ3950ImportBatches();
452     $template->param(num_results => $num_batches);
453 }
454
455 sub import_biblios_list {
456     my ($template, $import_batch_id) = @_;
457     my $batch = GetImportBatch($import_batch_id,'staged');
458     return () unless $batch and $batch->{import_status} =~ /^staged$|^reverted$/;
459     my $import_records = Koha::Import::Records->search({
460         import_batch_id => $import_batch_id,
461         status => $batch->{import_status}
462     });
463     my @list = ();
464     my $item_error = 0;
465
466     my $ccodes = { map { $_->{authorised_value} => $_->{opac_description} } Koha::AuthorisedValues->get_descriptions_by_koha_field( { frameworkcode => '', kohafield => 'items.ccode' } ) };
467     my $locations = { map { $_->{authorised_value} => $_->{opac_description} } Koha::AuthorisedValues->get_descriptions_by_koha_field( { frameworkcode => '', kohafield => 'items.location' } ) };
468     my $notforloans = { map { $_->{authorised_value} => $_->{lib} } Koha::AuthorisedValues->get_descriptions_by_koha_field( { frameworkcode => '', kohafield => 'items.notforloan' } ) };
469     # location list
470     my @locations;
471     foreach (sort keys %$locations) {
472         push @locations, { code => $_, description => "$_ - " . $locations->{$_} };
473     }
474     my @ccodes;
475     foreach (sort {$ccodes->{$a} cmp $ccodes->{$b}} keys %$ccodes) {
476         push @ccodes, { code => $_, description => $ccodes->{$_} };
477     }
478     my @notforloans;
479     foreach (sort {$notforloans->{$a} cmp $notforloans->{$b}} keys %$notforloans) {
480         push @notforloans, { code => $_, description => $notforloans->{$_} };
481     }
482
483     my $biblio_count = 0;
484     while ( my $import_record = $import_records->next ) {
485         my $item_id = 1;
486         $biblio_count++;
487         my $matches = $import_record->get_import_record_matches({ chosen => 1 });
488         my $match = $matches->count ? $matches->next : undef;
489         my $match_biblio = $match ? Koha::Biblios->find({ biblionumber => $match->candidate_match_id }) : undef;
490         my %cellrecord = (
491             import_record_id => $import_record->import_record_id,
492             import_biblio => $import_record->import_biblio,
493             import  => 1,
494             status => $import_record->status,
495             record_sequence => $import_record->record_sequence,
496             overlay_status => $import_record->overlay_status,
497             match_biblionumber => $match ? $match->candidate_match_id : 0,
498             match_citation     => $match_biblio ? ($match_biblio->title || '') . ' ' .( $match_biblio->author || ''): '',
499             match_score => $match ? $match->score : 0,
500         );
501         my $marcrecord = $import_record->get_marc_record || die "couldn't translate marc information";
502
503         my $infos = get_infos_syspref('MarcFieldsToOrder', $marcrecord, ['price', 'quantity', 'budget_code', 'discount', 'sort1', 'sort2','replacementprice']);
504         my $price = $infos->{price};
505         my $replacementprice = $infos->{replacementprice};
506         my $quantity = $infos->{quantity};
507         my $budget_code = $infos->{budget_code};
508         my $discount = $infos->{discount};
509         my $sort1 = $infos->{sort1};
510         my $sort2 = $infos->{sort2};
511         my $budget_id;
512         if($budget_code) {
513             my $biblio_budget = GetBudgetByCode($budget_code);
514             if($biblio_budget) {
515                 $budget_id = $biblio_budget->{budget_id};
516             }
517         }
518
519         # Items
520         my @itemlist = ();
521         my $all_items_quantity = 0;
522         my $alliteminfos = get_infos_syspref_on_item('MarcItemFieldsToOrder', $marcrecord, ['homebranch', 'holdingbranch', 'itype', 'nonpublic_note', 'public_note', 'loc', 'ccode', 'notforloan', 'uri', 'copyno', 'price', 'replacementprice', 'itemcallnumber', 'quantity', 'budget_code']);
523         if ($alliteminfos != -1) {
524             foreach my $iteminfos (@$alliteminfos) {
525                 my $item_homebranch = $iteminfos->{homebranch};
526                 my $item_holdingbranch = $iteminfos->{holdingbranch};
527                 my $item_itype = $iteminfos->{itype};
528                 my $item_nonpublic_note = $iteminfos->{nonpublic_note};
529                 my $item_public_note = $iteminfos->{public_note};
530                 my $item_loc = $iteminfos->{loc};
531                 my $item_ccode = $iteminfos->{ccode};
532                 my $item_notforloan = $iteminfos->{notforloan};
533                 my $item_uri = $iteminfos->{uri};
534                 my $item_copyno = $iteminfos->{copyno};
535                 my $item_quantity = $iteminfos->{quantity} || 1;
536                 my $item_budget_code = $iteminfos->{budget_code};
537                 my $item_budget_id;
538                 if ( $iteminfos->{budget_code} ) {
539                     my $item_budget = GetBudgetByCode( $iteminfos->{budget_code} );
540                     if ( $item_budget ) {
541                         $item_budget_id = $item_budget->{budget_id};
542                     }
543                 }
544                 my $item_price = $iteminfos->{price};
545                 my $item_replacement_price = $iteminfos->{replacementprice};
546                 my $item_callnumber = $iteminfos->{itemcallnumber};
547
548                 for (my $i = 0; $i < $item_quantity; $i++) {
549
550                     my %itemrecord = (
551                         'item_id' => $item_id++,
552                         'biblio_count' => $biblio_count,
553                         'homebranch' => $item_homebranch,
554                         'holdingbranch' => $item_holdingbranch,
555                         'itype' => $item_itype,
556                         'nonpublic_note' => $item_nonpublic_note,
557                         'public_note' => $item_public_note,
558                         'loc' => $item_loc,
559                         'ccode' => $item_ccode,
560                         'notforloan' => $item_notforloan,
561                         'uri' => $item_uri,
562                         'copyno' => $item_copyno,
563                         'quantity' => $item_quantity,
564                         'budget_id' => $item_budget_id || $budget_id,
565                         'itemprice' => $item_price || $price,
566                         'replacementprice' => $item_replacement_price || $replacementprice,
567                         'itemcallnumber' => $item_callnumber,
568                     );
569                     $all_items_quantity++;
570                     push @itemlist, \%itemrecord;
571
572                 }
573             }
574
575             $cellrecord{'iteminfos'} = \@itemlist;
576         } else {
577             $cellrecord{'item_error'} = 1;
578         }
579         push @list, \%cellrecord;
580
581         # If MarcItemFieldsToOrder is not set, we use MarcFieldsToOrder to populate the order form.
582         if ($alliteminfos == -1 || scalar(@$alliteminfos) == 0) {
583             $cellrecord{price} = $price || '';
584             $cellrecord{replacementprice} = $replacementprice || '';
585             $cellrecord{quantity} = $quantity || '';
586             $cellrecord{budget_id} = $budget_id || '';
587         } else {
588             # When using MarcItemFields to order we want the order to have the same quantity as total items
589             $cellrecord{quantity} = $all_items_quantity;
590         }
591         # The fields discount, sort1, and sort2 only exist at the order level, so always use MarcItemFieldsToOrder
592         $cellrecord{discount} = $discount || '';
593         $cellrecord{sort1} = $sort1 || '';
594         $cellrecord{sort2} = $sort2 || '';
595
596     }
597     my $num_records = $batch->{'num_records'};
598     my $overlay_action = GetImportBatchOverlayAction($import_batch_id);
599     my $nomatch_action = GetImportBatchNoMatchAction($import_batch_id);
600     my $item_action = GetImportBatchItemAction($import_batch_id);
601     $template->param(import_biblio_list => \@list,
602                         num_results => $num_records,
603                         import_batch_id => $import_batch_id,
604                         "overlay_action_${overlay_action}" => 1,
605                         overlay_action => $overlay_action,
606                         "nomatch_action_${nomatch_action}" => 1,
607                         nomatch_action => $nomatch_action,
608                         "item_action_${item_action}" => 1,
609                         item_action => $item_action,
610                         item_error => $item_error,
611                         libraries => Koha::Libraries->search,
612                         locationloop => \@locations,
613                         itemtypes => Koha::ItemTypes->search,
614                         ccodeloop => \@ccodes,
615                         notforloanloop => \@notforloans,
616                     );
617     batch_info($template, $batch);
618 }
619
620 sub batch_info {
621     my ($template, $batch) = @_;
622     $template->param(batch_info => 1,
623                                       file_name => $batch->{'file_name'},
624                                           comments => $batch->{'comments'},
625                                           import_status => $batch->{'import_status'},
626                                           upload_timestamp => $batch->{'upload_timestamp'},
627                                           num_records => $batch->{'num_records'},
628                                           num_items => $batch->{'num_items'});
629     if ($batch->{'num_records'} > 0) {
630         if ($batch->{'import_status'} eq 'staged' or $batch->{'import_status'} eq 'reverted') {
631             $template->param(can_commit => 1);
632         }
633         if ($batch->{'import_status'} eq 'imported') {
634             $template->param(can_revert => 1);
635         }
636     }
637     if (defined $batch->{'matcher_id'}) {
638         my $matcher = C4::Matcher->fetch($batch->{'matcher_id'});
639         if (defined $matcher) {
640             $template->param('current_matcher_id' => $batch->{'matcher_id'},
641                                               'current_matcher_code' => $matcher->code(),
642                                               'current_matcher_description' => $matcher->description());
643         }
644     }
645     add_matcher_list($batch->{'matcher_id'}, $template);
646 }
647
648 sub add_matcher_list {
649     my ($current_matcher_id, $template) = @_;
650     my @matchers = C4::Matcher::GetMatcherList();
651     if (defined $current_matcher_id) {
652         for (my $i = 0; $i <= $#matchers; $i++) {
653             if ($matchers[$i]->{'matcher_id'} == $current_matcher_id) {
654                 $matchers[$i]->{'selected'} = 1;
655             }
656         }
657     }
658     $template->param(available_matchers => \@matchers);
659 }
660
661 sub get_infos_syspref {
662     my ($syspref_name, $record, $field_list) = @_;
663     my $syspref = C4::Context->preference($syspref_name);
664     $syspref = "$syspref\n\n"; # YAML is anal on ending \n. Surplus does not hurt
665     my $yaml = eval {
666         YAML::XS::Load(Encode::encode_utf8($syspref));
667     };
668     if ( $@ ) {
669         warn "Unable to parse $syspref syspref : $@";
670         return ();
671     }
672     my $r;
673     for my $field_name ( @$field_list ) {
674         next unless exists $yaml->{$field_name};
675         my @fields = split /\|/, $yaml->{$field_name};
676         for my $field ( @fields ) {
677             my ( $f, $sf ) = split /\$/, $field;
678             next unless $f and $sf;
679             if ( my $v = $record->subfield( $f, $sf ) ) {
680                 $r->{$field_name} = $v;
681             }
682             last if $yaml->{$field};
683         }
684     }
685     return $r;
686 }
687
688 sub equal_number_of_fields {
689     my ($tags_list, $record) = @_;
690     my $tag_fields_count;
691     for my $tag (@$tags_list) {
692         my @fields = $record->field($tag);
693         $tag_fields_count->{$tag} = scalar @fields;
694     }
695
696     my $tags_count;
697     foreach my $key ( keys %$tag_fields_count ) {
698         if ( $tag_fields_count->{$key} > 0 ) { # Having 0 of a field is ok
699             $tags_count //= $tag_fields_count->{$key}; # Start with the count from the first occurrence
700             return -1 if $tag_fields_count->{$key} != $tags_count; # All counts of various fields should be equal if they exist
701         }
702     }
703
704     return $tags_count;
705 }
706
707 sub get_infos_syspref_on_item {
708     my ($syspref_name, $record, $field_list) = @_;
709     my $syspref = C4::Context->preference($syspref_name);
710     $syspref = "$syspref\n\n"; # YAML is anal on ending \n. Surplus does not hurt
711     my $yaml = eval {
712         YAML::XS::Load(Encode::encode_utf8($syspref));
713     };
714     if ( $@ ) {
715         warn "Unable to parse $syspref syspref : $@";
716         return ();
717     }
718     my @result;
719     my @tags_list;
720
721     # Check tags in syspref definition
722     for my $field_name ( @$field_list ) {
723         next unless exists $yaml->{$field_name};
724         my @fields = split /\|/, $yaml->{$field_name};
725         for my $field ( @fields ) {
726             my ( $f, $sf ) = split /\$/, $field;
727             next unless $f and $sf;
728             push @tags_list, $f;
729         }
730     }
731     @tags_list = List::MoreUtils::uniq(@tags_list);
732
733     my $tags_count = equal_number_of_fields(\@tags_list, $record);
734     # Return if the number of these fields in the record is not the same.
735     return -1 if $tags_count == -1;
736
737     # Gather the fields
738     my $fields_hash;
739     foreach my $tag (@tags_list) {
740         my @tmp_fields;
741         foreach my $field ($record->field($tag)) {
742             push @tmp_fields, $field;
743         }
744         $fields_hash->{$tag} = \@tmp_fields;
745     }
746
747     for (my $i = 0; $i < $tags_count; $i++) {
748         my $r;
749         for my $field_name ( @$field_list ) {
750             next unless exists $yaml->{$field_name};
751             my @fields = split /\|/, $yaml->{$field_name};
752             for my $field ( @fields ) {
753                 my ( $f, $sf ) = split /\$/, $field;
754                 next unless $f and $sf;
755                 my $v = $fields_hash->{$f}[$i] ? $fields_hash->{$f}[$i]->subfield( $sf ) : undef;
756                 $r->{$field_name} = $v if (defined $v);
757                 last if $yaml->{$field};
758             }
759         }
760         push @result, $r;
761     }
762     return \@result;
763 }