removing warn compilation.
[koha.git] / C4 / Biblio.pm
1 package C4::Biblio;
2
3 # Copyright 2000-2002 Katipo Communications
4 #
5 # This file is part of Koha.
6 #
7 # Koha is free software; you can redistribute it and/or modify it under the
8 # terms of the GNU General Public License as published by the Free Software
9 # Foundation; either version 2 of the License, or (at your option) any later
10 # version.
11 #
12 # Koha is distributed in the hope that it will be useful, but WITHOUT ANY
13 # WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
14 # A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
15 #
16 # You should have received a copy of the GNU General Public License along with
17 # Koha; if not, write to the Free Software Foundation, Inc., 59 Temple Place,
18 # Suite 330, Boston, MA  02111-1307 USA
19
20 use strict;
21
22 require Exporter;
23 use C4::Context;
24 use MARC::Record;
25 use MARC::File::USMARC;
26 use MARC::File::XML;
27 use ZOOM;
28 use C4::Koha;
29 use C4::Date;
30 use utf8;
31 use C4::Log; # logaction
32
33 use vars qw($VERSION @ISA @EXPORT);
34
35 # set the version for version checking
36 $VERSION = do { my @v = '$Revision$' =~ /\d+/g; shift(@v).".".join( "_", map { sprintf "%03d", $_ } @v ); };
37
38 @ISA = qw( Exporter );
39
40 # EXPORTED FUNCTIONS.
41
42 # to add biblios or items
43 push @EXPORT, qw( &AddBiblio &AddItem );
44
45 # to get something
46 push @EXPORT, qw(
47   &GetBiblio
48   &GetBiblioData
49   &GetBiblioItemData
50   &GetBiblioItemInfosOf
51   &GetBiblioItemByBiblioNumber
52   &GetBiblioFromItemNumber
53   
54   &GetMarcItem
55   &GetItem
56   &GetItemInfosOf
57   &GetItemStatus
58   &GetItemLocation
59   &GetLostItems
60   &GetItemsForInventory
61   &GetItemsCount
62
63   &GetMarcNotes
64   &GetMarcSubjects
65   &GetMarcBiblio
66   &GetMarcAuthors
67   &GetMarcSeries
68
69   &GetItemsInfo
70   &GetItemnumberFromBarcode
71   &get_itemnumbers_of
72   &GetXmlBiblio
73
74   &GetAuthorisedValueDesc
75   &GetMarcStructure
76   &GetMarcFromKohaField
77   &GetFrameworkCode
78   &TransformKohaToMarc
79 );
80
81 # To modify something
82 push @EXPORT, qw(
83   &ModBiblio
84   &ModItem
85   &ModItemTransfer
86   &ModBiblioframework
87   &ModZebra
88   &ModItemInMarc
89   &ModItemInMarconefield
90   &ModDateLastSeen
91 );
92
93 # To delete something
94 push @EXPORT, qw(
95   &DelBiblio
96   &DelItem
97 );
98
99 # Internal functions
100 # those functions are exported but should not be used
101 # they are usefull is few circumstances, so are exported.
102 # but don't use them unless you're a core developer ;-)
103 push @EXPORT, qw(
104   &ModBiblioMarc
105   &AddItemInMarc
106   &calculatelc
107   &itemcalculator
108 );
109
110 # Others functions
111 push @EXPORT, qw(
112   &TransformMarcToKoha
113   &TransformHtmlToMarc
114   &TransformHtmlToXml
115   &PrepareItemrecordDisplay
116   &char_decode
117   &GetNoZebraIndexes
118 );
119
120 =head1 NAME
121
122 C4::Biblio - cataloging management functions
123
124 =head1 DESCRIPTION
125
126 Biblio.pm contains functions for managing storage and editing of bibliographic data within Koha. Most of the functions in this module are used for cataloging records: adding, editing, or removing biblios, biblioitems, or items. Koha's stores bibliographic information in three places:
127
128 =over 4
129
130 =item 1. in the biblio,biblioitems,items, etc tables, which are limited to a one-to-one mapping to underlying MARC data
131
132 =item 2. as raw MARC in the Zebra index and storage engine
133
134 =item 3. as raw MARC the biblioitems.marc and biblioitems.marcxml
135
136 =back
137
138 In the 3.0 version of Koha, the authoritative record-level information is in biblioitems.marcxml
139
140 Because the data isn't completely normalized there's a chance for information to get out of sync. The design choice to go with a un-normalized schema was driven by performance and stability concerns. However, if this occur, it can be considered as a bug : The API is (or should be) complete & the only entry point for all biblio/items managements.
141
142 =over 4
143
144 =item 1. Compared with MySQL, Zebra is slow to update an index for small data changes -- especially for proc-intensive operations like circulation
145
146 =item 2. Zebra's index has been known to crash and a backup of the data is necessary to rebuild it in such cases
147
148 =back
149
150 Because of this design choice, the process of managing storage and editing is a bit convoluted. Historically, Biblio.pm's grown to an unmanagable size and as a result we have several types of functions currently:
151
152 =over 4
153
154 =item 1. Add*/Mod*/Del*/ - high-level external functions suitable for being called from external scripts to manage the collection
155
156 =item 2. _koha_* - low-level internal functions for managing the koha tables
157
158 =item 3. Marc management function : as the MARC record is stored in biblioitems.marc(xml), some subs dedicated to it's management are in this package. They should be used only internally by Biblio.pm, the only official entry points being AddBiblio, AddItem, ModBiblio, ModItem.
159
160 =item 4. Zebra functions used to update the Zebra index
161
162 =item 5. internal helper functions such as char_decode, checkitems, etc. Some of these probably belong in Koha.pm
163
164 =back
165
166 The MARC record (in biblioitems.marcxml) contains the complete marc record, including items. It also contains the biblionumber. That is the reason why it is not stored directly by AddBiblio, with all other fields . To save a biblio, we need to :
167
168 =over 4
169
170 =item 1. save datas in biblio and biblioitems table, that gives us a biblionumber and a biblioitemnumber
171
172 =item 2. add the biblionumber and biblioitemnumber into the MARC records
173
174 =item 3. save the marc record
175
176 =back
177
178 When dealing with items, we must :
179
180 =over 4
181
182 =item 1. save the item in items table, that gives us an itemnumber
183
184 =item 2. add the itemnumber to the item MARC field
185
186 =item 3. overwrite the MARC record (with the added item) into biblioitems.marc(xml)
187
188 When modifying a biblio or an item, the behaviour is quite similar.
189
190 =back
191
192 =head1 EXPORTED FUNCTIONS
193
194 =head2 AddBiblio
195
196 =over 4
197
198 ($biblionumber,$biblioitemnumber) = AddBiblio($record,$frameworkcode);
199 Exported function (core API) for adding a new biblio to koha.
200
201 =back
202
203 =cut
204
205 sub AddBiblio {
206     my ( $record, $frameworkcode ) = @_;
207     my $biblionumber;
208     my $biblioitemnumber;
209     my $dbh = C4::Context->dbh;
210     # transform the data into koha-table style data
211     my $olddata = TransformMarcToKoha( $dbh, $record, $frameworkcode );
212     $biblionumber = _koha_add_biblio( $dbh, $olddata, $frameworkcode );
213     $olddata->{'biblionumber'} = $biblionumber;
214     $biblioitemnumber = _koha_add_biblioitem( $dbh, $olddata );
215
216     # we must add bibnum and bibitemnum in MARC::Record...
217     # we build the new field with biblionumber and biblioitemnumber
218     # we drop the original field
219     # we add the new builded field.
220     ( my $biblio_tag, my $biblio_subfield ) = GetMarcFromKohaField("biblio.biblionumber",$frameworkcode);
221     ( my $biblioitem_tag, my $biblioitem_subfield ) = GetMarcFromKohaField("biblioitems.biblioitemnumber",$frameworkcode);
222
223     my $newfield;
224
225     # biblionumber & biblioitemnumber are in different fields
226     if ( $biblio_tag != $biblioitem_tag ) {
227
228         # deal with biblionumber
229         if ( $biblio_tag < 10 ) {
230             $newfield = MARC::Field->new( $biblio_tag, $biblionumber );
231         }
232         else {
233             $newfield =
234               MARC::Field->new( $biblio_tag, '', '',
235                 "$biblio_subfield" => $biblionumber );
236         }
237
238         # drop old field and create new one...
239         my $old_field = $record->field($biblio_tag);
240         $record->delete_field($old_field);
241         $record->append_fields($newfield);
242
243         # deal with biblioitemnumber
244         if ( $biblioitem_tag < 10 ) {
245             $newfield = MARC::Field->new( $biblioitem_tag, $biblioitemnumber, );
246         }
247         else {
248             $newfield =
249               MARC::Field->new( $biblioitem_tag, '', '',
250                 "$biblioitem_subfield" => $biblioitemnumber, );
251         }
252         # drop old field and create new one...
253         $old_field = $record->field($biblioitem_tag);
254         $record->delete_field($old_field);
255         $record->insert_fields_ordered($newfield);
256
257 # biblionumber & biblioitemnumber are in the same field (can't be <10 as fields <10 have only 1 value)
258     }
259     else {
260         my $newfield = MARC::Field->new(
261             $biblio_tag, '', '',
262             "$biblio_subfield" => $biblionumber,
263             "$biblioitem_subfield" => $biblioitemnumber
264         );
265
266         # drop old field and create new one...
267         my $old_field = $record->field($biblio_tag);
268         $record->delete_field($old_field);
269         $record->insert_fields_ordered($newfield);
270     }
271
272     # now add the record
273     $biblionumber = ModBiblioMarc( $record, $biblionumber, $frameworkcode );
274       
275     &logaction(C4::Context->userenv->{'number'},"CATALOGUING","ADD",$biblionumber,"biblio") 
276         if C4::Context->preference("CataloguingLog");
277       
278     return ( $biblionumber, $biblioitemnumber );
279 }
280
281 =head2 AddItem
282
283 =over
284
285 $biblionumber = AddItem( $record, $biblionumber)
286 Exported function (core API) for adding a new item to Koha
287
288 =back
289
290 =cut
291
292 sub AddItem {
293     my ( $record, $biblionumber ) = @_;
294     my $dbh = C4::Context->dbh;
295     
296     # add item in old-DB
297     my $frameworkcode = GetFrameworkCode( $biblionumber );
298     my $item = &TransformMarcToKoha( $dbh, $record, $frameworkcode );
299
300     # needs old biblionumber and biblioitemnumber
301     $item->{'biblionumber'} = $biblionumber;
302     my $sth =
303       $dbh->prepare(
304         "select biblioitemnumber,itemtype from biblioitems where biblionumber=?"
305       );
306     $sth->execute( $item->{'biblionumber'} );
307     my $itemtype;
308     ( $item->{'biblioitemnumber'}, $itemtype ) = $sth->fetchrow;
309     $sth =
310       $dbh->prepare(
311         "select notforloan from itemtypes where itemtype='$itemtype'");
312     $sth->execute();
313     my $notforloan = $sth->fetchrow;
314     ##Change the notforloan field if $notforloan found
315     if ( $notforloan > 0 ) {
316         $item->{'notforloan'} = $notforloan;
317         &MARCitemchange( $record, "items.notforloan", $notforloan );
318     }
319     if ( !$item->{'dateaccessioned'} || $item->{'dateaccessioned'} eq '' ) {
320
321         # find today's date
322         my ( $sec, $min, $hour, $mday, $mon, $year, $wday, $yday, $isdst ) =
323           localtime(time);
324         $year += 1900;
325         $mon  += 1;
326         my $date =
327           "$year-" . sprintf( "%0.2d", $mon ) . "-" . sprintf( "%0.2d", $mday );
328         $item->{'dateaccessioned'} = $date;
329         &MARCitemchange( $record, "items.dateaccessioned", $date );
330     }
331     my ( $itemnumber, $error ) =
332       &_koha_new_items( $dbh, $item, $item->{barcode} );
333
334     # add itemnumber to MARC::Record before adding the item.
335     $sth =
336       $dbh->prepare(
337 "select tagfield,tagsubfield from marc_subfield_structure where frameworkcode=? and kohafield=?"
338       );
339     &TransformKohaToMarcOneField( $sth, $record, "items.itemnumber", $itemnumber,
340         $frameworkcode );
341
342     # add the item
343     &AddItemInMarc( $record, $item->{'biblionumber'},$frameworkcode );
344     
345     &logaction(C4::Context->userenv->{'number'},"CATALOGUING","ADD",$itemnumber,"item") 
346         if C4::Context->preference("CataloguingLog");
347     
348     return ($item->{biblionumber}, $item->{biblioitemnumber},$itemnumber);
349 }
350
351 =head2 ModBiblio
352
353 =over
354
355 ModBiblio( $record,$biblionumber,$frameworkcode);
356 Exported function (core API) to modify a biblio
357
358 =back
359
360 =cut
361
362 sub ModBiblio {
363     my ( $record, $biblionumber, $frameworkcode ) = @_;
364     
365     if (C4::Context->preference("CataloguingLog")) {    
366         my $newrecord = GetMarcBiblio($biblionumber);
367         &logaction(C4::Context->userenv->{'number'},"CATALOGUING","MODIFY",$biblionumber,$newrecord->as_formatted) 
368     }
369     
370     my $dbh = C4::Context->dbh;
371     
372     $frameworkcode = "" unless $frameworkcode;
373
374     # get the items before and append them to the biblio before updating the record, atm we just have the biblio
375     my ( $itemtag, $itemsubfield ) = GetMarcFromKohaField("items.itemnumber",$frameworkcode);
376     my $oldRecord = GetMarcBiblio($biblionumber);
377     my @fields = $oldRecord->field($itemtag);
378     $record->append_fields(@fields);
379
380     # update the MARC record (that now contains biblio and items) with the new record data
381     &ModBiblioMarc($record, $biblionumber, $frameworkcode );
382
383     # load the koha-table data object
384     my $oldbiblio = TransformMarcToKoha( $dbh, $record, $frameworkcode );
385
386     # modify the other koha tables
387     $biblionumber = _koha_modify_biblio( $dbh, $oldbiblio );
388     _koha_modify_biblioitem( $dbh, $oldbiblio );
389
390     return 1;
391 }
392
393 =head2 ModItem
394
395 =over
396
397 Exported function (core API) for modifying an item in Koha.
398
399 =back
400
401 =cut
402
403 sub ModItem {
404     my ( $record, $biblionumber, $itemnumber, $delete, $new_item_hashref )
405       = @_;
406     
407     #logging
408     &logaction(C4::Context->userenv->{'number'},"CATALOGUING","MODIFY",$itemnumber,$record->as_formatted) 
409         if C4::Context->preference("CataloguingLog");
410       
411     my $dbh = C4::Context->dbh;
412     
413     # if we have a MARC record, we're coming from cataloging and so
414     # we do the whole routine: update the MARC and zebra, then update the koha
415     # tables
416     if ($record) {
417         my $frameworkcode = GetFrameworkCode( $biblionumber );
418         ModItemInMarc( $record, $biblionumber, $itemnumber, $frameworkcode );
419         my $olditem       = TransformMarcToKoha( $dbh, $record, $frameworkcode );
420         _koha_modify_item( $dbh, $olditem );
421         return $biblionumber;
422     }
423
424     # otherwise, we're just looking to modify something quickly
425     # (like a status) so we just update the koha tables
426     elsif ($new_item_hashref) {
427         _koha_modify_item( $dbh, $new_item_hashref );
428     }
429 }
430
431 sub ModItemTransfer {
432     my ( $itemnumber, $frombranch, $tobranch ) = @_;
433     
434     my $dbh = C4::Context->dbh;
435     
436     #new entry in branchtransfers....
437     my $sth = $dbh->prepare(
438         "INSERT INTO branchtransfers (itemnumber, frombranch, datesent, tobranch)
439         VALUES (?, ?, now(), ?)");
440     $sth->execute($itemnumber, $frombranch, $tobranch);
441     #update holdingbranch in items .....
442      $sth= $dbh->prepare(
443           "UPDATE items set holdingbranch = ? WHERE items.itemnumber = ?");
444     $sth->execute($tobranch,$itemnumber);
445     &ModDateLastSeen($itemnumber);
446     $sth = $dbh->prepare(
447         "SELECT biblionumber FROM items WHERE itemnumber=?"
448       );
449     $sth->execute($itemnumber);
450     while ( my ( $biblionumber ) = $sth->fetchrow ) {
451         &ModItemInMarconefield( $biblionumber, $itemnumber,
452             'items.holdingbranch', $tobranch );
453     }
454     return;
455 }
456
457 ##New sub to dotransfer in marc tables as well. Not exported -TG 10/04/2006
458 # sub domarctransfer {
459 #     my ( $dbh, $itemnumber ) = @_;
460 #     $itemnumber =~ s /\'//g;    ##itemnumber seems to come with quotes-TG
461 #     my $sth =
462 #       $dbh->prepare(
463 #         "select biblionumber,holdingbranch from items where itemnumber=$itemnumber"
464 #       );
465 #     $sth->execute();
466 #     while ( my ( $biblionumber, $holdingbranch ) = $sth->fetchrow ) {
467 #         &ModItemInMarconefield( $biblionumber, $itemnumber,
468 #             'items.holdingbranch', $holdingbranch );
469 #     }
470 #     return;
471 # }
472 =head2 ModBiblioframework
473
474 =over
475
476 ModBiblioframework($biblionumber,$frameworkcode);
477 Exported function to modify a biblio framework
478
479 =back
480
481 =cut
482
483 sub ModBiblioframework {
484     my ( $biblionumber, $frameworkcode ) = @_;
485     my $dbh = C4::Context->dbh;
486     my $sth =
487       $dbh->prepare(
488         "UPDATE biblio SET frameworkcode=? WHERE biblionumber=$biblionumber");
489     $sth->execute($frameworkcode);
490     return 1;
491 }
492
493 =head2 ModItemInMarconefield
494
495 =over
496
497 modify only 1 field in a MARC item (mainly used for holdingbranch, but could also be used for status modif - moving a book to "lost" on a long overdu for example)
498 &ModItemInMarconefield( $biblionumber, $itemnumber, $itemfield, $newvalue )
499
500 =back
501
502 =cut
503
504 sub ModItemInMarconefield {
505     my ( $biblionumber, $itemnumber, $itemfield, $newvalue ) = @_;
506     my $dbh = C4::Context->dbh;
507     if ( !defined $newvalue ) {
508         $newvalue = "";
509     }
510
511     my $record = GetMarcItem( $biblionumber, $itemnumber );
512     my ($tagfield, $tagsubfield) = GetMarcFromKohaField( $itemfield,'');
513     if ($tagfield && $tagsubfield) {
514         my $tag = $record->field($tagfield);
515         if ($tag) {
516 #             my $tagsubs = $record->field($tagfield)->subfield($tagsubfield);
517             $tag->update( $tagsubfield => $newvalue );
518             $record->delete_field($tag);
519             $record->insert_fields_ordered($tag);
520             &ModItemInMarc( $record, $biblionumber, $itemnumber, 0 );
521         }
522     }
523 }
524
525 =head2 ModItemInMarc
526
527 =over
528
529 &ModItemInMarc( $record, $biblionumber, $itemnumber )
530
531 =back
532
533 =cut
534
535 sub ModItemInMarc {
536     my ( $ItemRecord, $biblionumber, $itemnumber, $frameworkcode) = @_;
537     my $dbh = C4::Context->dbh;
538     
539     # get complete MARC record & replace the item field by the new one
540     my $completeRecord = GetMarcBiblio($biblionumber);
541     my ($itemtag,$itemsubfield) = GetMarcFromKohaField("items.itemnumber",$frameworkcode);
542     my $itemField = $ItemRecord->field($itemtag);
543     my @items = $completeRecord->field($itemtag);
544     foreach (@items) {
545         if ($_->subfield($itemsubfield) eq $itemnumber) {
546 #             $completeRecord->delete_field($_);
547             $_->replace_with($itemField);
548         }
549     }
550     # save the record
551     my $sth = $dbh->prepare("update biblioitems set marc=?,marcxml=?  where biblionumber=?");
552     $sth->execute( $completeRecord->as_usmarc(), $completeRecord->as_xml_record(),$biblionumber );
553     $sth->finish;
554     ModZebra($biblionumber,"specialUpdate","biblioserver",$completeRecord);
555 }
556
557 =head2 ModDateLastSeen
558
559 &ModDateLastSeen($itemnum)
560 Mark item as seen. Is called when an item is issued, returned or manually marked during inventory/stocktaking
561 C<$itemnum> is the item number
562
563 =cut
564
565 sub ModDateLastSeen {
566     my ($itemnum) = @_;
567     my $dbh       = C4::Context->dbh;
568     my $sth       =
569       $dbh->prepare(
570           "update items set itemlost=0, datelastseen  = now() where items.itemnumber = ?"
571       );
572     $sth->execute($itemnum);
573     return;
574 }
575 =head2 DelBiblio
576
577 =over
578
579 my $error = &DelBiblio($dbh,$biblionumber);
580 Exported function (core API) for deleting a biblio in koha.
581 Deletes biblio record from Zebra and Koha tables (biblio,biblioitems,items)
582 Also backs it up to deleted* tables
583 Checks to make sure there are not issues on any of the items
584 return:
585 C<$error> : undef unless an error occurs
586
587 =back
588
589 =cut
590
591 sub DelBiblio {
592     my ( $biblionumber ) = @_;
593     my $dbh = C4::Context->dbh;
594     my $error;    # for error handling
595
596     # First make sure there are no items with issues are still attached
597     my $sth =
598       $dbh->prepare(
599         "SELECT itemnumber FROM items WHERE biblionumber=?");
600     $sth->execute($biblionumber);
601     while ( my $itemnumber = $sth->fetchrow ) {
602         my $issues = GetItemIssues($itemnumber);
603         foreach my $issue (@$issues) {
604             if (   ( $issue->{date_due} )
605                 && ( $issue->{date_due} ne "Available" ) )
606             {
607
608 #FIXME: we need a status system in Biblio like in Circ to return standard codes and messages
609 # instead of hard-coded strings
610                 $error .=
611 "Item is checked out to a patron -- you must return it before deleting the Biblio";
612             }
613         }
614     }
615     return $error if $error;
616
617     # Delete in Zebra. Be careful NOT to move this line after _koha_delete_biblio
618     # for at least 2 reasons :
619     # - we need to read the biblio if NoZebra is set (to remove it from the indexes
620     # - if something goes wrong, the biblio may be deleted from Koha but not from zebra
621     #   and we would have no way to remove it (except manually in zebra, but I bet it would be very hard to handle the problem)
622     ModZebra($biblionumber, "delete_record", "biblioserver", undef);
623
624     # delete biblio from Koha tables and save in deletedbiblio
625     $error = &_koha_delete_biblio( $dbh, $biblionumber );
626
627     # delete biblioitems and items from Koha tables and save in deletedbiblioitems,deleteditems
628     $sth =
629       $dbh->prepare(
630         "SELECT biblioitemnumber FROM biblioitems WHERE biblionumber=?");
631     $sth->execute($biblionumber);
632     while ( my $biblioitemnumber = $sth->fetchrow ) {
633
634         # delete this biblioitem
635         $error = &_koha_delete_biblioitems( $dbh, $biblioitemnumber );
636         return $error if $error;
637
638         # delete items
639         my $items_sth =
640           $dbh->prepare(
641             "SELECT itemnumber FROM items WHERE biblioitemnumber=?");
642         $items_sth->execute($biblioitemnumber);
643         while ( my $itemnumber = $items_sth->fetchrow ) {
644             $error = &_koha_delete_item( $dbh, $itemnumber );
645             return $error if $error;
646         }
647     }
648     &logaction(C4::Context->userenv->{'number'},"CATALOGUING","DELETE",$biblionumber,"") 
649         if C4::Context->preference("CataloguingLog");
650     return;
651 }
652
653 =head2 DelItem
654
655 =over
656
657 DelItem( $biblionumber, $itemnumber );
658 Exported function (core API) for deleting an item record in Koha.
659
660 =back
661
662 =cut
663
664 sub DelItem {
665     my ( $biblionumber, $itemnumber ) = @_;
666     my $dbh = C4::Context->dbh;
667     &_koha_delete_item( $dbh, $itemnumber );
668     # get the MARC record
669     my $record = GetMarcBiblio($biblionumber);
670     my $frameworkcode = GetFrameworkCode($biblionumber);
671
672     # backup the record
673     my $copy2deleted =
674       $dbh->prepare("UPDATE deleteditems SET marc=? WHERE itemnumber=?");
675     $copy2deleted->execute( $record->as_usmarc(), $itemnumber );
676
677     #search item field code
678     my ( $itemtag, $itemsubfield ) = GetMarcFromKohaField("items.itemnumber",$frameworkcode);
679     my @fields = $record->field($itemtag);
680     # delete the item specified
681     foreach my $field (@fields) {
682         if ( $field->subfield($itemsubfield) eq $itemnumber ) {
683             $record->delete_field($field);
684         }
685     }
686     &ModBiblioMarc( $record, $biblionumber, $frameworkcode );
687     &logaction(C4::Context->userenv->{'number'},"CATALOGUING","DELETE",$itemnumber,"item") 
688         if C4::Context->preference("CataloguingLog");
689 }
690
691 =head2 GetBiblioData
692
693 =over 4
694
695 $data = &GetBiblioData($biblionumber);
696 Returns information about the book with the given biblionumber.
697 C<&GetBiblioData> returns a reference-to-hash. The keys are the fields in
698 the C<biblio> and C<biblioitems> tables in the
699 Koha database.
700 In addition, C<$data-E<gt>{subject}> is the list of the book's
701 subjects, separated by C<" , "> (space, comma, space).
702 If there are multiple biblioitems with the given biblionumber, only
703 the first one is considered.
704
705 =back
706
707 =cut
708
709 sub GetBiblioData {
710     my ( $bibnum ) = @_;
711     my $dbh = C4::Context->dbh;
712
713     my $query = "
714         SELECT * , biblioitems.notes AS bnotes, biblio.notes
715         FROM biblio
716             LEFT JOIN biblioitems ON biblio.biblionumber = biblioitems.biblionumber
717             LEFT JOIN itemtypes ON biblioitems.itemtype = itemtypes.itemtype
718         WHERE biblio.biblionumber = ?
719             AND biblioitems.biblionumber = biblio.biblionumber
720     ";
721     my $sth = $dbh->prepare($query);
722     $sth->execute($bibnum);
723     my $data;
724     $data = $sth->fetchrow_hashref;
725     $sth->finish;
726
727     return ($data);
728 }    # sub GetBiblioData
729
730
731 =head2 GetItemsInfo
732
733 =over 4
734
735   @results = &GetItemsInfo($biblionumber, $type);
736
737 Returns information about books with the given biblionumber.
738
739 C<$type> may be either C<intra> or anything else. If it is not set to
740 C<intra>, then the search will exclude lost, very overdue, and
741 withdrawn items.
742
743 C<&GetItemsInfo> returns a list of references-to-hash. Each element
744 contains a number of keys. Most of them are table items from the
745 C<biblio>, C<biblioitems>, C<items>, and C<itemtypes> tables in the
746 Koha database. Other keys include:
747
748 =over 4
749
750 =item C<$data-E<gt>{branchname}>
751
752 The name (not the code) of the branch to which the book belongs.
753
754 =item C<$data-E<gt>{datelastseen}>
755
756 This is simply C<items.datelastseen>, except that while the date is
757 stored in YYYY-MM-DD format in the database, here it is converted to
758 DD/MM/YYYY format. A NULL date is returned as C<//>.
759
760 =item C<$data-E<gt>{datedue}>
761
762 =item C<$data-E<gt>{class}>
763
764 This is the concatenation of C<biblioitems.classification>, the book's
765 Dewey code, and C<biblioitems.subclass>.
766
767 =item C<$data-E<gt>{ocount}>
768
769 I think this is the number of copies of the book available.
770
771 =item C<$data-E<gt>{order}>
772
773 If this is set, it is set to C<One Order>.
774
775 =back
776
777 =back
778
779 =cut
780
781 sub GetItemsInfo {
782     my ( $biblionumber, $type ) = @_;
783     my $dbh   = C4::Context->dbh;
784     my $query = "SELECT *,items.notforloan as itemnotforloan
785                  FROM items, biblio, biblioitems
786                  LEFT JOIN itemtypes on biblioitems.itemtype = itemtypes.itemtype
787                 WHERE items.biblionumber = ?
788                     AND biblioitems.biblioitemnumber = items.biblioitemnumber
789                     AND biblio.biblionumber = items.biblionumber
790                 ORDER BY items.dateaccessioned desc
791                  ";
792     my $sth = $dbh->prepare($query);
793     $sth->execute($biblionumber);
794     my $i = 0;
795     my @results;
796     my ( $date_due, $count_reserves );
797
798     while ( my $data = $sth->fetchrow_hashref ) {
799         my $datedue = '';
800         my $isth    = $dbh->prepare(
801             "SELECT issues.*,borrowers.cardnumber
802             FROM   issues, borrowers
803             WHERE  itemnumber = ?
804                 AND returndate IS NULL
805                 AND issues.borrowernumber=borrowers.borrowernumber"
806         );
807         $isth->execute( $data->{'itemnumber'} );
808         if ( my $idata = $isth->fetchrow_hashref ) {
809             $data->{borrowernumber} = $idata->{borrowernumber};
810             $data->{cardnumber}     = $idata->{cardnumber};
811             $datedue                = format_date( $idata->{'date_due'} );
812         }
813         if ( $datedue eq '' ) {
814             #$datedue="Available";
815             my ( $restype, $reserves ) =
816               C4::Reserves::CheckReserves( $data->{'itemnumber'} );
817             if ($restype) {
818
819                 #$datedue=$restype;
820                 $count_reserves = $restype;
821             }
822         }
823         $isth->finish;
824
825         #get branch information.....
826         my $bsth = $dbh->prepare(
827             "SELECT * FROM branches WHERE branchcode = ?
828         "
829         );
830         $bsth->execute( $data->{'holdingbranch'} );
831         if ( my $bdata = $bsth->fetchrow_hashref ) {
832             $data->{'branchname'} = $bdata->{'branchname'};
833         }
834         my $date = format_date( $data->{'datelastseen'} );
835         $data->{'datelastseen'}   = $date;
836         $data->{'datedue'}        = $datedue;
837         $data->{'count_reserves'} = $count_reserves;
838
839         # get notforloan complete status if applicable
840         my $sthnflstatus = $dbh->prepare(
841             'SELECT authorised_value
842             FROM   marc_subfield_structure
843             WHERE  kohafield="items.notforloan"
844         '
845         );
846
847         $sthnflstatus->execute;
848         my ($authorised_valuecode) = $sthnflstatus->fetchrow;
849         if ($authorised_valuecode) {
850             $sthnflstatus = $dbh->prepare(
851                 "SELECT lib FROM authorised_values
852                  WHERE  category=?
853                  AND authorised_value=?"
854             );
855             $sthnflstatus->execute( $authorised_valuecode,
856                 $data->{itemnotforloan} );
857             my ($lib) = $sthnflstatus->fetchrow;
858             $data->{notforloan} = $lib;
859         }
860
861         # my stack procedures
862         my $stackstatus = $dbh->prepare(
863             'SELECT authorised_value
864              FROM   marc_subfield_structure
865              WHERE  kohafield="items.stack"
866         '
867         );
868         $stackstatus->execute;
869
870         ($authorised_valuecode) = $stackstatus->fetchrow;
871         if ($authorised_valuecode) {
872             $stackstatus = $dbh->prepare(
873                 "SELECT lib
874                  FROM   authorised_values
875                  WHERE  category=?
876                  AND    authorised_value=?
877             "
878             );
879             $stackstatus->execute( $authorised_valuecode, $data->{stack} );
880             my ($lib) = $stackstatus->fetchrow;
881             $data->{stack} = $lib;
882         }
883         $results[$i] = $data;
884         $i++;
885     }
886     $sth->finish;
887
888     return (@results);
889 }
890
891 =head2 getitemstatus
892
893 =over 4
894
895 $itemstatushash = &getitemstatus($fwkcode);
896 returns information about status.
897 Can be MARC dependant.
898 fwkcode is optional.
899 But basically could be can be loan or not
900 Create a status selector with the following code
901
902 =head3 in PERL SCRIPT
903
904 my $itemstatushash = getitemstatus;
905 my @itemstatusloop;
906 foreach my $thisstatus (keys %$itemstatushash) {
907     my %row =(value => $thisstatus,
908                 statusname => $itemstatushash->{$thisstatus}->{'statusname'},
909             );
910     push @itemstatusloop, \%row;
911 }
912 $template->param(statusloop=>\@itemstatusloop);
913
914
915 =head3 in TEMPLATE
916
917             <select name="statusloop">
918                 <option value="">Default</option>
919             <!-- TMPL_LOOP name="statusloop" -->
920                 <option value="<!-- TMPL_VAR name="value" -->" <!-- TMPL_IF name="selected" -->selected<!-- /TMPL_IF -->><!-- TMPL_VAR name="statusname" --></option>
921             <!-- /TMPL_LOOP -->
922             </select>
923
924 =cut
925
926 sub GetItemStatus {
927
928     # returns a reference to a hash of references to status...
929     my ($fwk) = @_;
930     my %itemstatus;
931     my $dbh = C4::Context->dbh;
932     my $sth;
933     $fwk = '' unless ($fwk);
934     my ( $tag, $subfield ) =
935       GetMarcFromKohaField( "items.notforloan", $fwk );
936     if ( $tag and $subfield ) {
937         my $sth =
938           $dbh->prepare(
939 "select authorised_value from marc_subfield_structure where tagfield=? and tagsubfield=? and frameworkcode=?"
940           );
941         $sth->execute( $tag, $subfield, $fwk );
942         if ( my ($authorisedvaluecat) = $sth->fetchrow ) {
943             my $authvalsth =
944               $dbh->prepare(
945 "select authorised_value, lib from authorised_values where category=? order by lib"
946               );
947             $authvalsth->execute($authorisedvaluecat);
948             while ( my ( $authorisedvalue, $lib ) = $authvalsth->fetchrow ) {
949                 $itemstatus{$authorisedvalue} = $lib;
950             }
951             $authvalsth->finish;
952             return \%itemstatus;
953             exit 1;
954         }
955         else {
956
957             #No authvalue list
958             # build default
959         }
960         $sth->finish;
961     }
962
963     #No authvalue list
964     #build default
965     $itemstatus{"1"} = "Not For Loan";
966     return \%itemstatus;
967 }
968
969 =head2 getitemlocation
970
971 =over 4
972
973 $itemlochash = &getitemlocation($fwk);
974 returns informations about location.
975 where fwk stands for an optional framework code.
976 Create a location selector with the following code
977
978 =head3 in PERL SCRIPT
979
980 my $itemlochash = getitemlocation;
981 my @itemlocloop;
982 foreach my $thisloc (keys %$itemlochash) {
983     my $selected = 1 if $thisbranch eq $branch;
984     my %row =(locval => $thisloc,
985                 selected => $selected,
986                 locname => $itemlochash->{$thisloc},
987             );
988     push @itemlocloop, \%row;
989 }
990 $template->param(itemlocationloop => \@itemlocloop);
991
992 =head3 in TEMPLATE
993
994 <select name="location">
995     <option value="">Default</option>
996 <!-- TMPL_LOOP name="itemlocationloop" -->
997     <option value="<!-- TMPL_VAR name="locval" -->" <!-- TMPL_IF name="selected" -->selected<!-- /TMPL_IF -->><!-- TMPL_VAR name="locname" --></option>
998 <!-- /TMPL_LOOP -->
999 </select>
1000
1001 =back
1002
1003 =cut
1004
1005 sub GetItemLocation {
1006
1007     # returns a reference to a hash of references to location...
1008     my ($fwk) = @_;
1009     my %itemlocation;
1010     my $dbh = C4::Context->dbh;
1011     my $sth;
1012     $fwk = '' unless ($fwk);
1013     my ( $tag, $subfield ) =
1014       GetMarcFromKohaField( "items.location", $fwk );
1015     if ( $tag and $subfield ) {
1016         my $sth =
1017           $dbh->prepare(
1018 "select authorised_value from marc_subfield_structure where tagfield=? and tagsubfield=? and frameworkcode=?"
1019           );
1020         $sth->execute( $tag, $subfield, $fwk );
1021         if ( my ($authorisedvaluecat) = $sth->fetchrow ) {
1022             my $authvalsth =
1023               $dbh->prepare(
1024 "select authorised_value, lib from authorised_values where category=? order by lib"
1025               );
1026             $authvalsth->execute($authorisedvaluecat);
1027             while ( my ( $authorisedvalue, $lib ) = $authvalsth->fetchrow ) {
1028                 $itemlocation{$authorisedvalue} = $lib;
1029             }
1030             $authvalsth->finish;
1031             return \%itemlocation;
1032             exit 1;
1033         }
1034         else {
1035
1036             #No authvalue list
1037             # build default
1038         }
1039         $sth->finish;
1040     }
1041
1042     #No authvalue list
1043     #build default
1044     $itemlocation{"1"} = "Not For Loan";
1045     return \%itemlocation;
1046 }
1047
1048 =head2 GetLostItems
1049
1050 $items = GetLostItems($where,$orderby);
1051
1052 This function get the items lost into C<$items>.
1053
1054 =over 2
1055
1056 =item input:
1057 C<$where> is a hashref. it containts a field of the items table as key
1058 and the value to match as value.
1059 C<$orderby> is a field of the items table.
1060
1061 =item return:
1062 C<$items> is a reference to an array full of hasref which keys are items' table column.
1063
1064 =item usage in the perl script:
1065
1066 my %where;
1067 $where{barcode} = 0001548;
1068 my $items = GetLostItems( \%where, "homebranch" );
1069 $template->param(itemsloop => $items);
1070
1071 =back
1072
1073 =cut
1074
1075 sub GetLostItems {
1076     # Getting input args.
1077     my $where   = shift;
1078     my $orderby = shift;
1079     my $dbh     = C4::Context->dbh;
1080
1081     my $query   = "
1082         SELECT *
1083         FROM   items
1084         WHERE  itemlost IS NOT NULL
1085           AND  itemlost <> 0
1086     ";
1087     foreach my $key (keys %$where) {
1088         $query .= " AND " . $key . " LIKE '%" . $where->{$key} . "%'";
1089     }
1090     $query .= " ORDER BY ".$orderby if defined $orderby;
1091
1092     my $sth = $dbh->prepare($query);
1093     $sth->execute;
1094     my @items;
1095     while ( my $row = $sth->fetchrow_hashref ){
1096         push @items, $row;
1097     }
1098     return \@items;
1099 }
1100
1101 =head2 GetItemsForInventory
1102
1103 $itemlist = GetItemsForInventory($minlocation,$maxlocation,$datelastseen,$offset,$size)
1104
1105 Retrieve a list of title/authors/barcode/callnumber, for biblio inventory.
1106
1107 The sub returns a list of hashes, containing itemnumber, author, title, barcode & item callnumber.
1108 It is ordered by callnumber,title.
1109
1110 The minlocation & maxlocation parameters are used to specify a range of item callnumbers
1111 the datelastseen can be used to specify that you want to see items not seen since a past date only.
1112 offset & size can be used to retrieve only a part of the whole listing (defaut behaviour)
1113
1114 =cut
1115
1116 sub GetItemsForInventory {
1117     my ( $minlocation, $maxlocation, $datelastseen, $branch, $offset, $size ) = @_;
1118     my $dbh = C4::Context->dbh;
1119     my $sth;
1120     if ($datelastseen) {
1121         my $query =
1122                 "SELECT itemnumber,barcode,itemcallnumber,title,author,datelastseen
1123                  FROM items
1124                    LEFT JOIN biblio ON items.biblionumber=biblio.biblionumber 
1125                  WHERE itemcallnumber>= ?
1126                    AND itemcallnumber <=?
1127                    AND (datelastseen< ? OR datelastseen IS NULL)";
1128         $query.= " AND items.homebranch=".$dbh->quote($branch) if $branch;
1129         $query .= " ORDER BY itemcallnumber,title";
1130         $sth = $dbh->prepare($query);
1131         $sth->execute( $minlocation, $maxlocation, $datelastseen );
1132     }
1133     else {
1134         my $query ="
1135                 SELECT itemnumber,barcode,itemcallnumber,title,author,datelastseen
1136                 FROM items 
1137                   LEFT JOIN biblio ON items.biblionumber=biblio.biblionumber 
1138                 WHERE itemcallnumber>= ?
1139                   AND itemcallnumber <=?";
1140         $query.= " AND items.homebranch=".$dbh->quote($branch) if $branch;
1141         $query .= " ORDER BY itemcallnumber,title";
1142         $sth = $dbh->prepare($query);
1143         $sth->execute( $minlocation, $maxlocation );
1144     }
1145     my @results;
1146     while ( my $row = $sth->fetchrow_hashref ) {
1147         $offset-- if ($offset);
1148         if ( ( !$offset ) && $size ) {
1149             push @results, $row;
1150             $size--;
1151         }
1152     }
1153     return \@results;
1154 }
1155
1156 =head2 &GetBiblioItemData
1157
1158 =over 4
1159
1160 $itemdata = &GetBiblioItemData($biblioitemnumber);
1161
1162 Looks up the biblioitem with the given biblioitemnumber. Returns a
1163 reference-to-hash. The keys are the fields from the C<biblio>,
1164 C<biblioitems>, and C<itemtypes> tables in the Koha database, except
1165 that C<biblioitems.notes> is given as C<$itemdata-E<gt>{bnotes}>.
1166
1167 =back
1168
1169 =cut
1170
1171 #'
1172 sub GetBiblioItemData {
1173     my ($bibitem) = @_;
1174     my $dbh       = C4::Context->dbh;
1175     my $sth       =
1176       $dbh->prepare(
1177 "Select *,biblioitems.notes as bnotes from biblioitems, biblio,itemtypes where biblio.biblionumber = biblioitems.biblionumber and biblioitemnumber = ? and biblioitems.itemtype = itemtypes.itemtype"
1178       );
1179     my $data;
1180
1181     $sth->execute($bibitem);
1182
1183     $data = $sth->fetchrow_hashref;
1184
1185     $sth->finish;
1186     return ($data);
1187 }    # sub &GetBiblioItemData
1188
1189 =head2 GetItemnumberFromBarcode
1190
1191 =over 4
1192
1193 $result = GetItemnumberFromBarcode($barcode);
1194
1195 =back
1196
1197 =cut
1198
1199 sub GetItemnumberFromBarcode {
1200     my ($barcode) = @_;
1201     my $dbh = C4::Context->dbh;
1202
1203     my $rq =
1204       $dbh->prepare("SELECT itemnumber from items where items.barcode=?");
1205     $rq->execute($barcode);
1206     my ($result) = $rq->fetchrow;
1207     return ($result);
1208 }
1209
1210 =head2 GetBiblioItemByBiblioNumber
1211
1212 =over 4
1213
1214 NOTE : This function has been copy/paste from C4/Biblio.pm from head before zebra integration.
1215
1216 =back
1217
1218 =cut
1219
1220 sub GetBiblioItemByBiblioNumber {
1221     my ($biblionumber) = @_;
1222     my $dbh = C4::Context->dbh;
1223     my $sth = $dbh->prepare("Select * from biblioitems where biblionumber = ?");
1224     my $count = 0;
1225     my @results;
1226
1227     $sth->execute($biblionumber);
1228
1229     while ( my $data = $sth->fetchrow_hashref ) {
1230         push @results, $data;
1231     }
1232
1233     $sth->finish;
1234     return @results;
1235 }
1236
1237 =head2 GetBiblioFromItemNumber
1238
1239 =over 4
1240
1241 $item = &GetBiblioFromItemNumber($itemnumber);
1242
1243 Looks up the item with the given itemnumber.
1244
1245 C<&itemnodata> returns a reference-to-hash whose keys are the fields
1246 from the C<biblio>, C<biblioitems>, and C<items> tables in the Koha
1247 database.
1248
1249 =back
1250
1251 =cut
1252
1253 #'
1254 sub GetBiblioFromItemNumber {
1255     my ( $itemnumber ) = @_;
1256     my $dbh = C4::Context->dbh;
1257     my $sth = $dbh->prepare(
1258         "SELECT * FROM biblio,items,biblioitems
1259          WHERE items.itemnumber = ?
1260            AND biblio.biblionumber = items.biblionumber
1261            AND biblioitems.biblioitemnumber = items.biblioitemnumber"
1262     );
1263
1264     $sth->execute($itemnumber);
1265     my $data = $sth->fetchrow_hashref;
1266     $sth->finish;
1267     return ($data);
1268 }
1269
1270 =head2 GetBiblio
1271
1272 =over 4
1273
1274 ( $count, @results ) = &GetBiblio($biblionumber);
1275
1276 =back
1277
1278 =cut
1279
1280 sub GetBiblio {
1281     my ($biblionumber) = @_;
1282     my $dbh = C4::Context->dbh;
1283     my $sth = $dbh->prepare("Select * from biblio where biblionumber = ?");
1284     my $count = 0;
1285     my @results;
1286     $sth->execute($biblionumber);
1287     while ( my $data = $sth->fetchrow_hashref ) {
1288         $results[$count] = $data;
1289         $count++;
1290     }    # while
1291     $sth->finish;
1292     return ( $count, @results );
1293 }    # sub GetBiblio
1294
1295 =head2 GetItem
1296
1297 =over 4
1298
1299 $data = &GetItem($itemnumber,$barcode);
1300
1301 return Item information, for a given itemnumber or barcode
1302
1303 =back
1304
1305 =cut
1306
1307 sub GetItem {
1308     my ($itemnumber,$barcode) = @_;
1309     my $dbh = C4::Context->dbh;
1310     if ($itemnumber) {
1311         my $sth = $dbh->prepare("
1312             SELECT * FROM items 
1313             WHERE itemnumber = ?");
1314         $sth->execute($itemnumber);
1315         my $data = $sth->fetchrow_hashref;
1316         return $data;
1317     } else {
1318         my $sth = $dbh->prepare("
1319             SELECT * FROM items 
1320             WHERE barcode = ?"
1321             );
1322         $sth->execute($barcode);
1323         my $data = $sth->fetchrow_hashref;
1324         return $data;
1325     }
1326 }    # sub GetItem
1327
1328 =head2 get_itemnumbers_of
1329
1330 =over 4
1331
1332 my @itemnumbers_of = get_itemnumbers_of(@biblionumbers);
1333
1334 Given a list of biblionumbers, return the list of corresponding itemnumbers
1335 for each biblionumber.
1336
1337 Return a reference on a hash where keys are biblionumbers and values are
1338 references on array of itemnumbers.
1339
1340 =back
1341
1342 =cut
1343
1344 sub get_itemnumbers_of {
1345     my @biblionumbers = @_;
1346
1347     my $dbh = C4::Context->dbh;
1348
1349     my $query = '
1350         SELECT itemnumber,
1351             biblionumber
1352         FROM items
1353         WHERE biblionumber IN (?' . ( ',?' x scalar @biblionumbers - 1 ) . ')
1354     ';
1355     my $sth = $dbh->prepare($query);
1356     $sth->execute(@biblionumbers);
1357
1358     my %itemnumbers_of;
1359
1360     while ( my ( $itemnumber, $biblionumber ) = $sth->fetchrow_array ) {
1361         push @{ $itemnumbers_of{$biblionumber} }, $itemnumber;
1362     }
1363
1364     return \%itemnumbers_of;
1365 }
1366
1367 =head2 GetItemInfosOf
1368
1369 =over 4
1370
1371 GetItemInfosOf(@itemnumbers);
1372
1373 =back
1374
1375 =cut
1376
1377 sub GetItemInfosOf {
1378     my @itemnumbers = @_;
1379
1380     my $query = '
1381         SELECT *
1382         FROM items
1383         WHERE itemnumber IN (' . join( ',', @itemnumbers ) . ')
1384     ';
1385     return get_infos_of( $query, 'itemnumber' );
1386 }
1387
1388 =head2 GetBiblioItemInfosOf
1389
1390 =over 4
1391
1392 GetBiblioItemInfosOf(@biblioitemnumbers);
1393
1394 =back
1395
1396 =cut
1397
1398 sub GetBiblioItemInfosOf {
1399     my @biblioitemnumbers = @_;
1400
1401     my $query = '
1402         SELECT biblioitemnumber,
1403             publicationyear,
1404             itemtype
1405         FROM biblioitems
1406         WHERE biblioitemnumber IN (' . join( ',', @biblioitemnumbers ) . ')
1407     ';
1408     return get_infos_of( $query, 'biblioitemnumber' );
1409 }
1410
1411 =head1 FUNCTIONS FOR HANDLING MARC MANAGEMENT
1412
1413 =head2 GetMarcStructure
1414
1415 =over 4
1416
1417 $res = GetMarcStructure($forlibrarian,$frameworkcode);
1418
1419 Returns a reference to a big hash of hash, with the Marc structure fro the given frameworkcode
1420 $forlibrarian  :if set to 1, the MARC descriptions are the librarians ones, otherwise it's the public (OPAC) ones
1421 $frameworkcode : the framework code to read
1422
1423 =back
1424
1425 =cut
1426
1427 sub GetMarcStructure {
1428     my ( $forlibrarian, $frameworkcode ) = @_;
1429     my $dbh=C4::Context->dbh;
1430     $frameworkcode = "" unless $frameworkcode;
1431     my $sth;
1432     my $libfield = ( $forlibrarian eq 1 ) ? 'liblibrarian' : 'libopac';
1433
1434     # check that framework exists
1435     $sth =
1436       $dbh->prepare(
1437         "select count(*) from marc_tag_structure where frameworkcode=?");
1438     $sth->execute($frameworkcode);
1439     my ($total) = $sth->fetchrow;
1440     $frameworkcode = "" unless ( $total > 0 );
1441     $sth =
1442       $dbh->prepare(
1443 "select tagfield,liblibrarian,libopac,mandatory,repeatable from marc_tag_structure where frameworkcode=? order by tagfield"
1444       );
1445     $sth->execute($frameworkcode);
1446     my ( $liblibrarian, $libopac, $tag, $res, $tab, $mandatory, $repeatable );
1447
1448     while ( ( $tag, $liblibrarian, $libopac, $mandatory, $repeatable ) =
1449         $sth->fetchrow )
1450     {
1451         $res->{$tag}->{lib} =
1452           ( $forlibrarian or !$libopac ) ? $liblibrarian : $libopac;
1453           # why the hell do we need to explicitly decode utf8 ? 
1454           # that's a good question, but we must do it...
1455         $res->{$tab}->{tab}        = "";            # XXX
1456         $res->{$tag}->{mandatory}  = $mandatory;
1457         $res->{$tag}->{repeatable} = $repeatable;
1458     }
1459
1460     $sth =
1461       $dbh->prepare(
1462 "select tagfield,tagsubfield,liblibrarian,libopac,tab, mandatory, repeatable,authorised_value,authtypecode,value_builder,kohafield,seealso,hidden,isurl,link,defaultvalue from marc_subfield_structure where frameworkcode=? order by tagfield,tagsubfield"
1463       );
1464     $sth->execute($frameworkcode);
1465
1466     my $subfield;
1467     my $authorised_value;
1468     my $authtypecode;
1469     my $value_builder;
1470     my $kohafield;
1471     my $seealso;
1472     my $hidden;
1473     my $isurl;
1474     my $link;
1475     my $defaultvalue;
1476
1477     while (
1478         (
1479             $tag,          $subfield,      $liblibrarian,
1480             ,              $libopac,       $tab,
1481             $mandatory,    $repeatable,    $authorised_value,
1482             $authtypecode, $value_builder, $kohafield,
1483             $seealso,      $hidden,        $isurl,
1484             $link,$defaultvalue
1485         )
1486         = $sth->fetchrow
1487       )
1488     {
1489         $res->{$tag}->{$subfield}->{lib} =
1490           ( $forlibrarian or !$libopac ) ? $liblibrarian : $libopac;
1491         $res->{$tag}->{$subfield}->{tab}              = $tab;
1492         $res->{$tag}->{$subfield}->{mandatory}        = $mandatory;
1493         $res->{$tag}->{$subfield}->{repeatable}       = $repeatable;
1494         $res->{$tag}->{$subfield}->{authorised_value} = $authorised_value;
1495         $res->{$tag}->{$subfield}->{authtypecode}     = $authtypecode;
1496         $res->{$tag}->{$subfield}->{value_builder}    = $value_builder;
1497         $res->{$tag}->{$subfield}->{kohafield}        = $kohafield;
1498         $res->{$tag}->{$subfield}->{seealso}          = $seealso;
1499         $res->{$tag}->{$subfield}->{hidden}           = $hidden;
1500         $res->{$tag}->{$subfield}->{isurl}            = $isurl;
1501         $res->{$tag}->{$subfield}->{link}             = $link;
1502         $res->{$tag}->{$subfield}->{defaultvalue}     = $defaultvalue;
1503     }
1504     return $res;
1505 }
1506
1507 =head2 GetMarcFromKohaField
1508
1509 =over 4
1510
1511 ($MARCfield,$MARCsubfield)=GetMarcFromKohaField($kohafield,$frameworkcode);
1512 Returns the MARC fields & subfields mapped to the koha field 
1513 for the given frameworkcode
1514
1515 =back
1516
1517 =cut
1518
1519 sub GetMarcFromKohaField {
1520     my ( $kohafield, $frameworkcode ) = @_;
1521     return 0, 0 unless $kohafield;
1522     my $relations = C4::Context->marcfromkohafield;
1523     return (
1524         $relations->{$frameworkcode}->{$kohafield}->[0],
1525         $relations->{$frameworkcode}->{$kohafield}->[1]
1526     );
1527 }
1528
1529 =head2 GetMarcBiblio
1530
1531 =over 4
1532
1533 Returns MARC::Record of the biblionumber passed in parameter.
1534 the marc record contains both biblio & item datas
1535
1536 =back
1537
1538 =cut
1539
1540 sub GetMarcBiblio {
1541     my $biblionumber = shift;
1542     my $dbh          = C4::Context->dbh;
1543     my $sth          =
1544       $dbh->prepare("select marcxml from biblioitems where biblionumber=? ");
1545     $sth->execute($biblionumber);
1546     my ($marcxml) = $sth->fetchrow;
1547     MARC::File::XML->default_record_format(C4::Context->preference('marcflavour'));
1548     $marcxml =~ s/\x1e//g;
1549     $marcxml =~ s/\x1f//g;
1550     $marcxml =~ s/\x1d//g;
1551     $marcxml =~ s/\x0f//g;
1552     $marcxml =~ s/\x0c//g;
1553     my $record = MARC::Record->new();
1554     $record = MARC::Record::new_from_xml( $marcxml, "utf8",C4::Context->preference('marcflavour')) if $marcxml;
1555     return $record;
1556 }
1557
1558 =head2 GetXmlBiblio
1559
1560 =over 4
1561
1562 my $marcxml = GetXmlBiblio($biblionumber);
1563
1564 Returns biblioitems.marcxml of the biblionumber passed in parameter.
1565 The XML contains both biblio & item datas
1566
1567 =back
1568
1569 =cut
1570
1571 sub GetXmlBiblio {
1572     my ( $biblionumber ) = @_;
1573     my $dbh = C4::Context->dbh;
1574     my $sth =
1575       $dbh->prepare("select marcxml from biblioitems where biblionumber=? ");
1576     $sth->execute($biblionumber);
1577     my ($marcxml) = $sth->fetchrow;
1578     return $marcxml;
1579 }
1580
1581 =head2 GetAuthorisedValueDesc
1582
1583 =over 4
1584
1585 my $subfieldvalue =get_authorised_value_desc(
1586     $tag, $subf[$i][0],$subf[$i][1], '', $taglib);
1587 Retrieve the complete description for a given authorised value.
1588
1589 =back
1590
1591 =cut
1592
1593 sub GetAuthorisedValueDesc {
1594     my ( $tag, $subfield, $value, $framework, $tagslib ) = @_;
1595     my $dbh = C4::Context->dbh;
1596     
1597     #---- branch
1598     if ( $tagslib->{$tag}->{$subfield}->{'authorised_value'} eq "branches" ) {
1599         return C4::Branch::GetBranchName($value);
1600     }
1601
1602     #---- itemtypes
1603     if ( $tagslib->{$tag}->{$subfield}->{'authorised_value'} eq "itemtypes" ) {
1604         return getitemtypeinfo($value);
1605     }
1606
1607     #---- "true" authorized value
1608     my $category = $tagslib->{$tag}->{$subfield}->{'authorised_value'};
1609
1610     if ( $category ne "" ) {
1611         my $sth =
1612           $dbh->prepare(
1613             "select lib from authorised_values where category = ? and authorised_value = ?"
1614           );
1615         $sth->execute( $category, $value );
1616         my $data = $sth->fetchrow_hashref;
1617         return $data->{'lib'};
1618     }
1619     else {
1620         return $value;    # if nothing is found return the original value
1621     }
1622 }
1623
1624 =head2 GetMarcItem
1625
1626 =over 4
1627
1628 Returns MARC::Record of the item passed in parameter.
1629
1630 =back
1631
1632 =cut
1633
1634 sub GetMarcItem {
1635     my ( $biblionumber, $itemnumber ) = @_;
1636     my $dbh = C4::Context->dbh;
1637     my $newrecord = MARC::Record->new();
1638     my $marcflavour = C4::Context->preference('marcflavour');
1639     
1640     my $marcxml = GetXmlBiblio($biblionumber);
1641     my $record = MARC::Record->new();
1642     $record = MARC::Record::new_from_xml( $marcxml, "utf8", $marcflavour );
1643     # now, find where the itemnumber is stored & extract only the item
1644     my ( $itemnumberfield, $itemnumbersubfield ) =
1645       GetMarcFromKohaField( 'items.itemnumber', '' );
1646     my @fields = $record->field($itemnumberfield);
1647     foreach my $field (@fields) {
1648         if ( $field->subfield($itemnumbersubfield) eq $itemnumber ) {
1649             $newrecord->insert_fields_ordered($field);
1650         }
1651     }
1652     return $newrecord;
1653 }
1654
1655
1656
1657 =head2 GetMarcNotes
1658
1659 =over 4
1660
1661 $marcnotesarray = GetMarcNotes( $record, $marcflavour );
1662 Get all notes from the MARC record and returns them in an array.
1663 The note are stored in differents places depending on MARC flavour
1664
1665 =back
1666
1667 =cut
1668
1669 sub GetMarcNotes {
1670     my ( $record, $marcflavour ) = @_;
1671     my $scope;
1672     if ( $marcflavour eq "MARC21" ) {
1673         $scope = '5..';
1674     }
1675     else {    # assume unimarc if not marc21
1676         $scope = '3..';
1677     }
1678     my @marcnotes;
1679     my $note = "";
1680     my $tag  = "";
1681     my $marcnote;
1682     foreach my $field ( $record->field($scope) ) {
1683         my $value = $field->as_string();
1684         if ( $note ne "" ) {
1685             $marcnote = { marcnote => $note, };
1686             push @marcnotes, $marcnote;
1687             $note = $value;
1688         }
1689         if ( $note ne $value ) {
1690             $note = $note . " " . $value;
1691         }
1692     }
1693
1694     if ( $note ) {
1695         $marcnote = { marcnote => $note };
1696         push @marcnotes, $marcnote;    #load last tag into array
1697     }
1698     return \@marcnotes;
1699 }    # end GetMarcNotes
1700
1701 =head2 GetMarcSubjects
1702
1703 =over 4
1704
1705 $marcsubjcts = GetMarcSubjects($record,$marcflavour);
1706 Get all subjects from the MARC record and returns them in an array.
1707 The subjects are stored in differents places depending on MARC flavour
1708
1709 =back
1710
1711 =cut
1712
1713 sub GetMarcSubjects {
1714     my ( $record, $marcflavour ) = @_;
1715     my ( $mintag, $maxtag );
1716     if ( $marcflavour eq "MARC21" ) {
1717         $mintag = "600";
1718         $maxtag = "699";
1719     }
1720     else {    # assume unimarc if not marc21
1721         $mintag = "600";
1722         $maxtag = "611";
1723     }
1724
1725     my @marcsubjcts;
1726
1727     foreach my $field ( $record->fields ) {
1728         next unless $field->tag() >= $mintag && $field->tag() <= $maxtag;
1729         my @subfields = $field->subfields();
1730         my $link;
1731         my $label = "su:";
1732         my $flag = 0;
1733         for my $subject_subfield ( @subfields ) {
1734             my $code = $subject_subfield->[0];
1735             $label .= $subject_subfield->[1] . " and su-to:" unless ( $code == 9 );
1736             if ( $code == 9 ) {
1737                 $link = "Koha-Auth-Number:".$subject_subfield->[1];
1738                 $flag = 1;
1739             }
1740             elsif ( ! $flag ) {
1741                 $link = $label;
1742                 $link =~ s/ and\ssu-to:$//;
1743             }
1744         }
1745         $label =~ s/su/ /g;
1746         $label =~ s/://g;
1747         $label =~ s/-to//g;
1748         $label =~ s/ and //g;
1749         push @marcsubjcts,
1750           {
1751             label => $label,
1752             link  => $link
1753           }
1754     }
1755     return \@marcsubjcts;
1756 }    #end GetMarcSubjects
1757
1758 =head2 GetMarcAuthors
1759
1760 =over 4
1761
1762 authors = GetMarcAuthors($record,$marcflavour);
1763 Get all authors from the MARC record and returns them in an array.
1764 The authors are stored in differents places depending on MARC flavour
1765
1766 =back
1767
1768 =cut
1769
1770 sub GetMarcAuthors {
1771     my ( $record, $marcflavour ) = @_;
1772     my ( $mintag, $maxtag );
1773     if ( $marcflavour eq "MARC21" ) {
1774         $mintag = "100";
1775         $maxtag = "111"; 
1776     }
1777     else {    # assume unimarc if not marc21
1778         $mintag = "701";
1779         $maxtag = "712";
1780     }
1781
1782     my @marcauthors;
1783
1784     foreach my $field ( $record->fields ) {
1785         next unless $field->tag() >= $mintag && $field->tag() <= $maxtag;
1786         my %hash;
1787         my @subfields = $field->subfields();
1788         my $count_auth = 0;
1789         my $and ;
1790         for my $authors_subfield (@subfields) {
1791                 if ($count_auth ne '0'){
1792                 $and = " and au:";
1793                 }
1794             $count_auth++;
1795             my $subfieldcode     = $authors_subfield->[0];
1796             my $value            = $authors_subfield->[1];
1797             $hash{'tag'}         = $field->tag;
1798             $hash{value}        .= $value . " " if ($subfieldcode != 9) ;
1799             $hash{link}        .= $value if ($subfieldcode eq 9);
1800         }
1801         push @marcauthors, \%hash;
1802     }
1803     return \@marcauthors;
1804 }
1805
1806 =head2 GetMarcSeries
1807
1808 =over 4
1809
1810 $marcseriessarray = GetMarcSeries($record,$marcflavour);
1811 Get all series from the MARC record and returns them in an array.
1812 The series are stored in differents places depending on MARC flavour
1813
1814 =back
1815
1816 =cut
1817
1818 sub GetMarcSeries {
1819     my ($record, $marcflavour) = @_;
1820     my ($mintag, $maxtag);
1821     if ($marcflavour eq "MARC21") {
1822         $mintag = "440";
1823         $maxtag = "490";
1824     } else {           # assume unimarc if not marc21
1825         $mintag = "600";
1826         $maxtag = "619";
1827     }
1828
1829     my @marcseries;
1830     my $subjct = "";
1831     my $subfield = "";
1832     my $marcsubjct;
1833
1834     foreach my $field ($record->field('440'), $record->field('490')) {
1835         my @subfields_loop;
1836         #my $value = $field->subfield('a');
1837         #$marcsubjct = {MARCSUBJCT => $value,};
1838         my @subfields = $field->subfields();
1839         #warn "subfields:".join " ", @$subfields;
1840         my $counter = 0;
1841         my @link_loop;
1842         for my $series_subfield (@subfields) {
1843                         my $volume_number;
1844                         undef $volume_number;
1845                         # see if this is an instance of a volume
1846                         if ($series_subfield->[0] eq 'v') {
1847                                 $volume_number=1;
1848                         }
1849
1850             my $code = $series_subfield->[0];
1851             my $value = $series_subfield->[1];
1852             my $linkvalue = $value;
1853             $linkvalue =~ s/(\(|\))//g;
1854             my $operator = " and " unless $counter==0;
1855             push @link_loop, {link => $linkvalue, operator => $operator };
1856             my $separator = C4::Context->preference("authoritysep") unless $counter==0;
1857                         if ($volume_number) {
1858                         push @subfields_loop, {volumenum => $value};
1859                         }
1860                         else {
1861             push @subfields_loop, {code => $code, value => $value, link_loop => \@link_loop, separator => $separator, volumenum => $volume_number};
1862                         }
1863             $counter++;
1864         }
1865         push @marcseries, { MARCSERIES_SUBFIELDS_LOOP => \@subfields_loop };
1866         #$marcsubjct = {MARCSUBJCT => $field->as_string(),};
1867         #push @marcsubjcts, $marcsubjct;
1868         #$subjct = $value;
1869
1870     }
1871     my $marcseriessarray=\@marcseries;
1872     return $marcseriessarray;
1873 }  #end getMARCseriess
1874
1875 =head2 GetFrameworkCode
1876
1877 =over 4
1878
1879 $frameworkcode = GetFrameworkCode( $biblionumber )
1880
1881 =back
1882
1883 =cut
1884
1885 sub GetFrameworkCode {
1886     my ( $biblionumber ) = @_;
1887     my $dbh = C4::Context->dbh;
1888     my $sth =
1889       $dbh->prepare("select frameworkcode from biblio where biblionumber=?");
1890     $sth->execute($biblionumber);
1891     my ($frameworkcode) = $sth->fetchrow;
1892     return $frameworkcode;
1893 }
1894
1895 =head2 TransformKohaToMarc
1896
1897 =over 4
1898
1899 $record = TransformKohaToMarc( $hash )
1900 This function builds partial MARC::Record from a hash
1901 Hash entries can be from biblio or biblioitems.
1902 This function is called in acquisition module, to create a basic catalogue entry from user entry
1903
1904 =back
1905
1906 =cut
1907
1908 sub TransformKohaToMarc {
1909
1910     my ( $hash ) = @_;
1911     my $dbh = C4::Context->dbh;
1912     my $sth =
1913     $dbh->prepare(
1914         "select tagfield,tagsubfield from marc_subfield_structure where frameworkcode=? and kohafield=?"
1915     );
1916     my $record = MARC::Record->new();
1917     foreach (keys %{$hash}) {
1918         &TransformKohaToMarcOneField( $sth, $record, $_,
1919             $hash->{$_}, '' );
1920         }
1921     return $record;
1922 }
1923
1924 =head2 TransformKohaToMarcOneField
1925
1926 =over 4
1927
1928 $record = TransformKohaToMarcOneField( $sth, $record, $kohafieldname, $value, $frameworkcode );
1929
1930 =back
1931
1932 =cut
1933
1934 sub TransformKohaToMarcOneField {
1935     my ( $sth, $record, $kohafieldname, $value, $frameworkcode ) = @_;
1936     $frameworkcode='' unless $frameworkcode;
1937     my $tagfield;
1938     my $tagsubfield;
1939
1940     if ( !defined $sth ) {
1941         my $dbh = C4::Context->dbh;
1942         $sth =
1943           $dbh->prepare(
1944 "select tagfield,tagsubfield from marc_subfield_structure where frameworkcode=? and kohafield=?"
1945           );
1946     }
1947     $sth->execute( $frameworkcode, $kohafieldname );
1948     if ( ( $tagfield, $tagsubfield ) = $sth->fetchrow ) {
1949         my $tag = $record->field($tagfield);
1950         if ($tag) {
1951             $tag->update( $tagsubfield => $value );
1952             $record->delete_field($tag);
1953             $record->insert_fields_ordered($tag);
1954         }
1955         else {
1956             $record->add_fields( $tagfield, " ", " ", $tagsubfield => $value );
1957         }
1958     }
1959     return $record;
1960 }
1961
1962 =head2 TransformHtmlToXml
1963
1964 =over 4
1965
1966 $xml = TransformHtmlToXml( $tags, $subfields, $values, $indicator, $ind_tag )
1967
1968 =back
1969
1970 =cut
1971
1972 sub TransformHtmlToXml {
1973     my ( $tags, $subfields, $values, $indicator, $ind_tag ) = @_;
1974     my $xml = MARC::File::XML::header('UTF-8');
1975     if ( C4::Context->preference('marcflavour') eq 'UNIMARC' ) {
1976         MARC::File::XML->default_record_format('UNIMARC');
1977         use POSIX qw(strftime);
1978         my $string = strftime( "%Y%m%d", localtime(time) );
1979         $string = sprintf( "%-*s", 35, $string );
1980         substr( $string, 22, 6, "frey50" );
1981         $xml .= "<datafield tag=\"100\" ind1=\"\" ind2=\"\">\n";
1982         $xml .= "<subfield code=\"a\">$string</subfield>\n";
1983         $xml .= "</datafield>\n";
1984     }
1985     my $prevvalue;
1986     my $prevtag = -1;
1987     my $first   = 1;
1988     my $j       = -1;
1989     for ( my $i = 0 ; $i <= @$tags ; $i++ ) {
1990         @$values[$i] =~ s/&/&amp;/g;
1991         @$values[$i] =~ s/</&lt;/g;
1992         @$values[$i] =~ s/>/&gt;/g;
1993         @$values[$i] =~ s/"/&quot;/g;
1994         @$values[$i] =~ s/'/&apos;/g;
1995         if ( !utf8::is_utf8( @$values[$i] ) ) {
1996             utf8::decode( @$values[$i] );
1997         }
1998         if ( ( @$tags[$i] ne $prevtag ) ) {
1999             $j++ unless ( @$tags[$i] eq "" );
2000             if ( !$first ) {
2001                 $xml .= "</datafield>\n";
2002                 if (   ( @$tags[$i] && @$tags[$i] > 10 )
2003                     && ( @$values[$i] ne "" ) )
2004                 {
2005                     my $ind1 = substr( @$indicator[$j], 0, 1 );
2006                     my $ind2;
2007                     if ( @$indicator[$j] ) {
2008                         $ind2 = substr( @$indicator[$j], 1, 1 );
2009                     }
2010                     else {
2011                         warn "Indicator in @$tags[$i] is empty";
2012                         $ind2 = " ";
2013                     }
2014                     $xml .=
2015 "<datafield tag=\"@$tags[$i]\" ind1=\"$ind1\" ind2=\"$ind2\">\n";
2016                     $xml .=
2017 "<subfield code=\"@$subfields[$i]\">@$values[$i]</subfield>\n";
2018                     $first = 0;
2019                 }
2020                 else {
2021                     $first = 1;
2022                 }
2023             }
2024             else {
2025                 if ( @$values[$i] ne "" ) {
2026
2027                     # leader
2028                     if ( @$tags[$i] eq "000" ) {
2029                         $xml .= "<leader>@$values[$i]</leader>\n";
2030                         $first = 1;
2031
2032                         # rest of the fixed fields
2033                     }
2034                     elsif ( @$tags[$i] < 10 ) {
2035                         $xml .=
2036 "<controlfield tag=\"@$tags[$i]\">@$values[$i]</controlfield>\n";
2037                         $first = 1;
2038                     }
2039                     else {
2040                         my $ind1 = substr( @$indicator[$j], 0, 1 );
2041                         my $ind2 = substr( @$indicator[$j], 1, 1 );
2042                         $xml .=
2043 "<datafield tag=\"@$tags[$i]\" ind1=\"$ind1\" ind2=\"$ind2\">\n";
2044                         $xml .=
2045 "<subfield code=\"@$subfields[$i]\">@$values[$i]</subfield>\n";
2046                         $first = 0;
2047                     }
2048                 }
2049             }
2050         }
2051         else {    # @$tags[$i] eq $prevtag
2052             if ( @$values[$i] eq "" ) {
2053             }
2054             else {
2055                 if ($first) {
2056                     my $ind1 = substr( @$indicator[$j], 0, 1 );
2057                     my $ind2 = substr( @$indicator[$j], 1, 1 );
2058                     $xml .=
2059 "<datafield tag=\"@$tags[$i]\" ind1=\"$ind1\" ind2=\"$ind2\">\n";
2060                     $first = 0;
2061                 }
2062                 $xml .=
2063 "<subfield code=\"@$subfields[$i]\">@$values[$i]</subfield>\n";
2064             }
2065         }
2066         $prevtag = @$tags[$i];
2067     }
2068     $xml .= MARC::File::XML::footer();
2069
2070     return $xml;
2071 }
2072
2073 =head2 TransformHtmlToMarc
2074
2075 =over 4
2076
2077 $record = TransformHtmlToMarc( $dbh, $rtags, $rsubfields, $rvalues, %indicators )
2078
2079 =back
2080
2081 =cut
2082
2083 sub TransformHtmlToMarc {
2084     my ( $dbh, $rtags, $rsubfields, $rvalues, %indicators ) = @_;
2085     my $prevtag = -1;
2086     my $record  = MARC::Record->new();
2087
2088     #     my %subfieldlist=();
2089     my $prevvalue;    # if tag <10
2090     my $field;        # if tag >=10
2091     for ( my $i = 0 ; $i < @$rtags ; $i++ ) {
2092         next unless @$rvalues[$i];
2093
2094  # rebuild MARC::Record
2095  #             warn "0=>".@$rtags[$i].@$rsubfields[$i]." = ".@$rvalues[$i].": ";
2096         if ( @$rtags[$i] ne $prevtag ) {
2097             if ( $prevtag < 10 ) {
2098                 if ($prevvalue) {
2099
2100                     if ( $prevtag ne '000' ) {
2101                         $record->insert_fields_ordered(
2102                             ( sprintf "%03s", $prevtag ), $prevvalue );
2103                     }
2104                     else {
2105
2106                         $record->leader($prevvalue);
2107
2108                     }
2109                 }
2110             }
2111             else {
2112                 if ($field) {
2113                     $record->insert_fields_ordered($field);
2114                 }
2115             }
2116             $indicators{ @$rtags[$i] } .= '  ';
2117             if ( @$rtags[$i] < 10 ) {
2118                 $prevvalue = @$rvalues[$i];
2119                 undef $field;
2120             }
2121             else {
2122                 undef $prevvalue;
2123                 $field = MARC::Field->new(
2124                     ( sprintf "%03s", @$rtags[$i] ),
2125                     substr( $indicators{ @$rtags[$i] }, 0, 1 ),
2126                     substr( $indicators{ @$rtags[$i] }, 1, 1 ),
2127                     @$rsubfields[$i] => @$rvalues[$i]
2128                 );
2129             }
2130             $prevtag = @$rtags[$i];
2131         }
2132         else {
2133             if ( @$rtags[$i] < 10 ) {
2134                 $prevvalue = @$rvalues[$i];
2135             }
2136             else {
2137                 if ( length( @$rvalues[$i] ) > 0 ) {
2138                     $field->add_subfields( @$rsubfields[$i] => @$rvalues[$i] );
2139                 }
2140             }
2141             $prevtag = @$rtags[$i];
2142         }
2143     }
2144
2145     # the last has not been included inside the loop... do it now !
2146     $record->insert_fields_ordered($field) if $field;
2147
2148     $record->encoding('UTF-8');
2149
2150     #    $record->MARC::File::USMARC::update_leader();
2151     return $record;
2152 }
2153
2154 =head2 TransformMarcToKoha
2155
2156 =over 4
2157
2158 $result = TransformMarcToKoha( $dbh, $record, $frameworkcode )
2159
2160 =back
2161
2162 =cut
2163
2164 sub TransformMarcToKoha {
2165     my ( $dbh, $record, $frameworkcode ) = @_;
2166     my $sth =
2167       $dbh->prepare(
2168 "select tagfield,tagsubfield from marc_subfield_structure where frameworkcode=? and kohafield=?"
2169       );
2170     my $result;
2171     my $sth2 = $dbh->prepare("SHOW COLUMNS from biblio");
2172     $sth2->execute;
2173     my $field;
2174     while ( ($field) = $sth2->fetchrow ) {
2175         $result =
2176           &TransformMarcToKohaOneField( "biblio", $field, $record, $result,
2177             $frameworkcode );
2178     }
2179     $sth2 = $dbh->prepare("SHOW COLUMNS from biblioitems");
2180     $sth2->execute;
2181     while ( ($field) = $sth2->fetchrow ) {
2182         if ( $field eq 'notes' ) { $field = 'bnotes'; }
2183         $result =
2184           &TransformMarcToKohaOneField( "biblioitems", $field, $record, $result,
2185             $frameworkcode );
2186     }
2187     $sth2 = $dbh->prepare("SHOW COLUMNS from items");
2188     $sth2->execute;
2189     while ( ($field) = $sth2->fetchrow ) {
2190         $result =
2191           &TransformMarcToKohaOneField( "items", $field, $record, $result,
2192             $frameworkcode );
2193     }
2194
2195     #
2196     # modify copyrightdate to keep only the 1st year found
2197     my $temp = $result->{'copyrightdate'};
2198     $temp =~ m/c(\d\d\d\d)/;    # search cYYYY first
2199     if ( $1 > 0 ) {
2200         $result->{'copyrightdate'} = $1;
2201     }
2202     else {                      # if no cYYYY, get the 1st date.
2203         $temp =~ m/(\d\d\d\d)/;
2204         $result->{'copyrightdate'} = $1;
2205     }
2206
2207     # modify publicationyear to keep only the 1st year found
2208     $temp = $result->{'publicationyear'};
2209     $temp =~ m/c(\d\d\d\d)/;    # search cYYYY first
2210     if ( $1 > 0 ) {
2211         $result->{'publicationyear'} = $1;
2212     }
2213     else {                      # if no cYYYY, get the 1st date.
2214         $temp =~ m/(\d\d\d\d)/;
2215         $result->{'publicationyear'} = $1;
2216     }
2217     return $result;
2218 }
2219
2220 =head2 TransformMarcToKohaOneField
2221
2222 =over 4
2223
2224 $result = TransformMarcToKohaOneField( $kohatable, $kohafield, $record, $result, $frameworkcode )
2225
2226 =back
2227
2228 =cut
2229
2230 sub TransformMarcToKohaOneField {
2231
2232 # FIXME ? if a field has a repeatable subfield that is used in old-db, only the 1st will be retrieved...
2233     my ( $kohatable, $kohafield, $record, $result, $frameworkcode ) = @_;
2234
2235     my $res = "";
2236     my ( $tagfield, $subfield ) =
2237       GetMarcFromKohaField( $kohatable . "." . $kohafield,
2238         $frameworkcode );
2239     foreach my $field ( $record->field($tagfield) ) {
2240         if ( $field->tag() < 10 ) {
2241             if ( $result->{$kohafield} ) {
2242                 $result->{$kohafield} .= " | " . $field->data();
2243             }
2244             else {
2245                 $result->{$kohafield} = $field->data();
2246             }
2247         }
2248         else {
2249             if ( $field->subfields ) {
2250                 my @subfields = $field->subfields();
2251                 foreach my $subfieldcount ( 0 .. $#subfields ) {
2252                     if ( $subfields[$subfieldcount][0] eq $subfield ) {
2253                         if ( $result->{$kohafield} ) {
2254                             $result->{$kohafield} .=
2255                               " | " . $subfields[$subfieldcount][1];
2256                         }
2257                         else {
2258                             $result->{$kohafield} =
2259                               $subfields[$subfieldcount][1];
2260                         }
2261                     }
2262                 }
2263             }
2264         }
2265     }
2266     return $result;
2267 }
2268 =head1  OTHER FUNCTIONS
2269
2270 =head2 char_decode
2271
2272 =over 4
2273
2274 my $string = char_decode( $string, $encoding );
2275
2276 converts ISO 5426 coded string to UTF-8
2277 sloppy code : should be improved in next issue
2278
2279 =back
2280
2281 =cut
2282
2283 sub char_decode {
2284     my ( $string, $encoding ) = @_;
2285     $_ = $string;
2286
2287     $encoding = C4::Context->preference("marcflavour") unless $encoding;
2288     if ( $encoding eq "UNIMARC" ) {
2289
2290         #         s/\xe1/Æ/gm;
2291         s/\xe2/Ğ/gm;
2292         s/\xe9/Ø/gm;
2293         s/\xec/ş/gm;
2294         s/\xf1/æ/gm;
2295         s/\xf3/ğ/gm;
2296         s/\xf9/ø/gm;
2297         s/\xfb/ß/gm;
2298         s/\xc1\x61/à/gm;
2299         s/\xc1\x65/è/gm;
2300         s/\xc1\x69/ì/gm;
2301         s/\xc1\x6f/ò/gm;
2302         s/\xc1\x75/ù/gm;
2303         s/\xc1\x41/À/gm;
2304         s/\xc1\x45/È/gm;
2305         s/\xc1\x49/Ì/gm;
2306         s/\xc1\x4f/Ò/gm;
2307         s/\xc1\x55/Ù/gm;
2308         s/\xc2\x41/Á/gm;
2309         s/\xc2\x45/É/gm;
2310         s/\xc2\x49/Í/gm;
2311         s/\xc2\x4f/Ó/gm;
2312         s/\xc2\x55/Ú/gm;
2313         s/\xc2\x59/İ/gm;
2314         s/\xc2\x61/á/gm;
2315         s/\xc2\x65/é/gm;
2316         s/\xc2\x69/í/gm;
2317         s/\xc2\x6f/ó/gm;
2318         s/\xc2\x75/ú/gm;
2319         s/\xc2\x79/ı/gm;
2320         s/\xc3\x41/Â/gm;
2321         s/\xc3\x45/Ê/gm;
2322         s/\xc3\x49/Î/gm;
2323         s/\xc3\x4f/Ô/gm;
2324         s/\xc3\x55/Û/gm;
2325         s/\xc3\x61/â/gm;
2326         s/\xc3\x65/ê/gm;
2327         s/\xc3\x69/î/gm;
2328         s/\xc3\x6f/ô/gm;
2329         s/\xc3\x75/û/gm;
2330         s/\xc4\x41/Ã/gm;
2331         s/\xc4\x4e/Ñ/gm;
2332         s/\xc4\x4f/Õ/gm;
2333         s/\xc4\x61/ã/gm;
2334         s/\xc4\x6e/ñ/gm;
2335         s/\xc4\x6f/õ/gm;
2336         s/\xc8\x41/Ä/gm;
2337         s/\xc8\x45/Ë/gm;
2338         s/\xc8\x49/Ï/gm;
2339         s/\xc8\x61/ä/gm;
2340         s/\xc8\x65/ë/gm;
2341         s/\xc8\x69/ï/gm;
2342         s/\xc8\x6F/ö/gm;
2343         s/\xc8\x75/ü/gm;
2344         s/\xc8\x76/ÿ/gm;
2345         s/\xc9\x41/Ä/gm;
2346         s/\xc9\x45/Ë/gm;
2347         s/\xc9\x49/Ï/gm;
2348         s/\xc9\x4f/Ö/gm;
2349         s/\xc9\x55/Ü/gm;
2350         s/\xc9\x61/ä/gm;
2351         s/\xc9\x6f/ö/gm;
2352         s/\xc9\x75/ü/gm;
2353         s/\xca\x41/Å/gm;
2354         s/\xca\x61/å/gm;
2355         s/\xd0\x43/Ç/gm;
2356         s/\xd0\x63/ç/gm;
2357
2358         # this handles non-sorting blocks (if implementation requires this)
2359         $string = nsb_clean($_);
2360     }
2361     elsif ( $encoding eq "USMARC" || $encoding eq "MARC21" ) {
2362         ##MARC-8 to UTF-8
2363
2364         s/\xe1\x61/à/gm;
2365         s/\xe1\x65/è/gm;
2366         s/\xe1\x69/ì/gm;
2367         s/\xe1\x6f/ò/gm;
2368         s/\xe1\x75/ù/gm;
2369         s/\xe1\x41/À/gm;
2370         s/\xe1\x45/È/gm;
2371         s/\xe1\x49/Ì/gm;
2372         s/\xe1\x4f/Ò/gm;
2373         s/\xe1\x55/Ù/gm;
2374         s/\xe2\x41/Á/gm;
2375         s/\xe2\x45/É/gm;
2376         s/\xe2\x49/Í/gm;
2377         s/\xe2\x4f/Ó/gm;
2378         s/\xe2\x55/Ú/gm;
2379         s/\xe2\x59/İ/gm;
2380         s/\xe2\x61/á/gm;
2381         s/\xe2\x65/é/gm;
2382         s/\xe2\x69/í/gm;
2383         s/\xe2\x6f/ó/gm;
2384         s/\xe2\x75/ú/gm;
2385         s/\xe2\x79/ı/gm;
2386         s/\xe3\x41/Â/gm;
2387         s/\xe3\x45/Ê/gm;
2388         s/\xe3\x49/Î/gm;
2389         s/\xe3\x4f/Ô/gm;
2390         s/\xe3\x55/Û/gm;
2391         s/\xe3\x61/â/gm;
2392         s/\xe3\x65/ê/gm;
2393         s/\xe3\x69/î/gm;
2394         s/\xe3\x6f/ô/gm;
2395         s/\xe3\x75/û/gm;
2396         s/\xe4\x41/Ã/gm;
2397         s/\xe4\x4e/Ñ/gm;
2398         s/\xe4\x4f/Õ/gm;
2399         s/\xe4\x61/ã/gm;
2400         s/\xe4\x6e/ñ/gm;
2401         s/\xe4\x6f/õ/gm;
2402         s/\xe6\x41/Ă/gm;
2403         s/\xe6\x45/Ĕ/gm;
2404         s/\xe6\x65/ĕ/gm;
2405         s/\xe6\x61/ă/gm;
2406         s/\xe8\x45/Ë/gm;
2407         s/\xe8\x49/Ï/gm;
2408         s/\xe8\x65/ë/gm;
2409         s/\xe8\x69/ï/gm;
2410         s/\xe8\x76/ÿ/gm;
2411         s/\xe9\x41/A/gm;
2412         s/\xe9\x4f/O/gm;
2413         s/\xe9\x55/U/gm;
2414         s/\xe9\x61/a/gm;
2415         s/\xe9\x6f/o/gm;
2416         s/\xe9\x75/u/gm;
2417         s/\xea\x41/A/gm;
2418         s/\xea\x61/a/gm;
2419
2420         #Additional Turkish characters
2421         s/\x1b//gm;
2422         s/\x1e//gm;
2423         s/(\xf0)s/\xc5\x9f/gm;
2424         s/(\xf0)S/\xc5\x9e/gm;
2425         s/(\xf0)c/ç/gm;
2426         s/(\xf0)C/Ç/gm;
2427         s/\xe7\x49/\\xc4\xb0/gm;
2428         s/(\xe6)G/\xc4\x9e/gm;
2429         s/(\xe6)g/ğ\xc4\x9f/gm;
2430         s/\xB8/ı/gm;
2431         s/\xB9/£/gm;
2432         s/(\xe8|\xc8)o/ö/gm;
2433         s/(\xe8|\xc8)O/Ö/gm;
2434         s/(\xe8|\xc8)u/ü/gm;
2435         s/(\xe8|\xc8)U/Ü/gm;
2436         s/\xc2\xb8/\xc4\xb1/gm;
2437         s/¸/\xc4\xb1/gm;
2438
2439         # this handles non-sorting blocks (if implementation requires this)
2440         $string = nsb_clean($_);
2441     }
2442     return ($string);
2443 }
2444
2445 =head2 nsb_clean
2446
2447 =over 4
2448
2449 my $string = nsb_clean( $string, $encoding );
2450
2451 =back
2452
2453 =cut
2454
2455 sub nsb_clean {
2456     my $NSB      = '\x88';    # NSB : begin Non Sorting Block
2457     my $NSE      = '\x89';    # NSE : Non Sorting Block end
2458                               # handles non sorting blocks
2459     my ($string) = @_;
2460     $_ = $string;
2461     s/$NSB/(/gm;
2462     s/[ ]{0,1}$NSE/) /gm;
2463     $string = $_;
2464     return ($string);
2465 }
2466
2467 =head2 PrepareItemrecordDisplay
2468
2469 =over 4
2470
2471 PrepareItemrecordDisplay($itemrecord,$bibnum,$itemumber);
2472
2473 Returns a hash with all the fields for Display a given item data in a template
2474
2475 =back
2476
2477 =cut
2478
2479 sub PrepareItemrecordDisplay {
2480
2481     my ( $bibnum, $itemnum ) = @_;
2482
2483     my $dbh = C4::Context->dbh;
2484     my $frameworkcode = &GetFrameworkCode( $bibnum );
2485     my ( $itemtagfield, $itemtagsubfield ) =
2486       &GetMarcFromKohaField( "items.itemnumber", $frameworkcode );
2487     my $tagslib = &GetMarcStructure( 1, $frameworkcode );
2488     my $itemrecord = GetMarcItem( $bibnum, $itemnum) if ($itemnum);
2489     my @loop_data;
2490     my $authorised_values_sth =
2491       $dbh->prepare(
2492 "select authorised_value,lib from authorised_values where category=? order by lib"
2493       );
2494     foreach my $tag ( sort keys %{$tagslib} ) {
2495         my $previous_tag = '';
2496         if ( $tag ne '' ) {
2497             # loop through each subfield
2498             my $cntsubf;
2499             foreach my $subfield ( sort keys %{ $tagslib->{$tag} } ) {
2500                 next if ( subfield_is_koha_internal_p($subfield) );
2501                 next if ( $tagslib->{$tag}->{$subfield}->{'tab'} ne "10" );
2502                 my %subfield_data;
2503                 $subfield_data{tag}           = $tag;
2504                 $subfield_data{subfield}      = $subfield;
2505                 $subfield_data{countsubfield} = $cntsubf++;
2506                 $subfield_data{kohafield}     =
2507                   $tagslib->{$tag}->{$subfield}->{'kohafield'};
2508
2509          #        $subfield_data{marc_lib}=$tagslib->{$tag}->{$subfield}->{lib};
2510                 $subfield_data{marc_lib} =
2511                     "<span id=\"error\" title=\""
2512                   . $tagslib->{$tag}->{$subfield}->{lib} . "\">"
2513                   . substr( $tagslib->{$tag}->{$subfield}->{lib}, 0, 12 )
2514                   . "</span>";
2515                 $subfield_data{mandatory} =
2516                   $tagslib->{$tag}->{$subfield}->{mandatory};
2517                 $subfield_data{repeatable} =
2518                   $tagslib->{$tag}->{$subfield}->{repeatable};
2519                 $subfield_data{hidden} = "display:none"
2520                   if $tagslib->{$tag}->{$subfield}->{hidden};
2521                 my ( $x, $value );
2522                 ( $x, $value ) = _find_value( $tag, $subfield, $itemrecord )
2523                   if ($itemrecord);
2524                 $value =~ s/"/&quot;/g;
2525
2526                 # search for itemcallnumber if applicable
2527                 if ( $tagslib->{$tag}->{$subfield}->{kohafield} eq
2528                     'items.itemcallnumber'
2529                     && C4::Context->preference('itemcallnumber') )
2530                 {
2531                     my $CNtag =
2532                       substr( C4::Context->preference('itemcallnumber'), 0, 3 );
2533                     my $CNsubfield =
2534                       substr( C4::Context->preference('itemcallnumber'), 3, 1 );
2535                     my $temp = $itemrecord->field($CNtag) if ($itemrecord);
2536                     if ($temp) {
2537                         $value = $temp->subfield($CNsubfield);
2538                     }
2539                 }
2540                 if ( $tagslib->{$tag}->{$subfield}->{authorised_value} ) {
2541                     my @authorised_values;
2542                     my %authorised_lib;
2543
2544                     # builds list, depending on authorised value...
2545                     #---- branch
2546                     if ( $tagslib->{$tag}->{$subfield}->{'authorised_value'} eq
2547                         "branches" )
2548                     {
2549                         if ( ( C4::Context->preference("IndependantBranches") )
2550                             && ( C4::Context->userenv->{flags} != 1 ) )
2551                         {
2552                             my $sth =
2553                               $dbh->prepare(
2554 "select branchcode,branchname from branches where branchcode = ? order by branchname"
2555                               );
2556                             $sth->execute( C4::Context->userenv->{branch} );
2557                             push @authorised_values, ""
2558                               unless (
2559                                 $tagslib->{$tag}->{$subfield}->{mandatory} );
2560                             while ( my ( $branchcode, $branchname ) =
2561                                 $sth->fetchrow_array )
2562                             {
2563                                 push @authorised_values, $branchcode;
2564                                 $authorised_lib{$branchcode} = $branchname;
2565                             }
2566                         }
2567                         else {
2568                             my $sth =
2569                               $dbh->prepare(
2570 "select branchcode,branchname from branches order by branchname"
2571                               );
2572                             $sth->execute;
2573                             push @authorised_values, ""
2574                               unless (
2575                                 $tagslib->{$tag}->{$subfield}->{mandatory} );
2576                             while ( my ( $branchcode, $branchname ) =
2577                                 $sth->fetchrow_array )
2578                             {
2579                                 push @authorised_values, $branchcode;
2580                                 $authorised_lib{$branchcode} = $branchname;
2581                             }
2582                         }
2583
2584                         #----- itemtypes
2585                     }
2586                     elsif ( $tagslib->{$tag}->{$subfield}->{authorised_value} eq
2587                         "itemtypes" )
2588                     {
2589                         my $sth =
2590                           $dbh->prepare(
2591 "select itemtype,description from itemtypes order by description"
2592                           );
2593                         $sth->execute;
2594                         push @authorised_values, ""
2595                           unless ( $tagslib->{$tag}->{$subfield}->{mandatory} );
2596                         while ( my ( $itemtype, $description ) =
2597                             $sth->fetchrow_array )
2598                         {
2599                             push @authorised_values, $itemtype;
2600                             $authorised_lib{$itemtype} = $description;
2601                         }
2602
2603                         #---- "true" authorised value
2604                     }
2605                     else {
2606                         $authorised_values_sth->execute(
2607                             $tagslib->{$tag}->{$subfield}->{authorised_value} );
2608                         push @authorised_values, ""
2609                           unless ( $tagslib->{$tag}->{$subfield}->{mandatory} );
2610                         while ( my ( $value, $lib ) =
2611                             $authorised_values_sth->fetchrow_array )
2612                         {
2613                             push @authorised_values, $value;
2614                             $authorised_lib{$value} = $lib;
2615                         }
2616                     }
2617                     $subfield_data{marc_value} = CGI::scrolling_list(
2618                         -name     => 'field_value',
2619                         -values   => \@authorised_values,
2620                         -default  => "$value",
2621                         -labels   => \%authorised_lib,
2622                         -size     => 1,
2623                         -tabindex => '',
2624                         -multiple => 0,
2625                     );
2626                 }
2627                 elsif ( $tagslib->{$tag}->{$subfield}->{thesaurus_category} ) {
2628                     $subfield_data{marc_value} =
2629 "<input type=\"text\" name=\"field_value\"  size=47 maxlength=255> <a href=\"javascript:Dopop('cataloguing/thesaurus_popup.pl?category=$tagslib->{$tag}->{$subfield}->{thesaurus_category}&index=',)\">...</a>";
2630
2631 #"
2632 # COMMENTED OUT because No $i is provided with this API.
2633 # And thus, no value_builder can be activated.
2634 # BUT could be thought over.
2635 #         } elsif ($tagslib->{$tag}->{$subfield}->{'value_builder'}) {
2636 #             my $plugin="value_builder/".$tagslib->{$tag}->{$subfield}->{'value_builder'};
2637 #             require $plugin;
2638 #             my $extended_param = plugin_parameters($dbh,$itemrecord,$tagslib,$i,0);
2639 #             my ($function_name,$javascript) = plugin_javascript($dbh,$record,$tagslib,$i,0);
2640 #             $subfield_data{marc_value}="<input type=\"text\" value=\"$value\" name=\"field_value\"  size=47 maxlength=255 DISABLE READONLY OnFocus=\"javascript:Focus$function_name()\" OnBlur=\"javascript:Blur$function_name()\"> <a href=\"javascript:Clic$function_name()\">...</a> $javascript";
2641                 }
2642                 else {
2643                     $subfield_data{marc_value} =
2644 "<input type=\"text\" name=\"field_value\" value=\"$value\" size=50 maxlength=255>";
2645                 }
2646                 push( @loop_data, \%subfield_data );
2647             }
2648         }
2649     }
2650     my $itemnumber = $itemrecord->subfield( $itemtagfield, $itemtagsubfield )
2651       if ( $itemrecord && $itemrecord->field($itemtagfield) );
2652     return {
2653         'itemtagfield'    => $itemtagfield,
2654         'itemtagsubfield' => $itemtagsubfield,
2655         'itemnumber'      => $itemnumber,
2656         'iteminformation' => \@loop_data
2657     };
2658 }
2659 #"
2660
2661 #
2662 # true ModZebra commented until indexdata fixes zebraDB crashes (it seems they occur on multiple updates
2663 # at the same time
2664 # replaced by a zebraqueue table, that is filled with ModZebra to run.
2665 # the table is emptied by misc/cronjobs/zebraqueue_start.pl script
2666 # =head2 ModZebrafiles
2667
2668 # &ModZebrafiles( $dbh, $biblionumber, $record, $folder, $server );
2669
2670 # =cut
2671
2672 # sub ModZebrafiles {
2673
2674 #     my ( $dbh, $biblionumber, $record, $folder, $server ) = @_;
2675
2676 #     my $op;
2677 #     my $zebradir =
2678 #       C4::Context->zebraconfig($server)->{directory} . "/" . $folder . "/";
2679 #     unless ( opendir( DIR, "$zebradir" ) ) {
2680 #         warn "$zebradir not found";
2681 #         return;
2682 #     }
2683 #     closedir DIR;
2684 #     my $filename = $zebradir . $biblionumber;
2685
2686 #     if ($record) {
2687 #         open( OUTPUT, ">", $filename . ".xml" );
2688 #         print OUTPUT $record;
2689 #         close OUTPUT;
2690 #     }
2691 # }
2692
2693 =head2 ModZebra
2694
2695 =over 4
2696
2697 ModZebra( $biblionumber, $op, $server, $newRecord );
2698
2699     $biblionumber is the biblionumber we want to index
2700     $op is specialUpdate or delete, and is used to know what we want to do
2701     $server is the server that we want to update
2702     $newRecord is the MARC::Record containing the new record. It is usefull only when NoZebra=1, and is used to know what to add to the nozebra database. (the record in mySQL being, if it exist, the previous record, the one just before the modif. We need both : the previous and the new one.
2703 =back
2704
2705 =cut
2706
2707 sub ModZebra {
2708 ###Accepts a $server variable thus we can use it for biblios authorities or other zebra dbs
2709     my ( $biblionumber, $op, $server, $newRecord ) = @_;
2710 #     warn "ModZebra with : ( $biblionumber, $op, $server, $newRecord )";
2711     my $dbh=C4::Context->dbh;
2712     #warn "SERVER:".$server;
2713 #
2714 # true ModZebra commented until indexdata fixes zebraDB crashes (it seems they occur on multiple updates
2715 # at the same time
2716 # replaced by a zebraqueue table, that is filled with ModZebra to run.
2717 # the table is emptied by misc/cronjobs/zebraqueue_start.pl script
2718
2719     if (C4::Context->preference("NoZebra")) {
2720         # lock the nozebra table : we will read index lines, update them in Perl process
2721         # and write everything in 1 transaction.
2722         # lock the table to avoid someone else overwriting what we are doing
2723         $dbh->do('LOCK TABLES nozebra WRITE,biblio WRITE,biblioitems WRITE, systempreferences WRITE, auth_types WRITE, auth_header WRITE');
2724         my %result; # the result hash that will be builded by deletion / add, and written on mySQL at the end, to improve speed
2725         my $record;
2726         if ($server eq 'biblioserver') {
2727             $record= GetMarcBiblio($biblionumber);
2728         } else {
2729             $record= C4::AuthoritiesMarc::GetAuthority($biblionumber);
2730         }
2731         if ($op eq 'specialUpdate') {
2732             # OK, we have to add or update the record
2733             # 1st delete (virtually, in indexes) ...
2734             %result = _DelBiblioNoZebra($biblionumber,$record,$server);
2735             # ... add the record
2736             %result=_AddBiblioNoZebra($biblionumber,$newRecord, $server, %result);
2737         } else {
2738             # it's a deletion, delete the record...
2739 #             warn "DELETE the record $biblionumber on $server".$record->as_formatted;
2740             %result=_DelBiblioNoZebra($biblionumber,$record,$server);
2741         }
2742         # ok, now update the database...
2743         my $sth = $dbh->prepare("UPDATE nozebra SET biblionumbers=? WHERE server=? AND indexname=? AND value=?");
2744         foreach my $key (keys %result) {
2745             foreach my $index (keys %{$result{$key}}) {
2746 #                 warn "UPDATING : $server $key , $index with :".$result{$key}->{$index};
2747                 $sth->execute($result{$key}->{$index}, $server, $key, $index);
2748             }
2749         }
2750     $dbh->do('UNLOCK TABLES');
2751
2752     } else {
2753         #
2754         # we use zebra, just fill zebraqueue table
2755         #
2756         my $sth=$dbh->prepare("insert into zebraqueue  (biblio_auth_number ,server,operation) values(?,?,?)");
2757         $sth->execute($biblionumber,$server,$op);
2758         $sth->finish;
2759     }
2760 }
2761
2762 =head2 GetNoZebraIndexes
2763
2764 =cut
2765
2766 sub GetNoZebraIndexes {
2767     my $index = C4::Context->preference('NoZebraIndexes');
2768     my %indexes;
2769     foreach my $line (split /('|"),/,$index) {
2770         $line =~ /(.*)=>(.*)/;
2771         my $index = substr($1,1); # get the index, don't forget to remove initial ' or "
2772         my $fields = $2;
2773         $index =~ s/'|"| //g;
2774         $fields =~ s/'|"| //g;
2775         $indexes{$index}=$fields;
2776     }
2777     return %indexes;
2778 }
2779
2780 =head1 INTERNAL FUNCTIONS
2781
2782 =head2 _DelBiblioNoZebra($biblionumber,$record,$server);
2783
2784     function to delete a biblio in NoZebra indexes
2785     This function does NOT delete anything in database : it reads all the indexes entries
2786     that have to be deleted & delete them in the hash
2787     The SQL part is done either :
2788     - after the Add if we are modifying a biblio (delete + add again)
2789     - immediatly after this sub if we are doing a true deletion.
2790     $server can be 'biblioserver' or 'authorityserver' : it indexes biblios or authorities (in the same table, $server being part of the table itself
2791
2792 =cut
2793
2794
2795 sub _DelBiblioNoZebra {
2796     my ($biblionumber, $record, $server)=@_;
2797     
2798     # Get the indexes
2799     my $dbh = C4::Context->dbh;
2800     # Get the indexes
2801     my %index;
2802     my $title;
2803     if ($server eq 'biblioserver') {
2804         %index=GetNoZebraIndexes;
2805         # get title of the record (to store the 10 first letters with the index)
2806         my ($titletag,$titlesubfield) = GetMarcFromKohaField('biblio.title');
2807         $title = lc($record->subfield($titletag,$titlesubfield));
2808     } else {
2809         # for authorities, the "title" is the $a mainentry
2810         my $authref = C4::AuthoritiesMarc::GetAuthType($record->subfield(152,'b'));
2811         warn "ERROR : authtype undefined for ".$record->as_formatted unless $authref;
2812         $title = $record->subfield($authref->{auth_tag_to_report},'a');
2813         $index{'mainmainentry'}= $authref->{'auth_tag_to_report'}.'a';
2814         $index{'mainentry'}    = $authref->{'auth_tag_to_report'}.'*';
2815         $index{'auth_type'}    = '152b';
2816     }
2817     
2818     my %result;
2819     # remove blancks comma (that could cause problem when decoding the string for CQL retrieval) and regexp specific values
2820     $title =~ s/ |,|;|\[|\]|\(|\)|\*|-|'|=//g;
2821     # limit to 10 char, should be enough, and limit the DB size
2822     $title = substr($title,0,10);
2823     #parse each field
2824     my $sth2=$dbh->prepare('SELECT biblionumbers FROM nozebra WHERE server=? AND indexname=? AND value=?');
2825     foreach my $field ($record->fields()) {
2826         #parse each subfield
2827         next if $field->tag <10;
2828         foreach my $subfield ($field->subfields()) {
2829             my $tag = $field->tag();
2830             my $subfieldcode = $subfield->[0];
2831             my $indexed=0;
2832             # check each index to see if the subfield is stored somewhere
2833             # otherwise, store it in __RAW__ index
2834             foreach my $key (keys %index) {
2835 #                 warn "examining $key index : ".$index{$key}." for $tag $subfieldcode";
2836                 if ($index{$key} =~ /$tag\*/ or $index{$key} =~ /$tag$subfieldcode/) {
2837                     $indexed=1;
2838                     my $line= lc $subfield->[1];
2839                     # remove meaningless value in the field...
2840                     $line =~ s/-|\.|\?|,|;|!|'|\(|\)|\[|\]|{|}|"|<|>|&|\+|\*|\/|=|:/ /g;
2841                     # ... and split in words
2842                     foreach (split / /,$line) {
2843                         next unless $_; # skip  empty values (multiple spaces)
2844                         # if the entry is already here, do nothing, the biblionumber has already be removed
2845                         unless ($result{$key}->{$_} =~ /$biblionumber,$title\-(\d);/) {
2846                             # get the index value if it exist in the nozebra table and remove the entry, otherwise, do nothing
2847                             $sth2->execute($server,$key,$_);
2848                             my $existing_biblionumbers = $sth2->fetchrow;
2849                             # it exists
2850                             if ($existing_biblionumbers) {
2851 #                                 warn " existing for $key $_: $existing_biblionumbers";
2852                                 $result{$key}->{$_} =$existing_biblionumbers;
2853                                 $result{$key}->{$_} =~ s/$biblionumber,$title\-(\d);//;
2854                             }
2855                         }
2856                     }
2857                 }
2858             }
2859             # the subfield is not indexed, store it in __RAW__ index anyway
2860             unless ($indexed) {
2861                 my $line= lc $subfield->[1];
2862                 $line =~ s/-|\.|\?|,|;|!|'|\(|\)|\[|\]|{|}|"|<|>|&|\+|\*|\/|=|:/ /g;
2863                 # ... and split in words
2864                 foreach (split / /,$line) {
2865                     next unless $_; # skip  empty values (multiple spaces)
2866                     # if the entry is already here, do nothing, the biblionumber has already be removed
2867                     unless ($result{'__RAW__'}->{$_} =~ /$biblionumber,$title\-(\d);/) {
2868                         # get the index value if it exist in the nozebra table and remove the entry, otherwise, do nothing
2869                         $sth2->execute($server,'__RAW__',$_);
2870                         my $existing_biblionumbers = $sth2->fetchrow;
2871                         # it exists
2872                         if ($existing_biblionumbers) {
2873                             $result{'__RAW__'}->{$_} =$existing_biblionumbers;
2874                             $result{'__RAW__'}->{$_} =~ s/$biblionumber,$title\-(\d);//;
2875                         }
2876                     }
2877                 }
2878             }
2879         }
2880     }
2881     return %result;
2882 }
2883
2884 =head2 _DelBiblioNoZebra($biblionumber,$record);
2885
2886     function to delete a biblio in NoZebra indexes
2887
2888 =cut
2889
2890
2891 sub _AddBiblioNoZebra {
2892     my ($biblionumber, $record, $server, %result)=@_;
2893     my $dbh = C4::Context->dbh;
2894     # Get the indexes
2895     my %index;
2896     my $title;
2897     if ($server eq 'biblioserver') {
2898         %index=GetNoZebraIndexes;
2899         # get title of the record (to store the 10 first letters with the index)
2900         my ($titletag,$titlesubfield) = GetMarcFromKohaField('biblio.title');
2901         $title = lc($record->subfield($titletag,$titlesubfield));
2902     } else {
2903 #     warn "server : $server";
2904         # for authorities, the "title" is the $a mainentry
2905         my $authref = C4::AuthoritiesMarc::GetAuthType($record->subfield(152,'b'));
2906         warn "ERROR : authtype undefined for ".$record->as_formatted unless $authref;
2907         $title = $record->subfield($authref->{auth_tag_to_report},'a');
2908         $index{'mainmainentry'}=$authref->{auth_tag_to_report}.'a';
2909         $index{'mainentry'}    = $authref->{auth_tag_to_report}.'*';
2910         $index{'auth_type'}    = '152b';
2911     }
2912
2913     # remove blancks comma (that could cause problem when decoding the string for CQL retrieval) and regexp specific values
2914     $title =~ s/ |,|;|\[|\]|\(|\)|\*|-|'|=//g;
2915     # limit to 10 char, should be enough, and limit the DB size
2916     $title = substr($title,0,10);
2917     #parse each field
2918     my $sth2=$dbh->prepare('SELECT biblionumbers FROM nozebra WHERE server=? AND indexname=? AND value=?');
2919     foreach my $field ($record->fields()) {
2920         #parse each subfield
2921         next if $field->tag <10;
2922         foreach my $subfield ($field->subfields()) {
2923             my $tag = $field->tag();
2924             my $subfieldcode = $subfield->[0];
2925             my $indexed=0;
2926             # check each index to see if the subfield is stored somewhere
2927             # otherwise, store it in __RAW__ index
2928             foreach my $key (keys %index) {
2929 #                 warn "examining $key index : ".$index{$key}." for $tag $subfieldcode";
2930                 if ($index{$key} =~ /$tag\*/ or $index{$key} =~ /$tag$subfieldcode/) {
2931                     $indexed=1;
2932                     my $line= lc $subfield->[1];
2933                     # remove meaningless value in the field...
2934                     $line =~ s/-|\.|\?|,|;|!|'|\(|\)|\[|\]|{|}|"|<|>|&|\+|\*|\/|=|:/ /g;
2935                     # ... and split in words
2936                     foreach (split / /,$line) {
2937                         next unless $_; # skip  empty values (multiple spaces)
2938                         # if the entry is already here, improve weight
2939 #                         warn "managing $_";
2940                         if ($result{$key}->{$_} =~ /$biblionumber,$title\-(\d);/) {
2941                             my $weight=$1+1;
2942                             $result{$key}->{$_} =~ s/$biblionumber,$title\-(\d);//;
2943                             $result{$key}->{$_} .= "$biblionumber,$title-$weight;";
2944                         } else {
2945                             # get the value if it exist in the nozebra table, otherwise, create it
2946                             $sth2->execute($server,$key,$_);
2947                             my $existing_biblionumbers = $sth2->fetchrow;
2948                             # it exists
2949                             if ($existing_biblionumbers) {
2950                                 $result{$key}->{$_} =$existing_biblionumbers;
2951                                 my $weight=$1+1;
2952                                 $result{$key}->{$_} =~ s/$biblionumber,$title\-(\d);//;
2953                                 $result{$key}->{$_} .= "$biblionumber,$title-$weight;";
2954                             # create a new ligne for this entry
2955                             } else {
2956 #                             warn "INSERT : $server / $key / $_";
2957                                 $dbh->do('INSERT INTO nozebra SET server='.$dbh->quote($server).', indexname='.$dbh->quote($key).',value='.$dbh->quote($_));
2958                                 $result{$key}->{$_}.="$biblionumber,$title-1;";
2959                             }
2960                         }
2961                     }
2962                 }
2963             }
2964             # the subfield is not indexed, store it in __RAW__ index anyway
2965             unless ($indexed) {
2966                 my $line= lc $subfield->[1];
2967                 $line =~ s/-|\.|\?|,|;|!|'|\(|\)|\[|\]|{|}|"|<|>|&|\+|\*|\/|=|:/ /g;
2968                 # ... and split in words
2969                 foreach (split / /,$line) {
2970                     next unless $_; # skip  empty values (multiple spaces)
2971                     # if the entry is already here, improve weight
2972                     if ($result{'__RAW__'}->{$_} =~ /$biblionumber,$title\-(\d);/) {
2973                         my $weight=$1+1;
2974                         $result{'__RAW__'}->{$_} =~ s/$biblionumber,$title\-(\d);//;
2975                         $result{'__RAW__'}->{$_} .= "$biblionumber,$title-$weight;";
2976                     } else {
2977                         # get the value if it exist in the nozebra table, otherwise, create it
2978                         $sth2->execute($server,'__RAW__',$_);
2979                         my $existing_biblionumbers = $sth2->fetchrow;
2980                         # it exists
2981                         if ($existing_biblionumbers) {
2982                             $result{'__RAW__'}->{$_} =$existing_biblionumbers;
2983                             my $weight=$1+1;
2984                             $result{'__RAW__'}->{$_} =~ s/$biblionumber,$title\-(\d);//;
2985                             $result{'__RAW__'}->{$_} .= "$biblionumber,$title-$weight;";
2986                         # create a new ligne for this entry
2987                         } else {
2988                             $dbh->do('INSERT INTO nozebra SET server='.$dbh->quote($server).',  indexname="__RAW__",value='.$dbh->quote($_));
2989                             $result{'__RAW__'}->{$_}.="$biblionumber,$title-1;";
2990                         }
2991                     }
2992                 }
2993             }
2994         }
2995     }
2996     return %result;
2997 }
2998
2999
3000 =head2 MARCitemchange
3001
3002 =over 4
3003
3004 &MARCitemchange( $record, $itemfield, $newvalue )
3005
3006 Function to update a single value in an item field.
3007 Used twice, could probably be replaced by something else, but works well...
3008
3009 =back
3010
3011 =back
3012
3013 =cut
3014
3015 sub MARCitemchange {
3016     my ( $record, $itemfield, $newvalue ) = @_;
3017     my $dbh = C4::Context->dbh;
3018     
3019     my ( $tagfield, $tagsubfield ) =
3020       GetMarcFromKohaField( $itemfield, "" );
3021     if ( ($tagfield) && ($tagsubfield) ) {
3022         my $tag = $record->field($tagfield);
3023         if ($tag) {
3024             $tag->update( $tagsubfield => $newvalue );
3025             $record->delete_field($tag);
3026             $record->insert_fields_ordered($tag);
3027         }
3028     }
3029 }
3030
3031 =head2 _koha_add_biblio
3032
3033 =over 4
3034
3035 _koha_add_biblio($dbh,$biblioitem);
3036
3037 Internal function to add a biblio ($biblio is a hash with the values)
3038
3039 =back
3040
3041 =cut
3042
3043 sub _koha_add_biblio {
3044     my ( $dbh, $biblio, $frameworkcode ) = @_;
3045     my $sth = $dbh->prepare("Select max(biblionumber) from biblio");
3046     $sth->execute;
3047     my $data         = $sth->fetchrow_arrayref;
3048     my $biblionumber = $$data[0] + 1;
3049     my $series       = 0;
3050
3051     if ( $biblio->{'seriestitle'} ) { $series = 1 }
3052     $sth->finish;
3053     $sth = $dbh->prepare(
3054         "INSERT INTO biblio
3055     SET biblionumber  = ?, title = ?, author = ?, copyrightdate = ?, serial = ?, seriestitle = ?, notes = ?, abstract = ?, unititle = ?, frameworkcode = ? "
3056     );
3057     $sth->execute(
3058         $biblionumber,         $biblio->{'title'},
3059         $biblio->{'author'},   $biblio->{'copyrightdate'},
3060         $biblio->{'serial'},   $biblio->{'seriestitle'},
3061         $biblio->{'notes'},    $biblio->{'abstract'},
3062         $biblio->{'unititle'}, $frameworkcode
3063     );
3064
3065     $sth->finish;
3066     return ($biblionumber);
3067 }
3068
3069 =head2 _find_value
3070
3071 =over 4
3072
3073 ($indicators, $value) = _find_value($tag, $subfield, $record,$encoding);
3074
3075 Find the given $subfield in the given $tag in the given
3076 MARC::Record $record.  If the subfield is found, returns
3077 the (indicators, value) pair; otherwise, (undef, undef) is
3078 returned.
3079
3080 PROPOSITION :
3081 Such a function is used in addbiblio AND additem and serial-edit and maybe could be used in Authorities.
3082 I suggest we export it from this module.
3083
3084 =back
3085
3086 =cut
3087
3088 sub _find_value {
3089     my ( $tagfield, $insubfield, $record, $encoding ) = @_;
3090     my @result;
3091     my $indicator;
3092     if ( $tagfield < 10 ) {
3093         if ( $record->field($tagfield) ) {
3094             push @result, $record->field($tagfield)->data();
3095         }
3096         else {
3097             push @result, "";
3098         }
3099     }
3100     else {
3101         foreach my $field ( $record->field($tagfield) ) {
3102             my @subfields = $field->subfields();
3103             foreach my $subfield (@subfields) {
3104                 if ( @$subfield[0] eq $insubfield ) {
3105                     push @result, @$subfield[1];
3106                     $indicator = $field->indicator(1) . $field->indicator(2);
3107                 }
3108             }
3109         }
3110     }
3111     return ( $indicator, @result );
3112 }
3113
3114 =head2 _koha_modify_biblio
3115
3116 =over 4
3117
3118 Internal function for updating the biblio table
3119
3120 =back
3121
3122 =cut
3123
3124 sub _koha_modify_biblio {
3125     my ( $dbh, $biblio ) = @_;
3126
3127 # FIXME: this code could be made more portable by not hard-coding the values that are supposed to be in biblio table
3128     my $sth =
3129       $dbh->prepare(
3130 "Update biblio set title = ?, author = ?, abstract = ?, copyrightdate = ?, seriestitle = ?, serial = ?, unititle = ?, notes = ? where biblionumber = ?"
3131       );
3132     $sth->execute(
3133         $biblio->{'title'},       $biblio->{'author'},
3134         $biblio->{'abstract'},    $biblio->{'copyrightdate'},
3135         $biblio->{'seriestitle'}, $biblio->{'serial'},
3136         $biblio->{'unititle'},    $biblio->{'notes'},
3137         $biblio->{'biblionumber'}
3138     );
3139     $sth->finish;
3140     return ( $biblio->{'biblionumber'} );
3141 }
3142
3143 =head2 _koha_modify_biblioitem
3144
3145 =over 4
3146
3147 _koha_modify_biblioitem( $dbh, $biblioitem );
3148
3149 =back
3150
3151 =cut
3152
3153 sub _koha_modify_biblioitem {
3154     my ( $dbh, $biblioitem ) = @_;
3155     my $query;
3156 ##Recalculate LC in case it changed --TG
3157
3158     $biblioitem->{'itemtype'}      = $dbh->quote( $biblioitem->{'itemtype'} );
3159     $biblioitem->{'url'}           = $dbh->quote( $biblioitem->{'url'} );
3160     $biblioitem->{'isbn'}          = $dbh->quote( $biblioitem->{'isbn'} );
3161     $biblioitem->{'issn'}          = $dbh->quote( $biblioitem->{'issn'} );
3162     $biblioitem->{'publishercode'} =
3163       $dbh->quote( $biblioitem->{'publishercode'} );
3164     $biblioitem->{'publicationyear'} =
3165       $dbh->quote( $biblioitem->{'publicationyear'} );
3166     $biblioitem->{'classification'} =
3167       $dbh->quote( $biblioitem->{'classification'} );
3168     $biblioitem->{'dewey'}        = $dbh->quote( $biblioitem->{'dewey'} );
3169     $biblioitem->{'subclass'}     = $dbh->quote( $biblioitem->{'subclass'} );
3170     $biblioitem->{'illus'}        = $dbh->quote( $biblioitem->{'illus'} );
3171     $biblioitem->{'pages'}        = $dbh->quote( $biblioitem->{'pages'} );
3172     $biblioitem->{'volumeddesc'}  = $dbh->quote( $biblioitem->{'volumeddesc'} );
3173     $biblioitem->{'bnotes'}       = $dbh->quote( $biblioitem->{'bnotes'} );
3174     $biblioitem->{'size'}         = $dbh->quote( $biblioitem->{'size'} );
3175     $biblioitem->{'place'}        = $dbh->quote( $biblioitem->{'place'} );
3176     $biblioitem->{'ccode'}        = $dbh->quote( $biblioitem->{'ccode'} );
3177     $biblioitem->{'biblionumber'} =
3178       $dbh->quote( $biblioitem->{'biblionumber'} );
3179
3180     $query = "Update biblioitems set
3181         itemtype        = $biblioitem->{'itemtype'},
3182         url             = $biblioitem->{'url'},
3183         isbn            = $biblioitem->{'isbn'},
3184         issn            = $biblioitem->{'issn'},
3185         publishercode   = $biblioitem->{'publishercode'},
3186         publicationyear = $biblioitem->{'publicationyear'},
3187         classification  = $biblioitem->{'classification'},
3188         dewey           = $biblioitem->{'dewey'},
3189         subclass        = $biblioitem->{'subclass'},
3190         illus           = $biblioitem->{'illus'},
3191         pages           = $biblioitem->{'pages'},
3192         volumeddesc     = $biblioitem->{'volumeddesc'},
3193         notes           = $biblioitem->{'bnotes'},
3194         size            = $biblioitem->{'size'},
3195         place           = $biblioitem->{'place'},
3196         ccode           = $biblioitem->{'ccode'}
3197         where biblionumber = $biblioitem->{'biblionumber'}";
3198
3199     $dbh->do($query);
3200     if ( $dbh->errstr ) {
3201         warn "ERROR in _koha_modify_biblioitem $query";
3202     }
3203 }
3204
3205 =head2 _koha_add_biblioitem
3206
3207 =over 4
3208
3209 _koha_add_biblioitem( $dbh, $biblioitem );
3210
3211 Internal function to add a biblioitem
3212
3213 =back
3214
3215 =cut
3216
3217 sub _koha_add_biblioitem {
3218     my ( $dbh, $biblioitem ) = @_;
3219
3220     #  my $dbh   = C4Connect;
3221     my $sth = $dbh->prepare("SELECT max(biblioitemnumber) FROM biblioitems");
3222     my $data;
3223     my $bibitemnum;
3224
3225     $sth->execute;
3226     $data       = $sth->fetchrow_arrayref;
3227     $bibitemnum = $$data[0] + 1;
3228
3229     $sth->finish;
3230
3231     $sth = $dbh->prepare(
3232         "INSERT INTO biblioitems SET
3233             biblioitemnumber = ?, biblionumber    = ?,
3234             volume           = ?, number          = ?,
3235             classification   = ?, itemtype        = ?,
3236             url              = ?, isbn            = ?,
3237             issn             = ?, dewey           = ?,
3238             subclass         = ?, publicationyear = ?,
3239             publishercode    = ?, volumedate      = ?,
3240             volumeddesc      = ?, illus           = ?,
3241             pages            = ?, notes           = ?,
3242             size             = ?, lccn            = ?,
3243             marc             = ?, lcsort          =?,
3244             place            = ?, ccode           = ?
3245           "
3246     );
3247     my ($lcsort) =
3248       calculatelc( $biblioitem->{'classification'} )
3249       . $biblioitem->{'subclass'};
3250     $sth->execute(
3251         $bibitemnum,                     $biblioitem->{'biblionumber'},
3252         $biblioitem->{'volume'},         $biblioitem->{'number'},
3253         $biblioitem->{'classification'}, $biblioitem->{'itemtype'},
3254         $biblioitem->{'url'},            $biblioitem->{'isbn'},
3255         $biblioitem->{'issn'},           $biblioitem->{'dewey'},
3256         $biblioitem->{'subclass'},       $biblioitem->{'publicationyear'},
3257         $biblioitem->{'publishercode'},  $biblioitem->{'volumedate'},
3258         $biblioitem->{'volumeddesc'},    $biblioitem->{'illus'},
3259         $biblioitem->{'pages'},          $biblioitem->{'bnotes'},
3260         $biblioitem->{'size'},           $biblioitem->{'lccn'},
3261         $biblioitem->{'marc'},           $biblioitem->{'place'},
3262         $lcsort,                         $biblioitem->{'ccode'}
3263     );
3264     $sth->finish;
3265     return ($bibitemnum);
3266 }
3267
3268 =head2 _koha_new_items
3269
3270 =over 4
3271
3272 _koha_new_items( $dbh, $item, $barcode );
3273
3274 =back
3275
3276 =cut
3277
3278 sub _koha_new_items {
3279     my ( $dbh, $item, $barcode ) = @_;
3280
3281     #  my $dbh   = C4Connect;
3282     my $sth = $dbh->prepare("Select max(itemnumber) from items");
3283     my $data;
3284     my $itemnumber;
3285     my $error = "";
3286
3287     $sth->execute;
3288     $data       = $sth->fetchrow_hashref;
3289     $itemnumber = $data->{'max(itemnumber)'} + 1;
3290     $sth->finish;
3291 ## Now calculate lccalnumber
3292     my ($cutterextra) = itemcalculator(
3293         $dbh,
3294         $item->{'biblioitemnumber'},
3295         $item->{'itemcallnumber'}
3296     );
3297
3298 # FIXME the "notforloan" field seems to be named "loan" in some places. workaround bugfix.
3299     if ( $item->{'loan'} ) {
3300         $item->{'notforloan'} = $item->{'loan'};
3301     }
3302
3303     # if dateaccessioned is provided, use it. Otherwise, set to NOW()
3304     if ( $item->{'dateaccessioned'} eq '' || !$item->{'dateaccessioned'} ) {
3305
3306         $sth = $dbh->prepare(
3307             "Insert into items set
3308             itemnumber           = ?,     biblionumber     = ?,
3309             multivolumepart      = ?,
3310             biblioitemnumber     = ?,     barcode          = ?,
3311             booksellerid         = ?,     dateaccessioned  = NOW(),
3312             homebranch           = ?,     holdingbranch    = ?,
3313             price                = ?,     replacementprice = ?,
3314             replacementpricedate = NOW(), datelastseen     = NOW(),
3315             multivolume          = ?,     stack            = ?,
3316             itemlost             = ?,     wthdrawn         = ?,
3317             paidfor              = ?,     itemnotes        = ?,
3318             itemcallnumber       =?,      notforloan       = ?,
3319             location             = ?,     Cutterextra      = ?
3320           "
3321         );
3322         $sth->execute(
3323             $itemnumber,                $item->{'biblionumber'},
3324             $item->{'multivolumepart'}, $item->{'biblioitemnumber'},
3325             $barcode,                   $item->{'booksellerid'},
3326             $item->{'homebranch'},      $item->{'holdingbranch'},
3327             $item->{'price'},           $item->{'replacementprice'},
3328             $item->{multivolume},       $item->{stack},
3329             $item->{itemlost},          $item->{wthdrawn},
3330             $item->{paidfor},           $item->{'itemnotes'},
3331             $item->{'itemcallnumber'},  $item->{'notforloan'},
3332             $item->{'location'},        $cutterextra
3333         );
3334     }
3335     else {
3336         $sth = $dbh->prepare(
3337             "INSERT INTO items SET
3338             itemnumber           = ?,     biblionumber     = ?,
3339             multivolumepart      = ?,
3340             biblioitemnumber     = ?,     barcode          = ?,
3341             booksellerid         = ?,     dateaccessioned  = ?,
3342             homebranch           = ?,     holdingbranch    = ?,
3343             price                = ?,     replacementprice = ?,
3344             replacementpricedate = NOW(), datelastseen     = NOW(),
3345             multivolume          = ?,     stack            = ?,
3346             itemlost             = ?,     wthdrawn         = ?,
3347             paidfor              = ?,     itemnotes        = ?,
3348             itemcallnumber       = ?,     notforloan       = ?,
3349             location             = ?,
3350             Cutterextra          = ?
3351                             "
3352         );
3353         $sth->execute(
3354             $itemnumber,                 $item->{'biblionumber'},
3355             $item->{'multivolumepart'},  $item->{'biblioitemnumber'},
3356             $barcode,                    $item->{'booksellerid'},
3357             $item->{'dateaccessioned'},  $item->{'homebranch'},
3358             $item->{'holdingbranch'},    $item->{'price'},
3359             $item->{'replacementprice'}, $item->{multivolume},
3360             $item->{stack},              $item->{itemlost},
3361             $item->{wthdrawn},           $item->{paidfor},
3362             $item->{'itemnotes'},        $item->{'itemcallnumber'},
3363             $item->{'notforloan'},       $item->{'location'},
3364             $cutterextra
3365         );
3366     }
3367     if ( defined $sth->errstr ) {
3368         $error .= $sth->errstr;
3369     }
3370     return ( $itemnumber, $error );
3371 }
3372
3373 =head2 _koha_modify_item
3374
3375 =over 4
3376
3377 _koha_modify_item( $dbh, $item, $op );
3378
3379 =back
3380
3381 =cut
3382
3383 sub _koha_modify_item {
3384     my ( $dbh, $item, $op ) = @_;
3385     $item->{'itemnum'} = $item->{'itemnumber'} unless $item->{'itemnum'};
3386
3387     # if all we're doing is setting statuses, just update those and get out
3388     if ( $op eq "setstatus" ) {
3389         my $query =
3390           "UPDATE items SET itemlost=?,wthdrawn=?,binding=? WHERE itemnumber=?";
3391         my @bind = (
3392             $item->{'itemlost'}, $item->{'wthdrawn'},
3393             $item->{'binding'},  $item->{'itemnumber'}
3394         );
3395         my $sth = $dbh->prepare($query);
3396         $sth->execute(@bind);
3397         $sth->finish;
3398         return undef;
3399     }
3400 ## Now calculate lccalnumber
3401     my ($cutterextra) =
3402       itemcalculator( $dbh, $item->{'bibitemnum'}, $item->{'itemcallnumber'} );
3403
3404     my $query = "UPDATE items SET
3405 barcode=?,itemnotes=?,itemcallnumber=?,notforloan=?,location=?,multivolumepart=?,multivolume=?,stack=?,wthdrawn=?,holdingbranch=?,homebranch=?,cutterextra=?, onloan=?, binding=?";
3406
3407     my @bind = (
3408         $item->{'barcode'},        $item->{'notes'},
3409         $item->{'itemcallnumber'}, $item->{'notforloan'},
3410         $item->{'location'},       $item->{multivolumepart},
3411         $item->{multivolume},      $item->{stack},
3412         $item->{wthdrawn},         $item->{holdingbranch},
3413         $item->{homebranch},       $cutterextra,
3414         $item->{onloan},           $item->{binding}
3415     );
3416     if ( $item->{'lost'} ne '' ) {
3417         $query =
3418 "update items set biblioitemnumber=?,barcode=?,itemnotes=?,homebranch=?,
3419                             itemlost=?,wthdrawn=?,itemcallnumber=?,notforloan=?,
3420                              location=?,multivolumepart=?,multivolume=?,stack=?,wthdrawn=?,holdingbranch=?,cutterextra=?,onloan=?, binding=?";
3421         @bind = (
3422             $item->{'bibitemnum'},     $item->{'barcode'},
3423             $item->{'notes'},          $item->{'homebranch'},
3424             $item->{'lost'},           $item->{'wthdrawn'},
3425             $item->{'itemcallnumber'}, $item->{'notforloan'},
3426             $item->{'location'},       $item->{multivolumepart},
3427             $item->{multivolume},      $item->{stack},
3428             $item->{wthdrawn},         $item->{holdingbranch},
3429             $cutterextra,              $item->{onloan},
3430             $item->{binding}
3431         );
3432         if ( $item->{homebranch} ) {
3433             $query .= ",homebranch=?";
3434             push @bind, $item->{homebranch};
3435         }
3436         if ( $item->{holdingbranch} ) {
3437             $query .= ",holdingbranch=?";
3438             push @bind, $item->{holdingbranch};
3439         }
3440     }
3441     $query .= " where itemnumber=?";
3442     push @bind, $item->{'itemnum'};
3443     if ( $item->{'replacement'} ne '' ) {
3444         $query =~ s/ where/,replacementprice='$item->{'replacement'}' where/;
3445     }
3446     my $sth = $dbh->prepare($query);
3447     $sth->execute(@bind);
3448     $sth->finish;
3449 }
3450
3451 =head2 _koha_delete_biblio
3452
3453 =over 4
3454
3455 $error = _koha_delete_biblio($dbh,$biblionumber);
3456
3457 Internal sub for deleting from biblio table -- also saves to deletedbiblio
3458
3459 C<$dbh> - the database handle
3460 C<$biblionumber> - the biblionumber of the biblio to be deleted
3461
3462 =back
3463
3464 =cut
3465
3466 # FIXME: add error handling
3467
3468 sub _koha_delete_biblio {
3469     my ( $dbh, $biblionumber ) = @_;
3470
3471     # get all the data for this biblio
3472     my $sth = $dbh->prepare("SELECT * FROM biblio WHERE biblionumber=?");
3473     $sth->execute($biblionumber);
3474
3475     if ( my $data = $sth->fetchrow_hashref ) {
3476
3477         # save the record in deletedbiblio
3478         # find the fields to save
3479         my $query = "INSERT INTO deletedbiblio SET ";
3480         my @bind  = ();
3481         foreach my $temp ( keys %$data ) {
3482             $query .= "$temp = ?,";
3483             push( @bind, $data->{$temp} );
3484         }
3485
3486         # replace the last , by ",?)"
3487         $query =~ s/\,$//;
3488         my $bkup_sth = $dbh->prepare($query);
3489         $bkup_sth->execute(@bind);
3490         $bkup_sth->finish;
3491
3492         # delete the biblio
3493         my $del_sth = $dbh->prepare("DELETE FROM biblio WHERE biblionumber=?");
3494         $del_sth->execute($biblionumber);
3495         $del_sth->finish;
3496     }
3497     $sth->finish;
3498     return undef;
3499 }
3500
3501 =head2 _koha_delete_biblioitems
3502
3503 =over 4
3504
3505 $error = _koha_delete_biblioitems($dbh,$biblioitemnumber);
3506
3507 Internal sub for deleting from biblioitems table -- also saves to deletedbiblioitems
3508
3509 C<$dbh> - the database handle
3510 C<$biblionumber> - the biblioitemnumber of the biblioitem to be deleted
3511
3512 =back
3513
3514 =cut
3515
3516 # FIXME: add error handling
3517
3518 sub _koha_delete_biblioitems {
3519     my ( $dbh, $biblioitemnumber ) = @_;
3520
3521     # get all the data for this biblioitem
3522     my $sth =
3523       $dbh->prepare("SELECT * FROM biblioitems WHERE biblioitemnumber=?");
3524     $sth->execute($biblioitemnumber);
3525
3526     if ( my $data = $sth->fetchrow_hashref ) {
3527
3528         # save the record in deletedbiblioitems
3529         # find the fields to save
3530         my $query = "INSERT INTO deletedbiblioitems SET ";
3531         my @bind  = ();
3532         foreach my $temp ( keys %$data ) {
3533             $query .= "$temp = ?,";
3534             push( @bind, $data->{$temp} );
3535         }
3536
3537         # replace the last , by ",?)"
3538         $query =~ s/\,$//;
3539         my $bkup_sth = $dbh->prepare($query);
3540         $bkup_sth->execute(@bind);
3541         $bkup_sth->finish;
3542
3543         # delete the biblioitem
3544         my $del_sth =
3545           $dbh->prepare("DELETE FROM biblioitems WHERE biblioitemnumber=?");
3546         $del_sth->execute($biblioitemnumber);
3547         $del_sth->finish;
3548     }
3549     $sth->finish;
3550     return undef;
3551 }
3552
3553 =head2 _koha_delete_item
3554
3555 =over 4
3556
3557 _koha_delete_item( $dbh, $itemnum );
3558
3559 Internal function to delete an item record from the koha tables
3560
3561 =back
3562
3563 =cut
3564
3565 sub _koha_delete_item {
3566     my ( $dbh, $itemnum ) = @_;
3567
3568     my $sth = $dbh->prepare("select * from items where itemnumber=?");
3569     $sth->execute($itemnum);
3570     my $data = $sth->fetchrow_hashref;
3571     $sth->finish;
3572     my $query = "Insert into deleteditems set ";
3573     my @bind  = ();
3574     foreach my $temp ( keys %$data ) {
3575         $query .= "$temp = ?,";
3576         push( @bind, $data->{$temp} );
3577     }
3578     $query =~ s/\,$//;
3579
3580     #  print $query;
3581     $sth = $dbh->prepare($query);
3582     $sth->execute(@bind);
3583     $sth->finish;
3584     $sth = $dbh->prepare("Delete from items where itemnumber=?");
3585     $sth->execute($itemnum);
3586     $sth->finish;
3587 }
3588
3589 =head1 UNEXPORTED FUNCTIONS
3590
3591 =over 4
3592
3593 =head2 calculatelc
3594
3595 $lc = calculatelc($classification);
3596
3597 =back
3598
3599 =cut
3600
3601 sub calculatelc {
3602     my ($classification) = @_;
3603     $classification =~ s/^\s+|\s+$//g;
3604     my $i = 0;
3605     my $lc2;
3606     my $lc1;
3607
3608     for ( $i = 0 ; $i < length($classification) ; $i++ ) {
3609         my $c = ( substr( $classification, $i, 1 ) );
3610         if ( $c ge '0' && $c le '9' ) {
3611
3612             $lc2 = substr( $classification, $i );
3613             last;
3614         }
3615         else {
3616             $lc1 .= substr( $classification, $i, 1 );
3617
3618         }
3619     }    #while
3620
3621     my $other = length($lc1);
3622     if ( !$lc1 ) {
3623         $other = 0;
3624     }
3625
3626     my $extras;
3627     if ( $other < 4 ) {
3628         for ( 1 .. ( 4 - $other ) ) {
3629             $extras .= "0";
3630         }
3631     }
3632     $lc1 .= $extras;
3633     $lc2 =~ s/^ //g;
3634
3635     $lc2 =~ s/ //g;
3636     $extras = "";
3637     ##Find the decimal part of $lc2
3638     my $pos = index( $lc2, "." );
3639     if ( $pos < 0 ) { $pos = length($lc2); }
3640     if ( $pos >= 0 && $pos < 5 ) {
3641         ##Pad lc2 with zeros to create a 5digit decimal needed in marc record to sort as numeric
3642
3643         for ( 1 .. ( 5 - $pos ) ) {
3644             $extras .= "0";
3645         }
3646     }
3647     $lc2 = $extras . $lc2;
3648     return ( $lc1 . $lc2 );
3649 }
3650
3651 =head2 itemcalculator
3652
3653 =over 4
3654
3655 $cutterextra = itemcalculator( $dbh, $biblioitem, $callnumber );
3656
3657 =back
3658
3659 =cut
3660
3661 sub itemcalculator {
3662     my ( $dbh, $biblioitem, $callnumber ) = @_;
3663     my $sth =
3664       $dbh->prepare(
3665 "select classification, subclass from biblioitems where biblioitemnumber=?"
3666       );
3667
3668     $sth->execute($biblioitem);
3669     my ( $classification, $subclass ) = $sth->fetchrow;
3670     my $all         = $classification . " " . $subclass;
3671     my $total       = length($all);
3672     my $cutterextra = substr( $callnumber, $total - 1 );
3673
3674     return $cutterextra;
3675 }
3676
3677 =head2 ModBiblioMarc
3678
3679 =over 4
3680
3681 &ModBiblioMarc($newrec,$biblionumber,$frameworkcode);
3682
3683 Add MARC data for a biblio to koha 
3684
3685 Function exported, but should NOT be used, unless you really know what you're doing
3686
3687 =back
3688
3689 =cut
3690
3691 sub ModBiblioMarc {
3692
3693 # pass the MARC::Record to this function, and it will create the records in the marc field
3694     my ( $record, $biblionumber, $frameworkcode ) = @_;
3695     my $dbh = C4::Context->dbh;
3696     my @fields = $record->fields();
3697     if ( !$frameworkcode ) {
3698         $frameworkcode = "";
3699     }
3700     my $sth =
3701       $dbh->prepare("UPDATE biblio SET frameworkcode=? WHERE biblionumber=?");
3702     $sth->execute( $frameworkcode, $biblionumber );
3703     $sth->finish;
3704     my $encoding = C4::Context->preference("marcflavour");
3705
3706 # deal with UNIMARC field 100 (encoding) : create it if needed & set encoding to unicode
3707     if ( $encoding eq "UNIMARC" ) {
3708         my $string;
3709         if ( length($record->subfield( 100, "a" )) == 35 ) {
3710             $string = $record->subfield( 100, "a" );
3711             my $f100 = $record->field(100);
3712             $record->delete_field($f100);
3713         }
3714         else {
3715             $string = POSIX::strftime( "%Y%m%d", localtime );
3716             $string =~ s/\-//g;
3717             $string = sprintf( "%-*s", 35, $string );
3718         }
3719         substr( $string, 22, 6, "frey50" );
3720         unless ( $record->subfield( 100, "a" ) ) {
3721             $record->insert_grouped_field(
3722                 MARC::Field->new( 100, "", "", "a" => $string ) );
3723         }
3724     }
3725 #     warn "biblionumber : ".$biblionumber;
3726     ModZebra($biblionumber,"specialUpdate","biblioserver",$record);
3727     $sth =
3728       $dbh->prepare(
3729         "update