Bug 27883: Add ability to preserve patron field from being overwritten by import
[koha.git] / tools / import_borrowers.pl
1 #!/usr/bin/perl
2
3 # Copyright 2007 Liblime
4 # Parts copyright 2010 BibLibre
5 #
6 # This file is part of Koha.
7 #
8 # Koha is free software; you can redistribute it and/or modify it
9 # under the terms of the GNU General Public License as published by
10 # the Free Software Foundation; either version 3 of the License, or
11 # (at your option) any later version.
12 #
13 # Koha is distributed in the hope that it will be useful, but
14 # WITHOUT ANY WARRANTY; without even the implied warranty of
15 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the
16 # GNU General Public License for more details.
17 #
18 # You should have received a copy of the GNU General Public License
19 # along with Koha; if not, see <http://www.gnu.org/licenses>.
20
21 # Script to take some borrowers data in a known format and load it into Koha
22 #
23 # File format
24 #
25 # cardnumber,surname,firstname,title,othernames,initials,streetnumber,streettype,
26 # address line , address line 2, city, zipcode, contry, email, phone, mobile, fax, work email, work phone,
27 # alternate streetnumber, alternate streettype, alternate address line 1, alternate city,
28 # alternate zipcode, alternate country, alternate email, alternate phone, date of birth, branchcode,
29 # categorycode, enrollment date, expiry date, noaddress, lost, debarred, contact surname,
30 # contact firstname, contact title, borrower notes, contact relationship
31 # gender, username, opac note, contact note, password, sort one, sort two
32 #
33 # any fields except cardnumber can be blank but the number of fields must match
34 # dates should be in the format you have set up Koha to expect
35 # branchcode and categorycode need to be valid
36
37 use Modern::Perl;
38
39 use C4::Auth;
40 use C4::Output;
41 use C4::Templates;
42 use Koha::Patrons;
43 use Koha::DateUtils;
44 use Koha::Token;
45 use Koha::Libraries;
46 use Koha::Patron::Categories;
47 use Koha::Patron::Attribute::Types;
48 use Koha::List::Patron;
49
50 use Koha::Patrons::Import;
51 my $Import = Koha::Patrons::Import->new();
52
53 use Text::CSV;
54
55 # Text::CSV::Unicode, even in binary mode, fails to parse lines with these diacriticals:
56 # ė
57 # č
58
59 use CGI qw ( -utf8 );
60
61 my $extended = C4::Context->preference('ExtendedPatronAttributes');
62
63 my @columnkeys = map { $_ ne 'borrowernumber' ? $_ : () } Koha::Patrons->columns();
64 push( @columnkeys, 'patron_attributes' ) if $extended;
65 push( @columnkeys, qw( guarantor_relationship guarantor_id ) );
66
67 my $input = CGI->new();
68
69 my ( $template, $loggedinuser, $cookie ) = get_template_and_user(
70     {
71         template_name   => "tools/import_borrowers.tt",
72         query           => $input,
73         type            => "intranet",
74         flagsrequired   => { tools => 'import_patrons' },
75     }
76 );
77
78 # get the patron categories and pass them to the template
79 my @patron_categories = Koha::Patron::Categories->search_with_library_limits({}, {order_by => ['description']});
80 $template->param( categories => \@patron_categories );
81 my $columns = C4::Templates::GetColumnDefs( $input )->{borrowers};
82 $columns = [ grep { $_->{field} ne 'borrowernumber' ? $_ : () } @$columns ];
83 $template->param( borrower_fields => $columns );
84
85 if ( $input->param('sample') ) {
86     our $csv = Text::CSV->new( { binary => 1 } );    # binary needed for non-ASCII Unicode
87     print $input->header(
88         -type       => 'application/vnd.sun.xml.calc',    # 'application/vnd.ms-excel' ?
89         -attachment => 'patron_import.csv',
90     );
91     $csv->combine(@columnkeys);
92     print $csv->string, "\n";
93     exit 0;
94 }
95
96 my @preserve_fields = $input->param('preserve_existing');
97
98 my $uploadborrowers = $input->param('uploadborrowers');
99 my $matchpoint      = $input->param('matchpoint');
100 if ($matchpoint) {
101     $matchpoint =~ s/^patron_attribute_//;
102 }
103
104 #create a patronlist
105 my $createpatronlist = $input->param('createpatronlist') || 0;
106 my $dt = dt_from_string();
107 my $timestamp = $dt->ymd('-').' '.$dt->hms(':');
108 my $patronlistname = $uploadborrowers . ' (' . $timestamp .')';
109
110 $template->param( SCRIPT_NAME => '/cgi-bin/koha/tools/import_borrowers.pl' );
111
112 if ( $uploadborrowers && length($uploadborrowers) > 0 ) {
113     output_and_exit( $input, $cookie, $template, 'wrong_csrf_token' )
114         unless Koha::Token->new->check_csrf({
115             session_id => scalar $input->cookie('CGISESSID'),
116             token  => scalar $input->param('csrf_token'),
117         });
118
119     my $handle   = $input->upload('uploadborrowers');
120     my %defaults = $input->Vars;
121     my $overwrite_passwords = defined $input->param('overwrite_passwords') ? 1 : 0;
122     my $return = $Import->import_patrons(
123         {
124             file                         => $handle,
125             defaults                     => \%defaults,
126             matchpoint                   => $matchpoint,
127             overwrite_cardnumber         => scalar $input->param( 'overwrite_cardnumber' ),
128             overwrite_passwords          => $overwrite_passwords,
129             preserve_extended_attributes => scalar $input->param( 'ext_preserve' ) || 0,
130             preserve_fields              => \@preserve_fields,
131         }
132     );
133
134     my $feedback    = $return->{feedback};
135     my $errors      = $return->{errors};
136     my $imported    = $return->{imported};
137     my $overwritten = $return->{overwritten};
138     my $alreadyindb = $return->{already_in_db};
139     my $invalid     = $return->{invalid};
140     my $imported_borrowers = $return->{imported_borrowers};
141
142     if ( $imported && $createpatronlist ) {
143         my $patronlist = AddPatronList({ name => $patronlistname });
144         AddPatronsToList({ list => $patronlist, borrowernumbers => $imported_borrowers });
145         $template->param('patronlistname' => $patronlistname);
146     }
147
148     my $uploadinfo = $input->uploadInfo($uploadborrowers);
149     foreach ( keys %$uploadinfo ) {
150         push @$feedback, { feedback => 1, name => $_, value => $uploadinfo->{$_}, $_ => $uploadinfo->{$_} };
151     }
152
153     push @$feedback, { feedback => 1, name => 'filename', value => $uploadborrowers, filename => $uploadborrowers };
154
155     $template->param(
156         uploadborrowers => 1,
157         errors          => $errors,
158         feedback        => $feedback,
159         imported        => $imported,
160         overwritten     => $overwritten,
161         alreadyindb     => $alreadyindb,
162         invalid         => $invalid,
163         total           => $imported + $alreadyindb + $invalid + $overwritten,
164     );
165
166 }
167 else {
168     if ($extended) {
169         my @matchpoints = ();
170         my $attribute_types = Koha::Patron::Attribute::Types->search;
171
172         while ( my $attr_type = $attribute_types->next ) {
173             if ( $attr_type->unique_id() ) {
174                 push @matchpoints,
175                   { code => "patron_attribute_" . $attr_type->code(), description => $attr_type->description() };
176             }
177         }
178         $template->param( matchpoints => \@matchpoints );
179     }
180
181     $template->param(
182         csrf_token => Koha::Token->new->generate_csrf(
183             { session_id => scalar $input->cookie('CGISESSID'), }
184         ),
185     );
186
187 }
188
189 output_html_with_http_headers $input, $cookie, $template->output;
190