updater/updatedatabase

   1 #!/usr/bin/perl
   2
   3 # $Id$
   4
   5 # Database Updater
   6 # This script checks for required updates to the database.
   7
   8 # Part of the Koha Library Software www.koha.org
   9 # Licensed under the GPL.
  10
  11 # Bugs/ToDo:
  12 # - Would also be a good idea to offer to do a backup at this time...
  13
  14 # NOTE:  If you do something more than once in here, make it table driven.
  15
  16 use strict;
  17
  18 # CPAN modules
  19 use DBI;
  20 use Getopt::Long;
  21 # Koha modules
  22 use C4::Context;
  23
  24 # FIXME - The user might be installing a new database, so can't rely
  25 # on /etc/koha.conf anyway.
  26
  27 my $debug = 0;
  28
  29 my (
  30     $sth, $sti,
  31     $query,
  32     %existingtables,    # tables already in database
  33     %types,
  34     $table,
  35     $column,
  36     $type, $null, $key, $default, $extra,
  37     $prefitem,          # preference item in systempreferences table
  38 );
  39
  40 my $silent;
  41 GetOptions(
  42         's' =>\$silent
  43         );
  44 my $dbh = C4::Context->dbh;
  45 print "connected to your DB. Checking & modifying it\n" unless $silent;
  46
  47 #-------------------
  48 # Defines
  49
  50 # Tables to add if they don't exist
  51 my %requiretables = (
  52     shelfcontents => "( shelfnumber int not null,
  53                                                         itemnumber int not null,
  54                                                         flags int)",
  55     bookshelf => "( shelfnumber int auto_increment primary key,
  56                                                 shelfname char(255))",
  57     z3950queue => "( id int auto_increment primary key,
  58                                                 term text,
  59                                                 type char(10),
  60                                                 startdate int,
  61                                                 enddate int,
  62                                                 done smallint,
  63                                                 results longblob,
  64                                                 numrecords int,
  65                                                 servers text,
  66                                                 identifier char(30))",
  67     z3950results => "( id int auto_increment primary key,
  68                                                 queryid int,
  69                                                 server char(255),
  70                                                 startdate int,
  71                                                 enddate int,
  72                                                 results longblob,
  73                                                 numrecords int,
  74                                                 numdownloaded int,
  75                                                 highestseen int,
  76                                                 active smallint)",
  77     branchrelations => "( branchcode varchar(4),
  78                                                         categorycode varchar(4))",
  79     websites => "( websitenumber int(11) NOT NULL auto_increment,
  80                                                 biblionumber int(11) NOT NULL default '0',
  81                                                 title text,
  82                                                 description text,
  83                                                 url varchar(255),
  84                                                 PRIMARY KEY (websitenumber) )",
  85     marcrecorddone => "( isbn char(40),
  86                                                                 issn char(40),
  87                                                                 lccn char(40),
  88                                                                 controlnumber char(40))",
  89     uploadedmarc => "( id int(11) NOT NULL auto_increment PRIMARY KEY,
  90                                                         marc longblob,
  91                                                         hidden smallint(6) default NULL,
  92                                                         name varchar(255) default NULL)",
  93     ethnicity => "( code varchar(10) NOT NULL default '',
  94                                         name varchar(255) default NULL,
  95                                         PRIMARY KEY  (code)   )",
  96     sessions => "( sessionID varchar(255) NOT NULL default '',
  97                                                 userid varchar(255) default NULL,
  98                                                 ip varchar(16) default NULL,
  99                                                 lasttime int,
 100                                                 PRIMARY KEY (sessionID)   )",
 101     sessionqueries => "( sessionID varchar(255) NOT NULL default '',
 102                                                                 userid char(100) NOT NULL default '',
 103                                                                 ip char(18) NOT NULL default '',
 104                                                                 url text NOT NULL default ''  )",
 105     bibliothesaurus => "( id bigint(20) NOT NULL auto_increment,
 106                                                         freelib char(255) NOT NULL default '',
 107                                                         stdlib char(255) NOT NULL default '',
 108                                                         category char(10) NOT NULL default '',
 109                                                         level tinyint(4) NOT NULL default '1',
 110                                                         hierarchy char(80) NOT NULL default '',
 111                                                         father char(80) NOT NULL default '',
 112                                                         PRIMARY KEY  (id),
 113                                                         KEY freelib (freelib),
 114                                                         KEY stdlib (stdlib),
 115                                                         KEY category (category),
 116                                                         KEY hierarchy (hierarchy)
 117                                                         )",
 118     marc_biblio => "(
 119                                                 bibid bigint(20) unsigned NOT NULL auto_increment,
 120                                                 biblionumber int(11) NOT NULL default '0',
 121                                                 datecreated date NOT NULL default '0000-00-00',
 122                                                 datemodified date default NULL,
 123                                                 origincode char(20) default NULL,
 124                                                 PRIMARY KEY  (bibid),
 125                                                 KEY origincode (origincode),
 126                                                 KEY biblionumber (biblionumber)
 127                                                 ) ",
 128     marc_blob_subfield => "(
 129                                         blobidlink bigint(20) NOT NULL auto_increment,
 130                                         subfieldvalue longtext NOT NULL,
 131                                         PRIMARY KEY  (blobidlink)
 132                                         ) ",
 133     marc_subfield_structure => "(
 134                                                 tagfield char(3) NOT NULL default '',
 135                                                 tagsubfield char(1) NOT NULL default '',
 136                                                 liblibrarian char(255) NOT NULL default '',
 137                                                 libopac char(255) NOT NULL default '',
 138                                                 repeatable tinyint(4) NOT NULL default '0',
 139                                                 mandatory tinyint(4) NOT NULL default '0',
 140                                                 kohafield char(40)  default NULL,
 141                                                 tab tinyint(1) default NULL,
 142                                                 authorised_value char(10) default NULL,
 143                                                 thesaurus_category char(10) default NULL,
 144                                                 value_builder char(80) default NULL,
 145                                                 PRIMARY KEY  (tagfield,tagsubfield),
 146                                                 KEY kohafield (kohafield),
 147                                                 KEY tab (tab)
 148                                                 )",
 149     marc_subfield_table => "(
 150                                                 subfieldid bigint(20) unsigned NOT NULL auto_increment,
 151                                                 bibid bigint(20) unsigned NOT NULL default '0',
 152                                                 tag char(3) NOT NULL default '',
 153                                                 tagorder tinyint(4) NOT NULL default '1',
 154                                                 tag_indicator char(2) NOT NULL default '',
 155                                                 subfieldcode char(1) NOT NULL default '',
 156                                                 subfieldorder tinyint(4) NOT NULL default '1',
 157                                                 subfieldvalue varchar(255) default NULL,
 158                                                 valuebloblink bigint(20) default NULL,
 159                                                 PRIMARY KEY  (subfieldid),
 160                                                 KEY bibid (bibid),
 161                                                 KEY tag (tag),
 162                                                 KEY tag_indicator (tag_indicator),
 163                                                 KEY subfieldorder (subfieldorder),
 164                                                 KEY subfieldcode (subfieldcode),
 165                                                 KEY subfieldvalue (subfieldvalue),
 166                                                 KEY tagorder (tagorder)
 167                                         )",
 168     marc_tag_structure => "(
 169                                         tagfield char(3) NOT NULL default '',
 170                                         liblibrarian char(255) NOT NULL default '',
 171                                         libopac char(255) NOT NULL default '',
 172                                         repeatable tinyint(4) NOT NULL default '0',
 173                                         mandatory tinyint(4) NOT NULL default '0',
 174                                         authorised_value char(10) default NULL,
 175                                         PRIMARY KEY  (tagfield)
 176                                         )",
 177     marc_word => "(
 178                                 bibid bigint(20) NOT NULL default '0',
 179                                 tag char(3) NOT NULL default '',
 180                                 tagorder tinyint(4) NOT NULL default '1',
 181                                 subfieldid char(1) NOT NULL default '',
 182                                 subfieldorder tinyint(4) NOT NULL default '1',
 183                                 word varchar(255) NOT NULL default '',
 184                                 sndx_word varchar(255) NOT NULL default '',
 185                                 KEY bibid (bibid),
 186                                 KEY tag (tag),
 187                                 KEY tagorder (tagorder),
 188                                 KEY subfieldid (subfieldid),
 189                                 KEY subfieldorder (subfieldorder),
 190                                 KEY word (word),
 191                                 KEY sndx_word (sndx_word)
 192                         )",
 193     marc_breeding => "(  id bigint(20) NOT NULL auto_increment,
 194                                 file varchar(80) NOT NULL default '',
 195                                 isbn varchar(10) NOT NULL default '',
 196                                 title varchar(128) default NULL,
 197                                 author varchar(80) default NULL,
 198                                 marc text NOT NULL,
 199                                 encoding varchar(40) default NULL,
 200                                 PRIMARY KEY  (id),
 201                                 KEY title (title),
 202                                 KEY isbn (isbn)
 203                         )",
 204     authorised_values => "(id int(11) NOT NULL auto_increment,
 205                                 category char(10) NOT NULL default '',
 206                                 authorised_value char(80) NOT NULL default '',
 207                                 lib char(80) NULL,
 208                                 PRIMARY KEY  (id),
 209                                 KEY name (category)
 210                         )",
 211     userflags => "( bit int(11) NOT NULL default '0',
 212                                 flag char(30), flagdesc char(255),
 213                                 defaulton int(11)
 214                         )",
 215         auth_types => "(
 216                                         authtypecode char(10) not NULL,
 217                                         authtypetext char(255) not NULL,
 218                                         auth_tag_to_report char(3) not NULL,
 219                                         summary text not NULL,
 220                                         PRIMARY KEY (authtypecode)
 221                         )",
 222         biblio_framework => "(
 223                                         frameworkcode char(4) not NULL,
 224                                         frameworktext char(255) not NULL,
 225                                         PRIMARY KEY (frameworkcode)
 226                         )",
 227     auth_subfield_structure => "(
 228                                         authtypecode char(10) NOT NULL default '',
 229                                         tagfield char(3) NOT NULL default '',
 230                                         tagsubfield char(1) NOT NULL default '',
 231                                         liblibrarian char(255) NOT NULL default '',
 232                                         libopac char(255) NOT NULL default '',
 233                                         repeatable tinyint(4) NOT NULL default '0',
 234                                         mandatory tinyint(4) NOT NULL default '0',
 235                                         tab tinyint(1) default NULL,
 236                                         authorised_value char(10) default NULL,
 237                                         value_builder char(80) default NULL,
 238                                         seealso char(255) default NULL,
 239                                         PRIMARY KEY  (authtypecode,tagfield,tagsubfield),
 240                                         KEY tab (authtypecode,tab)
 241                                         )",
 242     auth_tag_structure => "(
 243                                         authtypecode char(10) NOT NULL default '',
 244                                         tagfield char(3) NOT NULL default '',
 245                                         liblibrarian char(255) NOT NULL default '',
 246                                         libopac char(255) NOT NULL default '',
 247                                         repeatable tinyint(4) NOT NULL default '0',
 248                                         mandatory tinyint(4) NOT NULL default '0',
 249                                         authorised_value char(10) default NULL,
 250                                         PRIMARY KEY  (authtypecode,tagfield)
 251                                         )",
 252     auth_header => "(
 253                                                 authid bigint(20) unsigned NOT NULL auto_increment,
 254                                                 authtypecode char(10) NOT NULL default '',
 255                                                 datecreated date NOT NULL default '0000-00-00',
 256                                                 datemodified date default NULL,
 257                                                 origincode char(20) default NULL,
 258                                                 PRIMARY KEY  (authid),
 259                                                 KEY origincode (origincode)
 260                                                 ) ",
 261     auth_subfield_table => "(
 262                                                 subfieldid bigint(20) unsigned NOT NULL auto_increment,
 263                                                 authid bigint(20) unsigned NOT NULL default '0',
 264                                                 tag char(3) NOT NULL default '',
 265                                                 tagorder tinyint(4) NOT NULL default '1',
 266                                                 tag_indicator char(2) NOT NULL default '',
 267                                                 subfieldcode char(1) NOT NULL default '',
 268                                                 subfieldorder tinyint(4) NOT NULL default '1',
 269                                                 subfieldvalue varchar(255) default NULL,
 270                                                 PRIMARY KEY  (subfieldid),
 271                                                 KEY authid (authid),
 272                                                 KEY tag (tag),
 273                                                 KEY subfieldcode (subfieldcode),
 274                                                 KEY subfieldvalue (subfieldvalue)
 275                                         )",
 276     auth_word => "(
 277                                 authid bigint(20) NOT NULL default '0',
 278                                 tagsubfield char(4) NOT NULL default '',
 279                                 tagorder tinyint(4) NOT NULL default '1',
 280                                 subfieldorder tinyint(4) NOT NULL default '1',
 281                                 word varchar(255) NOT NULL default '',
 282                                 sndx_word varchar(255) NOT NULL default '',
 283                                 KEY authid (authid),
 284                                 KEY marc_search (tagsubfield,word),
 285                                 KEY word (word),
 286                                 KEY sndx_word (sndx_word)
 287                         )",
 288         suggestions => "(
 289                                 suggestionid int(8) NOT NULL auto_increment,
 290                                 suggestedby int(11) NOT NULL default '0',
 291                                 managedby int(11) default NULL ,
 292                                 STATUS varchar(10) NOT NULL default '',
 293                                 note text,
 294                                 author varchar(80) default NULL ,
 295                                 title varchar(80) default NULL ,
 296                                 copyrightdate smallint(6) default NULL ,
 297                                 publishercode varchar(255) default NULL ,
 298                                 date timestamp(8) NOT NULL ,
 299                                 volumedesc varchar(255) default NULL ,
 300                                 publicationyear smallint(6) default '0',
 301                                 place varchar(255) default NULL ,
 302                                 isbn varchar(10) default NULL ,
 303                                 mailoverseeing smallint(1) default '0',
 304                                 biblionumber int(11) default NULL ,
 305                                 PRIMARY KEY (suggestionid) ,
 306                                 KEY suggestedby(suggestedby) ,
 307                                 KEY managedby(managedby)
 308                         )",
 309         aqbasket => "(basketno int(11) NOT NULL auto_increment,
 310                                 creationdate date,
 311                                 closedate date,
 312                                 booksellerid varchar(10),
 313                                 authorisedby varchar(10),
 314                                 booksellerinvoicenumber text,
 315                                 PRIMARY KEY (basketno)
 316                                 )",
 317         serial => "(serialid int(11) NOT NULL auto_increment,
 318                                 biblionumber varchar(100) NOT NULL default '',
 319                                 subscriptionid varchar(100) NOT NULL default '',
 320                                 serialseq varchar(100) NOT NULL default '',
 321                                 status tinyint(4) NOT NULL default '0',
 322                                 planneddate date NOT NULL default '0000-00-00',
 323                                 PRIMARY KEY  (serialid)
 324                                 )",
 325         subscription => "(biblionumber int(11) NOT NULL default '0',
 326                                                 subscriptionid int(11) NOT NULL auto_increment,
 327                                                 librarian varchar(100) default '',
 328                                                 startdate date default '0000-00-00',
 329                                                 aqbooksellerid int(11) default '0',
 330                                                 cost int(11) default '0',
 331                                                 aqbudgetid int(11) default '0',
 332                                                 weeklength tinyint(4) default '0',
 333                                                 monthlength tinyint(4) default '0',
 334                                                 numberlength tinyint(4) default '0',
 335                                                 periodicity tinyint(4) default '0',
 336                                                 dow varchar(100) default '',
 337                                                 numberingmethod varchar(100) default '',
 338                                                 notes text,
 339                                                 status varchar(100) NOT NULL default '',
 340                                                 add1 int(11) default 0,
 341                                                 every1 int(11) default 0,
 342                                                 whenmorethan1 int(11) default 0,
 343                                                 setto1 int(11),
 344                                                 lastvalue1 int(11),
 345                                                 add2 int(11) default 0,
 346                                                 every2 int(11) default 0,
 347                                                 whenmorethan2 int(11) default 0,
 348                                                 setto2 int(11),
 349                                                 lastvalue2 int(11),
 350                                                 add3 int(11) default 0,
 351                                                 every3 int(11) default 0,
 352                                                 innerloop1 int(11) default 0,
 353                                                 innerloop2 int(11) default 0,
 354                                                 innerloop3 int(11) default 0,
 355                                                 whenmorethan3 int(11) default 0,
 356                                                 setto3 int(11),
 357                                                 lastvalue3 int(11),
 358                                                 PRIMARY KEY  (subscriptionid)
 359                                                 )",
 360         subscriptionhistory => "(biblionumber int(11) NOT NULL default '0',
 361                                                         subscriptionid int(11) NOT NULL default '0',
 362                                                         histstartdate date NOT NULL default '0000-00-00',
 363                                                         enddate date default '0000-00-00',
 364                                                         missinglist longtext NOT NULL,
 365                                                         recievedlist longtext NOT NULL,
 366                                                         opacnote varchar(150) NOT NULL default '',
 367                                                         librariannote varchar(150) NOT NULL default '',
 368                                                         PRIMARY KEY  (subscriptionid),
 369                                                         KEY biblionumber (biblionumber)
 370                                                 )",
 371 );
 372
 373 my %requirefields = (
 374     biblio        => { 'abstract' => 'text' },
 375     deletedbiblio => { 'abstract' => 'text', 'marc' => 'blob' },
 376     deleteditems => { 'marc' => 'blob', 'paidfor' => 'text', 'location' => 'varchar(80)'},
 377     biblioitems   => {
 378         'lccn' => 'char(25)',
 379         'url'  => 'varchar(255)',
 380         'marc' => 'text'
 381     },
 382     deletedbiblioitems => {
 383         'lccn' => 'char(25)',
 384         'url'  => 'varchar(255)',
 385         'marc' => 'text'
 386     },
 387     branchtransfers => { 'datearrived'    => 'datetime' },
 388     statistics      => { 'borrowernumber' => 'int(11)' },
 389     aqbooksellers   => {
 390         'invoicedisc' => 'float(6,4)',
 391         'nocalc'      => 'int(11)'
 392     },
 393     borrowers => {
 394                 'userid'        => 'char(30)',
 395                 'password'      => 'char(30)',
 396                 'flags'         => 'int(11)',
 397                 'textmessaging' => 'varchar(30)',
 398                 'zipcode' => 'varchar(25)',
 399                 'homezipcode' => 'varchar(25)',
 400                 'sort1' => 'char(80)',
 401                 'sort2' => 'char(80)',
 402     },
 403     aqorders => { 'budgetdate' => 'date',
 404                                 'sort1' => 'char(80)',
 405                                 'sort2' => 'char(80)', },
 406     aqbudget => {'aqbudgetid' => 'tinyint(4) auto_increment primary key'},
 407     items => {'paidfor' => 'text', 'location' => 'char(80)'},
 408
 409     #added so that reference items are not available for reserves...
 410     itemtypes         => { 'notforloan'  => 'smallint(6)' },
 411     systempreferences => { 'explanation' => 'char(80)',
 412                            'type' => 'char(20)',
 413                            'options' => 'text' },
 414     z3950servers      => { 'syntax'      => 'char(80)' },
 415         marc_tag_structure =>{
 416                                                         'frameworkcode' => 'char(4) not NULL default \'\''},
 417     marc_subfield_structure =>{'seealso'  => 'char(255)',
 418                                                         'frameworkcode' => 'char(4) not NULL default \'\'',
 419                                                         'hidden' => 'tinyint(1)',
 420                                                         'isurl' => 'tinyint(1)',
 421                                                         'link' => 'char(80)',
 422                                                         },
 423     bookshelf => {'owner' => 'char(80)',
 424                                         'category' => 'char(1)',
 425                                 },
 426     marc_biblio        => { 'frameworkcode' => 'char(4) not NULL default \'\'' },
 427 );
 428
 429 my %dropable_table = (
 430     classification => 'classification',
 431     multipart      => 'multipart',
 432     multivolume    => 'multivolume',
 433     newitems       => 'newitems',
 434     procedures     => 'procedures',
 435     publisher      => 'publisher',
 436     searchstats    => 'searchstats',
 437     serialissues   => 'serialissues',
 438 );
 439
 440 my %uselessfields = (
 441         aqorders => "requisitionedby,authorisedby,booksellerid,
 442                         deliverydays,followupdays,
 443                         numberfollowupsallowed,numberfollowupssent,
 444                         dateprinted,sourced,quantityreceiveddamaged,
 445                         subscriptionfrom,subscriptionto
 446                         "
 447         );
 448 # the other hash contains other actions that can't be done elsewhere. they are done
 449 # either BEFORE of AFTER everything else, depending on "when" entry (default => AFTER)
 450
 451 # The tabledata hash contains data that should be in the tables.
 452 # The uniquefieldrequired hash entry is used to determine which (if any) fields
 453 # must not exist in the table for this row to be inserted.  If the
 454 # uniquefieldrequired entry is already in the table, the existing data is not
 455 # modified, unless the forceupdate hash entry is also set.  Fields in the
 456 # anonymous "forceupdate" hash will be forced to be updated to the default
 457 # values given in the %tabledata hash.
 458
 459 my %tabledata = (
 460     userflags => [
 461         {
 462             uniquefieldrequired => 'bit',
 463             bit                 => 0,
 464             flag                => 'superlibrarian',
 465             flagdesc            => 'Access to all librarian functions',
 466             defaulton           => 0
 467         },
 468         {
 469             uniquefieldrequired => 'bit',
 470             bit                 => 1,
 471             flag                => 'circulate',
 472             flagdesc            => 'Circulate books',
 473             defaulton           => 0
 474         },
 475         {
 476             uniquefieldrequired => 'bit',
 477             bit                 => 2,
 478             flag                => 'catalogue',
 479             flagdesc            => 'View Catalogue (Librarian Interface)',
 480             defaulton           => 0
 481         },
 482         {
 483             uniquefieldrequired => 'bit',
 484             bit                 => 3,
 485             flag                => 'parameters',
 486             flagdesc            => 'Set Koha system paramters',
 487             defaulton           => 0
 488         },
 489         {
 490             uniquefieldrequired => 'bit',
 491             bit                 => 4,
 492             flag                => 'borrowers',
 493             flagdesc            => 'Add or modify borrowers',
 494             defaulton           => 0
 495         },
 496         {
 497             uniquefieldrequired => 'bit',
 498             bit                 => 5,
 499             flag                => 'permissions',
 500             flagdesc            => 'Set user permissions',
 501             defaulton           => 0
 502         },
 503         {
 504             uniquefieldrequired => 'bit',
 505             bit                 => 6,
 506             flag                => 'reserveforothers',
 507             flagdesc            => 'Reserve books for patrons',
 508             defaulton           => 0
 509         },
 510         {
 511             uniquefieldrequired => 'bit',
 512             bit                 => 7,
 513             flag                => 'borrow',
 514             flagdesc            => 'Borrow books',
 515             defaulton           => 1
 516         },
 517         {
 518             uniquefieldrequired => 'bit',
 519             bit                 => 8,
 520             flag                => 'reserveforself',
 521             flagdesc            => 'Reserve books for self',
 522             defaulton           => 0
 523         },
 524         {
 525             uniquefieldrequired => 'bit',
 526             bit                 => 9,
 527             flag                => 'editcatalogue',
 528             flagdesc  => 'Edit Catalogue (Modify bibliographic/holdings data)',
 529             defaulton => 0
 530         },
 531         {
 532             uniquefieldrequired => 'bit',
 533             bit                 => 10,
 534             flag                => 'updatecharges',
 535             flagdesc            => 'Update borrower charges',
 536             defaulton           => 0
 537         },
 538         {
 539             uniquefieldrequired => 'bit',
 540             bit                 => 11,
 541             flag                => 'acquisition',
 542             flagdesc            => 'Acquisition and/or suggestion management',
 543             defaulton           => 0
 544         },
 545     ],
 546     systempreferences => [
 547         {
 548             uniquefieldrequired => 'variable',
 549             forceupdate         => { 'explanation' => 1,
 550                                      'type' => 1 },
 551             variable            => 'LibraryName',
 552             value               => '<i><b>Koha<br/>Free Software ILS<br/><br/></b>Koha : a gift, a contribution<br/> in Maori</i>',
 553             explanation         => 'Library name as shown on main opac page',
 554             type                => ''
 555
 556         },
 557         {
 558             uniquefieldrequired => 'variable',
 559             forceupdate         => { 'explanation' => 1,
 560                                      'type' => 1 },
 561             variable            => 'autoMemberNum',
 562             value               => '1',
 563             explanation         => 'Member number is auto-calculated',
 564             type                => 'YesNo'
 565
 566         },
 567         {
 568             uniquefieldrequired => 'variable',
 569             forceupdate         => { 'explanation' => 1,
 570                                      'type' => 1,
 571                                      'options' => 1 },
 572             variable            => 'acquisitions',
 573             value               => 'normal',
 574             explanation         =>
 575 'Normal, budget-based acquisitions, or Simple bibliographic-data acquisitions',
 576             type                => 'Choice',
 577             options             => 'simple|normal'
 578         },
 579         {
 580             uniquefieldrequired => 'variable',
 581             forceupdate         => { 'explanation' => 1,
 582                                      'type' => 1,
 583                                      'options' => 1 },
 584             variable            => 'dateformat',
 585             value               => 'metric',
 586             explanation         =>
 587             'date format (us mm/dd/yyyy, metric dd/mm/yyy, ISO yyyy/mm/dd)',
 588             type                => 'Choice',
 589             options             => 'metric|us|iso'
 590         },
 591         {
 592             uniquefieldrequired => 'variable',
 593             variable            => 'template',
 594             forceupdate         => { 'explanation' => 1,
 595                                      'type' => 1 },
 596             value               => 'default',
 597             explanation         => 'Preference order for intranet interface templates',
 598             type                => 'Themes'
 599         },
 600         {
 601             uniquefieldrequired => 'variable',
 602             variable            => 'autoBarcode',
 603             forceupdate         => { 'explanation' => 1,
 604                                      'type' => 1 },
 605             value               => 'yes',
 606             explanation         => 'Barcode is auto-calculated',
 607             type                => 'YesNo'
 608         },
 609         {
 610             uniquefieldrequired => 'variable',
 611             variable            => 'insecure',
 612             forceupdate         => { 'explanation' => 1,
 613                                      'type' => 1 },
 614             value               => 'no',
 615             explanation         =>
 616 'If YES, no auth at all is needed. Be careful if you set this to yes!',
 617             type                => 'YesNo'
 618         },
 619         {
 620             uniquefieldrequired => 'variable',
 621             variable            => 'authoritysep',
 622             forceupdate         => { 'explanation' => 1,
 623                                      'type' => 1,
 624                                      'options' => 1 },
 625             value               => '--',
 626             explanation         =>
 627             'the separator used in authority/thesaurus. Usually --',
 628             type                => 'free',
 629             options             => '10'
 630         },
 631         {
 632             uniquefieldrequired => 'variable',
 633             variable            => 'opaclanguages',
 634             forceupdate         => { 'explanation' => 1,
 635                                      'type' => 1 },
 636             value               => 'en',
 637             explanation         => 'Set the preferred order for translations.  The top language will be tried first.',
 638             type                => 'Languages'
 639         },
 640         {
 641             uniquefieldrequired => 'variable',
 642             variable            => 'opacthemes',
 643             forceupdate         => { 'explanation' => 1,
 644                                      'type' => 1 },
 645             value               => 'css',
 646             explanation         => 'Set the preferred order for themes.  The top theme will be tried first.',
 647             type                => 'Themes'
 648         },
 649         {
 650             uniquefieldrequired => 'variable',
 651             variable            => 'timeout',
 652             forceupdate         => { 'explanation' => 1,
 653                                      'type' => 1 },
 654             value               => '1200',
 655             explanation         => 'Inactivity timeout for cookies authentication (in seconds)',
 656             type                => 'Integer'
 657         },
 658         {
 659             uniquefieldrequired => 'variable',
 660             variable            => 'marc',
 661             forceupdate         => { 'explanation' => 1,
 662                                      'type' => 1 },
 663             value               => 'yes',
 664             explanation         => 'Turn on MARC support',
 665             type                => 'YesNo'
 666         },
 667         {
 668             uniquefieldrequired => 'variable',
 669             variable            => 'marcflavour',
 670             forceupdate         => { 'explanation' => 1,
 671                                      'type' => 1,
 672                                      'options' => 1},
 673             value               => 'MARC21',
 674             explanation         =>
 675             'your MARC flavor (MARC21 or UNIMARC) used for character encoding',
 676             type                => 'Choice',
 677             options             => 'MARC21|UNIMARC'
 678         },
 679         {
 680             uniquefieldrequired => 'variable',
 681             variable            => 'checkdigit',
 682             value               => 'none',
 683             forceupdate         => { 'explanation' => 1,
 684                                      'type' => 1,
 685                                      'options' => 1},
 686             explanation         => 'Validity checks on membership number: none or "Katipo" style checks',
 687             type                => 'Choice',
 688             options             => 'none|katipo'
 689         },
 690         {
 691             uniquefieldrequired => 'variable',
 692             variable            => 'maxoutstanding',
 693             forceupdate         => { 'explanation' => 1,
 694                                      'type' => 1 },
 695             value               => '5',
 696             explanation         =>
 697             'maximum amount withstanding to be able make reserves ',
 698             type                => 'Integer'
 699         },
 700         {
 701             uniquefieldrequired => 'variable',
 702             variable            => 'maxreserves',
 703             forceupdate         => { 'explanation' => 1,
 704                                      'type' => 1 },
 705             value               => '5',
 706             explanation         =>
 707             'maximum number of reserves a member can make',
 708             type                => 'Integer'
 709
 710         },
 711         {
 712             uniquefieldrequired => 'variable',
 713             variable            => 'noissuescharge',
 714             forceupdate         => { 'explanation' => 1,
 715                                      'type' => 1 },
 716             value               => '5',
 717             explanation         =>
 718             'maximum amount withstanding to be able to check out an item',
 719             type                => 'Integer'
 720
 721         },
 722         {
 723             uniquefieldrequired => 'variable',
 724             variable            => 'KohaAdminEmailAddress',
 725             forceupdate         => { 'explanation' => 1,
 726                                      'type' => 1 },
 727             value               => 'your.mail@here',
 728             explanation => 'the email address where borrowers modifs are sent',
 729             type                => 'free'
 730         },
 731         {
 732             uniquefieldrequired => 'variable',
 733             variable            => 'gist',
 734             forceupdate         => { 'explanation' => 1,
 735                                      'type' => 1 },
 736             value               => '0.125',
 737             explanation => 'the gist rate. NOT in %, but in numeric form (0.12 for 12%)',
 738             type                => 'free'
 739         },
 740         {
 741             uniquefieldrequired => 'variable',
 742             variable            => 'printcirculationslips',
 743             forceupdate         => { 'explanation' => 1,
 744                                      'type' => 1 },
 745             value               => '0',
 746             explanation => 'if set to 1, print circulation slips. If set to 0, don\'t',
 747             type                => 'free'
 748         },
 749         {
 750             uniquefieldrequired => 'variable',
 751             variable            => 'suggestion',
 752             forceupdate         => { 'explanation' => 1,
 753                                      'type' => 1 },
 754             value               => '0',
 755             explanation => 'if set to 1, suggestions are activated in OPAC',
 756             type                => 'free'
 757         },
 758         {
 759             uniquefieldrequired => 'variable',
 760             variable            => 'ISBD',
 761             forceupdate         => { 'explanation' => 1,
 762                                      'type' => 1 },
 763             value               => 'Fill with appropriate value...',
 764             explanation => 'ISBD',
 765             type                => 'free'
 766         },
 767         {
 768             uniquefieldrequired => 'variable',
 769             variable            => 'virtualshelves',
 770             forceupdate         => { 'explanation' => 1,
 771                                      'type' => 1 },
 772             value               => '0',
 773             explanation => 'Set virtual shelves management ON or OFF',
 774             type                => 'YesNo'
 775         },
 776         {
 777             uniquefieldrequired => 'variable',
 778             variable            => 'itemcallnumber',
 779             forceupdate         => { 'explanation' => 1,
 780                                      'type' => 1 },
 781             value               => '676a',
 782             explanation => 'The MARC field/subfield that is used to calculate the itemcallnumber (in UNIMARC : 676a for Dewey, 680a for Loc)',
 783             type                => 'free'
 784         },
 785         {
 786             uniquefieldrequired => 'variable',
 787             variable            => 'BiblioDefaultView',
 788             value               => 'normal',
 789             forceupdate         => { 'explanation' => 1,
 790                                      'type' => 1,
 791                                      'options' => 1},
 792             explanation         => 'Define the default view of a biblio. Can be either normal, marc or isbd',
 793             type                => 'Choice',
 794             options             => 'normal|marc|isbd'
 795         },
 796     ],
 797
 798 );
 799
 800 my %fielddefinitions = (
 801     printers => [
 802         {
 803             field   => 'printername',
 804             type    => 'char(40)',
 805             null    => '',
 806             key     => 'PRI',
 807             default => ''
 808         },
 809     ],
 810     aqbookfund => [
 811         {
 812             field   => 'bookfundid',
 813             type    => 'char(5)',
 814             null    => '',
 815             key     => 'PRI',
 816             default => ''
 817         },
 818     ],
 819     aqbudget => [
 820         {
 821             field   => 'aqbudgetid',
 822             type    => 'tinyint(4)',
 823             null    => '',
 824             key     => 'PRI',
 825                   default =>'',
 826             extra => 'auto_increment'
 827         },
 828     ],
 829     z3950servers => [
 830         {
 831             field   => 'id',
 832             type    => 'int',
 833             null    => '',
 834             key     => 'PRI',
 835             default => '',
 836             extra   => 'auto_increment'
 837         },
 838     ],
 839         marc_breeding => [
 840         {
 841             field   => 'z3950random',
 842             type    => 'varchar(40)',
 843             null    => 'NULL',
 844             key     => '',
 845             default => '',
 846             extra   => ''
 847         },
 848         {
 849             field   => 'encoding',
 850             type    => 'varchar(40)',
 851             null    => '',
 852             key     => '',
 853             default => '',
 854             extra   => ''
 855         },
 856     ],
 857 );
 858
 859 #-------------------
 860 # Initialize
 861
 862 # Start checking
 863
 864 # Get version of MySQL database engine.
 865 my $mysqlversion = `mysqld --version`;
 866 $mysqlversion =~ /Ver (\S*) /;
 867 $mysqlversion = $1;
 868 if ( $mysqlversion ge '3.23' ) {
 869     print "Could convert to MyISAM database tables...\n" unless $silent;
 870 }
 871
 872 #---------------------------------
 873 # Tables
 874
 875 # Collect all tables into a list
 876 $sth = $dbh->prepare("show tables");
 877 $sth->execute;
 878 while ( my ($table) = $sth->fetchrow ) {
 879     $existingtables{$table} = 1;
 880 }
 881
 882
 883 # Now add any missing tables
 884 foreach $table ( keys %requiretables ) {
 885     unless ( $existingtables{$table} ) {
 886         print "Adding $table table...\n" unless $silent;
 887         my $sth = $dbh->prepare("create table $table $requiretables{$table}");
 888         $sth->execute;
 889         if ( $sth->err ) {
 890             print "Error : $sth->errstr \n";
 891             $sth->finish;
 892         }    # if error
 893     }    # unless exists
 894 }    # foreach
 895
 896 # now drop useless tables
 897 foreach $table ( keys %dropable_table ) {
 898         if ( $existingtables{$table} ) {
 899                 print "Dropping unused table $table\n" if $debug and not $silent;
 900                 $dbh->do("drop table $table");
 901                 if ( $dbh->err ) {
 902                         print "Error : $dbh->errstr \n";
 903                 }
 904         }
 905 }
 906 unless ( $existingtables{'z3950servers'} ) {
 907         #MJR: added syntax entries to close bug 624
 908     print "Adding z3950servers table...\n" unless $silent;
 909     my $sti = $dbh->prepare( "create table z3950servers (
 910                                                                                 host char(255),
 911                                                                                 port int,
 912                                                                                 db char(255),
 913                                                                                 userid char(255),
 914                                                                                 password char(255),
 915                                                                                 name text,
 916                                                                                 id int,
 917                                                                                 checked smallint,
 918                                                                                 rank int,
 919                                                                                 syntax char(80))"
 920     );
 921     $sti->execute;
 922     $sti = $dbh->prepare( "insert into z3950servers
 923                                                                 values ('z3950.loc.gov',
 924                                                                 7090,
 925                                                                 'voyager',
 926                                                                 '', '',
 927                                                                 'Library of Congress',
 928                                                                 1, 1, 1, 'USMARC')"
 929     );
 930     $sti->execute;
 931 }
 932 unless ( $existingtables{'issuingrules'} ) {
 933         $dbh->do("alter table categoryitem rename issuingrules");
 934         $dbh->do("ALTER TABLE issuingrules ADD maxissueqty int(4) default NULL");
 935         $dbh->do("ALTER TABLE issuingrules ADD issuelength int(4) default NULL");
 936         $dbh->do("ALTER TABLE issuingrules ADD branchcode varchar(4) NOT NULL default ''");
 937         print "renaming categoryitem\n" unless $silent;
 938 }
 939
 940
 941 #---------------------------------
 942 # Columns
 943
 944 foreach $table ( keys %requirefields ) {
 945     print "Check table $table\n" if $debug and not $silent;
 946     $sth = $dbh->prepare("show columns from $table");
 947     $sth->execute();
 948     undef %types;
 949     while ( ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
 950     {
 951         $types{$column} = $type;
 952     }    # while
 953     foreach $column ( keys %{ $requirefields{$table} } ) {
 954         print "  Check column $column  [$types{$column}]\n" if $debug and not $silent;
 955         if ( !$types{$column} ) {
 956
 957             # column doesn't exist
 958             print "Adding $column field to $table table...\n" unless $silent;
 959             $query = "alter table $table
 960                         add column $column " . $requirefields{$table}->{$column};
 961             print "Execute: $query\n" if $debug;
 962             my $sti = $dbh->prepare($query);
 963             $sti->execute;
 964             if ( $sti->err ) {
 965                 print "**Error : $sti->errstr \n";
 966                 $sti->finish;
 967             }    # if error
 968         }    # if column
 969     }    # foreach column
 970 }    # foreach table
 971
 972 foreach $table ( keys %fielddefinitions ) {
 973         print "Check table $table\n" if $debug;
 974         $sth = $dbh->prepare("show columns from $table");
 975         $sth->execute();
 976         my $definitions;
 977         while ( ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
 978         {
 979                 $definitions->{$column}->{type}    = $type;
 980                 $definitions->{$column}->{null}    = $null;
 981                 $definitions->{$column}->{key}     = $key;
 982                 $definitions->{$column}->{default} = $default;
 983                 $definitions->{$column}->{extra}   = $extra;
 984         }    # while
 985         my $fieldrow = $fielddefinitions{$table};
 986         foreach my $row (@$fieldrow) {
 987                 my $field   = $row->{field};
 988                 my $type    = $row->{type};
 989                 my $null    = $row->{null};
 990                 my $key     = $row->{key};
 991                 my $default = $row->{default};
 992                 $default="''" unless $default;
 993                 my $extra   = $row->{extra};
 994                 my $def     = $definitions->{$field};
 995                 unless ( $type eq $def->{type}
 996                         && $null eq $def->{null}
 997                         && $key eq $def->{key}
 998                         && $default eq $def->{default}
 999                         && $extra eq $def->{extra} )
1000                 {
1001
1002                         if ( $null eq '' ) {
1003                                 $null = 'NOT NULL';
1004                         }
1005                         if ( $key eq 'PRI' ) {
1006                                 $key = 'PRIMARY KEY';
1007                         }
1008                         unless ( $extra eq 'auto_increment' ) {
1009                                 $extra = '';
1010                         }
1011                         # if it's a new column use "add", if it's an old one, use "change".
1012                         my $action;
1013                         if ($definitions->{$field}->{type}) {
1014                                 $action="change $field"
1015                         } else {
1016                                 $action="add";
1017                         }
1018 # if it's a primary key, drop the previous pk, before altering the table
1019                         my $sth;
1020                         if ($key ne 'PRIMARY KEY') {
1021                                 $sth =$dbh->prepare("alter table $table $action $field $type $null $key $extra default ?");
1022                         } else {
1023                                 $sth =$dbh->prepare("alter table $table drop primary key, $action $field $type $null $key $extra default ?");
1024                         }
1025                         $sth->execute($default);
1026                         print "  Alter $field in $table\n" unless $silent;
1027                 }
1028         }
1029 }
1030
1031 # Get list of columns from borrowers table
1032 my %itemtypes;
1033 my %nullenabled;
1034 $sth = $dbh->prepare("show columns from borrowers");
1035 $sth->execute;
1036 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1037 {
1038     $itemtypes{$column} = $type;
1039     $nullenabled{$column} = $null;
1040 }
1041
1042 unless ( $itemtypes{'cardnumber'} eq 'varchar(20)' ) {
1043     $itemtypes{'cardnumber'} =~ /varchar\((\d+)\)/;
1044     my $oldlength = $1;
1045     if ( $oldlength < 16 ) {
1046         print "Setting maximum cardnumber length to 16 (was $oldlength) and marking unique.\n" unless $silent;
1047         my $sti =
1048           $dbh->prepare(
1049             "alter table borrowers change cardnumber cardnumber varchar(16)");
1050         $sti->execute;
1051         $sti->finish;
1052         $sti =
1053           $dbh->prepare(
1054             "alter table borrowers drop index cardnumber");
1055         $sti->execute;
1056         $sti->finish;
1057         $sti =
1058           $dbh->prepare(
1059             "alter table borrowers add unique(cardnumber)");
1060         $sti->execute;
1061         $sti->finish;
1062     }
1063 }
1064 #
1065 # Get list of columns from items table
1066 $sth = $dbh->prepare("show columns from items");
1067 $sth->execute;
1068 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1069 {
1070     $itemtypes{$column} = $type;
1071     $nullenabled{$column} = $null;
1072 }
1073
1074 unless ( $itemtypes{'barcode'} eq 'varchar(20)' ) {
1075     $itemtypes{'barcode'} =~ /varchar\((\d+)\)/;
1076     my $oldlength = $1;
1077     if ( $oldlength < 20 ) {
1078         print "Setting maximum barcode length to 20 (was $oldlength).\n" unless $silent;
1079         my $sti =
1080           $dbh->prepare(
1081             "alter table items change barcode barcode varchar(20)");
1082         $sti->execute;
1083     }
1084 }
1085 #
1086 # dropping unique barcode index & setting barcode to null allowed.
1087 #
1088 $sth = $dbh->prepare("show index from items");
1089 $sth->execute;
1090 while ( my ( $table, $non_unique, $key_name, $Seq_in_index, $Column_name, $Collation, $cardinality, $sub_part, $Packed, $comment ) = $sth->fetchrow )
1091 {
1092         if ($key_name eq 'barcode' && $non_unique eq 0) {
1093                 print "dropping BARCODE index to enable empty barcodes\n" unless $silent;
1094                 $dbh->do("ALTER TABLE `items` DROP INDEX `barcode`");
1095         }
1096 }
1097 $dbh->do("ALTER TABLE `items` CHANGE `barcode` `barcode` VARCHAR( 20 )") unless ($nullenabled{barcode} eq 'YES');
1098
1099 #
1100 # creating fulltext index in bibliothesaurus if needed
1101 #
1102 $sth = $dbh->prepare("show index from bibliothesaurus");
1103 $sth->execute;
1104 my $exists=0;
1105 while ( my ( $table, $non_unique, $key_name, $Seq_in_index, $Column_name, $Collation, $cardinality, $sub_part, $Packed, $comment ) = $sth->fetchrow )
1106 {
1107         if ($key_name eq 'category_2') {
1108                 $exists=1;
1109         }
1110 }
1111 print "Creating fulltext index on bibliothesaurus\n" unless $exists or $silent;
1112 $dbh->do('create fulltext index category_2 on bibliothesaurus (category,freelib)') unless $exists;
1113
1114 #
1115 # creating  index in z3950results if needed
1116 #
1117 $sth = $dbh->prepare("show index from z3950results");
1118 $sth->execute;
1119 my $exists=0;
1120 while ( my ( $table, $non_unique, $key_name, $Seq_in_index, $Column_name, $Collation, $cardinality, $sub_part, $Packed, $comment ) = $sth->fetchrow )
1121 {
1122         if ($key_name eq 'query_server') {
1123                 $exists=1;
1124         }
1125 }
1126 print "Creating  index on z3950results\n" unless $exists or $silent;
1127 $dbh->do('create unique index query_server on z3950results (queryid,server)') unless $exists;
1128
1129 # changing z3950daemon field to NULL in marc_breeding
1130 $dbh->do("ALTER TABLE `marc_breeding` CHANGE `z3950random` `z3950random` VARCHAR( 40 )");
1131
1132 # making borrowernumber an auto_increment field
1133 $dbh->do("ALTER TABLE `borrowers` CHANGE `borrowernumber` `borrowernumber` INTEGER auto_increment");
1134
1135 # changing indexes in marc_*_structure to use frameworkcode
1136 $dbh->do('alter table marc_subfield_structure drop index tab');
1137 $dbh->do('create index tab on marc_subfield_structure (frameworkcode,tab)');
1138 $dbh->do('alter table marc_subfield_structure drop index kohafield');
1139 $dbh->do('create index kohafield on marc_subfield_structure (frameworkcode,kohafield)');
1140
1141
1142 # extending the timestamp in branchtransfers...
1143 my %branchtransfers;
1144
1145 $sth = $dbh->prepare("show columns from branchtransfers");
1146 $sth->execute;
1147 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1148 {
1149     $branchtransfers{$column} = $type;
1150 }
1151
1152 unless ( $branchtransfers{'datesent'} eq 'datetime' ) {
1153     print "Setting type of datesent in branchtransfers to datetime.\n" unless $silent;
1154     my $sti =
1155       $dbh->prepare(
1156         "alter table branchtransfers change datesent datesent datetime");
1157     $sti->execute;
1158 }
1159
1160 unless ( $branchtransfers{'datearrived'} eq 'datetime' ) {
1161     print "Setting type of datearrived in branchtransfers to datetime.\n" unless $silent;
1162     my $sti =
1163       $dbh->prepare(
1164         "alter table branchtransfers change datearrived datearrived datetime");
1165     $sti->execute;
1166 }
1167
1168 # changing the branchcategories table around...
1169 my %branchcategories;
1170
1171 $sth = $dbh->prepare("show columns from branchcategories");
1172 $sth->execute;
1173 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1174 {
1175     $branchcategories{$column} = $type;
1176 }
1177
1178 unless ( $branchcategories{'categorycode'} eq 'varchar(4)' ) {
1179     print
1180 "Setting type of categorycode in branchcategories to varchar(4),\n and making the primary key.\n" unless $silent;
1181     my $sti =
1182       $dbh->prepare(
1183 "alter table branchcategories change categorycode categorycode varchar(4) not null"
1184     );
1185     $sti->execute;
1186     $sti =
1187       $dbh->prepare(
1188         "alter table branchcategories add primary key (categorycode)");
1189     $sti->execute;
1190 }
1191
1192 unless ( $branchcategories{'categoryname'} eq 'text' ) {
1193     print "Changing branchcode in branchcategories to categoryname text.\n" unless $silent;
1194     my $sth =
1195       $dbh->prepare(
1196         "alter table branchcategories change branchcode categoryname text");
1197     $sth->execute;
1198 }
1199
1200 unless ( $branchcategories{'codedescription'} eq 'text' ) {
1201     print
1202 "Replacing branchholding in branchcategories with codedescription text.\n" unless $silent;
1203     my $sth =
1204       $dbh->prepare(
1205         "alter table branchcategories change branchholding codedescription text"
1206     );
1207     $sth->execute;
1208 }
1209
1210 # changing the items table around...
1211 my %items;
1212
1213 $sth = $dbh->prepare("show columns from items");
1214 $sth->execute;
1215 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1216 {
1217     $items{$column} = $type;
1218 }
1219
1220 if ($items{'bulk'} eq "varchar(30)") {
1221     print "  Setting callnumber in items table\n" unless $silent;
1222     my $sti =
1223       $dbh->prepare("ALTER TABLE `items` CHANGE `bulk` `itemcallnumber` VARCHAR( 30 ) DEFAULT NULL");
1224     $sti->execute;
1225     $sti = $dbh->prepare("update marc_subfield_structure set kohafield=\"items.itemcallnumber\" where kohafield=\"items.bulk\"");
1226     $sti->execute;
1227 }
1228
1229 # changing the marc_subfield_structure table around...
1230 my %marc_subfield_structure;
1231
1232 $sth = $dbh->prepare("show columns from marc_subfield_structure");
1233 $sth->execute;
1234 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1235 {
1236     $marc_subfield_structure{$column} = $type;
1237 }
1238
1239 if ($marc_subfield_structure{thesaurus_category}) {
1240     print "  changing thesaurus_category in marc_subfield_structure table\n" unless $silent;
1241     my $sti =
1242       $dbh->prepare("ALTER TABLE marc_subfield_structure CHANGE `thesaurus_category` `authtypecode` VARCHAR(10 ) DEFAULT NULL");
1243     $sti->execute;
1244 }
1245
1246 #
1247 # creating  index in issuingrules if needed
1248 #
1249 $sth = $dbh->prepare("show index from issuingrules");
1250 $sth->execute;
1251 my $exists=0;
1252 while ( my ( $table, $non_unique, $key_name, $Seq_in_index, $Column_name, $Collation, $cardinality, $sub_part, $Packed, $comment ) = $sth->fetchrow )
1253 {
1254         if ($key_name eq 'PRIMARY') {
1255                 $exists=1;
1256         }
1257 }
1258 print "Creating  index on issuing rules\n" unless $exists or $silent;
1259 $dbh->do('ALTER TABLE issuingrules ADD PRIMARY KEY ( branchcode, categorycode, itemtype )') unless $exists;
1260
1261 $dbh->do('ALTER TABLE marc_tag_structure drop primary key');
1262 $dbh->do('ALTER TABLE marc_tag_structure ADD PRIMARY KEY ( frameworkcode, tagfield )');
1263
1264 $dbh->do('ALTER TABLE marc_subfield_structure drop primary key');
1265 $dbh->do('ALTER TABLE marc_subfield_structure ADD PRIMARY KEY ( frameworkcode, tagfield, tagsubfield )');
1266
1267 # Get list of columns from marc_word table
1268 my %marc_word;
1269 my %nullenabled;
1270 $sth = $dbh->prepare("show columns from marc_word");
1271 $sth->execute;
1272 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1273 {
1274     $marc_word{$column} = $type;
1275     $nullenabled{$column} = $null;
1276 }
1277 if ($marc_word{subfieldid}) {
1278         #create field tagsubfield, copy tag+subfieldid, then drop tag and subfieldid
1279         print "Modifying marc_word (concat on tag and subfield for better perfs)\n" unless $silent;
1280         $dbh->do("ALTER TABLE `marc_word` ADD `tagsubfield` CHAR( 4 ) NOT NULL AFTER `bibid`");
1281         $dbh->do("update marc_word set tagsubfield=concat(tag,subfieldid)");
1282         $dbh->do("alter table marc_word drop tag");
1283         $dbh->do("alter table marc_word drop subfieldid");
1284         $dbh->do("create index Search_Marc on marc_word (tagsubfield,word)");
1285 }
1286 # Populate tables with required data
1287
1288 # fill aqbasket if it's empty and aqorder is not
1289 # => it means it has just been created & must be filled
1290 $sth = $dbh->prepare("select count(*) from aqbasket");
1291 $sth->execute;
1292 if ($sth->fetchrow == 0) {
1293         $sth = $dbh->prepare("select count(*) from aqorders");
1294         $sth->execute;
1295         if ($sth->fetchrow >0) {
1296                 print "Populating new table aqbasket\n";
1297                 print "IMPORTANT NOTE: error message \"Duplicate entry 'X' for key 1\" may appear. it should not be a real trouble\n";
1298                 $sth=$dbh->prepare("select distinct basketno,booksellerid,authorisedby,entrydate,booksellerinvoicenumber from aqorders");
1299                 $sth->execute;
1300                 my ($basketno,$booksellerid,$authorisedby,$entrydate,$booksellerinvoicenumber);
1301                 my $sth2 = $dbh->prepare("insert into aqbasket (basketno,creationdate,booksellerid,authorisedby,booksellerinvoicenumber) values (?,?,?,?,?)");
1302                 while (($basketno,$booksellerid,$authorisedby,$entrydate,$booksellerinvoicenumber) = $sth->fetchrow) {
1303                         print "$basketno,$entrydate,$booksellerid,$authorisedby,$booksellerinvoicenumber\n";
1304                         $sth2->execute($basketno,$entrydate,$booksellerid,$authorisedby,$booksellerinvoicenumber);
1305                 }
1306         }
1307 }
1308 foreach my $table ( keys %tabledata ) {
1309     print "Checking for data required in table $table...\n" unless $silent;
1310     my $tablerows = $tabledata{$table};
1311     foreach my $row (@$tablerows) {
1312         my $uniquefieldrequired = $row->{uniquefieldrequired};
1313         my $uniquevalue         = $row->{$uniquefieldrequired};
1314         my $forceupdate         = $row->{forceupdate};
1315         my $sth                 =
1316           $dbh->prepare(
1317 "select $uniquefieldrequired from $table where $uniquefieldrequired=?"
1318         );
1319         $sth->execute($uniquevalue);
1320         if ($sth->rows) {
1321             foreach my $field (keys %$forceupdate) {
1322                 if ($forceupdate->{$field}) {
1323                     my $sth=$dbh->prepare("update systempreferences set $field=? where $uniquefieldrequired=?");
1324                     $sth->execute($row->{$field}, $uniquevalue);
1325                 }
1326             }
1327         } else {
1328             print "Adding row to $table: " unless $silent;
1329             my @values;
1330             my $fieldlist;
1331             my $placeholders;
1332             foreach my $field ( keys %$row ) {
1333                 next if $field eq 'uniquefieldrequired';
1334                 next if $field eq 'forceupdate';
1335                 my $value = $row->{$field};
1336                 push @values, $value;
1337                 print "  $field => $value" unless $silent;
1338                 $fieldlist .= "$field,";
1339                 $placeholders .= "?,";
1340             }
1341             print "\n" unless $silent;
1342             $fieldlist    =~ s/,$//;
1343             $placeholders =~ s/,$//;
1344             my $sth =
1345               $dbh->prepare(
1346                 "insert into $table ($fieldlist) values ($placeholders)");
1347             $sth->execute(@values);
1348         }
1349     }
1350 }
1351
1352 # at last, remove useless fields
1353 foreach $table ( keys %uselessfields ) {
1354         my @fields = split /,/,$uselessfields{$table};
1355         my $fields;
1356         my $exists;
1357         foreach my $fieldtodrop (@fields) {
1358                 $fieldtodrop =~ s/\t//g;
1359                 $fieldtodrop =~ s/\n//g;
1360                 $exists =0;
1361                 $sth = $dbh->prepare("show columns from $table");
1362                 $sth->execute;
1363                 while ( my ( $column, $type, $null, $key, $default, $extra ) = $sth->fetchrow )
1364                 {
1365                         $exists =1 if ($column eq $fieldtodrop);
1366                 }
1367                 if ($exists) {
1368                         print "deleting $fieldtodrop field in $table...\n" unless $silent;
1369                         my $sth = $dbh->prepare("alter table $table drop $fieldtodrop");
1370                         $sth->execute;
1371                 }
1372         }
1373 }    # foreach
1374
1375
1376 $sth->finish;
1377
1378 exit;
1379
1380 # $Log$
1381 # Revision 1.100  2004/12/10 16:11:32  tipaul
1382 # Improvement : adding a systempref to define default view in OPAC (either normal, MARC or ISBD). Created automatically during install or update. Check that you have a Koha >> parameters >> systempreferences >> BiblioDefaultView, Variable type : Choice, Variable options : normal|marc|isbd
1383 #
1384 # Revision 1.99  2004/12/02 17:17:00  tipaul
1385 # adding acquisition permission
1386 #
1387 # Revision 1.98  2004/11/26 20:26:49  tipaul
1388 # bugfix for auth_header creation
1389 #
1390 # Revision 1.97  2004/11/23 09:11:08  tipaul
1391 # adding itemcallnumber entry
1392 #
1393 # Revision 1.96  2004/11/16 13:03:45  tipaul
1394 # removing ldap systempref, it's now in C4/Auth_with_ldap.pm separate package
1395 #
1396 # Revision 1.95  2004/11/08 19:57:32  tipaul
1397 # bugfix
1398 #
1399 # Revision 1.94  2004/09/06 10:00:29  tipaul
1400 # adding a "location" field to the library.
1401 # This field is useful when the callnumber contains no information on the room where the item is stored.
1402 # With this field, we now have 3 levels of informations to find a book :
1403 # * the branch.
1404 # * the location.
1405 # * the callnumber.
1406 #
1407 # This should be versatile enough to solve any storing method.
1408 # This hack is quite simple, due to the nice Biblio.pm API. The MARC => koha db link is automatically managed. Just add the link in the parameters section.
1409 #
1410 # Revision 1.93  2004/08/12 14:50:50  tipaul
1411 # bugfixes
1412 #
1413 # Revision 1.92  2004/08/06 16:38:42  tipaul
1414 # changing DB structure to calculate next issue number.
1415 # Seems to work fine.
1416 #
1417 # Still misses the date calculation & the test of end of subscription (maybe for monday ?)
1418 #
1419 # Revision 1.91  2004/07/15 09:52:28  tipaul
1420 # Acquisition & Suggestion :
1421 # * acquisition rewritte : create a aqbasket table to deal with "bookseller order header".
1422 # * add "close basket" feature : a closed basket can't be modified
1423 # * suggestion feature : manage suggestions in acquisition (after suggestion filled in OPAC)
1424 #
1425 # Revision 1.90  2004/07/06 08:24:18  tipaul
1426 # adding 2 free fields that can be used for sorting purposes
1427 #
1428 # Revision 1.89  2004/07/02 15:55:08  tipaul
1429 # Adding 2 new fields, called "sort1" and "sort2"
1430 # They can be used for sorting & statistics reasons by the library.
1431 #
1432 # Revision 1.88  2004/06/26 23:34:26  rangi
1433 # Fixing typo
1434 #
1435 # Revision 1.87  2004/06/23 13:03:09  tipaul
1436 # fixes in DB structure
1437 #
1438 # Revision 1.86  2004/06/22 11:30:57  tipaul
1439 # adding -s (silent) flag, to have a silent install.
1440 # only updater will be verbose
1441 #
1442 # Revision 1.85  2004/06/17 15:19:44  tipaul
1443 # missing Marc_Search index on marc_word
1444 #
1445 # Revision 1.84  2004/06/17 08:25:21  tipaul
1446 # DB modifs : merging tag & subfield in marc_word table
1447 #
1448 # Revision 1.83  2004/06/10 08:32:02  tipaul
1449 # MARC authority management (continued)
1450 #
1451 # Revision 1.82  2004/06/03 12:46:58  tipaul
1452 # * frameworks and itemtypes are independant
1453 #
1454 # WARNING : will work only if applied to a 2.0 base. some modifs have been done since last commit that will NOT be applied if you run updatedatabase again.
1455 #
1456 # Revision 1.81  2004/05/28 09:56:21  tipaul
1457 # bugfix
1458 #
1459 # Revision 1.80  2004/05/28 08:32:00  tipaul
1460 # adding :
1461 # * MARC authority file
1462 # * seealso & hidden in MARC biblio structure.
1463 #
1464 # Revision 1.79  2004/05/18 09:50:07  tipaul
1465 # *** empty log message ***
1466 #
1467 # Revision 1.78  2004/05/10 09:29:33  tipaul
1468 # css is now the default theme for OPAC.
1469 # It will be the theme used for improvements and new things in OPAC.
1470 #
1471 # Revision 1.77  2004/05/06 14:56:51  tipaul
1472 # adding table issuingrules (previously called categoryitem
1473 #
1474 # Revision 1.76  2004/05/03 09:32:25  tipaul
1475 # adding printcirculationsplit parameter (already existed, but was not in systempref by defaul)
1476 #
1477 # Revision 1.75  2004/04/14 19:49:00  tipaul
1478 # seealso field set to 255 chars
1479 #
1480 # Revision 1.74  2004/03/11 16:10:16  tipaul
1481 # *** empty log message ***
1482 #
1483 # Revision 1.73  2004/03/06 20:26:13  tipaul
1484 # adding seealso feature in MARC searches
1485 #