installer/data/mysql/updatedatabase.pl

   1 #!/usr/bin/perl
   2
   3 # Database Updater
   4 # This script checks for required updates to the database.
   5
   6 # Parts copyright Catalyst IT 2011
   7
   8 # Part of the Koha Library Software www.koha-community.org
   9 # Koha is free software; you can redistribute it and/or modify it
  10 # under the terms of the GNU General Public License as published by
  11 # the Free Software Foundation; either version 3 of the License, or
  12 # (at your option) any later version.
  13 #
  14 # Koha is distributed in the hope that it will be useful, but
  15 # WITHOUT ANY WARRANTY; without even the implied warranty of
  16 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the
  17 # GNU General Public License for more details.
  18 #
  19 # You should have received a copy of the GNU General Public License
  20 # along with Koha; if not, see <http://www.gnu.org/licenses>.
  21 #
  22
  23 # Bugs/ToDo:
  24 # - Would also be a good idea to offer to do a backup at this time...
  25
  26 # NOTE:  If you do something more than once in here, make it table driven.
  27
  28 # NOTE: Please keep the version in kohaversion.pl up-to-date!
  29
  30 use Modern::Perl;
  31
  32 use feature 'say';
  33
  34 # CPAN modules
  35 use DBI;
  36 use Getopt::Long;
  37 # Koha modules
  38 use C4::Context;
  39 use C4::Installer;
  40 use Koha::Database;
  41 use Koha;
  42 use Koha::DateUtils;
  43
  44 use MARC::Record;
  45 use MARC::File::XML ( BinaryEncoding => 'utf8' );
  46
  47 use File::Path qw[remove_tree]; # perl core module
  48 use File::Slurp;
  49
  50 # FIXME - The user might be installing a new database, so can't rely
  51 # on /etc/koha.conf anyway.
  52
  53 my $debug = 0;
  54
  55 my (
  56     $sth,
  57     $query,
  58     $table,
  59     $type,
  60 );
  61
  62 my $schema = Koha::Database->new()->schema();
  63
  64 my $silent;
  65 GetOptions(
  66     's' =>\$silent
  67     );
  68 my $dbh = C4::Context->dbh;
  69 $|=1; # flushes output
  70
  71 local $dbh->{RaiseError} = 0;
  72
  73 # Record the version we are coming from
  74
  75 my $original_version = C4::Context->preference("Version");
  76
  77 # Deal with virtualshelves
  78 my $DBversion = "3.00.00.001";
  79 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
  80     # update virtualshelves table to
  81     #
  82     $dbh->do("ALTER TABLE `bookshelf` RENAME `virtualshelves`");
  83     $dbh->do("ALTER TABLE `shelfcontents` RENAME `virtualshelfcontents`");
  84     $dbh->do("ALTER TABLE `virtualshelfcontents` ADD `biblionumber` INT( 11 ) NOT NULL default '0' AFTER shelfnumber");
  85     $dbh->do("UPDATE `virtualshelfcontents` SET biblionumber=(SELECT biblionumber FROM items WHERE items.itemnumber=virtualshelfcontents.itemnumber)");
  86     # drop all foreign keys : otherwise, we can't drop itemnumber field.
  87     DropAllForeignKeys('virtualshelfcontents');
  88     $dbh->do("ALTER TABLE `virtualshelfcontents` ADD KEY biblionumber (biblionumber)");
  89     # create the new foreign keys (on biblionumber)
  90     $dbh->do("ALTER TABLE `virtualshelfcontents` ADD CONSTRAINT `virtualshelfcontents_ibfk_1` FOREIGN KEY (`shelfnumber`) REFERENCES `virtualshelves` (`shelfnumber`) ON DELETE CASCADE ON UPDATE CASCADE");
  91     # re-create the foreign key on virtualshelf
  92     $dbh->do("ALTER TABLE `virtualshelfcontents` ADD CONSTRAINT `shelfcontents_ibfk_2` FOREIGN KEY (`biblionumber`) REFERENCES `biblio` (`biblionumber`) ON DELETE CASCADE ON UPDATE CASCADE");
  93     $dbh->do("ALTER TABLE `virtualshelfcontents` DROP `itemnumber`");
  94     print "Upgrade to $DBversion done (virtualshelves)\n";
  95     SetVersion ($DBversion);
  96 }
  97
  98
  99 $DBversion = "3.00.00.002";
 100 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 101     $dbh->do("DROP TABLE sessions");
 102     $dbh->do("CREATE TABLE `sessions` (
 103   `id` varchar(32) NOT NULL,
 104   `a_session` text NOT NULL,
 105   UNIQUE KEY `id` (`id`)
 106 ) ENGINE=InnoDB DEFAULT CHARSET=utf8;");
 107     print "Upgrade to $DBversion done (sessions uses CGI::session, new table structure for sessions)\n";
 108     SetVersion ($DBversion);
 109 }
 110
 111
 112 $DBversion = "3.00.00.003";
 113 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 114     if (C4::Context->preference("opaclanguages") eq "fr") {
 115         $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('ReservesNeedReturns','0','Si ce paramètre est mis à 1, une réservation posée sur un exemplaire présent sur le site devra être passée en retour pour être disponible. Sinon, elle sera automatiquement disponible, Koha considère que le bibliothécaire place la réservation en ayant le document en mains','','YesNo')");
 116     } else {
 117         $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('ReservesNeedReturns','0','If set, a reserve done on an item available in this branch need a check-in, otherwise, a reserve on a specific item, that is on the branch & available is considered as available','','YesNo')");
 118     }
 119     print "Upgrade to $DBversion done (adding ReservesNeedReturns systempref, in circulation)\n";
 120     SetVersion ($DBversion);
 121 }
 122
 123
 124 $DBversion = "3.00.00.004";
 125 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 126     $dbh->do("INSERT INTO `systempreferences` VALUES ('DebugLevel','2','set the level of error info sent to the browser. 0=none, 1=some, 2=most','0|1|2','Choice')");
 127     print "Upgrade to $DBversion done (adding DebugLevel systempref, in 'Admin' tab)\n";
 128     SetVersion ($DBversion);
 129 }
 130
 131 $DBversion = "3.00.00.005";
 132 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 133     $dbh->do("CREATE TABLE `tags` (
 134                     `entry` varchar(255) NOT NULL default '',
 135                     `weight` bigint(20) NOT NULL default 0,
 136                     PRIMARY KEY  (`entry`)
 137                     ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
 138                 ");
 139         $dbh->do("CREATE TABLE `nozebra` (
 140                 `server` varchar(20)     NOT NULL,
 141                 `indexname` varchar(40)  NOT NULL,
 142                 `value` varchar(250)     NOT NULL,
 143                 `biblionumbers` longtext NOT NULL,
 144                 KEY `indexname` (`server`,`indexname`),
 145                 KEY `value` (`server`,`value`))
 146                 ENGINE=InnoDB DEFAULT CHARSET=utf8;
 147                 ");
 148     print "Upgrade to $DBversion done (adding tags and nozebra tables )\n";
 149     SetVersion ($DBversion);
 150 }
 151
 152 $DBversion = "3.00.00.006";
 153 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 154     $dbh->do("UPDATE issues SET issuedate=timestamp WHERE issuedate='0000-00-00'");
 155     print "Upgrade to $DBversion done (filled issues.issuedate with timestamp)\n";
 156     SetVersion ($DBversion);
 157 }
 158
 159 $DBversion = "3.00.00.007";
 160 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 161     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SessionStorage','mysql','Use mysql or a temporary file for storing session data','mysql|tmp','Choice')");
 162     print "Upgrade to $DBversion done (set SessionStorage variable)\n";
 163     SetVersion ($DBversion);
 164 }
 165
 166 $DBversion = "3.00.00.008";
 167 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 168     $dbh->do("ALTER TABLE `biblio` ADD `datecreated` DATE NOT NULL AFTER `timestamp` ;");
 169     $dbh->do("UPDATE biblio SET datecreated=timestamp");
 170     print "Upgrade to $DBversion done (biblio creation date)\n";
 171     SetVersion ($DBversion);
 172 }
 173
 174 $DBversion = "3.00.00.009";
 175 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 176
 177     # Create backups of call number columns
 178     # in case default migration needs to be customized
 179     #
 180     # UPGRADE NOTE: temp_upg_biblioitems_call_num should be dropped
 181     #               after call numbers have been transformed to the new structure
 182     #
 183     # Not bothering to do the same with deletedbiblioitems -- assume
 184     # default is good enough.
 185     $dbh->do("CREATE TABLE `temp_upg_biblioitems_call_num` AS
 186               SELECT `biblioitemnumber`, `biblionumber`,
 187                      `classification`, `dewey`, `subclass`,
 188                      `lcsort`, `ccode`
 189               FROM `biblioitems`");
 190
 191     # biblioitems changes
 192     $dbh->do("ALTER TABLE `biblioitems` CHANGE COLUMN `volumeddesc` `volumedesc` TEXT,
 193                                     ADD `cn_source` VARCHAR(10) DEFAULT NULL AFTER `ccode`,
 194                                     ADD `cn_class` VARCHAR(30) DEFAULT NULL AFTER `cn_source`,
 195                                     ADD `cn_item` VARCHAR(10) DEFAULT NULL AFTER `cn_class`,
 196                                     ADD `cn_suffix` VARCHAR(10) DEFAULT NULL AFTER `cn_item`,
 197                                     ADD `cn_sort` VARCHAR(30) DEFAULT NULL AFTER `cn_suffix`,
 198                                     ADD `totalissues` INT(10) AFTER `cn_sort`");
 199
 200     # default mapping of call number columns:
 201     #   cn_class = concatentation of classification + dewey,
 202     #              trimmed to fit -- assumes that most users do not
 203     #              populate both classification and dewey in a single record
 204     #   cn_item  = subclass
 205     #   cn_source = left null
 206     #   cn_sort = lcsort
 207     #
 208     # After upgrade, cn_sort will have to be set based on whatever
 209     # default call number scheme user sets as a preference.  Misc
 210     # script will be added at some point to do that.
 211     #
 212     $dbh->do("UPDATE `biblioitems`
 213               SET cn_class = SUBSTR(TRIM(CONCAT_WS(' ', `classification`, `dewey`)), 1, 30),
 214                     cn_item = subclass,
 215                     `cn_sort` = `lcsort`
 216             ");
 217
 218     # Now drop the old call number columns
 219     $dbh->do("ALTER TABLE `biblioitems` DROP COLUMN `classification`,
 220                                         DROP COLUMN `dewey`,
 221                                         DROP COLUMN `subclass`,
 222                                         DROP COLUMN `lcsort`,
 223                                         DROP COLUMN `ccode`");
 224
 225     # deletedbiblio changes
 226     $dbh->do("ALTER TABLE `deletedbiblio` ALTER COLUMN `frameworkcode` SET DEFAULT '',
 227                                         DROP COLUMN `marc`,
 228                                         ADD `datecreated` DATE NOT NULL AFTER `timestamp`");
 229     $dbh->do("UPDATE deletedbiblio SET datecreated = timestamp");
 230
 231     # deletedbiblioitems changes
 232     $dbh->do("ALTER TABLE `deletedbiblioitems`
 233                         MODIFY `publicationyear` TEXT,
 234                         CHANGE `volumeddesc` `volumedesc` TEXT,
 235                         MODIFY `collectiontitle` MEDIUMTEXT DEFAULT NULL AFTER `volumedesc`,
 236                         MODIFY `collectionissn` TEXT DEFAULT NULL AFTER `collectiontitle`,
 237                         MODIFY `collectionvolume` MEDIUMTEXT DEFAULT NULL AFTER `collectionissn`,
 238                         MODIFY `editionstatement` TEXT DEFAULT NULL AFTER `collectionvolume`,
 239                         MODIFY `editionresponsibility` TEXT DEFAULT NULL AFTER `editionstatement`,
 240                         MODIFY `place` VARCHAR(255) DEFAULT NULL AFTER `size`,
 241                         MODIFY `marc` LONGBLOB,
 242                         ADD `cn_source` VARCHAR(10) DEFAULT NULL AFTER `url`,
 243                         ADD `cn_class` VARCHAR(30) DEFAULT NULL AFTER `cn_source`,
 244                         ADD `cn_item` VARCHAR(10) DEFAULT NULL AFTER `cn_class`,
 245                         ADD `cn_suffix` VARCHAR(10) DEFAULT NULL AFTER `cn_item`,
 246                         ADD `cn_sort` VARCHAR(30) DEFAULT NULL AFTER `cn_suffix`,
 247                         ADD `totalissues` INT(10) AFTER `cn_sort`,
 248                         ADD `marcxml` LONGTEXT NOT NULL AFTER `totalissues`,
 249                         ADD KEY `isbn` (`isbn`),
 250                         ADD KEY `publishercode` (`publishercode`)
 251                     ");
 252
 253     $dbh->do("UPDATE `deletedbiblioitems`
 254                 SET `cn_class` = SUBSTR(TRIM(CONCAT_WS(' ', `classification`, `dewey`)), 1, 30),
 255                `cn_item` = `subclass`,
 256                 `cn_sort` = `lcsort`
 257             ");
 258     $dbh->do("ALTER TABLE `deletedbiblioitems`
 259                         DROP COLUMN `classification`,
 260                         DROP COLUMN `dewey`,
 261                         DROP COLUMN `subclass`,
 262                         DROP COLUMN `lcsort`,
 263                         DROP COLUMN `ccode`
 264             ");
 265
 266     # deleteditems changes
 267     $dbh->do("ALTER TABLE `deleteditems`
 268                         MODIFY `barcode` VARCHAR(20) DEFAULT NULL,
 269                         MODIFY `price` DECIMAL(8,2) DEFAULT NULL,
 270                         MODIFY `replacementprice` DECIMAL(8,2) DEFAULT NULL,
 271                         DROP `bulk`,
 272                         MODIFY `itemcallnumber` VARCHAR(30) DEFAULT NULL AFTER `wthdrawn`,
 273                         MODIFY `holdingbranch` VARCHAR(10) DEFAULT NULL,
 274                         DROP `interim`,
 275                         MODIFY `timestamp` TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP AFTER `paidfor`,
 276                         DROP `cutterextra`,
 277                         ADD `cn_source` VARCHAR(10) DEFAULT NULL AFTER `onloan`,
 278                         ADD `cn_sort` VARCHAR(30) DEFAULT NULL AFTER `cn_source`,
 279                         ADD `ccode` VARCHAR(10) DEFAULT NULL AFTER `cn_sort`,
 280                         ADD `materials` VARCHAR(10) DEFAULT NULL AFTER `ccode`,
 281                         ADD `uri` VARCHAR(255) DEFAULT NULL AFTER `materials`,
 282                         MODIFY `marc` LONGBLOB AFTER `uri`,
 283                         DROP KEY `barcode`,
 284                         DROP KEY `itembarcodeidx`,
 285                         DROP KEY `itembinoidx`,
 286                         DROP KEY `itembibnoidx`,
 287                         ADD UNIQUE KEY `delitembarcodeidx` (`barcode`),
 288                         ADD KEY `delitembinoidx` (`biblioitemnumber`),
 289                         ADD KEY `delitembibnoidx` (`biblionumber`),
 290                         ADD KEY `delhomebranch` (`homebranch`),
 291                         ADD KEY `delholdingbranch` (`holdingbranch`)");
 292     $dbh->do("UPDATE deleteditems SET `ccode` = `itype`");
 293     $dbh->do("ALTER TABLE deleteditems DROP `itype`");
 294     $dbh->do("UPDATE `deleteditems` SET `cn_sort` = `itemcallnumber`");
 295
 296     # items changes
 297     $dbh->do("ALTER TABLE `items` ADD `cn_source` VARCHAR(10) DEFAULT NULL AFTER `onloan`,
 298                                 ADD `cn_sort` VARCHAR(30) DEFAULT NULL AFTER `cn_source`,
 299                                 ADD `ccode` VARCHAR(10) DEFAULT NULL AFTER `cn_sort`,
 300                                 ADD `materials` VARCHAR(10) DEFAULT NULL AFTER `ccode`,
 301                                 ADD `uri` VARCHAR(255) DEFAULT NULL AFTER `materials`
 302             ");
 303     $dbh->do("ALTER TABLE `items`
 304                         DROP KEY `itembarcodeidx`,
 305                         ADD UNIQUE KEY `itembarcodeidx` (`barcode`)");
 306
 307     # map items.itype to items.ccode and
 308     # set cn_sort to itemcallnumber -- as with biblioitems.cn_sort,
 309     # will have to be subsequently updated per user's default
 310     # classification scheme
 311     $dbh->do("UPDATE `items` SET `cn_sort` = `itemcallnumber`,
 312                             `ccode` = `itype`");
 313
 314     $dbh->do("ALTER TABLE `items` DROP `cutterextra`,
 315                                 DROP `itype`");
 316
 317     print "Upgrade to $DBversion done (major changes to biblio, biblioitems, items, and deleted* versions of same\n";
 318     SetVersion ($DBversion);
 319 }
 320
 321 $DBversion = "3.00.00.010";
 322 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 323     $dbh->do("CREATE INDEX `userid` ON borrowers (`userid`) ");
 324     print "Upgrade to $DBversion done (userid index added)\n";
 325     SetVersion ($DBversion);
 326 }
 327
 328 $DBversion = "3.00.00.011";
 329 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 330     $dbh->do("ALTER TABLE `branchcategories` CHANGE `categorycode` `categorycode` varchar(10) ");
 331     $dbh->do("ALTER TABLE `branchcategories` CHANGE `categoryname` `categoryname` varchar(32) ");
 332     $dbh->do("ALTER TABLE `branchcategories` ADD COLUMN `categorytype` varchar(16) ");
 333     $dbh->do("UPDATE `branchcategories` SET `categorytype` = 'properties'");
 334     $dbh->do("ALTER TABLE `branchrelations` CHANGE `categorycode` `categorycode` varchar(10) ");
 335     print "Upgrade to $DBversion done (added branchcategory type)\n";
 336     SetVersion ($DBversion);
 337 }
 338
 339 $DBversion = "3.00.00.012";
 340 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 341     $dbh->do("CREATE TABLE `class_sort_rules` (
 342                                `class_sort_rule` varchar(10) NOT NULL default '',
 343                                `description` mediumtext,
 344                                `sort_routine` varchar(30) NOT NULL default '',
 345                                PRIMARY KEY (`class_sort_rule`),
 346                                UNIQUE KEY `class_sort_rule_idx` (`class_sort_rule`)
 347                              ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 348     $dbh->do("CREATE TABLE `class_sources` (
 349                                `cn_source` varchar(10) NOT NULL default '',
 350                                `description` mediumtext,
 351                                `used` tinyint(4) NOT NULL default 0,
 352                                `class_sort_rule` varchar(10) NOT NULL default '',
 353                                PRIMARY KEY (`cn_source`),
 354                                UNIQUE KEY `cn_source_idx` (`cn_source`),
 355                                KEY `used_idx` (`used`),
 356                                CONSTRAINT `class_source_ibfk_1` FOREIGN KEY (`class_sort_rule`)
 357                                           REFERENCES `class_sort_rules` (`class_sort_rule`)
 358                              ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 359     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type)
 360               VALUES('DefaultClassificationSource','ddc',
 361                      'Default classification scheme used by the collection. E.g., Dewey, LCC, etc.', NULL,'free')");
 362     $dbh->do("INSERT INTO `class_sort_rules` (`class_sort_rule`, `description`, `sort_routine`) VALUES
 363                                ('dewey', 'Default filing rules for DDC', 'Dewey'),
 364                                ('lcc', 'Default filing rules for LCC', 'LCC'),
 365                                ('generic', 'Generic call number filing rules', 'Generic')");
 366     $dbh->do("INSERT INTO `class_sources` (`cn_source`, `description`, `used`, `class_sort_rule`) VALUES
 367                             ('ddc', 'Dewey Decimal Classification', 1, 'dewey'),
 368                             ('lcc', 'Library of Congress Classification', 1, 'lcc'),
 369                             ('udc', 'Universal Decimal Classification', 0, 'generic'),
 370                             ('sudocs', 'SuDoc Classification (U.S. GPO)', 0, 'generic'),
 371                             ('z', 'Other/Generic Classification Scheme', 0, 'generic')");
 372     print "Upgrade to $DBversion done (classification sources added)\n";
 373     SetVersion ($DBversion);
 374 }
 375
 376 $DBversion = "3.00.00.013";
 377 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 378     $dbh->do("CREATE TABLE `import_batches` (
 379               `import_batch_id` int(11) NOT NULL auto_increment,
 380               `template_id` int(11) default NULL,
 381               `branchcode` varchar(10) default NULL,
 382               `num_biblios` int(11) NOT NULL default 0,
 383               `num_items` int(11) NOT NULL default 0,
 384               `upload_timestamp` timestamp NOT NULL default CURRENT_TIMESTAMP,
 385               `overlay_action` enum('replace', 'create_new', 'use_template') NOT NULL default 'create_new',
 386               `import_status` enum('staging', 'staged', 'importing', 'imported', 'reverting', 'reverted', 'cleaned') NOT NULL default 'staging',
 387               `batch_type` enum('batch', 'z3950') NOT NULL default 'batch',
 388               `file_name` varchar(100),
 389               `comments` mediumtext,
 390               PRIMARY KEY (`import_batch_id`),
 391               KEY `branchcode` (`branchcode`)
 392               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 393     $dbh->do("CREATE TABLE `import_records` (
 394               `import_record_id` int(11) NOT NULL auto_increment,
 395               `import_batch_id` int(11) NOT NULL,
 396               `branchcode` varchar(10) default NULL,
 397               `record_sequence` int(11) NOT NULL default 0,
 398               `upload_timestamp` timestamp NOT NULL default CURRENT_TIMESTAMP,
 399               `import_date` DATE default NULL,
 400               `marc` longblob NOT NULL,
 401               `marcxml` longtext NOT NULL,
 402               `marcxml_old` longtext NOT NULL,
 403               `record_type` enum('biblio', 'auth', 'holdings') NOT NULL default 'biblio',
 404               `overlay_status` enum('no_match', 'auto_match', 'manual_match', 'match_applied') NOT NULL default 'no_match',
 405               `status` enum('error', 'staged', 'imported', 'reverted', 'items_reverted') NOT NULL default 'staged',
 406               `import_error` mediumtext,
 407               `encoding` varchar(40) NOT NULL default '',
 408               `z3950random` varchar(40) default NULL,
 409               PRIMARY KEY (`import_record_id`),
 410               CONSTRAINT `import_records_ifbk_1` FOREIGN KEY (`import_batch_id`)
 411                           REFERENCES `import_batches` (`import_batch_id`) ON DELETE CASCADE ON UPDATE CASCADE,
 412               KEY `branchcode` (`branchcode`),
 413               KEY `batch_sequence` (`import_batch_id`, `record_sequence`)
 414               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 415     $dbh->do("CREATE TABLE `import_record_matches` (
 416               `import_record_id` int(11) NOT NULL,
 417               `candidate_match_id` int(11) NOT NULL,
 418               `score` int(11) NOT NULL default 0,
 419               CONSTRAINT `import_record_matches_ibfk_1` FOREIGN KEY (`import_record_id`)
 420                           REFERENCES `import_records` (`import_record_id`) ON DELETE CASCADE ON UPDATE CASCADE,
 421               KEY `record_score` (`import_record_id`, `score`)
 422               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 423     $dbh->do("CREATE TABLE `import_biblios` (
 424               `import_record_id` int(11) NOT NULL,
 425               `matched_biblionumber` int(11) default NULL,
 426               `control_number` varchar(25) default NULL,
 427               `original_source` varchar(25) default NULL,
 428               `title` varchar(128) default NULL,
 429               `author` varchar(80) default NULL,
 430               `isbn` varchar(14) default NULL,
 431               `issn` varchar(9) default NULL,
 432               `has_items` tinyint(1) NOT NULL default 0,
 433               CONSTRAINT `import_biblios_ibfk_1` FOREIGN KEY (`import_record_id`)
 434                           REFERENCES `import_records` (`import_record_id`) ON DELETE CASCADE ON UPDATE CASCADE,
 435               KEY `matched_biblionumber` (`matched_biblionumber`),
 436               KEY `title` (`title`),
 437               KEY `isbn` (`isbn`)
 438               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 439     $dbh->do("CREATE TABLE `import_items` (
 440               `import_items_id` int(11) NOT NULL auto_increment,
 441               `import_record_id` int(11) NOT NULL,
 442               `itemnumber` int(11) default NULL,
 443               `branchcode` varchar(10) default NULL,
 444               `status` enum('error', 'staged', 'imported', 'reverted') NOT NULL default 'staged',
 445               `marcxml` longtext NOT NULL,
 446               `import_error` mediumtext,
 447               PRIMARY KEY (`import_items_id`),
 448               CONSTRAINT `import_items_ibfk_1` FOREIGN KEY (`import_record_id`)
 449                           REFERENCES `import_records` (`import_record_id`) ON DELETE CASCADE ON UPDATE CASCADE,
 450               KEY `itemnumber` (`itemnumber`),
 451               KEY `branchcode` (`branchcode`)
 452               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 453
 454     $dbh->do("INSERT INTO `import_batches`
 455                 (`overlay_action`, `import_status`, `batch_type`, `file_name`)
 456               SELECT distinct 'create_new', 'staged', 'z3950', `file`
 457               FROM   `marc_breeding`");
 458
 459     $dbh->do("INSERT INTO `import_records`
 460                 (`import_batch_id`, `import_record_id`, `record_sequence`, `marc`, `record_type`, `status`,
 461                 `encoding`, `z3950random`, `marcxml`, `marcxml_old`)
 462               SELECT `import_batch_id`, `id`, 1, `marc`, 'biblio', 'staged', `encoding`, `z3950random`, '', ''
 463               FROM `marc_breeding`
 464               JOIN `import_batches` ON (`file_name` = `file`)");
 465
 466     $dbh->do("INSERT INTO `import_biblios`
 467                 (`import_record_id`, `title`, `author`, `isbn`)
 468               SELECT `import_record_id`, `title`, `author`, `isbn`
 469               FROM   `marc_breeding`
 470               JOIN   `import_records` ON (`import_record_id` = `id`)");
 471
 472     $dbh->do("UPDATE `import_batches`
 473               SET `num_biblios` = (
 474               SELECT COUNT(*)
 475               FROM `import_records`
 476               WHERE `import_batch_id` = `import_batches`.`import_batch_id`
 477               )");
 478
 479     $dbh->do("DROP TABLE `marc_breeding`");
 480
 481     print "Upgrade to $DBversion done (import_batches et al. added)\n";
 482     SetVersion ($DBversion);
 483 }
 484
 485 $DBversion = "3.00.00.014";
 486 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 487     $dbh->do("ALTER TABLE subscription ADD lastbranch VARCHAR(4)");
 488     print "Upgrade to $DBversion done (userid index added)\n";
 489     SetVersion ($DBversion);
 490 }
 491
 492 $DBversion = "3.00.00.015";
 493 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 494     $dbh->do("CREATE TABLE `saved_sql` (
 495            `id` int(11) NOT NULL auto_increment,
 496            `borrowernumber` int(11) default NULL,
 497            `date_created` datetime default NULL,
 498            `last_modified` datetime default NULL,
 499            `savedsql` text,
 500            `last_run` datetime default NULL,
 501            `report_name` varchar(255) default NULL,
 502            `type` varchar(255) default NULL,
 503            `notes` text,
 504            PRIMARY KEY  (`id`),
 505            KEY boridx (`borrowernumber`)
 506         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;");
 507     $dbh->do("CREATE TABLE `saved_reports` (
 508            `id` int(11) NOT NULL auto_increment,
 509            `report_id` int(11) default NULL,
 510            `report` longtext,
 511            `date_run` datetime default NULL,
 512            PRIMARY KEY  (`id`)
 513         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;");
 514     print "Upgrade to $DBversion done (saved_sql and saved_reports added)\n";
 515     SetVersion ($DBversion);
 516 }
 517
 518 $DBversion = "3.00.00.016";
 519 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 520     $dbh->do(" CREATE TABLE reports_dictionary (
 521           id int(11) NOT NULL auto_increment,
 522           name varchar(255) default NULL,
 523           description text,
 524           date_created datetime default NULL,
 525           date_modified datetime default NULL,
 526           saved_sql text,
 527           area int(11) default NULL,
 528           PRIMARY KEY  (id)
 529         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 ");
 530     print "Upgrade to $DBversion done (reports_dictionary) added)\n";
 531     SetVersion ($DBversion);
 532 }
 533
 534 $DBversion = "3.00.00.017";
 535 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 536     $dbh->do("ALTER TABLE action_logs DROP PRIMARY KEY");
 537     $dbh->do("ALTER TABLE action_logs ADD KEY  timestamp (timestamp,user)");
 538     $dbh->do("ALTER TABLE action_logs ADD action_id INT(11) NOT NULL FIRST");
 539     $dbh->do("UPDATE action_logs SET action_id = if (\@a, \@a:=\@a+1, \@a:=1)");
 540     $dbh->do("ALTER TABLE action_logs MODIFY action_id INT(11) NOT NULL AUTO_INCREMENT PRIMARY KEY");
 541     print "Upgrade to $DBversion done (added column to action_logs)\n";
 542     SetVersion ($DBversion);
 543 }
 544
 545 $DBversion = "3.00.00.018";
 546 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 547     $dbh->do("ALTER TABLE `zebraqueue`
 548                     ADD `done` INT NOT NULL DEFAULT '0',
 549                     ADD `time` TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ;
 550             ");
 551     print "Upgrade to $DBversion done (adding timestamp and done columns to zebraque table to improve problem tracking) added)\n";
 552     SetVersion ($DBversion);
 553 }
 554
 555 $DBversion = "3.00.00.019";
 556 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 557     $dbh->do("ALTER TABLE biblio MODIFY biblionumber INT(11) NOT NULL AUTO_INCREMENT");
 558     $dbh->do("ALTER TABLE biblioitems MODIFY biblioitemnumber INT(11) NOT NULL AUTO_INCREMENT");
 559     $dbh->do("ALTER TABLE items MODIFY itemnumber INT(11) NOT NULL AUTO_INCREMENT");
 560     print "Upgrade to $DBversion done (made bib/item PKs auto_increment)\n";
 561     SetVersion ($DBversion);
 562 }
 563
 564 $DBversion = "3.00.00.020";
 565 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 566     $dbh->do("ALTER TABLE deleteditems
 567               DROP KEY `delitembarcodeidx`,
 568               ADD KEY `delitembarcodeidx` (`barcode`)");
 569     print "Upgrade to $DBversion done (dropped uniqueness of key on deleteditems.barcode)\n";
 570     SetVersion ($DBversion);
 571 }
 572
 573 $DBversion = "3.00.00.021";
 574 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 575     $dbh->do("ALTER TABLE items CHANGE homebranch homebranch VARCHAR(10)");
 576     $dbh->do("ALTER TABLE deleteditems CHANGE homebranch homebranch VARCHAR(10)");
 577     $dbh->do("ALTER TABLE statistics CHANGE branch branch VARCHAR(10)");
 578     $dbh->do("ALTER TABLE subscription CHANGE lastbranch lastbranch VARCHAR(10)");
 579     print "Upgrade to $DBversion done (extended missed branchcode columns to 10 chars)\n";
 580     SetVersion ($DBversion);
 581 }
 582
 583 $DBversion = "3.00.00.022";
 584 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 585     $dbh->do("ALTER TABLE items
 586                 ADD `damaged` tinyint(1) default NULL AFTER notforloan");
 587     $dbh->do("ALTER TABLE deleteditems
 588                 ADD `damaged` tinyint(1) default NULL AFTER notforloan");
 589     print "Upgrade to $DBversion done (adding damaged column to items table)\n";
 590     SetVersion ($DBversion);
 591 }
 592
 593 $DBversion = "3.00.00.023";
 594 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 595      $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type)
 596          VALUES ('yuipath','http://yui.yahooapis.com/2.3.1/build','Insert the path to YUI libraries','','free')");
 597     print "Upgrade to $DBversion done (adding new system preference for controlling YUI path)\n";
 598     SetVersion ($DBversion);
 599 }
 600 $DBversion = "3.00.00.024";
 601 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 602     $dbh->do("ALTER TABLE biblioitems CHANGE  itemtype itemtype VARCHAR(10)");
 603     print "Upgrade to $DBversion done (changing itemtype to (10))\n";
 604     SetVersion ($DBversion);
 605 }
 606
 607 $DBversion = "3.00.00.025";
 608 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 609     $dbh->do("ALTER TABLE items ADD COLUMN itype VARCHAR(10)");
 610     $dbh->do("ALTER TABLE deleteditems ADD COLUMN itype VARCHAR(10) AFTER uri");
 611     if(C4::Context->preference('item-level_itypes')){
 612         $dbh->do('update items,biblioitems set items.itype=biblioitems.itemtype where items.biblionumber=biblioitems.biblionumber and itype is null');
 613     }
 614     print "Upgrade to $DBversion done (reintroduce items.itype - fill from itemtype)\n ";
 615     SetVersion ($DBversion);
 616 }
 617
 618 $DBversion = "3.00.00.026";
 619 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 620     $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type)
 621        VALUES ('HomeOrHoldingBranch','homebranch','homebranch|holdingbranch','With independent branches turned on this decides whether to check the items holdingbranch or homebranch at circulatilon','choice')");
 622     print "Upgrade to $DBversion done (adding new system preference for choosing whether homebranch or holdingbranch is checked in circulation)\n";
 623     SetVersion ($DBversion);
 624 }
 625
 626 $DBversion = "3.00.00.027";
 627 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 628     $dbh->do("CREATE TABLE `marc_matchers` (
 629                 `matcher_id` int(11) NOT NULL auto_increment,
 630                 `code` varchar(10) NOT NULL default '',
 631                 `description` varchar(255) NOT NULL default '',
 632                 `record_type` varchar(10) NOT NULL default 'biblio',
 633                 `threshold` int(11) NOT NULL default 0,
 634                 PRIMARY KEY (`matcher_id`),
 635                 KEY `code` (`code`),
 636                 KEY `record_type` (`record_type`)
 637               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 638     $dbh->do("CREATE TABLE `matchpoints` (
 639                 `matcher_id` int(11) NOT NULL,
 640                 `matchpoint_id` int(11) NOT NULL auto_increment,
 641                 `search_index` varchar(30) NOT NULL default '',
 642                 `score` int(11) NOT NULL default 0,
 643                 PRIMARY KEY (`matchpoint_id`),
 644                 CONSTRAINT `matchpoints_ifbk_1` FOREIGN KEY (`matcher_id`)
 645                            REFERENCES `marc_matchers` (`matcher_id`) ON DELETE CASCADE ON UPDATE CASCADE
 646               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 647     $dbh->do("CREATE TABLE `matchpoint_components` (
 648                 `matchpoint_id` int(11) NOT NULL,
 649                 `matchpoint_component_id` int(11) NOT NULL auto_increment,
 650                 sequence int(11) NOT NULL default 0,
 651                 tag varchar(3) NOT NULL default '',
 652                 subfields varchar(40) NOT NULL default '',
 653                 offset int(4) NOT NULL default 0,
 654                 length int(4) NOT NULL default 0,
 655                 PRIMARY KEY (`matchpoint_component_id`),
 656                 KEY `by_sequence` (`matchpoint_id`, `sequence`),
 657                 CONSTRAINT `matchpoint_components_ifbk_1` FOREIGN KEY (`matchpoint_id`)
 658                            REFERENCES `matchpoints` (`matchpoint_id`) ON DELETE CASCADE ON UPDATE CASCADE
 659               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 660     $dbh->do("CREATE TABLE `matchpoint_component_norms` (
 661                 `matchpoint_component_id` int(11) NOT NULL,
 662                 `sequence`  int(11) NOT NULL default 0,
 663                 `norm_routine` varchar(50) NOT NULL default '',
 664                 KEY `matchpoint_component_norms` (`matchpoint_component_id`, `sequence`),
 665                 CONSTRAINT `matchpoint_component_norms_ifbk_1` FOREIGN KEY (`matchpoint_component_id`)
 666                            REFERENCES `matchpoint_components` (`matchpoint_component_id`) ON DELETE CASCADE ON UPDATE CASCADE
 667               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 668     $dbh->do("CREATE TABLE `matcher_matchpoints` (
 669                 `matcher_id` int(11) NOT NULL,
 670                 `matchpoint_id` int(11) NOT NULL,
 671                 CONSTRAINT `matcher_matchpoints_ifbk_1` FOREIGN KEY (`matcher_id`)
 672                            REFERENCES `marc_matchers` (`matcher_id`) ON DELETE CASCADE ON UPDATE CASCADE,
 673                 CONSTRAINT `matcher_matchpoints_ifbk_2` FOREIGN KEY (`matchpoint_id`)
 674                            REFERENCES `matchpoints` (`matchpoint_id`) ON DELETE CASCADE ON UPDATE CASCADE
 675               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 676     $dbh->do("CREATE TABLE `matchchecks` (
 677                 `matcher_id` int(11) NOT NULL,
 678                 `matchcheck_id` int(11) NOT NULL auto_increment,
 679                 `source_matchpoint_id` int(11) NOT NULL,
 680                 `target_matchpoint_id` int(11) NOT NULL,
 681                 PRIMARY KEY (`matchcheck_id`),
 682                 CONSTRAINT `matcher_matchchecks_ifbk_1` FOREIGN KEY (`matcher_id`)
 683                            REFERENCES `marc_matchers` (`matcher_id`) ON DELETE CASCADE ON UPDATE CASCADE,
 684                 CONSTRAINT `matcher_matchchecks_ifbk_2` FOREIGN KEY (`source_matchpoint_id`)
 685                            REFERENCES `matchpoints` (`matchpoint_id`) ON DELETE CASCADE ON UPDATE CASCADE,
 686                 CONSTRAINT `matcher_matchchecks_ifbk_3` FOREIGN KEY (`target_matchpoint_id`)
 687                            REFERENCES `matchpoints` (`matchpoint_id`) ON DELETE CASCADE ON UPDATE CASCADE
 688               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 689     print "Upgrade to $DBversion done (added C4::Matcher serialization tables)\n ";
 690     SetVersion ($DBversion);
 691 }
 692
 693 $DBversion = "3.00.00.028";
 694 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 695     $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type)
 696        VALUES ('canreservefromotherbranches','1','','With Independent branches on, can a user from one library reserve an item from another library','YesNo')");
 697     print "Upgrade to $DBversion done (adding new system preference for changing reserve/holds behaviour with independent branches)\n";
 698     SetVersion ($DBversion);
 699 }
 700
 701
 702 $DBversion = "3.00.00.029";
 703 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 704     $dbh->do("ALTER TABLE `import_batches` ADD `matcher_id` int(11) NULL AFTER `import_batch_id`");
 705     print "Upgrade to $DBversion done (adding matcher_id to import_batches)\n";
 706     SetVersion ($DBversion);
 707 }
 708
 709 $DBversion = "3.00.00.030";
 710 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 711     $dbh->do("
 712 CREATE TABLE services_throttle (
 713   service_type varchar(10) NOT NULL default '',
 714   service_count varchar(45) default NULL,
 715   PRIMARY KEY  (service_type)
 716 ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
 717 ");
 718     $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type)
 719        VALUES ('FRBRizeEditions',0,'','If ON, Koha will query one or more ISBN web services for associated ISBNs and display an Editions tab on the details pages','YesNo')");
 720  $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type)
 721        VALUES ('XISBN',0,'','Use with FRBRizeEditions. If ON, Koha will use the OCLC xISBN web service in the Editions tab on the detail pages. See: http://www.worldcat.org/affiliate/webservices/xisbn/app.jsp','YesNo')");
 722  $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type)
 723        VALUES ('OCLCAffiliateID','','','Use with FRBRizeEditions and XISBN. You can sign up for an AffiliateID here: http://www.worldcat.org/wcpa/do/AffiliateUserServices?method=initSelfRegister','free')");
 724  $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type)
 725        VALUES ('XISBNDailyLimit',499,'','The xISBN Web service is free for non-commercial use when usage does not exceed 500 requests per day','free')");
 726  $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type)
 727        VALUES ('PINESISBN',0,'','Use with FRBRizeEditions. If ON, Koha will use PINES OISBN web service in the Editions tab on the detail pages.','YesNo')");
 728  $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type)
 729        VALUES ('ThingISBN',0,'','Use with FRBRizeEditions. If ON, Koha will use the ThingISBN web service in the Editions tab on the detail pages.','YesNo')");
 730     print "Upgrade to $DBversion done (adding services throttle table and sysprefs for xISBN)\n";
 731     SetVersion ($DBversion);
 732 }
 733
 734 $DBversion = "3.00.00.031";
 735 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 736
 737 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('QueryStemming',1,'If ON, enables query stemming',NULL,'YesNo')");
 738 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('QueryFuzzy',1,'If ON, enables fuzzy option for searches',NULL,'YesNo')");
 739 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('QueryWeightFields',1,'If ON, enables field weighting',NULL,'YesNo')");
 740 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('WebBasedSelfCheck',0,'If ON, enables the web-based self-check system',NULL,'YesNo')");
 741 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('numSearchResults',20,'Specify the maximum number of results to display on a page of results',NULL,'free')");
 742 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACnumSearchResults',20,'Specify the maximum number of results to display on a page of results',NULL,'free')");
 743 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('maxItemsInSearchResults',20,'Specify the maximum number of items to display for each result on a page of results',NULL,'free')");
 744 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('defaultSortField',NULL,'Specify the default field used for sorting','relevance|popularity|call_number|pubdate|acqdate|title|author','Choice')");
 745 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('defaultSortOrder',NULL,'Specify the default sort order','asc|dsc|az|za','Choice')");
 746 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACdefaultSortField',NULL,'Specify the default field used for sorting','relevance|popularity|call_number|pubdate|acqdate|title|author','Choice')");
 747 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACdefaultSortOrder',NULL,'Specify the default sort order','asc|dsc|za|az','Choice')");
 748 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('staffClientBaseURL','','Specify the base URL of the staff client',NULL,'free')");
 749 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('minPasswordLength',3,'Specify the minimum length of a patron/staff password',NULL,'free')");
 750 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('noItemTypeImages',0,'If ON, disables item-type images',NULL,'YesNo')");
 751 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('emailLibrarianWhenHoldIsPlaced',0,'If ON, emails the librarian whenever a hold is placed',NULL,'YesNo')");
 752 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('holdCancelLength','','Specify how many days before a hold is canceled',NULL,'free')");
 753 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('libraryAddress','','The address to use for printing receipts, overdues, etc. if different than physical address',NULL,'free')");
 754 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('finesMode','test','Choose the fines mode, test or production','test|production','Choice')");
 755 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('globalDueDate','','If set, allows a global static due date for all checkouts',NULL,'free')");
 756 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('itemBarcodeInputFilter','','If set, allows specification of a item barcode input filter','cuecat','Choice')");
 757 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('singleBranchMode',0,'Operate in Single-branch mode, hide branch selection in the OPAC',NULL,'YesNo')");
 758 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('URLLinkText','','Text to display as the link anchor in the OPAC',NULL,'free')");
 759 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACSubscriptionDisplay','economical','Specify how to display subscription information in the OPAC','economical|off|full','Choice')");
 760 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACDisplayExtendedSubInfo',1,'If ON, extended subscription information is displayed in the OPAC',NULL,'YesNo')");
 761 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACViewOthersSuggestions',0,'If ON, allows all suggestions to be displayed in the OPAC',NULL,'YesNo')");
 762 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACURLOpenInNewWindow',0,'If ON, URLs in the OPAC open in a new window',NULL,'YesNo')");
 763 $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACUserCSS',0,'Add CSS to be included in the OPAC',NULL,'free')");
 764
 765     print "Upgrade to $DBversion done (adding additional system preference)\n";
 766     SetVersion ($DBversion);
 767 }
 768
 769 $DBversion = "3.00.00.032";
 770 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 771     $dbh->do("UPDATE `marc_subfield_structure` SET `kohafield` = 'items.wthdrawn' WHERE `kohafield` = 'items.withdrawn'");
 772     print "Upgrade to $DBversion done (fixed MARC framework references to items.withdrawn)\n";
 773     SetVersion ($DBversion);
 774 }
 775
 776 $DBversion = "3.00.00.033";
 777 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 778     $dbh->do("INSERT INTO `userflags` VALUES(17,'staffaccess','Modify login / permissions for staff users',0)");
 779     print "Upgrade to $DBversion done (Adding permissions flag for staff member access modification.  )\n";
 780     SetVersion ($DBversion);
 781 }
 782
 783 $DBversion = "3.00.00.034";
 784 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 785     $dbh->do("ALTER TABLE `virtualshelves` ADD COLUMN `sortfield` VARCHAR(16) ");
 786     print "Upgrade to $DBversion done (Adding sortfield for Virtual Shelves.  )\n";
 787     SetVersion ($DBversion);
 788 }
 789
 790 $DBversion = "3.00.00.035";
 791 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 792     $dbh->do("UPDATE marc_subfield_structure
 793               SET authorised_value = 'cn_source'
 794               WHERE kohafield IN ('items.cn_source', 'biblioitems.cn_source')
 795               AND (authorised_value is NULL OR authorised_value = '')");
 796     print "Upgrade to $DBversion done (MARC frameworks: make classification source a drop-down)\n";
 797     SetVersion ($DBversion);
 798 }
 799
 800 $DBversion = "3.00.00.036";
 801 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 802     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACItemsResultsDisplay','statuses','statuses : show only the status of items in result list. itemdisplay : show full location of items (branch+location+callnumber) as in staff interface','statuses|itemdetails','Choice');");
 803     print "Upgrade to $DBversion done (OPACItemsResultsDisplay systempreference added)\n";
 804     SetVersion ($DBversion);
 805 }
 806
 807 $DBversion = "3.00.00.037";
 808 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 809     $dbh->do("ALTER TABLE `borrowers` ADD COLUMN `altcontactfirstname` varchar(255)");
 810     $dbh->do("ALTER TABLE `borrowers` ADD COLUMN `altcontactsurname` varchar(255)");
 811     $dbh->do("ALTER TABLE `borrowers` ADD COLUMN `altcontactaddress1` varchar(255)");
 812     $dbh->do("ALTER TABLE `borrowers` ADD COLUMN `altcontactaddress2` varchar(255)");
 813     $dbh->do("ALTER TABLE `borrowers` ADD COLUMN `altcontactaddress3` varchar(255)");
 814     $dbh->do("ALTER TABLE `borrowers` ADD COLUMN `altcontactzipcode` varchar(50)");
 815     $dbh->do("ALTER TABLE `borrowers` ADD COLUMN `altcontactphone` varchar(50)");
 816     print "Upgrade to $DBversion done (Adding Alternative Contact Person information to borrowers table)\n";
 817     SetVersion ($DBversion);
 818 }
 819
 820 $DBversion = "3.00.00.038";
 821 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 822     $dbh->do("UPDATE `systempreferences` set explanation='Choose the fines mode, off, test (emails admin report) or production (accrue overdue fines).  Requires fines cron script' , options='off|test|production' where variable='finesMode'");
 823     $dbh->do("DELETE FROM `systempreferences` WHERE variable='hideBiblioNumber'");
 824     print "Upgrade to $DBversion done ('alter finesMode systempreference, remove superfluous syspref.')\n";
 825     SetVersion ($DBversion);
 826 }
 827
 828 $DBversion = "3.00.00.039";
 829 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 830     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('uppercasesurnames',0,'If ON, surnames are converted to upper case in patron entry form',NULL,'YesNo')");
 831     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('CircControl','ItemHomeLibrary','Specify the agency that controls the circulation and fines policy','PickupLibrary|PatronLibrary|ItemHomeLibrary','Choice')");
 832     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('finesCalendar','noFinesWhenClosed','Specify whether to use the Calendar in calculating duedates and fines','ignoreCalendar|noFinesWhenClosed','Choice')");
 833     # $dbh->do("DELETE FROM `systempreferences` WHERE variable='HomeOrHoldingBranch'"); # Bug #2752
 834     print "Upgrade to $DBversion done ('add circ sysprefs CircControl, finesCalendar, and uppercasesurnames, and delete HomeOrHoldingBranch.')\n";
 835     SetVersion ($DBversion);
 836 }
 837
 838 $DBversion = "3.00.00.040";
 839 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 840         $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('previousIssuesDefaultSortOrder','asc','Specify the sort order of Previous Issues on the circulation page','asc|desc','Choice')");
 841         $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('todaysIssuesDefaultSortOrder','desc','Specify the sort order of Todays Issues on the circulation page','asc|desc','Choice')");
 842         print "Upgrade to $DBversion done ('add circ sysprefs todaysIssuesDefaultSortOrder and previousIssuesDefaultSortOrder.')\n";
 843     SetVersion ($DBversion);
 844 }
 845
 846
 847 $DBversion = "3.00.00.041";
 848 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 849     # Strictly speaking it is not necessary to explicitly change
 850     # NULL values to 0, because the ALTER TABLE statement will do that.
 851     # However, setting them first avoids a warning.
 852     $dbh->do("UPDATE items SET notforloan = 0 WHERE notforloan IS NULL");
 853     $dbh->do("UPDATE items SET damaged = 0 WHERE damaged IS NULL");
 854     $dbh->do("UPDATE items SET itemlost = 0 WHERE itemlost IS NULL");
 855     $dbh->do("UPDATE items SET wthdrawn = 0 WHERE wthdrawn IS NULL");
 856     $dbh->do("ALTER TABLE items
 857                 MODIFY notforloan tinyint(1) NOT NULL default 0,
 858                 MODIFY damaged    tinyint(1) NOT NULL default 0,
 859                 MODIFY itemlost   tinyint(1) NOT NULL default 0,
 860                 MODIFY wthdrawn   tinyint(1) NOT NULL default 0");
 861     $dbh->do("UPDATE deleteditems SET notforloan = 0 WHERE notforloan IS NULL");
 862     $dbh->do("UPDATE deleteditems SET damaged = 0 WHERE damaged IS NULL");
 863     $dbh->do("UPDATE deleteditems SET itemlost = 0 WHERE itemlost IS NULL");
 864     $dbh->do("UPDATE deleteditems SET wthdrawn = 0 WHERE wthdrawn IS NULL");
 865     $dbh->do("ALTER TABLE deleteditems
 866                 MODIFY notforloan tinyint(1) NOT NULL default 0,
 867                 MODIFY damaged    tinyint(1) NOT NULL default 0,
 868                 MODIFY itemlost   tinyint(1) NOT NULL default 0,
 869                 MODIFY wthdrawn   tinyint(1) NOT NULL default 0");
 870         print "Upgrade to $DBversion done (disallow NULL in several item status columns)\n";
 871     SetVersion ($DBversion);
 872 }
 873
 874 $DBversion = "3.00.00.04";
 875 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 876     $dbh->do("ALTER TABLE aqbooksellers CHANGE name name mediumtext NOT NULL");
 877         print "Upgrade to $DBversion done (disallow NULL in aqbooksellers.name; part of fix for bug 1251)\n";
 878     SetVersion ($DBversion);
 879 }
 880
 881 $DBversion = "3.00.00.043";
 882 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 883     $dbh->do("ALTER TABLE `currency` ADD `symbol` varchar(5) default NULL AFTER currency, ADD `timestamp` timestamp NOT NULL default CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP AFTER symbol");
 884         print "Upgrade to $DBversion done (currency table: add symbol and timestamp columns)\n";
 885     SetVersion ($DBversion);
 886 }
 887
 888 $DBversion = "3.00.00.044";
 889 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 890     $dbh->do("ALTER TABLE deletedborrowers
 891   ADD `altcontactfirstname` varchar(255) default NULL,
 892   ADD `altcontactsurname` varchar(255) default NULL,
 893   ADD `altcontactaddress1` varchar(255) default NULL,
 894   ADD `altcontactaddress2` varchar(255) default NULL,
 895   ADD `altcontactaddress3` varchar(255) default NULL,
 896   ADD `altcontactzipcode` varchar(50) default NULL,
 897   ADD `altcontactphone` varchar(50) default NULL
 898   ");
 899   $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES
 900 ('OPACBaseURL',NULL,'Specify the Base URL of the OPAC, e.g., opac.mylibrary.com, the http:// will be added automatically by Koha.',NULL,'Free'),
 901 ('language','en','Set the default language in the staff client.',NULL,'Languages'),
 902 ('QueryAutoTruncate',1,'If ON, query truncation is enabled by default',NULL,'YesNo'),
 903 ('QueryRemoveStopwords',0,'If ON, stopwords listed in the Administration area will be removed from queries',NULL,'YesNo')
 904   ");
 905         print "Upgrade to $DBversion done (syncing deletedborrowers table with borrowers table)\n";
 906     SetVersion ($DBversion);
 907 }
 908
 909 #-- http://www.w3.org/International/articles/language-tags/
 910
 911 #-- RFC4646
 912 $DBversion = "3.00.00.045";
 913 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 914     $dbh->do("
 915 CREATE TABLE language_subtag_registry (
 916         subtag varchar(25),
 917         type varchar(25), -- language-script-region-variant-extension-privateuse
 918         description varchar(25), -- only one of the possible descriptions for ease of reference, see language_descriptions for the complete list
 919         added date,
 920         KEY `subtag` (`subtag`)
 921 ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 922
 923 #-- TODO: add suppress_scripts
 924 #-- this maps three letter codes defined in iso639.2 back to their
 925 #-- two letter equivilents in rfc4646 (LOC maintains iso639+)
 926  $dbh->do("CREATE TABLE language_rfc4646_to_iso639 (
 927         rfc4646_subtag varchar(25),
 928         iso639_2_code varchar(25),
 929         KEY `rfc4646_subtag` (`rfc4646_subtag`)
 930 ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 931
 932  $dbh->do("CREATE TABLE language_descriptions (
 933         subtag varchar(25),
 934         type varchar(25),
 935         lang varchar(25),
 936         description varchar(255),
 937         KEY `lang` (`lang`)
 938 ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 939
 940 #-- bi-directional support, keyed by script subcode
 941  $dbh->do("CREATE TABLE language_script_bidi (
 942         rfc4646_subtag varchar(25), -- script subtag, Arab, Hebr, etc.
 943         bidi varchar(3), -- rtl ltr
 944         KEY `rfc4646_subtag` (`rfc4646_subtag`)
 945 ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 946
 947 #-- BIDI Stuff, Arabic and Hebrew
 948  $dbh->do("INSERT INTO language_script_bidi(rfc4646_subtag,bidi)
 949 VALUES( 'Arab', 'rtl')");
 950  $dbh->do("INSERT INTO language_script_bidi(rfc4646_subtag,bidi)
 951 VALUES( 'Hebr', 'rtl')");
 952
 953 #-- TODO: need to map language subtags to script subtags for detection
 954 #-- of bidi when script is not specified (like ar, he)
 955  $dbh->do("CREATE TABLE language_script_mapping (
 956         language_subtag varchar(25),
 957         script_subtag varchar(25),
 958         KEY `language_subtag` (`language_subtag`)
 959 ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 960
 961 #-- Default mappings between script and language subcodes
 962  $dbh->do("INSERT INTO language_script_mapping(language_subtag,script_subtag)
 963 VALUES( 'ar', 'Arab')");
 964  $dbh->do("INSERT INTO language_script_mapping(language_subtag,script_subtag)
 965 VALUES( 'he', 'Hebr')");
 966
 967         print "Upgrade to $DBversion done (adding language subtag registry and basic BiDi support NOTE: You should import the subtag registry SQL)\n";
 968     SetVersion ($DBversion);
 969 }
 970
 971 $DBversion = "3.00.00.046";
 972 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 973     $dbh->do("ALTER TABLE `subscription` CHANGE `numberlength` `numberlength` int(11) default '0' ,
 974                  CHANGE `weeklength` `weeklength` int(11) default '0'");
 975     $dbh->do("CREATE TABLE `serialitems` (`serialid` int(11) NOT NULL, `itemnumber` int(11) NOT NULL, UNIQUE KEY `serialididx` (`serialid`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
 976     $dbh->do("INSERT INTO `serialitems` SELECT `serialid`,`itemnumber` from serial where NOT ISNULL(itemnumber) && itemnumber <> '' && itemnumber NOT LIKE '%,%'");
 977         print "Upgrade to $DBversion done (Add serialitems table to link serial issues to items. )\n";
 978     SetVersion ($DBversion);
 979 }
 980
 981 $DBversion = "3.00.00.047";
 982 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 983     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OpacRenewalAllowed',0,'If ON, users can renew their issues directly from their OPAC account',NULL,'YesNo');");
 984         print "Upgrade to $DBversion done ( Added OpacRenewalAllowed syspref )\n";
 985     SetVersion ($DBversion);
 986 }
 987
 988 $DBversion = "3.00.00.048";
 989 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 990     $dbh->do("ALTER TABLE `items` ADD `more_subfields_xml` longtext default NULL AFTER `itype`");
 991         print "Upgrade to $DBversion done (added items.more_subfields_xml)\n";
 992     SetVersion ($DBversion);
 993 }
 994
 995 $DBversion = "3.00.00.049";
 996 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
 997         $dbh->do("ALTER TABLE `z3950servers` ADD `encoding` text default NULL AFTER type ");
 998         print "Upgrade to $DBversion done ( Added encoding field to z3950servers table )\n";
 999     SetVersion ($DBversion);
1000 }
1001
1002 $DBversion = "3.00.00.050";
1003 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1004     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OpacHighlightedWords','0','If Set, query matched terms are highlighted in OPAC',NULL,'YesNo');");
1005         print "Upgrade to $DBversion done ( Added OpacHighlightedWords syspref )\n";
1006     SetVersion ($DBversion);
1007 }
1008
1009 $DBversion = "3.00.00.051";
1010 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1011     $dbh->do("UPDATE systempreferences SET explanation = 'Define the current theme for the OPAC interface.' WHERE variable = 'opacthemes';");
1012         print "Upgrade to $DBversion done ( Corrected opacthemes explanation. )\n";
1013     SetVersion ($DBversion);
1014 }
1015
1016 $DBversion = "3.00.00.052";
1017 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1018     $dbh->do("ALTER TABLE `deleteditems` ADD `more_subfields_xml` LONGTEXT DEFAULT NULL AFTER `itype`");
1019         print "Upgrade to $DBversion done ( Adding missing column to deleteditems table. )\n";
1020     SetVersion ($DBversion);
1021 }
1022
1023 $DBversion = "3.00.00.053";
1024 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1025     $dbh->do("CREATE TABLE `printers_profile` (
1026             `prof_id` int(4) NOT NULL auto_increment,
1027             `printername` varchar(40) NOT NULL,
1028             `tmpl_id` int(4) NOT NULL,
1029             `paper_bin` varchar(20) NOT NULL,
1030             `offset_horz` float default NULL,
1031             `offset_vert` float default NULL,
1032             `creep_horz` float default NULL,
1033             `creep_vert` float default NULL,
1034             `unit` char(20) NOT NULL default 'POINT',
1035             PRIMARY KEY  (`prof_id`),
1036             UNIQUE KEY `printername` (`printername`,`tmpl_id`,`paper_bin`),
1037             CONSTRAINT `printers_profile_pnfk_1` FOREIGN KEY (`tmpl_id`) REFERENCES `labels_templates` (`tmpl_id`) ON DELETE CASCADE ON UPDATE CASCADE
1038             ) ENGINE=InnoDB DEFAULT CHARSET=utf8 ");
1039     $dbh->do("CREATE TABLE `labels_profile` (
1040             `tmpl_id` int(4) NOT NULL,
1041             `prof_id` int(4) NOT NULL,
1042             UNIQUE KEY `tmpl_id` (`tmpl_id`),
1043             UNIQUE KEY `prof_id` (`prof_id`)
1044             ) ENGINE=InnoDB DEFAULT CHARSET=utf8 ");
1045     print "Upgrade to $DBversion done ( Printer Profile tables added )\n";
1046     SetVersion ($DBversion);
1047 }
1048
1049 $DBversion = "3.00.00.054";
1050 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1051     $dbh->do("UPDATE systempreferences SET options = 'incremental|annual|hbyymmincr|OFF', explanation = 'Used to autogenerate a barcode: incremental will be of the form 1, 2, 3; annual of the form 2007-0001, 2007-0002; hbyymmincr of the form HB08010001 where HB = Home Branch' WHERE variable = 'autoBarcode';");
1052         print "Upgrade to $DBversion done ( Added another barcode autogeneration sequence to barcode.pl. )\n";
1053     SetVersion ($DBversion);
1054 }
1055
1056 $DBversion = "3.00.00.055";
1057 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1058     $dbh->do("ALTER TABLE `zebraqueue` ADD KEY `zebraqueue_lookup` (`server`, `biblio_auth_number`, `operation`, `done`)");
1059         print "Upgrade to $DBversion done ( Added index on zebraqueue. )\n";
1060     SetVersion ($DBversion);
1061 }
1062 $DBversion = "3.00.00.056";
1063 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1064     if (C4::Context->preference("marcflavour") eq 'UNIMARC') {
1065         $dbh->do("INSERT INTO `marc_subfield_structure` (`tagfield`, `tagsubfield`, `liblibrarian`, `libopac`, `repeatable`, `mandatory`, `kohafield`, `tab`, `authorised_value` , `authtypecode`, `value_builder`, `isurl`, `hidden`, `frameworkcode`, `seealso`, `link`, `defaultvalue`) VALUES ('995', 'v', 'Note sur le N° de périodique','Note sur le N° de périodique', 0, 0, 'items.enumchron', 10, '', '', '', 0, 0, '', '', '', NULL) ");
1066     } else {
1067         $dbh->do("INSERT INTO `marc_subfield_structure` (`tagfield`, `tagsubfield`, `liblibrarian`, `libopac`, `repeatable`, `mandatory`, `kohafield`, `tab`, `authorised_value` , `authtypecode`, `value_builder`, `isurl`, `hidden`, `frameworkcode`, `seealso`, `link`, `defaultvalue`) VALUES ('952', 'h', 'Serial Enumeration / chronology','Serial Enumeration / chronology', 0, 0, 'items.enumchron', 10, '', '', '', 0, 0, '', '', '', NULL) ");
1068     }
1069     $dbh->do("ALTER TABLE `items` ADD `enumchron` VARCHAR(80) DEFAULT NULL;");
1070     print "Upgrade to $DBversion done ( Added item.enumchron column, and framework map to 952h )\n";
1071     SetVersion ($DBversion);
1072 }
1073
1074 $DBversion = "3.00.00.057";
1075 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1076     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OAI-PMH','0','if ON, OAI-PMH server is enabled',NULL,'YesNo');");
1077     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OAI-PMH:archiveID','KOHA-OAI-TEST','OAI-PMH archive identification',NULL,'Free');");
1078     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OAI-PMH:MaxCount','50','OAI-PMH maximum number of records by answer to ListRecords and ListIdentifiers queries',NULL,'Integer');");
1079     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OAI-PMH:Set','SET,Experimental set\r\nSET:SUBSET,Experimental subset','OAI-PMH exported set, the set name is followed by a comma and a short description, one set by line',NULL,'Free');");
1080     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OAI-PMH:Subset',\"itemtype='BOOK'\",'Restrict answer to matching raws of the biblioitems table (experimental)',NULL,'Free');");
1081     SetVersion ($DBversion);
1082 }
1083
1084 $DBversion = "3.00.00.058";
1085 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1086     $dbh->do("ALTER TABLE `opac_news`
1087                 CHANGE `lang` `lang` VARCHAR( 25 )
1088                 CHARACTER SET utf8
1089                 COLLATE utf8_general_ci
1090                 NOT NULL default ''");
1091         print "Upgrade to $DBversion done ( lang field in opac_news made longer )\n";
1092     SetVersion ($DBversion);
1093 }
1094
1095 $DBversion = "3.00.00.059";
1096 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1097
1098     $dbh->do("CREATE TABLE IF NOT EXISTS `labels_templates` (
1099             `tmpl_id` int(4) NOT NULL auto_increment,
1100             `tmpl_code` char(100)  default '',
1101             `tmpl_desc` char(100) default '',
1102             `page_width` float default '0',
1103             `page_height` float default '0',
1104             `label_width` float default '0',
1105             `label_height` float default '0',
1106             `topmargin` float default '0',
1107             `leftmargin` float default '0',
1108             `cols` int(2) default '0',
1109             `rows` int(2) default '0',
1110             `colgap` float default '0',
1111             `rowgap` float default '0',
1112             `active` int(1) default NULL,
1113             `units` char(20)  default 'PX',
1114             `fontsize` int(4) NOT NULL default '3',
1115             PRIMARY KEY  (`tmpl_id`)
1116             ) ENGINE=InnoDB DEFAULT CHARSET=utf8;");
1117     $dbh->do("CREATE TABLE  IF NOT EXISTS `printers_profile` (
1118             `prof_id` int(4) NOT NULL auto_increment,
1119             `printername` varchar(40) NOT NULL,
1120             `tmpl_id` int(4) NOT NULL,
1121             `paper_bin` varchar(20) NOT NULL,
1122             `offset_horz` float default NULL,
1123             `offset_vert` float default NULL,
1124             `creep_horz` float default NULL,
1125             `creep_vert` float default NULL,
1126             `unit` char(20) NOT NULL default 'POINT',
1127             PRIMARY KEY  (`prof_id`),
1128             UNIQUE KEY `printername` (`printername`,`tmpl_id`,`paper_bin`),
1129             CONSTRAINT `printers_profile_pnfk_1` FOREIGN KEY (`tmpl_id`) REFERENCES `labels_templates` (`tmpl_id`) ON DELETE CASCADE ON UPDATE CASCADE
1130             ) ENGINE=InnoDB DEFAULT CHARSET=utf8 ");
1131     print "Upgrade to $DBversion done ( Added labels_templates table if it did not exist. )\n";
1132     SetVersion ($DBversion);
1133 }
1134
1135 $DBversion = "3.00.00.060";
1136 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1137     $dbh->do("CREATE TABLE IF NOT EXISTS `patronimage` (
1138             `cardnumber` varchar(16) NOT NULL,
1139             `mimetype` varchar(15) NOT NULL,
1140             `imagefile` mediumblob NOT NULL,
1141             PRIMARY KEY  (`cardnumber`),
1142             CONSTRAINT `patronimage_fk1` FOREIGN KEY (`cardnumber`) REFERENCES `borrowers` (`cardnumber`) ON DELETE CASCADE ON UPDATE CASCADE
1143             ) ENGINE=InnoDB DEFAULT CHARSET=utf8;");
1144         print "Upgrade to $DBversion done ( Added patronimage table. )\n";
1145     SetVersion ($DBversion);
1146 }
1147
1148 $DBversion = "3.00.00.061";
1149 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1150     $dbh->do("ALTER TABLE labels_templates ADD COLUMN font char(10) NOT NULL DEFAULT 'TR';");
1151         print "Upgrade to $DBversion done ( Added font column to labels_templates )\n";
1152     SetVersion ($DBversion);
1153 }
1154
1155 $DBversion = "3.00.00.062";
1156 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1157     $dbh->do("CREATE TABLE `old_issues` (
1158                 `borrowernumber` int(11) default NULL,
1159                 `itemnumber` int(11) default NULL,
1160                 `date_due` date default NULL,
1161                 `branchcode` varchar(10) default NULL,
1162                 `issuingbranch` varchar(18) default NULL,
1163                 `returndate` date default NULL,
1164                 `lastreneweddate` date default NULL,
1165                 `return` varchar(4) default NULL,
1166                 `renewals` tinyint(4) default NULL,
1167                 `timestamp` timestamp NOT NULL default CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP,
1168                 `issuedate` date default NULL,
1169                 KEY `old_issuesborridx` (`borrowernumber`),
1170                 KEY `old_issuesitemidx` (`itemnumber`),
1171                 KEY `old_bordate` (`borrowernumber`,`timestamp`),
1172                 CONSTRAINT `old_issues_ibfk_1` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`)
1173                     ON DELETE SET NULL ON UPDATE SET NULL,
1174                 CONSTRAINT `old_issues_ibfk_2` FOREIGN KEY (`itemnumber`) REFERENCES `items` (`itemnumber`)
1175                     ON DELETE SET NULL ON UPDATE SET NULL
1176                 ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
1177     $dbh->do("CREATE TABLE `old_reserves` (
1178                 `borrowernumber` int(11) default NULL,
1179                 `reservedate` date default NULL,
1180                 `biblionumber` int(11) default NULL,
1181                 `constrainttype` varchar(1) default NULL,
1182                 `branchcode` varchar(10) default NULL,
1183                 `notificationdate` date default NULL,
1184                 `reminderdate` date default NULL,
1185                 `cancellationdate` date default NULL,
1186                 `reservenotes` mediumtext,
1187                 `priority` smallint(6) default NULL,
1188                 `found` varchar(1) default NULL,
1189                 `timestamp` timestamp NOT NULL default CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP,
1190                 `itemnumber` int(11) default NULL,
1191                 `waitingdate` date default NULL,
1192                 KEY `old_reserves_borrowernumber` (`borrowernumber`),
1193                 KEY `old_reserves_biblionumber` (`biblionumber`),
1194                 KEY `old_reserves_itemnumber` (`itemnumber`),
1195                 KEY `old_reserves_branchcode` (`branchcode`),
1196                 CONSTRAINT `old_reserves_ibfk_1` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`)
1197                     ON DELETE SET NULL ON UPDATE SET NULL,
1198                 CONSTRAINT `old_reserves_ibfk_2` FOREIGN KEY (`biblionumber`) REFERENCES `biblio` (`biblionumber`)
1199                     ON DELETE SET NULL ON UPDATE SET NULL,
1200                 CONSTRAINT `old_reserves_ibfk_3` FOREIGN KEY (`itemnumber`) REFERENCES `items` (`itemnumber`)
1201                     ON DELETE SET NULL ON UPDATE SET NULL
1202                 ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
1203
1204     # move closed transactions to old_* tables
1205     $dbh->do("INSERT INTO old_issues SELECT * FROM issues WHERE returndate IS NOT NULL");
1206     $dbh->do("DELETE FROM issues WHERE returndate IS NOT NULL");
1207     $dbh->do("INSERT INTO old_reserves SELECT * FROM reserves WHERE cancellationdate IS NOT NULL OR found = 'F'");
1208     $dbh->do("DELETE FROM reserves WHERE cancellationdate IS NOT NULL OR found = 'F'");
1209
1210         print "Upgrade to $DBversion done ( Added old_issues and old_reserves tables )\n";
1211     SetVersion ($DBversion);
1212 }
1213
1214 $DBversion = "3.00.00.063";
1215 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1216     $dbh->do("ALTER TABLE deleteditems
1217                 CHANGE COLUMN booksellerid booksellerid MEDIUMTEXT DEFAULT NULL,
1218                 ADD COLUMN enumchron VARCHAR(80) DEFAULT NULL AFTER more_subfields_xml,
1219                 ADD COLUMN copynumber SMALLINT(6) DEFAULT NULL AFTER enumchron;");
1220     $dbh->do("ALTER TABLE items
1221                 CHANGE COLUMN booksellerid booksellerid MEDIUMTEXT,
1222                 ADD COLUMN copynumber SMALLINT(6) DEFAULT NULL AFTER enumchron;");
1223         print "Upgrade to $DBversion done ( Changed items.booksellerid and deleteditems.booksellerid to MEDIUMTEXT and added missing items.copynumber and deleteditems.copynumber to fix Bug 1927)\n";
1224     SetVersion ($DBversion);
1225 }
1226
1227 $DBversion = "3.00.00.064";
1228 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1229     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('AmazonLocale','US','Use to set the Locale of your Amazon.com Web Services','US|CA|DE|FR|JP|UK','Choice');");
1230     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('AWSAccessKeyID','','See:  http://aws.amazon.com','','free');");
1231     $dbh->do("DELETE FROM `systempreferences` WHERE variable='AmazonDevKey';");
1232     $dbh->do("DELETE FROM `systempreferences` WHERE variable='XISBNAmazonSimilarItems';");
1233     $dbh->do("DELETE FROM `systempreferences` WHERE variable='OPACXISBNAmazonSimilarItems';");
1234     print "Upgrade to $DBversion done (IMPORTANT: Upgrading to Amazon.com Associates Web Service 4.0 ) \n";
1235     SetVersion ($DBversion);
1236 }
1237
1238 $DBversion = "3.00.00.065";
1239 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1240     $dbh->do("CREATE TABLE `patroncards` (
1241                 `cardid` int(11) NOT NULL auto_increment,
1242                 `batch_id` varchar(10) NOT NULL default '1',
1243                 `borrowernumber` int(11) NOT NULL,
1244                 `timestamp` timestamp NOT NULL default CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP,
1245                 PRIMARY KEY  (`cardid`),
1246                 KEY `patroncards_ibfk_1` (`borrowernumber`),
1247                 CONSTRAINT `patroncards_ibfk_1` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE CASCADE ON UPDATE CASCADE
1248                 ) ENGINE=InnoDB DEFAULT CHARSET=utf8;");
1249     print "Upgrade to $DBversion done (Adding patroncards table for patroncards generation feature. ) \n";
1250     SetVersion ($DBversion);
1251 }
1252
1253 $DBversion = "3.00.00.066";
1254 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1255     $dbh->do("ALTER TABLE `virtualshelfcontents` MODIFY `dateadded` timestamp NOT NULL
1256 DEFAULT CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP;
1257 ");
1258     print "Upgrade to $DBversion done (fix for bug 1873: virtualshelfcontents dateadded column empty. ) \n";
1259     SetVersion ($DBversion);
1260 }
1261
1262 $DBversion = "3.00.00.067";
1263 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1264     $dbh->do("UPDATE systempreferences SET explanation = 'Enable patron images for the Staff Client', type = 'YesNo' WHERE variable = 'patronimages'");
1265     print "Upgrade to $DBversion done (Updating patronimages syspref to reflect current kohastructure.sql. ) \n";
1266     SetVersion ($DBversion);
1267 }
1268
1269 $DBversion = "3.00.00.068";
1270 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1271     $dbh->do("CREATE TABLE `permissions` (
1272                 `module_bit` int(11) NOT NULL DEFAULT 0,
1273                 `code` varchar(30) DEFAULT NULL,
1274                 `description` varchar(255) DEFAULT NULL,
1275                 PRIMARY KEY  (`module_bit`, `code`),
1276                 CONSTRAINT `permissions_ibfk_1` FOREIGN KEY (`module_bit`) REFERENCES `userflags` (`bit`)
1277                     ON DELETE CASCADE ON UPDATE CASCADE
1278               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
1279     $dbh->do("CREATE TABLE `user_permissions` (
1280                 `borrowernumber` int(11) NOT NULL DEFAULT 0,
1281                 `module_bit` int(11) NOT NULL DEFAULT 0,
1282                 `code` varchar(30) DEFAULT NULL,
1283                 CONSTRAINT `user_permissions_ibfk_1` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`)
1284                     ON DELETE CASCADE ON UPDATE CASCADE,
1285                 CONSTRAINT `user_permissions_ibfk_2` FOREIGN KEY (`module_bit`, `code`)
1286                     REFERENCES `permissions` (`module_bit`, `code`)
1287                     ON DELETE CASCADE ON UPDATE CASCADE
1288               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
1289
1290     $dbh->do("INSERT INTO permissions (module_bit, code, description) VALUES
1291     (13, 'edit_news', 'Write news for the OPAC and staff interfaces'),
1292     (13, 'label_creator', 'Create printable labels and barcodes from catalog and patron data'),
1293     (13, 'edit_calendar', 'Define days when the library is closed'),
1294     (13, 'moderate_comments', 'Moderate patron comments'),
1295     (13, 'edit_notices', 'Define notices'),
1296     (13, 'edit_notice_status_triggers', 'Set notice/status triggers for overdue items'),
1297     (13, 'view_system_logs', 'Browse the system logs'),
1298     (13, 'inventory', 'Perform inventory (stocktaking) of your catalogue'),
1299     (13, 'stage_marc_import', 'Stage MARC records into the reservoir'),
1300     (13, 'manage_staged_marc', 'Managed staged MARC records, including completing and reversing imports'),
1301     (13, 'export_catalog', 'Export bibliographic and holdings data'),
1302     (13, 'import_patrons', 'Import patron data'),
1303     (13, 'delete_anonymize_patrons', 'Delete old borrowers and anonymize circulation history (deletes borrower reading history)'),
1304     (13, 'batch_upload_patron_images', 'Upload patron images in batch or one at a time'),
1305     (13, 'schedule_tasks', 'Schedule tasks to run')");
1306
1307     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('GranularPermissions','0','Use detailed staff user permissions',NULL,'YesNo')");
1308
1309     print "Upgrade to $DBversion done (adding permissions and user_permissions tables and GranularPermissions syspref) \n";
1310     SetVersion ($DBversion);
1311 }
1312 $DBversion = "3.00.00.069";
1313 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1314     $dbh->do("ALTER TABLE labels_conf CHANGE COLUMN class classification int(1) DEFAULT NULL;");
1315         print "Upgrade to $DBversion done ( Correcting columname in labels_conf )\n";
1316     SetVersion ($DBversion);
1317 }
1318
1319 $DBversion = "3.00.00.070";
1320 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1321     $sth = $dbh->prepare("SELECT value FROM systempreferences WHERE variable='yuipath'");
1322     $sth->execute;
1323     my ($value) = $sth->fetchrow;
1324     $value =~ s/2.3.1/2.5.1/;
1325     $dbh->do("UPDATE systempreferences SET value='$value' WHERE variable='yuipath';");
1326         print "Update yuipath syspref to 2.5.1 if necessary\n";
1327     SetVersion ($DBversion);
1328 }
1329
1330 $DBversion = "3.00.00.071";
1331 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1332     $dbh->do(" ALTER TABLE `subscription` ADD `serialsadditems` TINYINT( 1 ) NOT NULL DEFAULT '0';");
1333     # fill the new field with the previous systempreference value, then drop the syspref
1334     my $sth = $dbh->prepare("SELECT value FROM systempreferences WHERE variable='serialsadditems'");
1335     $sth->execute;
1336     my ($serialsadditems) = $sth->fetchrow();
1337     $dbh->do("UPDATE subscription SET serialsadditems=$serialsadditems");
1338     $dbh->do("DELETE FROM systempreferences WHERE variable='serialsadditems'");
1339     print "Upgrade to $DBversion done ( moving serialsadditems from syspref to subscription )\n";
1340     SetVersion ($DBversion);
1341 }
1342
1343 $DBversion = "3.00.00.072";
1344 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1345     $dbh->do("ALTER TABLE labels_conf ADD COLUMN formatstring mediumtext DEFAULT NULL AFTER printingtype");
1346         print "Upgrade to $DBversion done ( Adding format string to labels generator. )\n";
1347     SetVersion ($DBversion);
1348 }
1349
1350 $DBversion = "3.00.00.073";
1351 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1352         $dbh->do("DROP TABLE IF EXISTS `tags_all`;");
1353         $dbh->do(q#
1354         CREATE TABLE `tags_all` (
1355           `tag_id`         int(11) NOT NULL auto_increment,
1356           `borrowernumber` int(11) NOT NULL,
1357           `biblionumber`   int(11) NOT NULL,
1358           `term`      varchar(255) NOT NULL,
1359           `language`       int(4) default NULL,
1360           `date_created` datetime  NOT NULL,
1361           PRIMARY KEY  (`tag_id`),
1362           KEY `tags_borrowers_fk_1` (`borrowernumber`),
1363           KEY `tags_biblionumber_fk_1` (`biblionumber`),
1364           CONSTRAINT `tags_borrowers_fk_1` FOREIGN KEY (`borrowernumber`)
1365                 REFERENCES `borrowers` (`borrowernumber`) ON DELETE CASCADE ON UPDATE CASCADE,
1366           CONSTRAINT `tags_biblionumber_fk_1` FOREIGN KEY (`biblionumber`)
1367                 REFERENCES `biblio`     (`biblionumber`)  ON DELETE CASCADE ON UPDATE CASCADE
1368         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
1369         #);
1370         $dbh->do("DROP TABLE IF EXISTS `tags_approval`;");
1371         $dbh->do(q#
1372         CREATE TABLE `tags_approval` (
1373           `term`   varchar(255) NOT NULL,
1374           `approved`     int(1) NOT NULL default '0',
1375           `date_approved` datetime       default NULL,
1376           `approved_by` int(11)          default NULL,
1377           `weight_total` int(9) NOT NULL default '1',
1378           PRIMARY KEY  (`term`),
1379           KEY `tags_approval_borrowers_fk_1` (`approved_by`),
1380           CONSTRAINT `tags_approval_borrowers_fk_1` FOREIGN KEY (`approved_by`)
1381                 REFERENCES `borrowers` (`borrowernumber`) ON DELETE CASCADE ON UPDATE CASCADE
1382         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
1383         #);
1384         $dbh->do("DROP TABLE IF EXISTS `tags_index`;");
1385         $dbh->do(q#
1386         CREATE TABLE `tags_index` (
1387           `term`    varchar(255) NOT NULL,
1388           `biblionumber` int(11) NOT NULL,
1389           `weight`        int(9) NOT NULL default '1',
1390           PRIMARY KEY  (`term`,`biblionumber`),
1391           KEY `tags_index_biblionumber_fk_1` (`biblionumber`),
1392           CONSTRAINT `tags_index_term_fk_1` FOREIGN KEY (`term`)
1393                 REFERENCES `tags_approval` (`term`)  ON DELETE CASCADE ON UPDATE CASCADE,
1394           CONSTRAINT `tags_index_biblionumber_fk_1` FOREIGN KEY (`biblionumber`)
1395                 REFERENCES `biblio` (`biblionumber`) ON DELETE CASCADE ON UPDATE CASCADE
1396         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
1397         #);
1398         $dbh->do(q#
1399         INSERT INTO `systempreferences` VALUES
1400                 ('BakerTaylorBookstoreURL','','','URL template for \"My Libary Bookstore\" links, to which the \"key\" value is appended, and \"https://\" is prepended.  It should include your hostname and \"Parent Number\".  Make this variable empty to turn MLB links off.  Example: ocls.mylibrarybookstore.com/MLB/actions/searchHandler.do?nextPage=bookDetails&parentNum=10923&key=',''),
1401                 ('BakerTaylorEnabled','0','','Enable or disable all Baker & Taylor features.','YesNo'),
1402                 ('BakerTaylorPassword','','','Baker & Taylor Password for Content Cafe (external content)','Textarea'),
1403                 ('BakerTaylorUsername','','','Baker & Taylor Username for Content Cafe (external content)','Textarea'),
1404                 ('TagsEnabled','1','','Enables or disables all tagging features.  This is the main switch for tags.','YesNo'),
1405                 ('TagsExternalDictionary',NULL,'','Path on server to local ispell executable, used to set $Lingua::Ispell::path  This dictionary is used as a \"whitelist\" of pre-allowed tags.',''),
1406                 ('TagsInputOnDetail','1','','Allow users to input tags from the detail page.',         'YesNo'),
1407                 ('TagsInputOnList',  '0','','Allow users to input tags from the search results list.', 'YesNo'),
1408                 ('TagsModeration',  NULL,'','Require tags from patrons to be approved before becoming visible.','YesNo'),
1409                 ('TagsShowOnDetail','10','','Number of tags to display on detail page.  0 is off.',        'Integer'),
1410                 ('TagsShowOnList',   '6','','Number of tags to display on search results list.  0 is off.','Integer')
1411         #);
1412         print "Upgrade to $DBversion done (Baker/Taylor,Tags: sysprefs and tables (tags_all, tags_index, tags_approval)) \n";
1413         SetVersion ($DBversion);
1414 }
1415
1416 $DBversion = "3.00.00.074";
1417 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1418     $dbh->do( q(update itemtypes set imageurl = concat( 'npl/', imageurl )
1419                   where imageurl not like 'http%'
1420                     and imageurl is not NULL
1421                     and imageurl != '') );
1422     print "Upgrade to $DBversion done (updating imagetype.imageurls to reflect new icon locations.)\n";
1423     SetVersion ($DBversion);
1424 }
1425
1426 $DBversion = "3.00.00.075";
1427 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1428     $dbh->do( q(alter table authorised_values add imageurl varchar(200) default NULL) );
1429     print "Upgrade to $DBversion done (adding imageurl field to authorised_values table)\n";
1430     SetVersion ($DBversion);
1431 }
1432
1433 $DBversion = "3.00.00.076";
1434 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1435     $dbh->do("ALTER TABLE import_batches
1436               ADD COLUMN nomatch_action enum('create_new', 'ignore') NOT NULL default 'create_new' AFTER overlay_action");
1437     $dbh->do("ALTER TABLE import_batches
1438               ADD COLUMN item_action enum('always_add', 'add_only_for_matches', 'add_only_for_new', 'ignore')
1439                   NOT NULL default 'always_add' AFTER nomatch_action");
1440     $dbh->do("ALTER TABLE import_batches
1441               MODIFY overlay_action  enum('replace', 'create_new', 'use_template', 'ignore')
1442                   NOT NULL default 'create_new'");
1443     $dbh->do("ALTER TABLE import_records
1444               MODIFY status  enum('error', 'staged', 'imported', 'reverted', 'items_reverted',
1445                                   'ignored') NOT NULL default 'staged'");
1446     $dbh->do("ALTER TABLE import_items
1447               MODIFY status enum('error', 'staged', 'imported', 'reverted', 'ignored') NOT NULL default 'staged'");
1448
1449         print "Upgrade to $DBversion done (changes to import_batches and import_records)\n";
1450         SetVersion ($DBversion);
1451 }
1452
1453 $DBversion = "3.00.00.077";
1454 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1455     # drop these tables only if they exist and none of them are empty
1456     # these tables are not defined in the packaged 2.2.9, but since it is believed
1457     # that at least one library may be using them in a post-2.2.9 but pre-3.0 Koha,
1458     # some care is taken.
1459     my ($print_error) = $dbh->{PrintError};
1460     $dbh->{PrintError} = 0;
1461     my ($raise_error) = $dbh->{RaiseError};
1462     $dbh->{RaiseError} = 1;
1463
1464     my $count = 0;
1465     my $do_drop = 1;
1466     eval { $count = $dbh->do("SELECT 1 FROM categorytable"); };
1467     if ($count > 0) {
1468         $do_drop = 0;
1469     }
1470     eval { $count = $dbh->do("SELECT 1 FROM mediatypetable"); };
1471     if ($count > 0) {
1472         $do_drop = 0;
1473     }
1474     eval { $count = $dbh->do("SELECT 1 FROM subcategorytable"); };
1475     if ($count > 0) {
1476         $do_drop = 0;
1477     }
1478
1479     if ($do_drop) {
1480         $dbh->do("DROP TABLE IF EXISTS `categorytable`");
1481         $dbh->do("DROP TABLE IF EXISTS `mediatypetable`");
1482         $dbh->do("DROP TABLE IF EXISTS `subcategorytable`");
1483     }
1484
1485     $dbh->{PrintError} = $print_error;
1486     $dbh->{RaiseError} = $raise_error;
1487         print "Upgrade to $DBversion done (drop categorytable, subcategorytable, and mediatypetable)\n";
1488         SetVersion ($DBversion);
1489 }
1490
1491 $DBversion = "3.00.00.078";
1492 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1493     my ($print_error) = $dbh->{PrintError};
1494     $dbh->{PrintError} = 0;
1495
1496     unless ($dbh->do("SELECT 1 FROM browser")) {
1497         $dbh->{PrintError} = $print_error;
1498         $dbh->do("CREATE TABLE `browser` (
1499                     `level` int(11) NOT NULL,
1500                     `classification` varchar(20) NOT NULL,
1501                     `description` varchar(255) NOT NULL,
1502                     `number` bigint(20) NOT NULL,
1503                     `endnode` tinyint(4) NOT NULL
1504                   ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
1505     }
1506     $dbh->{PrintError} = $print_error;
1507         print "Upgrade to $DBversion done (add browser table if not already present)\n";
1508         SetVersion ($DBversion);
1509 }
1510
1511 $DBversion = "3.00.00.079";
1512 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1513  my ($print_error) = $dbh->{PrintError};
1514     $dbh->{PrintError} = 0;
1515
1516     $dbh->do("INSERT INTO `systempreferences` (variable, value,options,type, explanation)VALUES
1517         ('AddPatronLists','categorycode','categorycode|category_type','Choice','Allow user to choose what list to pick up from when adding patrons')");
1518     print "Upgrade to $DBversion done (add browser table if not already present)\n";
1519         SetVersion ($DBversion);
1520 }
1521
1522 $DBversion = "3.00.00.080";
1523 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1524     $dbh->do("ALTER TABLE subscription CHANGE monthlength monthlength int(11) default '0'");
1525     $dbh->do("ALTER TABLE deleteditems MODIFY marc LONGBLOB AFTER copynumber");
1526     $dbh->do("ALTER TABLE aqbooksellers CHANGE name name mediumtext NOT NULL");
1527         print "Upgrade to $DBversion done (catch up on DB schema changes since alpha and beta)\n";
1528         SetVersion ($DBversion);
1529 }
1530
1531 $DBversion = "3.00.00.081";
1532 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1533     $dbh->do("CREATE TABLE `borrower_attribute_types` (
1534                 `code` varchar(10) NOT NULL,
1535                 `description` varchar(255) NOT NULL,
1536                 `repeatable` tinyint(1) NOT NULL default 0,
1537                 `unique_id` tinyint(1) NOT NULL default 0,
1538                 `opac_display` tinyint(1) NOT NULL default 0,
1539                 `password_allowed` tinyint(1) NOT NULL default 0,
1540                 `staff_searchable` tinyint(1) NOT NULL default 0,
1541                 `authorised_value_category` varchar(10) default NULL,
1542                 PRIMARY KEY  (`code`)
1543               ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
1544     $dbh->do("CREATE TABLE `borrower_attributes` (
1545                 `borrowernumber` int(11) NOT NULL,
1546                 `code` varchar(10) NOT NULL,
1547                 `attribute` varchar(30) default NULL,
1548                 `password` varchar(30) default NULL,
1549                 KEY `borrowernumber` (`borrowernumber`),
1550                 KEY `code_attribute` (`code`, `attribute`),
1551                 CONSTRAINT `borrower_attributes_ibfk_1` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`)
1552                     ON DELETE CASCADE ON UPDATE CASCADE,
1553                 CONSTRAINT `borrower_attributes_ibfk_2` FOREIGN KEY (`code`) REFERENCES `borrower_attribute_types` (`code`)
1554                     ON DELETE CASCADE ON UPDATE CASCADE
1555             ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
1556     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('ExtendedPatronAttributes','0','Use extended patron IDs and attributes',NULL,'YesNo')");
1557     print "Upgrade to $DBversion done (added borrower_attributes and  borrower_attribute_types)\n";
1558  SetVersion ($DBversion);
1559 }
1560
1561 $DBversion = "3.00.00.082";
1562 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1563     $dbh->do( q(alter table accountlines add column lastincrement decimal(28,6) default NULL) );
1564     print "Upgrade to $DBversion done (adding lastincrement column to accountlines table)\n";
1565     SetVersion ($DBversion);
1566 }
1567
1568 $DBversion = "3.00.00.083";
1569 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1570     $dbh->do( qq(UPDATE systempreferences SET value='local' where variable='yuipath' and value like "%/intranet-tmpl/prog/%"));
1571     print "Upgrade to $DBversion done (Changing yuipath behaviour in managing a local value)\n";
1572     SetVersion ($DBversion);
1573 }
1574 $DBversion = "3.00.00.084";
1575     if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1576     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('RenewSerialAddsSuggestion','0','if ON, adds a new suggestion at serial subscription renewal',NULL,'YesNo')");
1577     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('GoogleJackets','0','if ON, displays jacket covers from Google Books API',NULL,'YesNo')");
1578     print "Upgrade to $DBversion done (add new sysprefs)\n";
1579     SetVersion ($DBversion);
1580 }
1581
1582 $DBversion = "3.00.00.085";
1583 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1584     if (C4::Context->preference("marcflavour") eq 'MARC21') {
1585         $dbh->do("UPDATE marc_subfield_structure SET tab = 0 WHERE tab =  9 AND tagfield = '037'");
1586         $dbh->do("UPDATE marc_subfield_structure SET tab = 1 WHERE tab =  6 AND tagfield in ('100', '110', '111', '130')");
1587         $dbh->do("UPDATE marc_subfield_structure SET tab = 2 WHERE tab =  6 AND tagfield in ('240', '243')");
1588         $dbh->do("UPDATE marc_subfield_structure SET tab = 4 WHERE tab =  6 AND tagfield in ('400', '410', '411', '440')");
1589         $dbh->do("UPDATE marc_subfield_structure SET tab = 5 WHERE tab =  9 AND tagfield = '584'");
1590         $dbh->do("UPDATE marc_subfield_structure SET tab = 7 WHERE tab = -6 AND tagfield = '760'");
1591     }
1592     print "Upgrade to $DBversion done (move editing tab of various MARC21 subfields)\n";
1593     SetVersion ($DBversion);
1594 }
1595
1596 $DBversion = "3.00.00.086";
1597 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1598         $dbh->do(
1599         "CREATE TABLE `tmp_holdsqueue` (
1600         `biblionumber` int(11) default NULL,
1601         `itemnumber` int(11) default NULL,
1602         `barcode` varchar(20) default NULL,
1603         `surname` mediumtext NOT NULL,
1604         `firstname` text,
1605         `phone` text,
1606         `borrowernumber` int(11) NOT NULL,
1607         `cardnumber` varchar(16) default NULL,
1608         `reservedate` date default NULL,
1609         `title` mediumtext,
1610         `itemcallnumber` varchar(30) default NULL,
1611         `holdingbranch` varchar(10) default NULL,
1612         `pickbranch` varchar(10) default NULL,
1613         `notes` text
1614         ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
1615
1616         $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('RandomizeHoldsQueueWeight','0','if ON, the holds queue in circulation will be randomized, either based on all location codes, or by the location codes specified in StaticHoldsQueueWeight',NULL,'YesNo')");
1617         $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('StaticHoldsQueueWeight','0','Specify a list of library location codes separated by commas -- the list of codes will be traversed and weighted with first values given higher weight for holds fulfillment -- alternatively, if RandomizeHoldsQueueWeight is set, the list will be randomly selective',NULL,'TextArea')");
1618
1619         print "Upgrade to $DBversion done (Table structure for table `tmp_holdsqueue`)\n";
1620         SetVersion ($DBversion);
1621 }
1622
1623 $DBversion = "3.00.00.087";
1624 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1625     $dbh->do("INSERT INTO `systempreferences` VALUES ('AutoEmailOpacUser','0','','Sends notification emails containing new account details to patrons - when account is created.','YesNo')" );
1626     $dbh->do("INSERT INTO `systempreferences` VALUES ('AutoEmailPrimaryAddress','OFF','email|emailpro|B_email|cardnumber|OFF','Defines the default email address where Account Details emails are sent.','Choice')");
1627     print "Upgrade to $DBversion done (added 2 new 'AutoEmailOpacUser' sysprefs)\n";
1628     SetVersion ($DBversion);
1629 }
1630
1631 $DBversion = "3.00.00.088";
1632 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1633         $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type) VALUES ('OPACShelfBrowser','1','','Enable/disable Shelf Browser on item details page','YesNo')");
1634         $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type) VALUES ('OPACItemHolds','1','Allow OPAC users to place hold on specific items. If OFF, users can only request next available copy.','','YesNo')");
1635         $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type) VALUES ('XSLTDetailsDisplay','0','','Enable XSL stylesheet control over details page display on OPAC WARNING: MARC21 Only','YesNo')");
1636         $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type) VALUES ('XSLTResultsDisplay','0','','Enable XSL stylesheet control over results page display on OPAC WARNING: MARC21 Only','YesNo')");
1637         print "Upgrade to $DBversion done (added 2 new 'AutoEmailOpacUser' sysprefs)\n";
1638     SetVersion ($DBversion);
1639 }
1640
1641 $DBversion = "3.00.00.089";
1642 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1643         $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type) VALUES('AdvancedSearchTypes','itemtypes','itemtypes|ccode','Select which set of fields comprise the Type limit in the advanced search','Choice')");
1644         print "Upgrade to $DBversion done (added new AdvancedSearchTypes syspref)\n";
1645     SetVersion ($DBversion);
1646 }
1647
1648 $DBversion = "3.00.00.090";
1649 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1650     $dbh->do("
1651         CREATE TABLE `branch_borrower_circ_rules` (
1652           `branchcode` VARCHAR(10) NOT NULL,
1653           `categorycode` VARCHAR(10) NOT NULL,
1654           `maxissueqty` int(4) default NULL,
1655           PRIMARY KEY (`categorycode`, `branchcode`),
1656           CONSTRAINT `branch_borrower_circ_rules_ibfk_1` FOREIGN KEY (`categorycode`) REFERENCES `categories` (`categorycode`)
1657             ON DELETE CASCADE ON UPDATE CASCADE,
1658           CONSTRAINT `branch_borrower_circ_rules_ibfk_2` FOREIGN KEY (`branchcode`) REFERENCES `branches` (`branchcode`)
1659             ON DELETE CASCADE ON UPDATE CASCADE
1660         ) ENGINE=InnoDB DEFAULT CHARSET=utf8
1661     ");
1662     $dbh->do("
1663         CREATE TABLE `default_borrower_circ_rules` (
1664           `categorycode` VARCHAR(10) NOT NULL,
1665           `maxissueqty` int(4) default NULL,
1666           PRIMARY KEY (`categorycode`),
1667           CONSTRAINT `borrower_borrower_circ_rules_ibfk_1` FOREIGN KEY (`categorycode`) REFERENCES `categories` (`categorycode`)
1668             ON DELETE CASCADE ON UPDATE CASCADE
1669         ) ENGINE=InnoDB DEFAULT CHARSET=utf8
1670     ");
1671     $dbh->do("
1672         CREATE TABLE `default_branch_circ_rules` (
1673           `branchcode` VARCHAR(10) NOT NULL,
1674           `maxissueqty` int(4) default NULL,
1675           PRIMARY KEY (`branchcode`),
1676           CONSTRAINT `default_branch_circ_rules_ibfk_1` FOREIGN KEY (`branchcode`) REFERENCES `branches` (`branchcode`)
1677             ON DELETE CASCADE ON UPDATE CASCADE
1678         ) ENGINE=InnoDB DEFAULT CHARSET=utf8
1679     ");
1680     $dbh->do("
1681         CREATE TABLE `default_circ_rules` (
1682             `singleton` enum('singleton') NOT NULL default 'singleton',
1683             `maxissueqty` int(4) default NULL,
1684             PRIMARY KEY (`singleton`)
1685         ) ENGINE=InnoDB DEFAULT CHARSET=utf8
1686     ");
1687     print "Upgrade to $DBversion done (added several circ rules tables)\n";
1688     SetVersion ($DBversion);
1689 }
1690
1691
1692 $DBversion = "3.00.00.091";
1693 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1694     $dbh->do(<<'END_SQL');
1695 ALTER TABLE borrowers
1696 ADD `smsalertnumber` varchar(50) default NULL
1697 END_SQL
1698
1699     $dbh->do(<<'END_SQL');
1700 CREATE TABLE `message_attributes` (
1701   `message_attribute_id` int(11) NOT NULL auto_increment,
1702   `message_name` varchar(20) NOT NULL default '',
1703   `takes_days` tinyint(1) NOT NULL default '0',
1704   PRIMARY KEY  (`message_attribute_id`),
1705   UNIQUE KEY `message_name` (`message_name`)
1706 ) ENGINE=InnoDB DEFAULT CHARSET=utf8
1707 END_SQL
1708
1709     $dbh->do(<<'END_SQL');
1710 CREATE TABLE `message_transport_types` (
1711   `message_transport_type` varchar(20) NOT NULL,
1712   PRIMARY KEY  (`message_transport_type`)
1713 ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
1714 END_SQL
1715
1716     $dbh->do(<<'END_SQL');
1717 CREATE TABLE `message_transports` (
1718   `message_attribute_id` int(11) NOT NULL,
1719   `message_transport_type` varchar(20) NOT NULL,
1720   `is_digest` tinyint(1) NOT NULL default '0',
1721   `letter_module` varchar(20) NOT NULL default '',
1722   `letter_code` varchar(20) NOT NULL default '',
1723   PRIMARY KEY  (`message_attribute_id`,`message_transport_type`,`is_digest`),
1724   KEY `message_transport_type` (`message_transport_type`),
1725   KEY `letter_module` (`letter_module`,`letter_code`),
1726   CONSTRAINT `message_transports_ibfk_1` FOREIGN KEY (`message_attribute_id`) REFERENCES `message_attributes` (`message_attribute_id`) ON DELETE CASCADE ON UPDATE CASCADE,
1727   CONSTRAINT `message_transports_ibfk_2` FOREIGN KEY (`message_transport_type`) REFERENCES `message_transport_types` (`message_transport_type`) ON DELETE CASCADE ON UPDATE CASCADE,
1728   CONSTRAINT `message_transports_ibfk_3` FOREIGN KEY (`letter_module`, `letter_code`) REFERENCES `letter` (`module`, `code`) ON DELETE CASCADE ON UPDATE CASCADE
1729 ) ENGINE=InnoDB DEFAULT CHARSET=utf8
1730 END_SQL
1731
1732     $dbh->do(<<'END_SQL');
1733 CREATE TABLE `borrower_message_preferences` (
1734   `borrower_message_preference_id` int(11) NOT NULL auto_increment,
1735   `borrowernumber` int(11) NOT NULL default '0',
1736   `message_attribute_id` int(11) default '0',
1737   `days_in_advance` int(11) default '0',
1738   `wants_digets` tinyint(1) NOT NULL default '0',
1739   PRIMARY KEY  (`borrower_message_preference_id`),
1740   KEY `borrowernumber` (`borrowernumber`),
1741   KEY `message_attribute_id` (`message_attribute_id`),
1742   CONSTRAINT `borrower_message_preferences_ibfk_1` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE CASCADE ON UPDATE CASCADE,
1743   CONSTRAINT `borrower_message_preferences_ibfk_2` FOREIGN KEY (`message_attribute_id`) REFERENCES `message_attributes` (`message_attribute_id`) ON DELETE CASCADE ON UPDATE CASCADE
1744 ) ENGINE=InnoDB DEFAULT CHARSET=utf8
1745 END_SQL
1746
1747     $dbh->do(<<'END_SQL');
1748 CREATE TABLE `borrower_message_transport_preferences` (
1749   `borrower_message_preference_id` int(11) NOT NULL default '0',
1750   `message_transport_type` varchar(20) NOT NULL default '0',
1751   PRIMARY KEY  (`borrower_message_preference_id`,`message_transport_type`),
1752   KEY `message_transport_type` (`message_transport_type`),
1753   CONSTRAINT `borrower_message_transport_preferences_ibfk_1` FOREIGN KEY (`borrower_message_preference_id`) REFERENCES `borrower_message_preferences` (`borrower_message_preference_id`) ON DELETE CASCADE ON UPDATE CASCADE,
1754   CONSTRAINT `borrower_message_transport_preferences_ibfk_2` FOREIGN KEY (`message_transport_type`) REFERENCES `message_transport_types` (`message_transport_type`) ON DELETE CASCADE ON UPDATE CASCADE
1755 ) ENGINE=InnoDB DEFAULT CHARSET=utf8
1756 END_SQL
1757
1758     $dbh->do(<<'END_SQL');
1759 CREATE TABLE `message_queue` (
1760   `message_id` int(11) NOT NULL auto_increment,
1761   `borrowernumber` int(11) NOT NULL,
1762   `subject` text,
1763   `content` text,
1764   `message_transport_type` varchar(20) NOT NULL,
1765   `status` enum('sent','pending','failed','deleted') NOT NULL default 'pending',
1766   `time_queued` timestamp NOT NULL default CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP,
1767   KEY `message_id` (`message_id`),
1768   KEY `borrowernumber` (`borrowernumber`),
1769   KEY `message_transport_type` (`message_transport_type`),
1770   CONSTRAINT `messageq_ibfk_1` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE CASCADE ON UPDATE CASCADE,
1771   CONSTRAINT `messageq_ibfk_2` FOREIGN KEY (`message_transport_type`) REFERENCES `message_transport_types` (`message_transport_type`) ON DELETE RESTRICT ON UPDATE CASCADE
1772 ) ENGINE=InnoDB DEFAULT CHARSET=utf8
1773 END_SQL
1774
1775     $dbh->do(<<'END_SQL');
1776 INSERT INTO `systempreferences`
1777   (variable,value,explanation,options,type)
1778 VALUES
1779 ('EnhancedMessagingPreferences',0,'If ON, allows patrons to select to receive additional messages about items due or nearly due.','','YesNo')
1780 END_SQL
1781
1782     $dbh->do( <<'END_SQL');
1783 INSERT INTO `letter`
1784 (module, code, name, title, content)
1785 VALUES
1786 ('circulation','DUE','Item Due Reminder','Item Due Reminder','Dear <<borrowers.firstname>> <<borrowers.surname>>,\r\n\r\nThe following item is now due:\r\n\r\n<<biblio.title>> by <<biblio.author>>'),
1787 ('circulation','DUEDGST','Item Due Reminder (Digest)','Item Due Reminder','You have <<count>> items due'),
1788 ('circulation','PREDUE','Advance Notice of Item Due','Advance Notice of Item Due','Dear <<borrowers.firstname>> <<borrowers.surname>>,\r\n\r\nThe following item will be due soon:\r\n\r\n<<biblio.title>> by <<biblio.author>>'),
1789 ('circulation','PREDUEDGST','Advance Notice of Item Due (Digest)','Advance Notice of Item Due','You have <<count>> items due soon'),
1790 ('circulation','EVENT','Upcoming Library Event','Upcoming Library Event','Dear <<borrowers.firstname>> <<borrowers.surname>>,\r\n\r\nThis is a reminder of an upcoming library event in which you have expressed interest.');
1791 END_SQL
1792
1793     my @sql_scripts = (
1794         'installer/data/mysql/en/mandatory/message_transport_types.sql',
1795         'installer/data/mysql/en/optional/sample_notices_message_attributes.sql',
1796         'installer/data/mysql/en/optional/sample_notices_message_transports.sql',
1797     );
1798
1799     my $installer = C4::Installer->new();
1800     foreach my $script ( @sql_scripts ) {
1801         my $full_path = $installer->get_file_path_from_name($script);
1802         my $error = $installer->load_sql($full_path);
1803         warn $error if $error;
1804     }
1805
1806     print "Upgrade to $DBversion done (Table structure for table `message_queue`, `message_transport_types`, `message_attributes`, `message_transports`, `borrower_message_preferences`, and `borrower_message_transport_preferences`.  Alter `borrowers` table,\n";
1807     SetVersion ($DBversion);
1808 }
1809
1810 $DBversion = "3.00.00.092";
1811 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1812     $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type) VALUES('AllowOnShelfHolds', '0', '', 'Allow hold requests to be placed on items that are not on loan', 'YesNo')");
1813     $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type) VALUES('AllowHoldsOnDamagedItems', '1', '', 'Allow hold requests to be placed on damaged items', 'YesNo')");
1814         print "Upgrade to $DBversion done (added new AllowOnShelfHolds syspref)\n";
1815     SetVersion ($DBversion);
1816 }
1817
1818 $DBversion = "3.00.00.093";
1819 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1820     $dbh->do("ALTER TABLE `items` MODIFY COLUMN `copynumber` VARCHAR(32) DEFAULT NULL");
1821     $dbh->do("ALTER TABLE `deleteditems` MODIFY COLUMN `copynumber` VARCHAR(32) DEFAULT NULL");
1822         print "Upgrade to $DBversion done (Change data type of items.copynumber to allow free text)\n";
1823     SetVersion ($DBversion);
1824 }
1825
1826 $DBversion = "3.00.00.094";
1827 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1828     $dbh->do("ALTER TABLE `marc_subfield_structure` MODIFY `tagsubfield` VARCHAR(1) NOT NULL DEFAULT '' COLLATE utf8_bin");
1829         print "Upgrade to $DBversion done (Change Collation of marc_subfield_structure to allow mixed case in subfield labels.)\n";
1830     SetVersion ($DBversion);
1831 }
1832
1833 $DBversion = "3.00.00.095";
1834 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1835     if (C4::Context->preference("marcflavour") eq 'MARC21') {
1836         $dbh->do("UPDATE marc_subfield_structure SET authtypecode = 'MEETI_NAME' WHERE authtypecode = 'Meeting Name'");
1837         $dbh->do("UPDATE marc_subfield_structure SET authtypecode = 'CORPO_NAME' WHERE authtypecode = 'CORP0_NAME'");
1838     }
1839         print "Upgrade to $DBversion done (fix invalid authority types in MARC21 frameworks [bug 2254])\n";
1840     SetVersion ($DBversion);
1841 }
1842
1843 $DBversion = "3.00.00.096";
1844 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1845     $sth = $dbh->prepare("SHOW COLUMNS FROM borrower_message_preferences LIKE 'wants_digets'");
1846     $sth->execute();
1847     if (my $row = $sth->fetchrow_hashref) {
1848         $dbh->do("ALTER TABLE borrower_message_preferences CHANGE wants_digets wants_digest tinyint(1) NOT NULL default 0");
1849     }
1850         print "Upgrade to $DBversion done (fix name borrower_message_preferences.wants_digest)\n";
1851     SetVersion ($DBversion);
1852 }
1853
1854 $DBversion = '3.00.00.097';
1855 if ( C4::Context->preference('Version') < TransformToNum($DBversion) ) {
1856
1857     $dbh->do('ALTER TABLE message_queue ADD to_address   mediumtext default NULL');
1858     $dbh->do('ALTER TABLE message_queue ADD from_address mediumtext default NULL');
1859     $dbh->do('ALTER TABLE message_queue ADD content_type text');
1860     $dbh->do('ALTER TABLE message_queue CHANGE borrowernumber borrowernumber int(11) default NULL');
1861
1862     print "Upgrade to $DBversion done (updating 4 fields in message_queue table)\n";
1863     SetVersion($DBversion);
1864 }
1865
1866 $DBversion = '3.00.00.098';
1867 if ( C4::Context->preference('Version') < TransformToNum($DBversion) ) {
1868
1869     $dbh->do(q(DELETE FROM message_transport_types WHERE message_transport_type = 'rss'));
1870     $dbh->do(q(DELETE FROM message_transports WHERE message_transport_type = 'rss'));
1871
1872     print "Upgrade to $DBversion done (removing unused RSS message_transport_type)\n";
1873     SetVersion($DBversion);
1874 }
1875
1876 $DBversion = '3.00.00.099';
1877 if ( C4::Context->preference('Version') < TransformToNum($DBversion) ) {
1878     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES('OpacSuppression', '0', '', 'Turn ON the OPAC Suppression feature, requires further setup, ask your system administrator for details', 'YesNo')");
1879     print "Upgrade to $DBversion done (Adding OpacSuppression syspref)\n";
1880     SetVersion($DBversion);
1881 }
1882
1883 $DBversion = '3.00.00.100';
1884 if ( C4::Context->preference('Version') < TransformToNum($DBversion) ) {
1885         $dbh->do('ALTER TABLE virtualshelves ADD COLUMN lastmodified timestamp NOT NULL default CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP');
1886     print "Upgrade to $DBversion done (Adding lastmodified column to virtualshelves)\n";
1887     SetVersion($DBversion);
1888 }
1889
1890 $DBversion = '3.00.00.101';
1891 if ( C4::Context->preference('Version') < TransformToNum($DBversion) ) {
1892         $dbh->do('ALTER TABLE `overduerules` CHANGE `categorycode` `categorycode` VARCHAR(10) NOT NULL');
1893         $dbh->do('ALTER TABLE `deletedborrowers` CHANGE `categorycode` `categorycode` VARCHAR(10) NOT NULL');
1894     print "Upgrade to $DBversion done (Updating columnd definitions for patron category codes in notice/statsu triggers and deletedborrowers tables.)\n";
1895     SetVersion($DBversion);
1896 }
1897
1898 $DBversion = '3.00.00.102';
1899 if ( C4::Context->preference('Version') < TransformToNum($DBversion) ) {
1900         $dbh->do('ALTER TABLE serialitems MODIFY `serialid` int(11) NOT NULL AFTER itemnumber' );
1901         $dbh->do('ALTER TABLE serialitems DROP KEY serialididx' );
1902         $dbh->do('ALTER TABLE serialitems ADD CONSTRAINT UNIQUE KEY serialitemsidx (itemnumber)' );
1903         # before setting constraint, delete any unvalid data
1904         $dbh->do('DELETE from serialitems WHERE serialid not in (SELECT serial.serialid FROM serial)');
1905         $dbh->do('ALTER TABLE serialitems ADD CONSTRAINT serialitems_sfk_1 FOREIGN KEY (serialid) REFERENCES serial (serialid) ON DELETE CASCADE ON UPDATE CASCADE' );
1906     print "Upgrade to $DBversion done (Updating serialitems table to allow for multiple items per serial fixing kohabug 2380)\n";
1907     SetVersion($DBversion);
1908 }
1909
1910 $DBversion = "3.00.00.103";
1911 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1912     $dbh->do("DELETE FROM systempreferences WHERE variable='serialsadditems'");
1913     print "Upgrade to $DBversion done ( Verifying the removal of serialsadditems from syspref fixing kohabug 2219)\n";
1914     SetVersion ($DBversion);
1915 }
1916
1917 $DBversion = "3.00.00.104";
1918 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1919     $dbh->do("DELETE FROM systempreferences WHERE variable='noOPACHolds'");
1920     print "Upgrade to $DBversion done (remove superseded 'noOPACHolds' system preference per bug 2413)\n";
1921     SetVersion ($DBversion);
1922 }
1923
1924 $DBversion = '3.00.00.105';
1925 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
1926
1927     # it is possible that this syspref is already defined since the feature was added some time ago.
1928     unless ( $dbh->do(q(SELECT variable FROM systempreferences WHERE variable = 'SMSSendDriver')) ) {
1929         $dbh->do(<<'END_SQL');
1930 INSERT INTO `systempreferences`
1931   (variable,value,explanation,options,type)
1932 VALUES
1933 ('SMSSendDriver','','Sets which SMS::Send driver is used to send SMS messages.','','free')
1934 END_SQL
1935     }
1936     print "Upgrade to $DBversion done (added SMSSendDriver system preference)\n";
1937     SetVersion($DBversion);
1938 }
1939
1940 $DBversion = "3.00.00.106";
1941 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1942     $dbh->do("DELETE FROM systempreferences WHERE variable='noOPACHolds'");
1943
1944 # db revision 105 didn't apply correctly, so we're rolling this into 106
1945         $dbh->do("INSERT INTO `systempreferences`
1946    (variable,value,explanation,options,type)
1947         VALUES
1948         ('SMSSendDriver','','Sets which SMS::Send driver is used to send SMS messages.','','free')");
1949
1950     print "Upgrade to $DBversion done (remove default '0000-00-00' in subscriptionhistory.enddate field)\n";
1951     $dbh->do("ALTER TABLE `subscriptionhistory` CHANGE `enddate` `enddate` DATE NULL DEFAULT NULL ");
1952     $dbh->do("UPDATE subscriptionhistory SET enddate=NULL WHERE enddate='0000-00-00'");
1953     SetVersion ($DBversion);
1954 }
1955
1956 $DBversion = '3.00.00.107';
1957 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1958     $dbh->do(<<'END_SQL');
1959 UPDATE systempreferences
1960   SET explanation = CONCAT( explanation, '. WARNING: this feature is very resource consuming on collections with large numbers of items.' )
1961   WHERE variable = 'OPACShelfBrowser'
1962     AND explanation NOT LIKE '%WARNING%'
1963 END_SQL
1964     $dbh->do(<<'END_SQL');
1965 UPDATE systempreferences
1966   SET explanation = CONCAT( explanation, '. WARNING: this feature is very resource consuming.' )
1967   WHERE variable = 'CataloguingLog'
1968     AND explanation NOT LIKE '%WARNING%'
1969 END_SQL
1970     $dbh->do(<<'END_SQL');
1971 UPDATE systempreferences
1972   SET explanation = CONCAT( explanation, '. WARNING: using NoZebra on even modest sized collections is very slow.' )
1973   WHERE variable = 'NoZebra'
1974     AND explanation NOT LIKE '%WARNING%'
1975 END_SQL
1976     print "Upgrade to $DBversion done (warning added to OPACShelfBrowser system preference)\n";
1977     SetVersion ($DBversion);
1978 }
1979
1980 $DBversion = '3.01.00.000';
1981 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
1982     print "Upgrade to $DBversion done (start of 3.1)\n";
1983     SetVersion ($DBversion);
1984 }
1985
1986 $DBversion = '3.01.00.001';
1987 if ( C4::Context->preference('Version') < TransformToNum($DBversion) ) {
1988     $dbh->do("
1989         CREATE TABLE hold_fill_targets (
1990             `borrowernumber` int(11) NOT NULL,
1991             `biblionumber` int(11) NOT NULL,
1992             `itemnumber` int(11) NOT NULL,
1993             `source_branchcode`  varchar(10) default NULL,
1994             `item_level_request` tinyint(4) NOT NULL default 0,
1995             PRIMARY KEY `itemnumber` (`itemnumber`),
1996             KEY `bib_branch` (`biblionumber`, `source_branchcode`),
1997             CONSTRAINT `hold_fill_targets_ibfk_1` FOREIGN KEY (`borrowernumber`)
1998                 REFERENCES `borrowers` (`borrowernumber`) ON DELETE CASCADE ON UPDATE CASCADE,
1999             CONSTRAINT `hold_fill_targets_ibfk_2` FOREIGN KEY (`biblionumber`)
2000                 REFERENCES `biblio` (`biblionumber`) ON DELETE CASCADE ON UPDATE CASCADE,
2001             CONSTRAINT `hold_fill_targets_ibfk_3` FOREIGN KEY (`itemnumber`)
2002                 REFERENCES `items` (`itemnumber`) ON DELETE CASCADE ON UPDATE CASCADE,
2003             CONSTRAINT `hold_fill_targets_ibfk_4` FOREIGN KEY (`source_branchcode`)
2004                 REFERENCES `branches` (`branchcode`) ON DELETE CASCADE ON UPDATE CASCADE
2005         ) ENGINE=InnoDB DEFAULT CHARSET=utf8
2006     ");
2007     $dbh->do("
2008         ALTER TABLE tmp_holdsqueue
2009             ADD item_level_request tinyint(4) NOT NULL default 0
2010     ");
2011
2012     print "Upgrade to $DBversion done (add hold_fill_targets table and a column to tmp_holdsqueue)\n";
2013     SetVersion($DBversion);
2014 }
2015
2016 $DBversion = '3.01.00.002';
2017 if ( C4::Context->preference('Version') < TransformToNum($DBversion) ) {
2018     # use statistics where available
2019     $dbh->do("
2020         ALTER TABLE statistics ADD KEY  tmp_stats (type, itemnumber, borrowernumber)
2021     ");
2022     $dbh->do("
2023         UPDATE issues iss
2024         SET issuedate = (
2025             SELECT max(datetime)
2026             FROM statistics
2027             WHERE type = 'issue'
2028             AND itemnumber = iss.itemnumber
2029             AND borrowernumber = iss.borrowernumber
2030         )
2031         WHERE issuedate IS NULL;
2032     ");
2033     $dbh->do("ALTER TABLE statistics DROP KEY tmp_stats");
2034
2035     # default to last renewal date
2036     $dbh->do("
2037         UPDATE issues
2038         SET issuedate = lastreneweddate
2039         WHERE issuedate IS NULL
2040         and lastreneweddate IS NOT NULL
2041     ");
2042
2043     my $num_bad_issuedates = $dbh->selectrow_array("SELECT COUNT(*) FROM issues WHERE issuedate IS NULL");
2044     if ($num_bad_issuedates > 0) {
2045         print STDERR "After the upgrade to $DBversion, there are still $num_bad_issuedates loan(s) with a NULL (blank) loan date. ",
2046                      "Please check the issues table in your database.";
2047     }
2048     print "Upgrade to $DBversion done (bug 2582: set null issues.issuedate to lastreneweddate)\n";
2049     SetVersion($DBversion);
2050 }
2051
2052 $DBversion = "3.01.00.003";
2053 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2054     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('AllowRenewalLimitOverride', '0', 'if ON, allows renewal limits to be overridden on the circulation screen',NULL,'YesNo')");
2055     print "Upgrade to $DBversion done (add new syspref)\n";
2056     SetVersion ($DBversion);
2057 }
2058
2059 $DBversion = '3.01.00.004';
2060 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2061     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('OPACDisplayRequestPriority','0','Show patrons the priority level on holds in the OPAC','','YesNo')");
2062     print "Upgrade to $DBversion done (added OPACDisplayRequestPriority system preference)\n";
2063     SetVersion ($DBversion);
2064 }
2065
2066 $DBversion = '3.01.00.005';
2067 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2068     $dbh->do("
2069         INSERT INTO `letter` (module, code, name, title, content)
2070         VALUES('reserves', 'HOLD', 'Hold Available for Pickup', 'Hold Available for Pickup at <<branches.branchname>>', 'Dear <<borrowers.firstname>> <<borrowers.surname>>,\r\n\r\nYou have a hold available for pickup as of <<reserves.waitingdate>>:\r\n\r\nTitle: <<biblio.title>>\r\nAuthor: <<biblio.author>>\r\nCopy: <<items.copynumber>>\r\nLocation: <<branches.branchname>>\r\n<<branches.branchaddress1>>\r\n<<branches.branchaddress2>>\r\n<<branches.branchaddress3>>')
2071     ");
2072     $dbh->do("INSERT INTO `message_attributes` (message_attribute_id, message_name, takes_days) values(4, 'Hold Filled', 0)");
2073     $dbh->do("INSERT INTO `message_transports` (message_attribute_id, message_transport_type, is_digest, letter_module, letter_code) values(4, 'sms', 0, 'reserves', 'HOLD')");
2074     $dbh->do("INSERT INTO `message_transports` (message_attribute_id, message_transport_type, is_digest, letter_module, letter_code) values(4, 'email', 0, 'reserves', 'HOLD')");
2075     print "Upgrade to $DBversion done (Add letter for holds notifications)\n";
2076     SetVersion ($DBversion);
2077 }
2078
2079 $DBversion = '3.01.00.006';
2080 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2081     $dbh->do("ALTER TABLE `biblioitems` ADD KEY issn (issn)");
2082     print "Upgrade to $DBversion done (add index on biblioitems.issn)\n";
2083     SetVersion ($DBversion);
2084 }
2085
2086 $DBversion = "3.01.00.007";
2087 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2088     $dbh->do("UPDATE `systempreferences` SET options='70|10' WHERE variable='intranetmainUserblock'");
2089     $dbh->do("UPDATE `systempreferences` SET options='70|10' WHERE variable='intranetuserjs'");
2090     $dbh->do("UPDATE `systempreferences` SET options='70|10' WHERE variable='opacheader'");
2091     $dbh->do("UPDATE `systempreferences` SET options='70|10' WHERE variable='OpacMainUserBlock'");
2092     $dbh->do("UPDATE `systempreferences` SET options='70|10' WHERE variable='OpacNav'");
2093     $dbh->do("UPDATE `systempreferences` SET options='70|10' WHERE variable='opacuserjs'");
2094     $dbh->do("UPDATE `systempreferences` SET options='30|10', type='Textarea' WHERE variable='OAI-PMH:Set'");
2095     $dbh->do("UPDATE `systempreferences` SET options='50' WHERE variable='intranetstylesheet'");
2096     $dbh->do("UPDATE `systempreferences` SET options='50' WHERE variable='intranetcolorstylesheet'");
2097     $dbh->do("UPDATE `systempreferences` SET options='10' WHERE variable='globalDueDate'");
2098     $dbh->do("UPDATE `systempreferences` SET type='Integer' WHERE variable='numSearchResults'");
2099     $dbh->do("UPDATE `systempreferences` SET type='Integer' WHERE variable='OPACnumSearchResults'");
2100     $dbh->do("UPDATE `systempreferences` SET type='Integer' WHERE variable='ReservesMaxPickupDelay'");
2101     $dbh->do("UPDATE `systempreferences` SET type='Integer' WHERE variable='TransfersMaxDaysWarning'");
2102     $dbh->do("UPDATE `systempreferences` SET type='Integer' WHERE variable='StaticHoldsQueueWeight'");
2103     $dbh->do("UPDATE `systempreferences` SET type='Integer' WHERE variable='holdCancelLength'");
2104     $dbh->do("UPDATE `systempreferences` SET type='Integer' WHERE variable='XISBNDailyLimit'");
2105     $dbh->do("UPDATE `systempreferences` SET type='Float' WHERE variable='gist'");
2106     $dbh->do("UPDATE `systempreferences` SET type='Free' WHERE variable='BakerTaylorUsername'");
2107     $dbh->do("UPDATE `systempreferences` SET type='Free' WHERE variable='BakerTaylorPassword'");
2108     $dbh->do("UPDATE `systempreferences` SET type='Textarea', options='70|10' WHERE variable='ISBD'");
2109     $dbh->do("UPDATE `systempreferences` SET type='Textarea', options='70|10', explanation='Enter a specific hash for NoZebra indexes. Enter : \\\'indexname\\\' => \\\'100a,245a,500*\\\',\\\'index2\\\' => \\\'...\\\'' WHERE variable='NoZebraIndexes'");
2110     print "Upgrade to $DBversion done (fix display of many sysprefs)\n";
2111     SetVersion ($DBversion);
2112 }
2113
2114 $DBversion = '3.01.00.008';
2115 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2116
2117     $dbh->do("CREATE TABLE branch_transfer_limits (
2118                           limitId int(8) NOT NULL auto_increment,
2119                           toBranch varchar(4) NOT NULL,
2120                           fromBranch varchar(4) NOT NULL,
2121                           itemtype varchar(4) NOT NULL,
2122                           PRIMARY KEY  (limitId)
2123                           ) ENGINE=InnoDB DEFAULT CHARSET=utf8"
2124                         );
2125
2126     $dbh->do("INSERT INTO `systempreferences` ( `variable` , `value` , `options` , `explanation` , `type` ) VALUES ( 'UseBranchTransferLimits', '0', '', 'If ON, Koha will will use the rules defined in branch_transfer_limits to decide if an item transfer should be allowed.', 'YesNo')");
2127
2128     print "Upgrade to $DBversion done (added branch_transfer_limits table and UseBranchTransferLimits system preference)\n";
2129     SetVersion ($DBversion);
2130 }
2131
2132 $DBversion = "3.01.00.009";
2133 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2134     $dbh->do("ALTER TABLE permissions MODIFY `code` varchar(64) DEFAULT NULL");
2135     $dbh->do("ALTER TABLE user_permissions MODIFY `code` varchar(64) DEFAULT NULL");
2136     $dbh->do("INSERT INTO permissions (module_bit, code, description) VALUES ( 1, 'circulate_remaining_permissions', 'Remaining circulation permissions')");
2137     $dbh->do("INSERT INTO permissions (module_bit, code, description) VALUES ( 1, 'override_renewals', 'Override blocked renewals')");
2138     print "Upgrade to $DBversion done (added subpermissions for circulate permission)\n";
2139 }
2140
2141 $DBversion = '3.01.00.010';
2142 if ( C4::Context->preference('Version') < TransformToNum($DBversion) ) {
2143     $dbh->do("ALTER TABLE `borrower_attributes` MODIFY COLUMN `attribute` VARCHAR(64) DEFAULT NULL");
2144     $dbh->do("ALTER TABLE `borrower_attributes` MODIFY COLUMN `password` VARCHAR(64) DEFAULT NULL");
2145     print "Upgrade to $DBversion done (bug 2687: increase length of borrower attribute fields)\n";
2146     SetVersion ($DBversion);
2147 }
2148
2149 $DBversion = '3.01.00.011';
2150 if ( C4::Context->preference('Version') < TransformToNum($DBversion) ) {
2151
2152     # Yes, the old value was ^M terminated.
2153     my $bad_value = "function prepareEmailPopup(){\r\n  if (!document.getElementById) return false;\r\n  if (!document.getElementById('reserveemail')) return false;\r\n  rsvlink = document.getElementById('reserveemail');\r\n  rsvlink.onclick = function() {\r\n      doReservePopup();\r\n      return false;\r\n  }\r\n}\r\n\r\nfunction doReservePopup(){\r\n}\r\n\r\nfunction prepareReserveList(){\r\n}\r\n\r\naddLoadEvent(prepareEmailPopup);\r\naddLoadEvent(prepareReserveList);";
2154
2155     my $intranetuserjs = C4::Context->preference('intranetuserjs');
2156     if ($intranetuserjs  and  $intranetuserjs eq $bad_value) {
2157         my $sql = <<'END_SQL';
2158 UPDATE systempreferences
2159 SET value = ''
2160 WHERE variable = 'intranetuserjs'
2161 END_SQL
2162         $dbh->do($sql);
2163     }
2164     print "Upgrade to $DBversion done (removed bogus intranetuserjs syspref)\n";
2165     SetVersion($DBversion);
2166 }
2167
2168 $DBversion = "3.01.00.012";
2169 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2170     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('AllowHoldPolicyOverride', '0', 'Allow staff to override hold policies when placing holds',NULL,'YesNo')");
2171     $dbh->do("
2172         CREATE TABLE `branch_item_rules` (
2173           `branchcode` varchar(10) NOT NULL,
2174           `itemtype` varchar(10) NOT NULL,
2175           `holdallowed` tinyint(1) default NULL,
2176           PRIMARY KEY  (`itemtype`,`branchcode`),
2177           KEY `branch_item_rules_ibfk_2` (`branchcode`),
2178           CONSTRAINT `branch_item_rules_ibfk_1` FOREIGN KEY (`itemtype`) REFERENCES `itemtypes` (`itemtype`) ON DELETE CASCADE ON UPDATE CASCADE,
2179           CONSTRAINT `branch_item_rules_ibfk_2` FOREIGN KEY (`branchcode`) REFERENCES `branches` (`branchcode`) ON DELETE CASCADE ON UPDATE CASCADE
2180         ) ENGINE=InnoDB DEFAULT CHARSET=utf8
2181     ");
2182     $dbh->do("
2183         CREATE TABLE `default_branch_item_rules` (
2184           `itemtype` varchar(10) NOT NULL,
2185           `holdallowed` tinyint(1) default NULL,
2186           PRIMARY KEY  (`itemtype`),
2187           CONSTRAINT `default_branch_item_rules_ibfk_1` FOREIGN KEY (`itemtype`) REFERENCES `itemtypes` (`itemtype`) ON DELETE CASCADE ON UPDATE CASCADE
2188         ) ENGINE=InnoDB DEFAULT CHARSET=utf8
2189     ");
2190     $dbh->do("
2191         ALTER TABLE default_branch_circ_rules
2192             ADD COLUMN holdallowed tinyint(1) NULL
2193     ");
2194     $dbh->do("
2195         ALTER TABLE default_circ_rules
2196             ADD COLUMN holdallowed tinyint(1) NULL
2197     ");
2198     print "Upgrade to $DBversion done (Add tables and system preferences for holds policies)\n";
2199     SetVersion ($DBversion);
2200 }
2201
2202 $DBversion = '3.01.00.013';
2203 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2204     $dbh->do("
2205         CREATE TABLE item_circulation_alert_preferences (
2206             id           int(11) AUTO_INCREMENT,
2207             branchcode   varchar(10) NOT NULL,
2208             categorycode varchar(10) NOT NULL,
2209             item_type    varchar(10) NOT NULL,
2210             notification varchar(16) NOT NULL,
2211             PRIMARY KEY (id),
2212             KEY (branchcode, categorycode, item_type, notification)
2213         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
2214     ");
2215
2216     $dbh->do(q{ ALTER TABLE `message_queue` ADD metadata text DEFAULT NULL           AFTER content;  });
2217     $dbh->do(q{ ALTER TABLE `message_queue` ADD letter_code varchar(64) DEFAULT NULL AFTER metadata; });
2218
2219     $dbh->do(q{
2220         INSERT INTO `letter` (`module`, `code`, `name`, `title`, `content`) VALUES
2221         ('circulation','CHECKIN','Item Check-in','Check-ins','The following items have been checked in:\r\n----\r\n<<biblio.title>>\r\n----\r\nThank you.');
2222     });
2223     $dbh->do(q{
2224         INSERT INTO `letter` (`module`, `code`, `name`, `title`, `content`) VALUES
2225         ('circulation','CHECKOUT','Item Checkout','Checkouts','The following items have been checked out:\r\n----\r\n<<biblio.title>>\r\n----\r\nThank you for visiting <<branches.branchname>>.');
2226     });
2227
2228     $dbh->do(q{INSERT INTO message_attributes (message_attribute_id, message_name, takes_days) VALUES (5, 'Item Check-in', 0);});
2229     $dbh->do(q{INSERT INTO message_attributes (message_attribute_id, message_name, takes_days) VALUES (6, 'Item Checkout', 0);});
2230
2231     $dbh->do(q{INSERT INTO message_transports (message_attribute_id, message_transport_type, is_digest, letter_module, letter_code) VALUES (5, 'email', 0, 'circulation', 'CHECKIN');});
2232     $dbh->do(q{INSERT INTO message_transports (message_attribute_id, message_transport_type, is_digest, letter_module, letter_code) VALUES (5, 'sms',   0, 'circulation', 'CHECKIN');});
2233     $dbh->do(q{INSERT INTO message_transports (message_attribute_id, message_transport_type, is_digest, letter_module, letter_code) VALUES (6, 'email', 0, 'circulation', 'CHECKOUT');});
2234     $dbh->do(q{INSERT INTO message_transports (message_attribute_id, message_transport_type, is_digest, letter_module, letter_code) VALUES (6, 'sms',   0, 'circulation', 'CHECKOUT');});
2235
2236     print "Upgrade to $DBversion done (data for Email Checkout Slips project)\n";
2237          SetVersion ($DBversion);
2238 }
2239
2240 $DBversion = "3.01.00.014";
2241 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2242     $dbh->do("ALTER TABLE `branch_transfer_limits` CHANGE `itemtype` `itemtype` VARCHAR( 4 ) CHARACTER SET utf8 COLLATE utf8_general_ci NULL");
2243     $dbh->do("ALTER TABLE `branch_transfer_limits` ADD `ccode` VARCHAR( 10 ) NULL ;");
2244     $dbh->do("INSERT INTO `systempreferences` ( `variable` , `value` , `options` , `explanation` , `type` )
2245     VALUES (
2246     'BranchTransferLimitsType', 'ccode', 'itemtype|ccode', 'When using branch transfer limits, choose whether to limit by itemtype or collection code.', 'Choice'
2247     );");
2248
2249     print "Upgrade to $DBversion done ( Updated table for Branch Transfer Limits)\n";
2250     SetVersion ($DBversion);
2251 }
2252
2253 $DBversion = '3.01.00.015';
2254 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2255     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SyndeticsClientCode', '0', 'Client Code for using Syndetics Solutions content','','free')");
2256
2257     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SyndeticsEnabled', '0', 'Turn on Syndetics Enhanced Content','','YesNo')");
2258
2259     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SyndeticsCoverImages', '0', 'Display Cover Images from Syndetics','','YesNo')");
2260
2261     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SyndeticsTOC', '0', 'Display Table of Content information from Syndetics','','YesNo')");
2262
2263     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SyndeticsSummary', '0', 'Display Summary Information from Syndetics','','YesNo')");
2264
2265     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SyndeticsEditions', '0', 'Display Editions from Syndetics','','YesNo')");
2266
2267     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SyndeticsExcerpt', '0', 'Display Excerpts and first chapters on OPAC from Syndetics','','YesNo')");
2268
2269     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SyndeticsReviews', '0', 'Display Reviews on OPAC from Syndetics','','YesNo')");
2270
2271     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SyndeticsAuthorNotes', '0', 'Display Notes about the Author on OPAC from Syndetics','','YesNo')");
2272
2273     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SyndeticsAwards', '0', 'Display Awards on OPAC from Syndetics','','YesNo')");
2274
2275     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SyndeticsSeries', '0', 'Display Series information on OPAC from Syndetics','','YesNo')");
2276
2277     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SyndeticsCoverImageSize', 'MC', 'Choose the size of the Syndetics Cover Image to display on the OPAC detail page, MC is Medium, LC is Large','MC|LC','Choice')");
2278
2279     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('OPACAmazonCoverImages', '0', 'Display cover images on OPAC from Amazon Web Services','','YesNo')");
2280
2281     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('AmazonCoverImages', '0', 'Display Cover Images in Staff Client from Amazon Web Services','','YesNo')");
2282
2283     $dbh->do("UPDATE systempreferences SET variable='AmazonEnabled' WHERE variable = 'AmazonContent'");
2284
2285     $dbh->do("UPDATE systempreferences SET variable='OPACAmazonEnabled' WHERE variable = 'OPACAmazonContent'");
2286
2287     print "Upgrade to $DBversion done (added Syndetics Enhanced Content system preferences)\n";
2288     SetVersion ($DBversion);
2289 }
2290
2291 $DBversion = "3.01.00.016";
2292 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2293     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('Babeltheque',0,'Turn ON Babeltheque content  - See babeltheque.com to subscribe to this service','','YesNo')");
2294     print "Upgrade to $DBversion done (Added Babeltheque syspref)\n";
2295     SetVersion ($DBversion);
2296 }
2297
2298 $DBversion = "3.01.00.017";
2299 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2300     $dbh->do("ALTER TABLE `subscription` ADD `staffdisplaycount` VARCHAR(10) NULL;");
2301     $dbh->do("ALTER TABLE `subscription` ADD `opacdisplaycount` VARCHAR(10) NULL;");
2302     $dbh->do("INSERT INTO `systempreferences` ( `variable` , `value` , `options` , `explanation` , `type` )
2303     VALUES (
2304     'StaffSerialIssueDisplayCount', '3', '', 'Number of serial issues to display per subscription in the Staff client', 'Integer'
2305     );");
2306         $dbh->do("INSERT INTO `systempreferences` ( `variable` , `value` , `options` , `explanation` , `type` )
2307     VALUES (
2308     'OPACSerialIssueDisplayCount', '3', '', 'Number of serial issues to display per subscription in the OPAC', 'Integer'
2309     );");
2310
2311     print "Upgrade to $DBversion done ( Updated table for Serials Display)\n";
2312     SetVersion ($DBversion);
2313 }
2314
2315 $DBversion = "3.01.00.018";
2316 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2317     $dbh->do("ALTER TABLE deletedborrowers ADD `smsalertnumber` varchar(50) default NULL");
2318     print "Upgrade to $DBversion done (added deletedborrowers.smsalertnumber, missed in 3.00.00.091)\n";
2319     SetVersion ($DBversion);
2320 }
2321
2322 $DBversion = "3.01.00.019";
2323 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2324         $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACShowCheckoutName','0','Displays in the OPAC the name of patron who has checked out the material. WARNING: Most sites should leave this off. It is intended for corporate or special sites which need to track who has the item.','','YesNo')");
2325     print "Upgrade to $DBversion done (adding OPACShowCheckoutName systempref)\n";
2326     SetVersion ($DBversion);
2327 }
2328
2329 $DBversion = "3.01.00.020";
2330 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2331     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type)VALUES('LibraryThingForLibrariesID','','See:http://librarything.com/forlibraries/','','free')");
2332     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type)VALUES('LibraryThingForLibrariesEnabled','0','Enable or Disable Library Thing for Libraries Features','','YesNo')");
2333     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type)VALUES('LibraryThingForLibrariesTabbedView','0','Put LibraryThingForLibraries Content in Tabs.','','YesNo')");
2334     print "Upgrade to $DBversion done (adding LibraryThing for Libraries sysprefs)\n";
2335     SetVersion ($DBversion);
2336 }
2337
2338 $DBversion = "3.01.00.021";
2339 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2340     my $enable_reviews = C4::Context->preference('OPACAmazonEnabled') ? '1' : '0';
2341     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('OPACAmazonReviews', '$enable_reviews', 'Display Amazon readers reviews on OPAC','','YesNo')");
2342     print "Upgrade to $DBversion done (adding OPACAmazonReviews syspref)\n";
2343     SetVersion ($DBversion);
2344 }
2345
2346 $DBversion = '3.01.00.022';
2347 if ( C4::Context->preference('Version') < TransformToNum($DBversion) ) {
2348     $dbh->do("ALTER TABLE `labels_conf` MODIFY COLUMN `formatstring` mediumtext DEFAULT NULL");
2349     print "Upgrade to $DBversion done (bug 2945: increase size of labels_conf.formatstring)\n";
2350     SetVersion ($DBversion);
2351 }
2352
2353 $DBversion = '3.01.00.023';
2354 if ( C4::Context->preference('Version') < TransformToNum($DBversion) ) {
2355     $dbh->do("ALTER TABLE biblioitems        MODIFY COLUMN isbn VARCHAR(30) DEFAULT NULL");
2356     $dbh->do("ALTER TABLE deletedbiblioitems MODIFY COLUMN isbn VARCHAR(30) DEFAULT NULL");
2357     $dbh->do("ALTER TABLE import_biblios     MODIFY COLUMN isbn VARCHAR(30) DEFAULT NULL");
2358     $dbh->do("ALTER TABLE suggestions        MODIFY COLUMN isbn VARCHAR(30) DEFAULT NULL");
2359     print "Upgrade to $DBversion done (bug 2765: increase width of isbn column in several tables)\n";
2360     SetVersion ($DBversion);
2361 }
2362
2363 $DBversion = "3.01.00.024";
2364 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2365     $dbh->do("ALTER TABLE labels MODIFY COLUMN batch_id int(10) NOT NULL default 1;");
2366     print "Upgrade to $DBversion done (change labels.batch_id from varchar to int)\n";
2367     SetVersion ($DBversion);
2368 }
2369
2370 $DBversion = '3.01.00.025';
2371 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2372     $dbh->do("INSERT INTO `systempreferences` ( `variable` , `value` , `options` , `explanation` , `type` ) VALUES ( 'ceilingDueDate', '', '', 'If set, date due will not be past this date.  Enter date according to the dateformat System Preference', 'free')");
2373
2374     print "Upgrade to $DBversion done (added ceilingDueDate system preference)\n";
2375     SetVersion ($DBversion);
2376 }
2377
2378 $DBversion = '3.01.00.026';
2379 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2380     $dbh->do("INSERT INTO `systempreferences` ( `variable` , `value` , `options` , `explanation` , `type` ) VALUES ( 'numReturnedItemsToShow', '20', '', 'Number of returned items to show on the check-in page', 'Integer')");
2381
2382     print "Upgrade to $DBversion done (added numReturnedItemsToShow system preference)\n";
2383     SetVersion ($DBversion);
2384 }
2385
2386 $DBversion = '3.01.00.027';
2387 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2388     $dbh->do("ALTER TABLE zebraqueue CHANGE `biblio_auth_number` `biblio_auth_number` bigint(20) unsigned NOT NULL default 0");
2389     print "Upgrade to $DBversion done (Increased size of zebraqueue biblio_auth_number to address bug 3148.)\n";
2390     SetVersion ($DBversion);
2391 }
2392
2393 $DBversion = '3.01.00.028';
2394 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2395     my $enable_reviews = C4::Context->preference('AmazonEnabled') ? '1' : '0';
2396     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('AmazonReviews', '$enable_reviews', 'Display Amazon reviews on staff interface','','YesNo')");
2397     print "Upgrade to $DBversion done (added AmazonReviews)\n";
2398     SetVersion ($DBversion);
2399 }
2400
2401 $DBversion = '3.01.00.029';
2402 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2403     $dbh->do(q( UPDATE language_rfc4646_to_iso639
2404                 SET iso639_2_code = 'spa'
2405                 WHERE rfc4646_subtag = 'es'
2406                 AND   iso639_2_code = 'rus' )
2407             );
2408     print "Upgrade to $DBversion done (fixed bug 2599: using Spanish search limit retrieves Russian results)\n";
2409     SetVersion ($DBversion);
2410 }
2411
2412 $DBversion = "3.01.00.030";
2413 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2414     $dbh->do("INSERT INTO `systempreferences` ( `variable` , `value` , `options` , `explanation` , `type` ) VALUES ( 'AllowNotForLoanOverride', '0', '', 'If ON, Koha will allow the librarian to loan a not for loan item.', 'YesNo')");
2415     print "Upgrade to $DBversion done (added AllowNotForLoanOverride system preference)\n";
2416     SetVersion ($DBversion);
2417 }
2418
2419 $DBversion = "3.01.00.031";
2420 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2421     $dbh->do("ALTER TABLE branch_transfer_limits
2422               MODIFY toBranch   varchar(10) NOT NULL,
2423               MODIFY fromBranch varchar(10) NOT NULL,
2424               MODIFY itemtype   varchar(10) NULL");
2425     print "Upgrade to $DBversion done (fix column widths in branch_transfer_limits)\n";
2426     SetVersion ($DBversion);
2427 }
2428
2429 $DBversion = "3.01.00.032";
2430 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2431     $dbh->do(<<ENDOFRENEWAL);
2432 INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('RenewalPeriodBase', 'now', 'Set whether the renewal date should be counted from the date_due or from the moment the Patron asks for renewal ','date_due|now','Choice');
2433 ENDOFRENEWAL
2434     print "Upgrade to $DBversion done (Change the field)\n";
2435     SetVersion ($DBversion);
2436 }
2437
2438 $DBversion = "3.01.00.033";
2439 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2440     $dbh->do(q/
2441         ALTER TABLE borrower_message_preferences
2442         MODIFY borrowernumber int(11) default NULL,
2443         ADD    categorycode varchar(10) default NULL AFTER borrowernumber,
2444         ADD KEY `categorycode` (`categorycode`),
2445         ADD CONSTRAINT `borrower_message_preferences_ibfk_3`
2446                        FOREIGN KEY (`categorycode`) REFERENCES `categories` (`categorycode`)
2447                        ON DELETE CASCADE ON UPDATE CASCADE
2448     /);
2449     print "Upgrade to $DBversion done (DB changes to allow patron category defaults for messaging preferences)\n";
2450     SetVersion ($DBversion);
2451 }
2452
2453 $DBversion = "3.01.00.034";
2454 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2455     $dbh->do("ALTER TABLE `subscription` ADD COLUMN `graceperiod` INT(11) NOT NULL default '0';");
2456     print "Upgrade to $DBversion done (Adding graceperiod column to subscription table)\n";
2457     SetVersion ($DBversion);
2458 }
2459
2460 $DBversion = '3.01.00.035';
2461 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2462     $dbh->do(q{ ALTER TABLE `subscription` ADD location varchar(80) NULL DEFAULT '' AFTER callnumber; });
2463    print "Upgrade to $DBversion done (Adding location to subscription table)\n";
2464     SetVersion ($DBversion);
2465 }
2466
2467 $DBversion = '3.01.00.036';
2468 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2469     $dbh->do("UPDATE systempreferences SET explanation = 'Choose the default detail view in the staff interface; choose between normal, labeled_marc, marc or isbd'
2470               WHERE variable = 'IntranetBiblioDefaultView'
2471               AND   explanation = 'IntranetBiblioDefaultView'");
2472     $dbh->do("UPDATE systempreferences SET type = 'Choice', options = 'normal|marc|isbd|labeled_marc'
2473               WHERE variable = 'IntranetBiblioDefaultView'");
2474     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type)VALUES('viewISBD','1','Allow display of ISBD view of bibiographic records','','YesNo')");
2475     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type)VALUES('viewLabeledMARC','0','Allow display of labeled MARC view of bibiographic records','','YesNo')");
2476     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type)VALUES('viewMARC','1','Allow display of MARC view of bibiographic records','','YesNo')");
2477     print "Upgrade to $DBversion done (new viewISBD, viewLabeledMARC, viewMARC sysprefs and tweak IntranetBiblioDefaultView)\n";
2478     SetVersion ($DBversion);
2479 }
2480
2481 $DBversion = '3.01.00.037';
2482 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2483     $dbh->do('ALTER TABLE authorised_values ADD KEY `lib` (`lib`)');
2484     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type)VALUES('FilterBeforeOverdueReport','0','Do not run overdue report until filter selected','','YesNo')");
2485     SetVersion ($DBversion);
2486     print "Upgrade to $DBversion done (added FilterBeforeOverdueReport syspref and new index on authorised_values)\n";
2487 }
2488
2489 $DBversion = "3.01.00.038";
2490 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2491     # update branches table
2492     #
2493     $dbh->do("ALTER TABLE branches ADD `branchzip` varchar(25) default NULL AFTER `branchaddress3`");
2494     $dbh->do("ALTER TABLE branches ADD `branchcity` mediumtext AFTER `branchzip`");
2495     $dbh->do("ALTER TABLE branches ADD `branchcountry` text AFTER `branchcity`");
2496     $dbh->do("ALTER TABLE branches ADD `branchurl` mediumtext AFTER `branchemail`");
2497     $dbh->do("ALTER TABLE branches ADD `branchnotes` mediumtext AFTER `branchprinter`");
2498     print "Upgrade to $DBversion done (add ZIP, city, country, URL, and notes column to branches)\n";
2499     SetVersion ($DBversion);
2500 }
2501
2502 $DBversion = '3.01.00.039';
2503 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2504     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type)VALUES('SpineLabelFormat', '<itemcallnumber><copynumber>', '30|10', 'This preference defines the format for the quick spine label printer. Just list the fields you would like to see in the order you would like to see them, surrounded by <>, for example <itemcallnumber>.', 'Textarea')");
2505     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type)VALUES('SpineLabelAutoPrint', '0', '', 'If this setting is turned on, a print dialog will automatically pop up for the quick spine label printer.', 'YesNo')");
2506     SetVersion ($DBversion);
2507     print "Upgrade to $DBversion done (added SpineLabelFormat and SpineLabelAutoPrint sysprefs)\n";
2508 }
2509
2510 $DBversion = '3.01.00.040';
2511 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2512     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type)VALUES('AllowHoldDateInFuture','0','If set a date field is displayed on the Hold screen of the Staff Interface, allowing the hold date to be set in the future.','','YesNo')");
2513     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type)VALUES('OPACAllowHoldDateInFuture','0','If set, along with the AllowHoldDateInFuture system preference, OPAC users can set the date of a hold to be in the future.','','YesNo')");
2514     SetVersion ($DBversion);
2515     print "Upgrade to $DBversion done (AllowHoldDateInFuture and OPACAllowHoldDateInFuture sysprefs)\n";
2516 }
2517
2518 $DBversion = '3.01.00.041';
2519 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2520     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('AWSPrivateKey','','See:  http://aws.amazon.com.  Note that this is required after 2009/08/15 in order to retrieve any enhanced content other than book covers from Amazon.','','free')");
2521     SetVersion ($DBversion);
2522     print "Upgrade to $DBversion done (added AWSPrivateKey syspref - note that if you use enhanced content from Amazon, this should be set right away.)\n";
2523 }
2524
2525 $DBversion = '3.01.00.042';
2526 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2527     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACFineNoRenewals','99999','Fine Limit above which user canmot renew books via OPAC','','Integer')");
2528     SetVersion ($DBversion);
2529     print "Upgrade to $DBversion done (added OPACFineNoRenewals syspref)\n";
2530 }
2531
2532 $DBversion = '3.01.00.043';
2533 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2534     $dbh->do('ALTER TABLE items ADD COLUMN permanent_location VARCHAR(80) DEFAULT NULL AFTER location');
2535     $dbh->do('UPDATE items SET permanent_location = location');
2536     $dbh->do("INSERT INTO `systempreferences` ( `variable` , `value` , `options` , `explanation` , `type` ) VALUES ( 'NewItemsDefaultLocation', '', '', 'If set, all new items will have a location of the given Location Code ( Authorized Value type LOC )', '')");
2537     $dbh->do("INSERT INTO `systempreferences` ( `variable` , `value` , `options` , `explanation` , `type` ) VALUES ( 'InProcessingToShelvingCart', '0', '', 'If set, when any item with a location code of PROC is ''checked in'', it''s location code will be changed to CART.', 'YesNo')");
2538     $dbh->do("INSERT INTO `systempreferences` ( `variable` , `value` , `options` , `explanation` , `type` ) VALUES ( 'ReturnToShelvingCart', '0', '', 'If set, when any item is ''checked in'', it''s location code will be changed to CART.', 'YesNo')");
2539     SetVersion ($DBversion);
2540     print "Upgrade to $DBversion done (amended Item added NewItemsDefaultLocation, InProcessingToShelvingCart, ReturnToShelvingCart sysprefs)\n";
2541 }
2542
2543 $DBversion = '3.01.00.044';
2544 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2545     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type)VALUES( 'DisplayClearScreenButton', '0', 'If set to yes, a clear screen button will appear on the circulation page.', 'If set to yes, a clear screen button will appear on the circulation page.', 'YesNo')");
2546     SetVersion ($DBversion);
2547     print "Upgrade to $DBversion done (added DisplayClearScreenButton system preference)\n";
2548 }
2549
2550 $DBversion = '3.01.00.045';
2551 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2552     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type)VALUES('HidePatronName', '0', '', 'If this is switched on, patron''s cardnumber will be shown instead of their name on the holds and catalog screens', 'YesNo')");
2553     SetVersion ($DBversion);
2554     print "Upgrade to $DBversion done (added a preference to hide the patrons name in the staff catalog)\n";
2555 }
2556
2557 $DBversion = "3.01.00.046";
2558 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2559     # update borrowers table
2560     #
2561     $dbh->do("ALTER TABLE borrowers ADD `country` text AFTER zipcode");
2562     $dbh->do("ALTER TABLE borrowers ADD `B_country` text AFTER B_zipcode");
2563     $dbh->do("ALTER TABLE deletedborrowers ADD `country` text AFTER zipcode");
2564     $dbh->do("ALTER TABLE deletedborrowers ADD `B_country` text AFTER B_zipcode");
2565     print "Upgrade to $DBversion done (add country and B_country to borrowers)\n";
2566     SetVersion ($DBversion);
2567 }
2568
2569 $DBversion = '3.01.00.047';
2570 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2571     $dbh->do("ALTER TABLE items MODIFY itemcallnumber varchar(255);");
2572     $dbh->do("ALTER TABLE deleteditems MODIFY itemcallnumber varchar(255);");
2573     $dbh->do("ALTER TABLE tmp_holdsqueue MODIFY itemcallnumber varchar(255);");
2574     SetVersion ($DBversion);
2575     print " Upgrade to $DBversion done (bug 2761: change max length of itemcallnumber to 255 from 30)\n";
2576 }
2577
2578 $DBversion = '3.01.00.048';
2579 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2580     $dbh->do("UPDATE userflags SET flagdesc='View Catalog (Librarian Interface)' WHERE bit=2;");
2581     $dbh->do("UPDATE userflags SET flagdesc='Edit Catalog (Modify bibliographic/holdings data)' WHERE bit=9;");
2582     $dbh->do("UPDATE userflags SET flagdesc='Allow to edit authorities' WHERE bit=14;");
2583     $dbh->do("UPDATE userflags SET flagdesc='Allow to access to the reports module' WHERE bit=16;");
2584     $dbh->do("UPDATE userflags SET flagdesc='Allow to manage serials subscriptions' WHERE bit=15;");
2585     SetVersion ($DBversion);
2586     print " Upgrade to $DBversion done (bug 2611: fix spelling/capitalization in permission flag descriptions)\n";
2587 }
2588
2589 $DBversion = '3.01.00.049';
2590 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2591     $dbh->do("UPDATE permissions SET description = 'Perform inventory (stocktaking) of your catalog' WHERE code = 'inventory';");
2592      SetVersion ($DBversion);
2593     print "Upgrade to $DBversion done (bug 2611: changed catalogue to catalog per the standard)\n";
2594 }
2595
2596 $DBversion = '3.01.00.050';
2597 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2598     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('OPACSearchForTitleIn','<li class=\"yuimenuitem\">\n<a target=\"_blank\" class=\"yuimenuitemlabel\" href=\"http://worldcat.org/search?q=TITLE\">Other Libraries (WorldCat)</a></li>\n<li class=\"yuimenuitem\">\n<a class=\"yuimenuitemlabel\" href=\"http://www.scholar.google.com/scholar?q=TITLE\" target=\"_blank\">Other Databases (Google Scholar)</a></li>\n<li class=\"yuimenuitem\">\n<a class=\"yuimenuitemlabel\" href=\"http://www.bookfinder.com/search/?author=AUTHOR&amp;title=TITLE&amp;st=xl&amp;ac=qr\" target=\"_blank\">Online Stores (Bookfinder.com)</a></li>','Enter the HTML that will appear in the ''Search for this title in'' box on the detail page in the OPAC.  Enter TITLE, AUTHOR, or ISBN in place of their respective variables in the URL.  Leave blank to disable ''More Searches'' menu.','70|10','Textarea');");
2599     SetVersion ($DBversion);
2600     print "Upgrade to $DBversion done (bug 1934: Add OPACSearchForTitleIn syspref)\n";
2601 }
2602
2603 $DBversion = '3.01.00.051';
2604 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2605     $dbh->do("UPDATE systempreferences SET explanation='Fine limit above which user cannot renew books via OPAC' WHERE variable='OPACFineNoRenewals';");
2606     $dbh->do("UPDATE systempreferences SET explanation='If set to ON, a clear screen button will appear on the circulation page.' WHERE variable='DisplayClearScreenButton';");
2607     SetVersion ($DBversion);
2608     print "Upgrade to $DBversion done (fixed typos in new sysprefs)\n";
2609 }
2610
2611 $DBversion = '3.01.00.052';
2612 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2613     $dbh->do('ALTER TABLE deleteditems ADD COLUMN permanent_location VARCHAR(80) DEFAULT NULL AFTER location');
2614     SetVersion ($DBversion);
2615     print "Upgrade to $DBversion done (bug 3481: add permanent_location column to deleteditems)\n";
2616 }
2617
2618 $DBversion = '3.01.00.053';
2619 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2620     my $upgrade_script = C4::Context->config("intranetdir") . "/installer/data/mysql/labels_upgrade.pl";
2621     system("perl $upgrade_script");
2622     print "Upgrade to $DBversion done (Migrated labels tables and data to new schema.) NOTE: All existing label batches have been assigned to the first branch in the list of branches. This is ONLY true of migrated label batches.\n";
2623     SetVersion ($DBversion);
2624 }
2625
2626 $DBversion = '3.01.00.054';
2627 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2628     $dbh->do("ALTER TABLE borrowers ADD `B_address2` text AFTER B_address");
2629     $dbh->do("ALTER TABLE borrowers ADD `altcontactcountry` text AFTER altcontactzipcode");
2630     $dbh->do("ALTER TABLE deletedborrowers ADD `B_address2` text AFTER B_address");
2631     $dbh->do("ALTER TABLE deletedborrowers ADD `altcontactcountry` text AFTER altcontactzipcode");
2632     SetVersion ($DBversion);
2633     print "Upgrade to $DBversion done (bug 1600, bug 3454: add altcontactcountry and B_address2 to borrowers and deletedborrowers)\n";
2634 }
2635
2636 $DBversion = '3.01.00.055';
2637 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2638     $dbh->do(qq|UPDATE systempreferences set explanation='Enter the HTML that will appear in the ''Search for this title in'' box on the detail page in the OPAC.  Enter {TITLE}, {AUTHOR}, or {ISBN} in place of their respective variables in the URL. Leave blank to disable ''More Searches'' menu.', value='<li><a  href="http://worldcat.org/search?q={TITLE}" target="_blank">Other Libraries (WorldCat)</a></li>\n<li><a href="http://www.scholar.google.com/scholar?q={TITLE}" target="_blank">Other Databases (Google Scholar)</a></li>\n<li><a href="http://www.bookfinder.com/search/?author={AUTHOR}&amp;title={TITLE}&amp;st=xl&amp;ac=qr" target="_blank">Online Stores (Bookfinder.com)</a></li>' WHERE variable='OPACSearchForTitleIn'|);
2639     SetVersion ($DBversion);
2640     print "Upgrade to $DBversion done (changed OPACSearchForTitleIn per requests in bug 1934)\n";
2641 }
2642
2643 $DBversion = '3.01.00.056';
2644 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2645     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('OPACPatronDetails','1','If OFF the patron details tab in the OPAC is disabled.','','YesNo');");
2646     SetVersion ($DBversion);
2647     print "Upgrade to $DBversion done (Bug 1172 : Add OPACPatronDetails syspref)\n";
2648 }
2649
2650 $DBversion = '3.01.00.057';
2651 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2652     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('OPACFinesTab','1','If OFF the patron fines tab in the OPAC is disabled.','','YesNo');");
2653     SetVersion ($DBversion);
2654     print "Upgrade to $DBversion done (Bug 2576 : Add OPACFinesTab syspref)\n";
2655 }
2656
2657 $DBversion = '3.01.00.058';
2658 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2659     $dbh->do("ALTER TABLE `language_subtag_registry` ADD `id` INT( 11 ) NOT NULL AUTO_INCREMENT PRIMARY KEY;");
2660     $dbh->do("ALTER TABLE `language_rfc4646_to_iso639` ADD `id` INT( 11 ) NOT NULL AUTO_INCREMENT PRIMARY KEY;");
2661     $dbh->do("ALTER TABLE `language_descriptions` ADD `id` INT( 11 ) NOT NULL AUTO_INCREMENT PRIMARY KEY;");
2662     SetVersion ($DBversion);
2663     print "Upgrade to $DBversion done (Added primary keys to language tables)\n";
2664 }
2665
2666 $DBversion = '3.01.00.059';
2667 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2668     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type)VALUES('DisplayOPACiconsXSLT', '1', '', 'If ON, displays the format, audience, type icons in XSLT MARC21 results and display pages.', 'YesNo')");
2669     SetVersion ($DBversion);
2670     print "Upgrade to $DBversion done (added DisplayOPACiconsXSLT sysprefs)\n";
2671 }
2672
2673 $DBversion = '3.01.00.060';
2674 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2675     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('AllowAllMessageDeletion','0','Allow any Library to delete any message','','YesNo');");
2676     $dbh->do('DROP TABLE IF EXISTS messages');
2677     $dbh->do("CREATE TABLE messages ( `message_id` int(11) NOT NULL auto_increment,
2678         `borrowernumber` int(11) NOT NULL,
2679         `branchcode` varchar(4) default NULL,
2680         `message_type` varchar(1) NOT NULL,
2681         `message` text NOT NULL,
2682         `message_date` TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP,
2683         PRIMARY KEY (`message_id`)
2684         ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
2685
2686         print "Upgrade to $DBversion done ( Added AllowAllMessageDeletion syspref and messages table )\n";
2687     SetVersion ($DBversion);
2688 }
2689
2690 $DBversion = '3.01.00.061';
2691 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2692     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type)VALUES('ShowPatronImageInWebBasedSelfCheck', '0', 'If ON, displays patron image when a patron uses web-based self-checkout', '', 'YesNo')");
2693         print "Upgrade to $DBversion done ( Added ShowPatronImageInWebBasedSelfCheck system preference )\n";
2694     SetVersion ($DBversion);
2695 }
2696
2697 $DBversion = "3.01.00.062";
2698 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2699     $dbh->do("INSERT INTO permissions (module_bit, code, description) VALUES ( 13, 'manage_csv_profiles', 'Manage CSV export profiles')");
2700     $dbh->do(q/
2701         CREATE TABLE `export_format` (
2702           `export_format_id` int(11) NOT NULL auto_increment,
2703           `profile` varchar(255) NOT NULL,
2704           `description` mediumtext NOT NULL,
2705           `marcfields` mediumtext NOT NULL,
2706           PRIMARY KEY  (`export_format_id`)
2707         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='Used for CSV export';
2708     /);
2709     print "Upgrade to $DBversion done (added csv export profiles)\n";
2710 }
2711
2712 $DBversion = "3.01.00.063";
2713 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2714     $dbh->do("
2715         CREATE TABLE `fieldmapping` (
2716           `id` int(11) NOT NULL auto_increment,
2717           `field` varchar(255) NOT NULL,
2718           `frameworkcode` char(4) NOT NULL default '',
2719           `fieldcode` char(3) NOT NULL,
2720           `subfieldcode` char(1) NOT NULL,
2721           PRIMARY KEY  (`id`)
2722         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
2723              ");
2724     SetVersion ($DBversion);print "Upgrade to $DBversion done (Created table fieldmapping)\n";print "Upgrade to 3.01.00.064 done (Version number skipped: nothing done)\n";
2725 }
2726
2727 $DBversion = '3.01.00.065';
2728 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2729     $dbh->do('ALTER TABLE issuingrules ADD COLUMN `renewalsallowed` smallint(6) NOT NULL default "0" AFTER `issuelength`;');
2730     $sth = $dbh->prepare("SELECT itemtype, renewalsallowed FROM itemtypes");
2731     $sth->execute();
2732
2733     my $sthupd = $dbh->prepare("UPDATE issuingrules SET renewalsallowed = ? WHERE itemtype = ?");
2734
2735     while(my $row = $sth->fetchrow_hashref){
2736         $sthupd->execute($row->{renewalsallowed}, $row->{itemtype});
2737     }
2738
2739     $dbh->do('ALTER TABLE itemtypes DROP COLUMN `renewalsallowed`;');
2740
2741     SetVersion ($DBversion);
2742     print "Upgrade to $DBversion done (Moving allowed renewals from itemtypes to issuingrule)\n";
2743 }
2744
2745 $DBversion = '3.01.00.066';
2746 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2747     $dbh->do('ALTER TABLE issuingrules ADD COLUMN `reservesallowed` smallint(6) NOT NULL default "0" AFTER `renewalsallowed`;');
2748
2749     my $maxreserves = C4::Context->preference('maxreserves');
2750     $sth = $dbh->prepare('UPDATE issuingrules SET reservesallowed = ?;');
2751     $sth->execute($maxreserves);
2752
2753     $dbh->do('DELETE FROM systempreferences WHERE variable = "maxreserves";');
2754
2755     $dbh->do("INSERT INTO systempreferences (variable,value, options, explanation, type) VALUES('ReservesControlBranch','PatronLibrary','ItemHomeLibrary|PatronLibrary','Branch checked for members reservations rights','Choice')");
2756
2757     SetVersion ($DBversion);
2758     print "Upgrade to $DBversion done (Moving max allowed reserves from system preference to issuingrule)\n";
2759 }
2760
2761 $DBversion = "3.01.00.067";
2762 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2763     $dbh->do("INSERT INTO permissions (module_bit, code, description) VALUES ( 13, 'batchmod', 'Perform batch modification of items')");
2764     $dbh->do("INSERT INTO permissions (module_bit, code, description) VALUES ( 13, 'batchdel', 'Perform batch deletion of items')");
2765     print "Upgrade to $DBversion done (added permissions for batch modification and deletion)\n";
2766     SetVersion ($DBversion);
2767 }
2768
2769 $DBversion = "3.01.00.068";
2770 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2771         $dbh->do("ALTER TABLE issuingrules ADD COLUMN `finedays` int(11) default NULL AFTER `fine` ");
2772         print "Upgrade to $DBversion done (Adding finedays in issuingrules table)\n";
2773     SetVersion ($DBversion);
2774 }
2775
2776
2777 $DBversion = "3.01.00.069";
2778 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2779         $dbh->do("INSERT INTO `systempreferences` (`variable`, `value`, `options`, `explanation`, `type`) VALUES ('EnableOpacSearchHistory', '1', '', 'Enable or disable opac search history', 'YesNo')");
2780
2781         my $create = <<SEARCHHIST;
2782 CREATE TABLE IF NOT EXISTS `search_history` (
2783   `userid` int(11) NOT NULL,
2784   `sessionid` varchar(32) NOT NULL,
2785   `query_desc` varchar(255) NOT NULL,
2786   `query_cgi` varchar(255) NOT NULL,
2787   `total` int(11) NOT NULL,
2788   `time` timestamp NOT NULL default CURRENT_TIMESTAMP,
2789   KEY `userid` (`userid`),
2790   KEY `sessionid` (`sessionid`)
2791 ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='Opac search history results';
2792 SEARCHHIST
2793         $dbh->do($create);
2794
2795         print "Upgrade to $DBversion done (added OPAC search history preference and table)\n";
2796 }
2797
2798 $DBversion = "3.01.00.070";
2799 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2800         $dbh->do("ALTER TABLE authorised_values ADD COLUMN `lib_opac` VARCHAR(80) default NULL AFTER `lib`");
2801         print "Upgrade to $DBversion done (Added a lib_opac field in authorised_values table)\n";
2802 }
2803
2804 $DBversion = "3.01.00.071";
2805 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2806         $dbh->do("ALTER TABLE `subscription` ADD `enddate` date default NULL");
2807         $dbh->do("ALTER TABLE subscriptionhistory CHANGE enddate histenddate DATE default NULL");
2808         print "Upgrade to $DBversion done ( Adding enddate to subscription)\n";
2809 }
2810
2811 # Acquisitions update
2812
2813 $DBversion = "3.01.00.072";
2814 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2815     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacPrivacy', '0', 'if ON, allows patrons to define their privacy rules (reading history)',NULL,'YesNo')");
2816     # create a new syspref for the 'Mr anonymous' patron
2817     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('AnonymousPatron', '0', \"Set the identifier (borrowernumber) of the 'Mister anonymous' patron. Used for Suggestion and reading history privacy\",NULL,'')");
2818     # fill AnonymousPatron with AnonymousSuggestion value (copy)
2819     my $sth=$dbh->prepare("SELECT value FROM systempreferences WHERE variable='AnonSuggestions'");
2820     $sth->execute;
2821     my ($value) = $sth->fetchrow() || 0;
2822     $dbh->do("UPDATE systempreferences SET value='$value' WHERE variable='AnonymousPatron'");
2823     # set AnonymousSuggestion do YesNo
2824     # 1st, set the value (1/True if it had a borrowernumber)
2825     $dbh->do("UPDATE systempreferences SET value=1 WHERE variable='AnonSuggestions' AND value>0");
2826     # 2nd, change the type to Choice
2827     $dbh->do("UPDATE systempreferences SET type='YesNo' WHERE variable='AnonSuggestions'");
2828         # borrower reading record privacy : 0 : forever, 1 : laws, 2 : don't keep at all
2829     $dbh->do("ALTER TABLE `borrowers` ADD `privacy` INTEGER NOT NULL DEFAULT 1;");
2830     print "Upgrade to $DBversion done (add new syspref and column in borrowers)\n";
2831     SetVersion ($DBversion);
2832 }
2833
2834 $DBversion = '3.01.00.073';
2835 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2836     $dbh->do('SET FOREIGN_KEY_CHECKS=0 ');
2837     $dbh->do(<<'END_SQL');
2838 CREATE TABLE IF NOT EXISTS `aqcontract` (
2839   `contractnumber` int(11) NOT NULL auto_increment,
2840   `contractstartdate` date default NULL,
2841   `contractenddate` date default NULL,
2842   `contractname` varchar(50) default NULL,
2843   `contractdescription` mediumtext,
2844   `booksellerid` int(11) not NULL,
2845     PRIMARY KEY  (`contractnumber`),
2846         CONSTRAINT `booksellerid_fk1` FOREIGN KEY (`booksellerid`)
2847         REFERENCES `aqbooksellers` (`id`) ON DELETE CASCADE ON UPDATE CASCADE
2848 ) ENGINE=InnoDB DEFAULT CHARSET=utf8 AUTO_INCREMENT=1 ;
2849 END_SQL
2850     $dbh->do('SET FOREIGN_KEY_CHECKS=1 ');
2851     print "Upgrade to $DBversion done (adding aqcontract table)\n";
2852     SetVersion ($DBversion);
2853 }
2854
2855 $DBversion = '3.01.00.074';
2856 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2857     $dbh->do("ALTER TABLE `aqbasket` ADD COLUMN `basketname` varchar(50) default NULL AFTER `basketno`");
2858     $dbh->do("ALTER TABLE `aqbasket` ADD COLUMN `note` mediumtext AFTER `basketname`");
2859     $dbh->do("ALTER TABLE `aqbasket` ADD COLUMN `booksellernote` mediumtext AFTER `note`");
2860     $dbh->do("ALTER TABLE `aqbasket` ADD COLUMN `contractnumber` int(11) AFTER `booksellernote`");
2861     $dbh->do("ALTER TABLE `aqbasket` ADD FOREIGN KEY (`contractnumber`) REFERENCES `aqcontract` (`contractnumber`)");
2862     print "Upgrade to $DBversion done (edit aqbasket table done)\n";
2863     SetVersion ($DBversion);
2864 }
2865
2866 $DBversion = '3.01.00.075';
2867 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2868     $dbh->do("ALTER TABLE `aqorders` ADD COLUMN `uncertainprice` tinyint(1)");
2869
2870     print "Upgrade to $DBversion done (adding uncertainprices)\n";
2871     SetVersion ($DBversion);
2872 }
2873
2874 $DBversion = '3.01.00.076';
2875 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2876     $dbh->do('SET FOREIGN_KEY_CHECKS=0 ');
2877     $dbh->do("CREATE TABLE IF NOT EXISTS `aqbasketgroups` (
2878                          `id` int(11) NOT NULL auto_increment,
2879                          `name` varchar(50) default NULL,
2880                          `closed` tinyint(1) default NULL,
2881                          `booksellerid` int(11) NOT NULL,
2882                          PRIMARY KEY (`id`),
2883                          KEY `booksellerid` (`booksellerid`),
2884                          CONSTRAINT `aqbasketgroups_ibfk_1` FOREIGN KEY (`booksellerid`) REFERENCES `aqbooksellers` (`id`) ON UPDATE CASCADE ON DELETE CASCADE
2885                          ) ENGINE=InnoDB DEFAULT CHARSET=utf8;");
2886     $dbh->do("ALTER TABLE aqbasket ADD COLUMN `basketgroupid` int(11)");
2887     $dbh->do("ALTER TABLE aqbasket ADD FOREIGN KEY (`basketgroupid`) REFERENCES `aqbasketgroups` (`id`) ON UPDATE CASCADE ON DELETE SET NULL");
2888     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('pdfformat','pdfformat::layout2pages','Controls what script is used for printing (basketgroups)','','free')");
2889     $dbh->do('SET FOREIGN_KEY_CHECKS=1 ');
2890     print "Upgrade to $DBversion done (adding basketgroups)\n";
2891     SetVersion ($DBversion);
2892 }
2893 $DBversion = '3.01.00.077';
2894 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
2895
2896     $dbh->do("SET FOREIGN_KEY_CHECKS=0 ");
2897     # create a mapping table holding the info we need to match orders to budgets
2898     $dbh->do('DROP TABLE IF EXISTS fundmapping');
2899     $dbh->do(
2900         q|CREATE TABLE fundmapping AS
2901         SELECT aqorderbreakdown.ordernumber, branchcode, bookfundid, budgetdate, entrydate
2902         FROM aqorderbreakdown JOIN aqorders ON aqorderbreakdown.ordernumber = aqorders.ordernumber|);
2903     # match the new type of the corresponding field
2904     $dbh->do('ALTER TABLE fundmapping modify column bookfundid varchar(30)');
2905     # System did not ensure budgetdate was valid historically
2906     $dbh->do(q|UPDATE fundmapping SET budgetdate = entrydate WHERE budgetdate = '0000-00-00' OR budgetdate IS NULL|);
2907     # We save the map in fundmapping in case you need later processing
2908     $dbh->do(q|ALTER TABLE fundmapping add column aqbudgetid integer|);
2909     # these can speed processing up
2910     $dbh->do(q|CREATE INDEX fundmaporder ON fundmapping (ordernumber)|);
2911     $dbh->do(q|CREATE INDEX fundmapid ON fundmapping (bookfundid)|);
2912
2913     $dbh->do("DROP TABLE IF EXISTS `aqbudgetperiods` ");
2914
2915     $dbh->do(qq|
2916                     CREATE TABLE `aqbudgetperiods` (
2917                     `budget_period_id` int(11) NOT NULL auto_increment,
2918                     `budget_period_startdate` date NOT NULL,
2919                     `budget_period_enddate` date NOT NULL,
2920                     `budget_period_active` tinyint(1) default '0',
2921                     `budget_period_description` mediumtext,
2922                     `budget_period_locked` tinyint(1) default NULL,
2923                     `sort1_authcat` varchar(10) default NULL,
2924                     `sort2_authcat` varchar(10) default NULL,
2925                     PRIMARY KEY  (`budget_period_id`)
2926                     ) ENGINE=InnoDB  DEFAULT CHARSET=utf8 |);
2927
2928    $dbh->do(<<ADDPERIODS);
2929 INSERT INTO aqbudgetperiods (budget_period_startdate,budget_period_enddate,budget_period_active,budget_period_description,budget_period_locked)
2930 SELECT DISTINCT startdate, enddate, NOW() BETWEEN startdate and enddate, concat(startdate," ",enddate),NOT NOW() BETWEEN startdate AND enddate from aqbudget
2931 ADDPERIODS
2932 # SORRY , NO AQBUDGET/AQBOOKFUND -> AQBUDGETS IMPORT JUST YET,
2933 # BUT A NEW CLEAN AQBUDGETS TABLE CREATE FOR NOW..
2934 # DROP TABLE IF EXISTS `aqbudget`;
2935 #CREATE TABLE `aqbudget` (
2936 #  `bookfundid` varchar(10) NOT NULL default ',
2937 #    `startdate` date NOT NULL default 0,
2938 #         `enddate` date default NULL,
2939 #           `budgetamount` decimal(13,2) default NULL,
2940 #                 `aqbudgetid` tinyint(4) NOT NULL auto_increment,
2941 #                   `branchcode` varchar(10) default NULL,
2942     DropAllForeignKeys('aqbudget');
2943   #$dbh->do("drop table aqbudget;");
2944
2945
2946     my $maxbudgetid = $dbh->selectcol_arrayref(<<IDsBUDGET);
2947 SELECT MAX(aqbudgetid) from aqbudget
2948 IDsBUDGET
2949
2950 $$maxbudgetid[0] = 0 if !$$maxbudgetid[0];
2951
2952     $dbh->do(<<BUDGETAUTOINCREMENT);
2953 ALTER TABLE aqbudget AUTO_INCREMENT=$$maxbudgetid[0]
2954 BUDGETAUTOINCREMENT
2955
2956     $dbh->do(<<BUDGETNAME);
2957 ALTER TABLE aqbudget RENAME `aqbudgets`
2958 BUDGETNAME
2959
2960     $dbh->do(<<BUDGETS);
2961 ALTER TABLE `aqbudgets`
2962    CHANGE  COLUMN aqbudgetid `budget_id` int(11) NOT NULL AUTO_INCREMENT,
2963    CHANGE  COLUMN branchcode `budget_branchcode` varchar(10) default NULL,
2964    CHANGE  COLUMN budgetamount `budget_amount` decimal(28,6) NOT NULL default '0.00',
2965    CHANGE  COLUMN bookfundid   `budget_code` varchar(30) default NULL,
2966    ADD     COLUMN `budget_parent_id` int(11) default NULL,
2967    ADD     COLUMN `budget_name` varchar(80) default NULL,
2968    ADD     COLUMN `budget_encumb` decimal(28,6) default '0.00',
2969    ADD     COLUMN `budget_expend` decimal(28,6) default '0.00',
2970    ADD     COLUMN `budget_notes` mediumtext,
2971    ADD     COLUMN `budget_description` mediumtext,
2972    ADD     COLUMN `timestamp` timestamp NOT NULL default CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP,
2973    ADD     COLUMN `budget_amount_sublevel`  decimal(28,6) AFTER `budget_amount`,
2974    ADD     COLUMN `budget_period_id` int(11) default NULL,
2975    ADD     COLUMN `sort1_authcat` varchar(80) default NULL,
2976    ADD     COLUMN `sort2_authcat` varchar(80) default NULL,
2977    ADD     COLUMN `budget_owner_id` int(11) default NULL,
2978    ADD     COLUMN `budget_permission` int(1) default '0';
2979 BUDGETS
2980
2981     $dbh->do(<<BUDGETCONSTRAINTS);
2982 ALTER TABLE `aqbudgets`
2983    ADD CONSTRAINT `aqbudgets_ifbk_1` FOREIGN KEY (`budget_period_id`) REFERENCES `aqbudgetperiods` (`budget_period_id`) ON DELETE CASCADE ON UPDATE CASCADE
2984 BUDGETCONSTRAINTS
2985 #    $dbh->do(<<BUDGETPKDROP);
2986 #ALTER TABLE `aqbudgets`
2987 #   DROP PRIMARY KEY
2988 #BUDGETPKDROP
2989 #    $dbh->do(<<BUDGETPKADD);
2990 #ALTER TABLE `aqbudgets`
2991 #   ADD PRIMARY KEY budget_id
2992 #BUDGETPKADD
2993
2994
2995         my $query_period= $dbh->prepare(qq|SELECT budget_period_id from aqbudgetperiods where budget_period_startdate=? and budget_period_enddate=?|);
2996         my $query_bookfund= $dbh->prepare(qq|SELECT * from aqbookfund where bookfundid=?|);
2997         my $selectbudgets=$dbh->prepare(qq|SELECT * from aqbudgets|);
2998         my $updatebudgets=$dbh->prepare(qq|UPDATE aqbudgets SET budget_period_id= ? , budget_name=?, budget_branchcode=? where budget_id=?|);
2999         $selectbudgets->execute;
3000         while (my $databudget=$selectbudgets->fetchrow_hashref){
3001                 $query_period->execute ($$databudget{startdate},$$databudget{enddate});
3002                 my ($budgetperiodid)=$query_period->fetchrow;
3003                 $query_bookfund->execute ($$databudget{budget_code});
3004                 my $databf=$query_bookfund->fetchrow_hashref;
3005                 my $branchcode=$$databudget{budget_branchcode}||$$databf{branchcode};
3006                 $updatebudgets->execute($budgetperiodid,$$databf{bookfundname},$branchcode,$$databudget{budget_id});
3007         }
3008     $dbh->do(<<BUDGETDROPDATES);
3009 ALTER TABLE `aqbudgets`
3010    DROP startdate,
3011    DROP enddate
3012 BUDGETDROPDATES
3013
3014
3015     $dbh->do("DROP TABLE IF EXISTS `aqbudgets_planning` ");
3016     $dbh->do("CREATE TABLE  `aqbudgets_planning` (
3017                     `plan_id` int(11) NOT NULL auto_increment,
3018                     `budget_id` int(11) NOT NULL,
3019                     `budget_period_id` int(11) NOT NULL,
3020                     `estimated_amount` decimal(28,6) default NULL,
3021                     `authcat` varchar(30) NOT NULL,
3022                     `authvalue` varchar(30) NOT NULL,
3023                                         `display` tinyint(1) DEFAULT 1,
3024                         PRIMARY KEY  (`plan_id`),
3025                         CONSTRAINT `aqbudgets_planning_ifbk_1` FOREIGN KEY (`budget_id`) REFERENCES `aqbudgets` (`budget_id`) ON DELETE CASCADE ON UPDATE CASCADE
3026                         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;");
3027
3028     $dbh->do("ALTER TABLE `aqorders`
3029                     ADD COLUMN `budget_id` tinyint(4) NOT NULL,
3030                     ADD COLUMN `budgetgroup_id` int(11) NOT NULL,
3031                     ADD COLUMN  `sort1_authcat` varchar(10) default NULL,
3032                     ADD COLUMN  `sort2_authcat` varchar(10) default NULL" );
3033                 # We need to map the orders to the budgets
3034                 # For Historic reasons this is more complex than it should be on occasions
3035                 my $budg_arr = $dbh->selectall_arrayref(
3036                     q|SELECT aqbudgets.budget_id, aqbudgets.budget_code, aqbudgetperiods.budget_period_startdate,
3037                     aqbudgetperiods.budget_period_enddate
3038                     FROM aqbudgets JOIN aqbudgetperiods ON aqbudgets.budget_period_id = aqbudgetperiods.budget_period_id
3039                     ORDER BY budget_code, budget_period_startdate|, { Slice => {} });
3040                 # We arbitarily order on start date, this means if you have overlapping periods the order will be
3041                 # linked to the latest matching budget YMMV
3042                 my $b_sth = $dbh->prepare(
3043                     'UPDATE fundmapping set aqbudgetid = ? where bookfundid =? AND budgetdate >= ? AND budgetdate <= ?');
3044                 for my $b ( @{$budg_arr}) {
3045                     $b_sth->execute($b->{budget_id}, $b->{budget_code}, $b->{budget_period_startdate}, $b->{budget_period_enddate});
3046                 }
3047                 # move the budgetids to aqorders
3048                 $dbh->do(q|UPDATE aqorders, fundmapping SET aqorders.budget_id = fundmapping.aqbudgetid
3049                     WHERE aqorders.ordernumber = fundmapping.ordernumber AND fundmapping.aqbudgetid IS NOT NULL|);
3050                 # NB fundmapping is left as an accontants trail also if you have budgetids that werent set
3051                 # you can decide what to do with them
3052
3053      $dbh->do(
3054          q|UPDATE aqorders, aqbudgets SET aqorders.budgetgroup_id = aqbudgets.budget_period_id
3055          WHERE aqorders.budget_id = aqbudgets.budget_id|);
3056                 # cannot do until aqorderbreakdown removed
3057 #    $dbh->do("DROP TABLE aqbookfund ");
3058 #    $dbh->do("ALTER TABLE aqorders  ADD FOREIGN KEY (`budget_id`) REFERENCES `aqbudgets` (`budget_id`) ON UPDATE CASCADE  " ); ????
3059     $dbh->do("SET FOREIGN_KEY_CHECKS=1 ");
3060
3061     print "Upgrade to $DBversion done (Adding new aqbudgetperiods, aqbudgets and aqbudget_planning tables  )\n";
3062     SetVersion ($DBversion);
3063 }
3064
3065
3066
3067 $DBversion = '3.01.00.078';
3068 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
3069     $dbh->do("ALTER TABLE aqbudgetperiods ADD COLUMN budget_period_total decimal(28,6)");
3070     print "Upgrade to $DBversion done (adds 'budget_period_total' column to aqbudgetperiods table)\n";
3071     SetVersion($DBversion);
3072 }
3073
3074
3075 $DBversion = '3.01.00.079';
3076 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
3077     $dbh->do("ALTER TABLE currency ADD COLUMN active  tinyint(1)");
3078
3079     print "Upgrade to $DBversion done (adds 'active' column to currencies table)\n";
3080     SetVersion($DBversion);
3081 }
3082
3083 $DBversion = '3.01.00.080';
3084 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
3085     $dbh->do(<<BUDG_PERM );
3086 INSERT INTO permissions (module_bit, code, description) VALUES
3087             (11, 'vendors_manage', 'Manage vendors'),
3088             (11, 'contracts_manage', 'Manage contracts'),
3089             (11, 'period_manage', 'Manage periods'),
3090             (11, 'budget_manage', 'Manage budgets'),
3091             (11, 'budget_modify', "Modify budget (can't create lines but can modify existing ones)"),
3092             (11, 'planning_manage', 'Manage budget plannings'),
3093             (11, 'order_manage', 'Manage orders & basket'),
3094             (11, 'group_manage', 'Manage orders & basketgroups'),
3095             (11, 'order_receive', 'Manage orders & basket'),
3096             (11, 'budget_add_del', "Add and delete budgets (but can't modify budgets)");
3097 BUDG_PERM
3098
3099     print "Upgrade to $DBversion done (adds permissions for the acquisitions module)\n";
3100     SetVersion($DBversion);
3101 }
3102
3103
3104 $DBversion = '3.01.00.081';
3105 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
3106     $dbh->do("ALTER TABLE aqbooksellers ADD COLUMN `gstrate` decimal(6,4) default NULL");
3107     if (my $gist=C4::Context->preference("gist")){
3108                 my $sql=$dbh->prepare("UPDATE aqbooksellers set `gstrate`=? ");
3109         $sql->execute($gist) ;
3110         }
3111     print "Upgrade to $DBversion done (added per-supplier gstrate setting)\n";
3112     SetVersion($DBversion);
3113 }
3114
3115 $DBversion = "3.01.00.082";
3116 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3117     if (C4::Context->preference("opaclanguages") eq "fr") {
3118         $dbh->do(qq#INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('AcqCreateItem','ordering',"Définit quand l'exemplaire est créé : à la commande, à la livraison, au catalogage",'ordering|receiving|cataloguing','Choice')#);
3119     } else {
3120         $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('AcqCreateItem','ordering','Define when the item is created : when ordering, when receiving, or in cataloguing module','ordering|receiving|cataloguing','Choice')");
3121     }
3122     print "Upgrade to $DBversion done (adding ReservesNeedReturns systempref, in circulation)\n";
3123     SetVersion ($DBversion);
3124 }
3125
3126 $DBversion = "3.01.00.083";
3127 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3128     $dbh->do(qq|
3129  CREATE TABLE `aqorders_items` (
3130   `ordernumber` int(11) NOT NULL,
3131   `itemnumber` int(11) NOT NULL,
3132   `timestamp` timestamp NOT NULL default CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP,
3133   PRIMARY KEY  (`itemnumber`),
3134   KEY `ordernumber` (`ordernumber`)
3135 ) ENGINE=InnoDB DEFAULT CHARSET=utf8   |
3136     );
3137
3138     $dbh->do(qq| DROP TABLE aqorderbreakdown |);
3139     $dbh->do('DROP TABLE aqbookfund');
3140     print "Upgrade to $DBversion done (New aqorders_items table for acqui)\n";
3141     SetVersion ($DBversion);
3142 }
3143
3144 $DBversion = "3.01.00.084";
3145 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3146     $dbh->do(  qq# INSERT INTO `systempreferences` VALUES ('CurrencyFormat','US','US|FR','Determines the display format of currencies. eg: ''36000'' is displayed as ''360 000,00''  in ''FR'' or 360,000.00''  in ''US''.','Choice')  #);
3147
3148     print "Upgrade to $DBversion done (CurrencyFormat syspref added)\n";
3149     SetVersion ($DBversion);
3150 }
3151
3152 $DBversion = "3.01.00.085";
3153 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3154     $dbh->do("ALTER table aqorders drop column title");
3155     $dbh->do("ALTER TABLE `aqorders` CHANGE `budget_id` `budget_id` INT( 11 ) NOT NULL");
3156     print "Upgrade to $DBversion done update budget_id size that should not be a tinyint\n";
3157     SetVersion ($DBversion);
3158 }
3159
3160 $DBversion = "3.01.00.086";
3161 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3162     $dbh->do(<<SUGGESTIONS);
3163 ALTER table suggestions
3164     ADD budgetid INT(11),
3165     ADD branchcode VARCHAR(10) default NULL,
3166     ADD acceptedby INT(11) default NULL,
3167     ADD accepteddate date default NULL,
3168     ADD suggesteddate date default NULL,
3169     ADD manageddate date default NULL,
3170     ADD rejectedby INT(11) default NULL,
3171     ADD rejecteddate date default NULL,
3172     ADD collectiontitle text default NULL,
3173     ADD itemtype VARCHAR(30) default NULL
3174     ;
3175 SUGGESTIONS
3176     print "Upgrade to $DBversion done (Suggestions)\n";
3177     SetVersion ($DBversion);
3178 }
3179
3180 $DBversion = "3.01.00.087";
3181 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3182     $dbh->do("ALTER table aqbudgets drop column budget_amount_sublevel;");
3183     print "Upgrade to $DBversion done (Drop column budget_amount_sublevel from aqbudgets)\n";
3184     SetVersion ($DBversion);
3185 }
3186
3187 $DBversion = "3.01.00.088";
3188 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3189     $dbh->do(  qq# INSERT INTO `systempreferences` VALUES ('intranetbookbag','1','','If ON, enables display of Cart feature in the intranet','YesNo')  #);
3190
3191     print "Upgrade to $DBversion done (intranetbookbag syspref added)\n";
3192     SetVersion ($DBversion);
3193 }
3194
3195 $DBversion = "3.01.00.090";
3196 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3197 $dbh->do("
3198        INSERT INTO `permissions` (`module_bit`, `code`, `description`) VALUES
3199                 (16, 'execute_reports', 'Execute SQL reports'),
3200                 (16, 'create_reports', 'Create SQL Reports')
3201         ");
3202
3203     print "Upgrade to $DBversion done (granular permissions for guided reports added)\n";
3204     SetVersion ($DBversion);
3205 }
3206
3207 $DBversion = "3.01.00.091";
3208 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3209 $dbh->do("
3210         UPDATE `systempreferences` SET `options` = 'holdings|serialcollection|subscriptions'
3211         WHERE `systempreferences`.`variable` = 'opacSerialDefaultTab' LIMIT 1
3212         ");
3213
3214     print "Upgrade to $DBversion done (opac-detail default tag updated)\n";
3215     SetVersion ($DBversion);
3216 }
3217
3218 $DBversion = "3.01.00.092";
3219 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3220     if (C4::Context->preference("opaclanguages") =~ /fr/) {
3221         $dbh->do(qq{
3222 INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('RoutingListAddReserves','1','Si activé, des reservations sont automatiquement créées pour chaque lecteur de la liste de circulation d''un numéro de périodique','','YesNo');
3223         });
3224         }else{
3225         $dbh->do(qq{
3226 INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('RoutingListAddReserves','1','If ON the patrons on routing lists are automatically added to holds on the issue.','','YesNo');
3227         });
3228         }
3229     print "Upgrade to $DBversion done (Added RoutingListAddReserves syspref)\n";
3230     SetVersion ($DBversion);
3231 }
3232
3233 $DBversion = "3.01.00.093";
3234 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3235         $dbh->do(qq{
3236         ALTER TABLE biblioitems ADD INDEX issn_idx (issn);
3237         });
3238     print "Upgrade to $DBversion done (added index to ISSN)\n";
3239     SetVersion ($DBversion);
3240 }
3241
3242 $DBversion = "3.01.00.094";
3243 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3244         $dbh->do(qq{
3245         ALTER TABLE aqbasketgroups ADD deliveryplace VARCHAR(10) default NULL, ADD deliverycomment VARCHAR(255) default NULL;
3246         });
3247
3248     print "Upgrade to $DBversion done (adding deliveryplace deliverycomment to basketgroups)\n";
3249     SetVersion ($DBversion);
3250 }
3251
3252 $DBversion = "3.01.00.095";
3253 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3254         $dbh->do(qq{
3255         ALTER TABLE items ADD stocknumber VARCHAR(32) DEFAULT NULL COMMENT "stores the inventory number";
3256         });
3257         $dbh->do(qq{
3258         ALTER TABLE items ADD UNIQUE INDEX itemsstocknumberidx (stocknumber);
3259         });
3260         $dbh->do(qq{
3261         ALTER TABLE deleteditems ADD stocknumber VARCHAR(32) DEFAULT NULL COMMENT "stores the inventory number of deleted items";
3262         });
3263         $dbh->do(qq{
3264         ALTER TABLE deleteditems ADD UNIQUE INDEX deleteditemsstocknumberidx (stocknumber);
3265         });
3266         if (C4::Context->preference('marcflavour') eq 'UNIMARC'){
3267                 $dbh->do(qq{
3268         INSERT IGNORE INTO marc_subfield_structure (frameworkcode,tagfield, tagsubfield, tab, repeatable, mandatory,kohafield)
3269         SELECT DISTINCT (frameworkcode),995,"j",10,0,0,"items.stocknumber" from biblio_framework ;
3270                 });
3271                 #Previously, copynumber was used as stocknumber
3272                 $dbh->do(qq{
3273         UPDATE items set stocknumber=copynumber;
3274                 });
3275                 $dbh->do(qq{
3276         UPDATE items set copynumber=NULL;
3277                 });
3278         }
3279     print "Upgrade to $DBversion done (stocknumber field added)\n";
3280     SetVersion ($DBversion);
3281 }
3282
3283 $DBversion = "3.01.00.096";
3284 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3285     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('OrderPdfTemplate','','Uploads a PDF template to use for printing baskets','NULL','Upload')");
3286     $dbh->do("UPDATE systempreferences SET variable='OrderPdfFormat' WHERE variable='pdfformat'");
3287     print "Upgrade to $DBversion done (PDF orders system preferences added and updated)\n";
3288     SetVersion ($DBversion);
3289 }
3290
3291 $DBversion = "3.01.00.097";
3292 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3293         $dbh->do(qq{
3294         ALTER TABLE aqbasketgroups ADD billingplace VARCHAR(10) NOT NULL AFTER deliverycomment;
3295         });
3296
3297     print "Upgrade to $DBversion done (Adding billingplace to aqbasketgroups)\n";
3298     SetVersion ($DBversion);
3299 }
3300
3301 $DBversion = "3.01.00.098";
3302 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3303         $dbh->do(qq{
3304         ALTER TABLE auth_subfield_structure MODIFY frameworkcode VARCHAR(10) NULL;
3305         });
3306
3307     print "Upgrade to $DBversion done (changing frameworkcode length in auth_subfield_structure)\n";
3308     SetVersion ($DBversion);
3309 }
3310
3311 $DBversion = "3.01.00.099";
3312 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3313         $dbh->do(qq{
3314                 INSERT INTO `permissions` (`module_bit`, `code`, `description`) VALUES
3315                 (9, 'edit_catalogue', 'Edit catalogue'),
3316                 (9, 'fast_cataloging', 'Fast cataloging')
3317         });
3318
3319     print "Upgrade to $DBversion done (granular permissions for cataloging added)\n";
3320     SetVersion ($DBversion);
3321 }
3322
3323 $DBversion = "3.01.00.100";
3324 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3325         $dbh->do("INSERT INTO `systempreferences` (`variable`, `value`, `options`, `explanation`, `type`) VALUES ('casAuthentication', '0', '', 'Enable or disable CAS authentication', 'YesNo'), ('casLogout', '1', '', 'Does a logout from Koha should also log out of CAS ?', 'YesNo'), ('casServerUrl', 'https://localhost:8443/cas', '', 'URL of the cas server', 'Free')");
3326         print "Upgrade to $DBversion done (added CAS authentication system preferences)\n";
3327     SetVersion ($DBversion);
3328 }
3329
3330 $DBversion = "3.01.00.101";
3331 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3332         $dbh->do(
3333         "INSERT INTO systempreferences
3334            (variable, value, options, explanation, type)
3335          VALUES (
3336             'OverdueNoticeBcc', '', '',
3337             'Email address to Bcc outgoing notices sent by email',
3338             'free')
3339          ");
3340         print "Upgrade to $DBversion done (added OverdueNoticeBcc system preferences)\n";
3341     SetVersion ($DBversion);
3342 }
3343 $DBversion = "3.01.00.102";
3344 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3345     $dbh->do(
3346     "UPDATE permissions set description = 'Edit catalog (Modify bibliographic/holdings data)' where module_bit = 9 and code = 'edit_catalogue'"
3347     );
3348         print "Upgrade to $DBversion done (fixed spelling error in edit_catalogue permission)\n";
3349     SetVersion ($DBversion);
3350 }
3351
3352 $DBversion = "3.01.00.103";
3353 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3354         $dbh->do("INSERT INTO permissions (module_bit, code, description) VALUES (13, 'moderate_tags', 'Moderate patron tags')");
3355         print "Upgrade to $DBversion done (adding patron permissions for tags tool)\n";
3356     SetVersion ($DBversion);
3357 }
3358
3359 $DBversion = "3.01.00.104";
3360 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3361
3362     my ($maninv_count, $borrnotes_count);
3363     eval { $maninv_count = $dbh->do("SELECT 1 FROM authorised_values WHERE category='MANUAL_INV'"); };
3364     if ($maninv_count == 0) {
3365         $dbh->do("INSERT INTO authorised_values (category,authorised_value,lib) VALUES ('MANUAL_INV','Copier Fees','.25')");
3366     }
3367     eval { $borrnotes_count = $dbh->do("SELECT 1 FROM authorised_values WHERE category='BOR_NOTES'"); };
3368     if ($borrnotes_count == 0) {
3369         $dbh->do("INSERT INTO authorised_values (category,authorised_value,lib) VALUES ('BOR_NOTES','ADDR','Address Notes')");
3370     }
3371
3372     $dbh->do("INSERT INTO authorised_values (category,authorised_value,lib) VALUES ('LOC','CART','Book Cart')");
3373     $dbh->do("INSERT INTO authorised_values (category,authorised_value,lib) VALUES ('LOC','PROC','Processing Center')");
3374
3375         print "Upgrade to $DBversion done ( add defaults to authorized values for MANUAL_INV and BOR_NOTES and add new default LOC authorized values for shelf to cart processing )\n";
3376         SetVersion ($DBversion);
3377 }
3378
3379
3380 $DBversion = "3.01.00.105";
3381 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3382     $dbh->do("
3383       CREATE TABLE `collections` (
3384         `colId` int(11) NOT NULL auto_increment,
3385         `colTitle` varchar(100) NOT NULL default '',
3386         `colDesc` text NOT NULL,
3387         `colBranchcode` varchar(4) default NULL COMMENT 'branchcode for branch where item should be held.',
3388         PRIMARY KEY  (`colId`)
3389       ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
3390     ");
3391
3392     $dbh->do("
3393       CREATE TABLE `collections_tracking` (
3394         `ctId` int(11) NOT NULL auto_increment,
3395         `colId` int(11) NOT NULL default '0' COMMENT 'collections.colId',
3396         `itemnumber` int(11) NOT NULL default '0' COMMENT 'items.itemnumber',
3397         PRIMARY KEY  (`ctId`)
3398       ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
3399     ");
3400     $dbh->do("
3401         INSERT INTO permissions (module_bit, code, description)
3402         VALUES ( 13, 'rotating_collections', 'Manage Rotating collections')" );
3403         print "Upgrade to $DBversion done (added collection and collection_tracking tables for rotating collections functionality)\n";
3404     SetVersion ($DBversion);
3405 }
3406 $DBversion = "3.01.00.106";
3407 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3408         $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type) VALUES ( 'OpacAddMastheadLibraryPulldown', '0', '', 'Adds a pulldown menu to select the library to search on the opac masthead.', 'YesNo' )");
3409         print "Upgrade to $DBversion done (added OpacAddMastheadLibraryPulldown system preferences)\n";
3410     SetVersion ($DBversion);
3411 }
3412
3413 $DBversion = '3.01.00.107';
3414 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3415     my $upgrade_script = C4::Context->config("intranetdir") . "/installer/data/mysql/patroncards_upgrade.pl";
3416     system("perl $upgrade_script");
3417     print "Upgrade to $DBversion done (Migrated labels and patroncards tables and data to new schema.)\n";
3418     SetVersion ($DBversion);
3419 }
3420
3421 $DBversion = '3.01.00.108';
3422 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3423         $dbh->do(qq{
3424     ALTER TABLE `export_format` ADD `csv_separator` VARCHAR( 2 ) NOT NULL AFTER `marcfields` ,
3425     ADD `field_separator` VARCHAR( 2 ) NOT NULL AFTER `csv_separator` ,
3426     ADD `subfield_separator` VARCHAR( 2 ) NOT NULL AFTER `field_separator`
3427     });
3428         print "Upgrade to $DBversion done (added separators for csv export)\n";
3429     SetVersion ($DBversion);
3430 }
3431
3432 $DBversion = "3.01.00.109";
3433 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3434         $dbh->do(qq{
3435         ALTER TABLE `export_format` ADD `encoding` VARCHAR(255) NOT NULL AFTER `subfield_separator`
3436         });
3437         print "Upgrade to $DBversion done (added encoding for csv export)\n";
3438     SetVersion ($DBversion);
3439 }
3440
3441 $DBversion = '3.01.00.110';
3442 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3443     $dbh->do('ALTER TABLE `categories` ADD COLUMN `enrolmentperioddate` DATE NULL DEFAULT NULL AFTER `enrolmentperiod`');
3444     print "Upgrade to $DBversion done (Add enrolment period date support)\n";
3445     SetVersion ($DBversion);
3446 }
3447
3448 $DBversion = '3.01.00.111';
3449 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3450     print "Upgrade to $DBversion done (mark DBrev for 3.2-alpha release)\n";
3451     SetVersion ($DBversion);
3452 }
3453
3454 $DBversion = '3.01.00.112';
3455 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3456         $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type) VALUES ('SpineLabelShowPrintOnBibDetails', '0', '', 'If turned on, a \"Print Label\" link will appear for each item on the bib details page in the staff interface.', 'YesNo');");
3457         print "Upgrade to $DBversion done ( added Show Spine Label Printer on Bib Items Details preferences )\n";
3458     SetVersion ($DBversion);
3459 }
3460
3461 $DBversion = '3.01.00.113';
3462 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3463     my $value = C4::Context->preference("XSLTResultsDisplay");
3464     $dbh->do(
3465         "INSERT INTO systempreferences (variable,value,type)
3466          VALUES('OPACXSLTResultsDisplay',?,'YesNo')", {}, $value ? 1 : 0);
3467     $value = C4::Context->preference("XSLTDetailsDisplay");
3468     $dbh->do(
3469         "INSERT INTO systempreferences (variable,value,type)
3470          VALUES('OPACXSLTDetailsDisplay',?,'YesNo')", {}, $value ? 1 : 0);
3471     print "Upgrade to $DBversion done (added two new syspref: OPACXSLTResultsDisplay and OPACXSLTDetailDisplay). You may have to go in Admin > System preference to tweak XSLT related syspref both in OPAC and Search tabs.\n";
3472     SetVersion ($DBversion);
3473 }
3474
3475 $DBversion = '3.01.00.114';
3476 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3477     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type)VALUES('AutoSelfCheckAllowed', '0', 'For corporate and special libraries which want web-based self-check available from any PC without the need for a manual staff login. Most libraries will want to leave this turned off. If on, requires self-check ID and password to be entered in AutoSelfCheckID and AutoSelfCheckPass sysprefs.', '', 'YesNo')");
3478     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('AutoSelfCheckID','','Staff ID with circulation rights to be used for automatic web-based self-check. Only applies if AutoSelfCheckAllowed syspref is turned on.','','free')");
3479     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('AutoSelfCheckPass','','Password to be used for automatic web-based self-check. Only applies if AutoSelfCheckAllowed syspref is turned on.','','free')");
3480         print "Upgrade to $DBversion done ( Added AutoSelfCheckAllowed, AutoSelfCheckID, and AutoShelfCheckPass system preference )\n";
3481     SetVersion ($DBversion);
3482 }
3483
3484 $DBversion = '3.01.00.115';
3485 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3486     $dbh->do('UPDATE aqorders SET quantityreceived = 0 WHERE quantityreceived IS NULL');
3487     $dbh->do('ALTER TABLE aqorders MODIFY COLUMN quantityreceived smallint(6) NOT NULL DEFAULT 0');
3488         print "Upgrade to $DBversion done ( Default aqorders.quantityreceived to 0 )\n";
3489     SetVersion ($DBversion);
3490 }
3491
3492 $DBversion = '3.01.00.116';
3493 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3494         if (C4::Context->preference('OrderPdfFormat') eq 'pdfformat::example'){
3495                 $dbh->do("UPDATE `systempreferences` set value='pdfformat::layout2pages' WHERE variable='OrderPdfFormat'");
3496         }
3497         print "Upgrade to $DBversion done (corrected default OrderPdfFormat value if still set wrong )\n";
3498     SetVersion ($DBversion);
3499 }
3500
3501 $DBversion = '3.01.00.117';
3502 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3503     $dbh->do("UPDATE language_rfc4646_to_iso639 SET iso639_2_code = 'por' WHERE rfc4646_subtag='pt' ");
3504     print "Upgrade to $DBversion done (corrected ISO 639-2 language code for Portuguese)\n";
3505     SetVersion ($DBversion);
3506 }
3507
3508 $DBversion = '3.01.00.118';
3509 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3510     my ($count) = $dbh->selectrow_array("SELECT count(*) FROM information_schema.columns
3511                                          WHERE table_name = 'aqbudgets_planning'
3512                                          AND column_name = 'display'");
3513     if ($count < 1) {
3514         $dbh->do("ALTER TABLE aqbudgets_planning ADD COLUMN display tinyint(1) DEFAULT 1");
3515     }
3516     print "Upgrade to $DBversion done (bug 4203: add display column to aqbudgets_planning if missing)\n";
3517     SetVersion ($DBversion);
3518 }
3519
3520 $DBversion = '3.01.00.119';
3521 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3522     eval{require Locale::Currency::Format};
3523     if (!$@) {
3524         print "Upgrade to $DBversion done (Locale::Currency::Format installed.)\n";
3525         SetVersion ($DBversion);
3526     }
3527     else {
3528         print "Upgrade to $DBversion done.\n";
3529         print "NOTICE: The Locale::Currency::Format package is not installed on your system or not found in \@INC.\nThis dependency is required in order to include fine information in overdue notices.\nPlease ask your system administrator to install this package.\n";
3530         SetVersion ($DBversion);
3531     }
3532 }
3533
3534 $DBversion = '3.01.00.120';
3535 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3536     $dbh->do(q{
3537 INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('soundon','0','Enable circulation sounds during checkin and checkout in the staff interface.  Not supported by all web browsers yet.','','YesNo');
3538 });
3539     print "Upgrade to $DBversion done (bug 1080: add soundon system preference for circulation sounds)\n";
3540     SetVersion ($DBversion);
3541 }
3542
3543 $DBversion = '3.01.00.121';
3544 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3545     $dbh->do("ALTER TABLE `reserves` ADD `expirationdate` DATE DEFAULT NULL");
3546     $dbh->do("ALTER TABLE `reserves` ADD `lowestPriority` tinyint(1) NOT NULL");
3547     $dbh->do("ALTER TABLE `old_reserves` ADD `expirationdate` DATE DEFAULT NULL");
3548     $dbh->do("ALTER TABLE `old_reserves` ADD `lowestPriority` tinyint(1) NOT NULL");
3549     print "Upgrade to $DBversion done ( Added Additional Fields to Reserves tables )\n";
3550     SetVersion ($DBversion);
3551 }
3552
3553 $DBversion = '3.01.00.122';
3554 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3555     $dbh->do(q{
3556       INSERT INTO systempreferences (variable,value,explanation,options,type)
3557       VALUES ('OAI-PMH:ConfFile', '', 'If empty, Koha OAI Server operates in normal mode, otherwise it operates in extended mode.','','File');
3558 });
3559     print "Upgrade to $DBversion done. — Add a new system preference OAI-PMF:ConfFile\n";
3560     SetVersion ($DBversion);
3561 }
3562
3563 $DBversion = "3.01.00.123";
3564 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3565     $dbh->do("INSERT INTO `permissions` (`module_bit`, `code`, `description`) VALUES
3566         (6, 'place_holds', 'Place holds for patrons')");
3567     $dbh->do("INSERT INTO `permissions` (`module_bit`, `code`, `description`) VALUES
3568         (6, 'modify_holds_priority', 'Modify holds priority')");
3569     $dbh->do("UPDATE `userflags` SET `flagdesc` = 'Place and modify holds for patrons' WHERE `flag` = 'reserveforothers'");
3570     print "Upgrade to $DBversion done (Add granular permission for holds modification and update description of reserveforothers permission)\n";
3571     SetVersion ($DBversion);
3572 }
3573
3574 $DBversion = '3.01.00.124';
3575 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3576     $dbh->do("
3577         INSERT INTO `letter` (module, code, name, title, content)         VALUES('reserves', 'HOLDPLACED', 'Hold Placed on Item', 'Hold Placed on Item','A hold has been placed on the following item : <<title>> (<<biblionumber>>) by the user <<firstname>> <<surname>> (<<cardnumber>>).');
3578     ");
3579     print "Upgrade to $DBversion done (bug 3242: add HOLDPLACED letter template, which is used when emailLibrarianWhenHoldIsPlaced is enabled)\n";
3580     SetVersion ($DBversion);
3581 }
3582
3583 $DBversion = '3.01.00.125';
3584 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3585     $dbh->do("
3586         INSERT INTO `systempreferences` ( `variable` , `value` , `options` , `explanation` , `type` ) VALUES ( 'PrintNoticesMaxLines', '0', '', 'If greater than 0, sets the maximum number of lines an overdue notice will print. If the number of items is greater than this number, the notice will end with a warning asking the borrower to check their online account for a full list of overdue items.', 'Integer' );
3587     ");
3588     $dbh->do("
3589         INSERT INTO message_transport_types (message_transport_type) values ('print');
3590     ");
3591     print "Upgrade to $DBversion done (bug 3482: Printable hold and overdue notices)\n";
3592     SetVersion ($DBversion);
3593 }
3594
3595 $DBversion = "3.01.00.126";
3596 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3597         $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('ILS-DI','0','Enable ILS-DI services. See http://your.opac.name/cgi-bin/koha/ilsdi.pl for online documentation.','','YesNo')");
3598         $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('ILS-DI:AuthorizedIPs','127.0.0.1','A comma separated list of IP addresses authorized to access the web services.','','free')");
3599
3600     print "Upgrade to $DBversion done (Adding ILS-DI updates and ILS-DI:AuthorizedIPs)\n";
3601     SetVersion ($DBversion);
3602 }
3603
3604 $DBversion = '3.01.00.127';
3605 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3606     $dbh->do("ALTER TABLE messages CHANGE branchcode branchcode varchar(10);");
3607     print "Upgrade to $DBversion done (bug 4190: messages in patron account did not work with branchcodes > 4)\n";
3608     SetVersion ($DBversion);
3609 }
3610
3611 $DBversion = '3.01.00.128';
3612 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3613     $dbh->do('CREATE INDEX budget_id ON aqorders (budget_id );');
3614     print "Upgrade to $DBversion done (bug 4331: index orders by budget_id)\n";
3615     SetVersion ($DBversion);
3616 }
3617
3618 $DBversion = "3.01.00.129";
3619 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3620         $dbh->do("UPDATE `permissions` SET `code` = 'items_batchdel' WHERE `permissions`.`module_bit` =13 AND `permissions`.`code` = 'batchdel' LIMIT 1 ;");
3621         $dbh->do("UPDATE `permissions` SET `code` = 'items_batchmod' WHERE `permissions`.`module_bit` =13 AND `permissions`.`code` = 'batchmod' LIMIT 1 ;");
3622         print "Upgrade to $DBversion done (Change permissions names for item batch modification / deletion)\n";
3623
3624     SetVersion ($DBversion);
3625 }
3626
3627 $DBversion = "3.01.00.130";
3628 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3629     $dbh->do("UPDATE reserves SET expirationdate = NULL WHERE expirationdate = '0000-00-00'");
3630     print "Upgrade to $DBversion done (change reserves.expirationdate values of 0000-00-00 to NULL (bug 1532)\n";
3631     SetVersion ($DBversion);
3632 }
3633
3634 $DBversion = "3.01.00.131";
3635 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3636         $dbh->do(q{
3637 INSERT IGNORE INTO message_transport_types (message_transport_type) VALUES ('print'),('feed');
3638     });
3639     print "Upgrade to $DBversion done (adding print and feed message transport types)\n";
3640     SetVersion ($DBversion);
3641 }
3642
3643 $DBversion = "3.01.00.132";
3644 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3645         $dbh->do(q{
3646     ALTER TABLE language_descriptions ADD INDEX subtag_type_lang (subtag, type, lang);
3647     });
3648     print "Upgrade to $DBversion done (Adding index to language_descriptions table)\n";
3649     SetVersion ($DBversion);
3650 }
3651
3652 $DBversion = '3.01.00.133';
3653 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3654     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('OverduesBlockCirc','noblock','When checking out an item should overdues block checkout, generate a confirmation dialogue, or allow checkout','noblock|confirmation|block','Choice')");
3655     print "Upgrade to $DBversion done (bug 4405: added OverduesBlockCirc syspref to control whether circulation is blocked if a borrower has overdues)\n";
3656     SetVersion ($DBversion);
3657 }
3658
3659 $DBversion = '3.01.00.134';
3660 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3661     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('DisplayMultiPlaceHold','1','Display the ability to place multiple holds or not','','YesNo')");
3662     print "Upgrade to $DBversion done (adding syspref DisplayMultiPlaceHold to control whether multiple holds can be placed from the search results page)\n";
3663     SetVersion ($DBversion);
3664 }
3665
3666 $DBversion = '3.01.00.135';
3667 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3668     $dbh->do("
3669         INSERT INTO `letter` (module, code, name, title, content) VALUES
3670 ('reserves', 'HOLD_PRINT', 'Hold Available for Pickup (print notice)', 'Hold Available for Pickup (print notice)', '<<branches.branchname>>\r\n<<branches.branchaddress1>>\r\n<<branches.branchaddress2>>\r\n\r\n\r\nChange Service Requested\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n<<borrowers.firstname>> <<borrowers.surname>>\r\n<<borrowers.address>>\r\n<<borrowers.city>> <<borrowers.zipcode>>\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n\r\n<<borrowers.firstname>> <<borrowers.surname>> <<borrowers.cardnumber>>\r\n\r\nYou have a hold available for pickup as of <<reserves.waitingdate>>:\r\n\r\nTitle: <<biblio.title>>\r\nAuthor: <<biblio.author>>\r\nCopy: <<items.copynumber>>\r\n')
3671 ");
3672     print "Upgrade to $DBversion done (bug 4377: added HOLD_PRINT message template)\n";
3673     SetVersion ($DBversion);
3674 }
3675
3676 $DBversion = '3.01.00.136';
3677 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3678     $dbh->do(qq{
3679 INSERT INTO permissions (module_bit, code, description) VALUES
3680    ( 9, 'edit_items', 'Edit Items');});
3681     print "Upgrade to $DBversion done (Adding a new permission to edit items)\n";
3682     SetVersion ($DBversion);
3683 }
3684
3685 $DBversion = "3.01.00.137";
3686 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3687         $dbh->do("
3688           INSERT INTO permissions (module_bit, code, description) VALUES
3689           (15, 'check_expiration', 'Check the expiration of a serial'),
3690           (15, 'claim_serials', 'Claim missing serials'),
3691           (15, 'create_subscription', 'Create a new subscription'),
3692           (15, 'delete_subscription', 'Delete an existing subscription'),
3693           (15, 'edit_subscription', 'Edit an existing subscription'),
3694           (15, 'receive_serials', 'Serials receiving'),
3695           (15, 'renew_subscription', 'Renew a subscription'),
3696           (15, 'routing', 'Routing');
3697                  ");
3698     print "Upgrade to $DBversion done (adding granular permissions for serials)\n";
3699     SetVersion ($DBversion);
3700 }
3701
3702 $DBversion = "3.01.00.138";
3703 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3704     $dbh->do("DELETE FROM systempreferences WHERE variable = 'GranularPermissions'");
3705     print "Upgrade to $DBversion done (bug 4896: removing GranularPermissions syspref; use of granular permissions is now the default)\n";
3706     SetVersion ($DBversion);
3707 }
3708
3709 $DBversion = '3.01.00.139';
3710 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3711     $dbh->do("ALTER TABLE message_attributes CHANGE message_name message_name varchar(40);");
3712     print "Upgrade to $DBversion done (bug 3682: change message_name from varchar(20) to varchar(40))\n";
3713     SetVersion ($DBversion);
3714 }
3715
3716 $DBversion = '3.01.00.140';
3717 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3718     $dbh->do("UPDATE systempreferences SET value = '0' WHERE variable = 'TagsModeration' AND value is NULL");
3719     print "Upgrade to $DBversion done (bug 4312 TagsModeration changed from NULL to 0)\n";
3720     SetVersion ($DBversion);
3721 }
3722
3723 $DBversion = '3.01.00.141';
3724 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3725     $dbh->do(qq{DELETE FROM message_attributes WHERE message_attribute_id=3;});
3726     $dbh->do(qq{DELETE FROM letter WHERE code='EVENT' AND title='Upcoming Library Event';});
3727     print "Upgrade to $DBversion done Remove upcoming events messaging option (bug 2434)\n";
3728     SetVersion ($DBversion);
3729 }
3730
3731 $DBversion = '3.01.00.142';
3732 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3733     $dbh->do(qq{DELETE FROM message_transports WHERE message_attribute_id=3;});
3734     print "Upgrade to $DBversion done (Remove upcoming events messaging option part 2 (bug 2434))\n";
3735     SetVersion ($DBversion);
3736 }
3737
3738 $DBversion = '3.01.00.143';
3739 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3740     $dbh->do(qq{CREATE INDEX auth_value_idx ON authorised_values (authorised_value)});
3741     $dbh->do(qq{CREATE INDEX auth_val_cat_idx ON borrower_attribute_types (authorised_value_category)});
3742     print "Upgrade to $DBversion done (Create index on authorised_values and borrower_attribute_types (bug 4139))\n";
3743     SetVersion ($DBversion);
3744 }
3745
3746 $DBversion = '3.01.00.144';
3747 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3748     $dbh->do(qq{UPDATE systempreferences SET value='normal' where value='default' and variable='IntranetBiblioDefaultView'});
3749     print "Upgrade to $DBversion done (Update the 'default' to 'normal' for the IntranetBiblioDefaultView syspref (bug 5007))\n";
3750     SetVersion ($DBversion);
3751 }
3752
3753 $DBversion = "3.01.00.145";
3754 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3755     $dbh->do("ALTER TABLE borrowers ADD KEY `guarantorid` (guarantorid);");
3756     print "Upgrade to $DBversion done (Add index on guarantorid)\n";
3757     SetVersion ($DBversion);
3758 }
3759
3760 $DBversion = '3.01.00.999';
3761 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3762     print "Upgrade to $DBversion done (3.2.0 release candidate)\n";
3763     SetVersion ($DBversion);
3764 }
3765
3766 $DBversion = "3.02.00.000";
3767 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3768     my $value = $dbh->selectrow_array("SELECT value FROM systempreferences WHERE variable = 'HomeOrHoldingBranch'");
3769     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('HomeOrHoldingBranchReturn','$value','Used by Circulation to determine which branch of an item to check checking-in items','holdingbranch|homebranch','Choice');");
3770     print "Upgrade to $DBversion done (Add HomeOrHoldingBranchReturn system preference)\n";
3771     SetVersion ($DBversion);
3772 }
3773
3774 $DBversion = "3.02.00.001";
3775 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3776     $dbh->do(q{DELETE FROM systempreferences WHERE variable IN (
3777                 'holdCancelLength',
3778                 'PINESISBN',
3779                 'sortbynonfiling',
3780                 'TemplateEncoding',
3781                 'OPACSubscriptionDisplay',
3782                 'OPACDisplayExtendedSubInfo',
3783                 'OAI-PMH:Set',
3784                 'OAI-PMH:Subset',
3785                 'libraryAddress',
3786                 'kohaspsuggest',
3787                 'OrderPdfTemplate',
3788                 'marc',
3789                 'acquisitions',
3790                 'MIME')
3791                }
3792     );
3793     print "Upgrade to $DBversion done (bug 3756: remove disused system preferences)\n";
3794     SetVersion ($DBversion);
3795 }
3796
3797 $DBversion = "3.02.00.002";
3798 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3799     $dbh->do(q{DELETE FROM systempreferences WHERE variable = 'OpacPrivacy'});
3800     print "Upgrade to $DBversion done (bug 3881: remove unused OpacPrivacy system preference)\n";
3801     SetVersion ($DBversion);
3802 }
3803
3804 $DBversion = "3.02.00.003";
3805 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3806     $dbh->do(q{UPDATE systempreferences SET variable = 'ILS-DI:AuthorizedIPs' WHERE variable = 'ILS-DI:Authorized_IPs'});
3807     print "Upgrade to $DBversion done (correct ILS-DI:AuthorizedIPs)\n";
3808     SetVersion ($DBversion);
3809 }
3810
3811 $DBversion = "3.02.00.004";
3812 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3813     print "Upgrade to $DBversion done (3.2.0 general release)\n";
3814     SetVersion ($DBversion);
3815 }
3816 # This is the point where 3.2.x and master diverged, we can use $original_version to make sure we don't
3817
3818 # apply updates that have already been done
3819
3820 $DBversion = "3.03.00.001";
3821 if (C4::Context->preference("Version") < TransformToNum($DBversion) && $original_version < TransformToNum("3.02.00.005")) {
3822     $dbh->do("DELETE FROM subscriptionroutinglist WHERE borrowernumber IS NULL;");
3823     $dbh->do("ALTER TABLE subscriptionroutinglist MODIFY COLUMN `borrowernumber` int(11) NOT NULL;");
3824     $dbh->do("DELETE FROM subscriptionroutinglist WHERE subscriptionid IS NULL;");
3825     $dbh->do("ALTER TABLE subscriptionroutinglist MODIFY COLUMN `subscriptionid` int(11) NOT NULL;");
3826     $dbh->do("CREATE TEMPORARY TABLE del_subscriptionroutinglist
3827               SELECT s1.routingid FROM subscriptionroutinglist s1
3828               WHERE EXISTS (SELECT * FROM subscriptionroutinglist s2
3829                             WHERE s2.borrowernumber = s1.borrowernumber
3830                             AND   s2.subscriptionid = s1.subscriptionid
3831                             AND   s2.routingid < s1.routingid);");
3832     $dbh->do("DELETE FROM subscriptionroutinglist
3833               WHERE routingid IN (SELECT routingid FROM del_subscriptionroutinglist);");
3834     $dbh->do("ALTER TABLE subscriptionroutinglist ADD UNIQUE (subscriptionid, borrowernumber);");
3835     $dbh->do("ALTER TABLE subscriptionroutinglist
3836                 ADD CONSTRAINT `subscriptionroutinglist_ibfk_1` FOREIGN KEY (`borrowernumber`)
3837                 REFERENCES `borrowers` (`borrowernumber`)
3838                 ON DELETE CASCADE ON UPDATE CASCADE");
3839     $dbh->do("ALTER TABLE subscriptionroutinglist
3840                 ADD CONSTRAINT `subscriptionroutinglist_ibfk_2` FOREIGN KEY (`subscriptionid`)
3841                 REFERENCES `subscription` (`subscriptionid`)
3842                 ON DELETE CASCADE ON UPDATE CASCADE");
3843     print "Upgrade to $DBversion done (Make subscriptionroutinglist more strict)\n";
3844     SetVersion ($DBversion);
3845 }
3846
3847 $DBversion = '3.03.00.002';
3848 if (C4::Context->preference("Version") < TransformToNum($DBversion) && $original_version < TransformToNum("3.02.00.006")) {
3849     $dbh->do("UPDATE language_rfc4646_to_iso639 SET iso639_2_code='arm' WHERE rfc4646_subtag='hy';");
3850     $dbh->do("UPDATE language_rfc4646_to_iso639 SET iso639_2_code='eng' WHERE rfc4646_subtag='en';");
3851     $dbh->do("INSERT INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES( 'fi','fin');");
3852     $dbh->do("UPDATE language_rfc4646_to_iso639 SET iso639_2_code='fre' WHERE rfc4646_subtag='fr';");
3853     $dbh->do("INSERT INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES( 'lo','lao');");
3854     $dbh->do("UPDATE language_rfc4646_to_iso639 SET iso639_2_code='ita' WHERE rfc4646_subtag='it';");
3855     $dbh->do("INSERT INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES( 'sr','srp');");
3856     $dbh->do("INSERT INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES( 'tet','tet');");
3857     $dbh->do("INSERT INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES( 'ur','urd');");
3858
3859     print "Upgrade to $DBversion done (Correct language mappings)\n";
3860     SetVersion ($DBversion);
3861 }
3862
3863 $DBversion = '3.03.00.003';
3864 if (C4::Context->preference("Version") < TransformToNum($DBversion) && $original_version < TransformToNum("3.02.00.007")) {
3865     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('UseTablesortForCirc','0','If on, use the JQuery tablesort function on the list of current borrower checkouts on the circulation page. Note that the use of this function may slow down circ for patrons with may checkouts.','','YesNo');");
3866     print "Upgrade to $DBversion done (Add UseTablesortForCirc syspref)\n";
3867     SetVersion ($DBversion);
3868 }
3869
3870 $DBversion = '3.03.00.004';
3871 if (C4::Context->preference("Version") < TransformToNum($DBversion) && $original_version < TransformToNum("3.02.01.001")) {
3872     my $count = $dbh->selectrow_array('SELECT COUNT(*) FROM letter WHERE module = ? AND code = ?', {}, 'suggestions', 'ACCEPTED');
3873     $dbh->do(q/
3874 INSERT INTO `letter`
3875 (module, code, name, title, content)
3876 VALUES
3877 ('suggestions','ACCEPTED','Suggestion accepted', 'Purchase suggestion accepted','Dear <<borrowers.firstname>> <<borrowers.surname>>,\n\nYou have suggested that the library acquire <<suggestions.title>> by <<suggestions.author>>.\n\nThe library has reviewed your suggestion today. The item will be ordered as soon as possible. You will be notified by mail when the order is completed, and again when the item arrives at the library.\n\nIf you have any questions, please email us at <<branches.branchemail>>.\n\nThank you,\n\n<<branches.branchname>>')
3878 /) unless $count > 0;
3879     $count = $dbh->selectrow_array('SELECT COUNT(*) FROM letter WHERE module = ? AND code = ?', {}, 'suggestions', 'AVAILABLE');
3880     $dbh->do(q/
3881 INSERT INTO `letter`
3882 (module, code, name, title, content)
3883 VALUES
3884 ('suggestions','AVAILABLE','Suggestion available', 'Suggested purchase available','Dear <<borrowers.firstname>> <<borrowers.surname>>,\n\nYou have suggested that the library acquire <<suggestions.title>> by <<suggestions.author>>.\n\nWe are pleased to inform you that the item you requested is now part of the collection.\n\nIf you have any questions, please email us at <<branches.branchemail>>.\n\nThank you,\n\n<<branches.branchname>>')
3885 /) unless $count > 0;
3886     $count = $dbh->selectrow_array('SELECT COUNT(*) FROM letter WHERE module = ? AND code = ?', {}, 'suggestions', 'ORDERED');
3887     $dbh->do(q/
3888 INSERT INTO `letter`
3889 (module, code, name, title, content)
3890 VALUES
3891 ('suggestions','ORDERED','Suggestion ordered', 'Suggested item ordered','Dear <<borrowers.firstname>> <<borrowers.surname>>,\n\nYou have suggested that the library acquire <<suggestions.title>> by <<suggestions.author>>.\n\nWe are pleased to inform you that the item you requested has now been ordered. It should arrive soon, at which time it will be processed for addition into the collection.\n\nYou will be notified again when the book is available.\n\nIf you have any questions, please email us at <<branches.branchemail>>\n\nThank you,\n\n<<branches.branchname>>')
3892 /) unless $count > 0;
3893     $count = $dbh->selectrow_array('SELECT COUNT(*) FROM letter WHERE module = ? AND code = ?', {}, 'suggestions', 'REJECTED');
3894     $dbh->do(q/
3895 INSERT INTO `letter`
3896 (module, code, name, title, content)
3897 VALUES
3898 ('suggestions','REJECTED','Suggestion rejected', 'Purchase suggestion declined','Dear <<borrowers.firstname>> <<borrowers.surname>>,\n\nYou have suggested that the library acquire <<suggestions.title>> by <<suggestions.author>>.\n\nThe library has reviewed your request today, and has decided not to accept the suggestion at this time.\n\nThe reason given is: <<suggestions.reason>>\n\nIf you have any questions, please email us at <<branches.branchemail>>.\n\nThank you,\n\n<<branches.branchname>>')
3899 /) unless $count > 0;
3900     print "Upgrade to $DBversion done (bug 5127: add default templates for suggestion status change notifications)\n";
3901     SetVersion ($DBversion);
3902 };
3903
3904 $DBversion = '3.03.00.005';
3905 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3906     $dbh->do("update `systempreferences` set options='whitespace|T-prefix|cuecat|libsuite8' where variable='itemBarcodeInputFilter'");
3907     print "Upgrade to $DBversion done (Add itemBarcodeInputFilter choice libsuite8)\n";
3908 }
3909
3910 $DBversion = '3.03.00.006';
3911 if (C4::Context->preference("Version") < TransformToNum($DBversion) && $original_version < TransformToNum("3.02.01.002")) {
3912     $dbh->do("ALTER TABLE deletedborrowers ADD `privacy` int(11) AFTER smsalertnumber;");
3913     $dbh->do("ALTER TABLE deletedborrowers CHANGE `cardnumber` `cardnumber` varchar(16);");
3914     print "Upgrade to $DBversion done (Fix differences between borrowers and deletedborrowers)\n";
3915     SetVersion ($DBversion);
3916 }
3917
3918 $DBversion = '3.03.00.007';
3919 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3920     $dbh->do("ALTER table suggestions ADD quantity SMALLINT(6) default NULL,
3921                 ADD currency VARCHAR(3) default NULL,
3922                 ADD price DECIMAL(28,6) default NULL,
3923                 ADD total DECIMAL(28,6) default NULL;
3924                 ");
3925     print "Upgrade to $DBversion done (Added acq related columns to suggestions)\n";
3926     SetVersion ($DBversion);
3927 }
3928
3929 $DBversion = '3.03.00.008';
3930 if (C4::Context->preference('Version') < TransformToNum($DBversion)){
3931     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('OPACNoResultsFound','','Display this HTML when no results are found for a search in the OPAC','70|10','Textarea')");
3932     print "Upgrade to $DBversion done (adding syspref OPACNoResultsFound to control what displays when no results are found for a search in the OPAC.)\n";
3933     SetVersion ($DBversion);
3934 }
3935
3936 $DBversion = '3.03.00.009';
3937 if (C4::Context->preference("Version") < TransformToNum($DBversion) && $original_version < TransformToNum("3.02.01.003")) {
3938     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('IntranetUserCSS','','Add CSS to be included in the Intranet',NULL,'free')");
3939     print "Upgrade to $DBversion done (Add IntranetUserCSS syspref)\n";
3940     SetVersion ($DBversion);
3941 }
3942
3943 $DBversion = "3.03.00.010";
3944 if (C4::Context->preference("Version") < TransformToNum($DBversion) && $original_version < TransformToNum("3.02.02.001")) {
3945     $dbh->do("UPDATE `marc_subfield_structure` SET liblibrarian = 'Distance from earth' WHERE liblibrarian = 'Distrance from earth' AND tagfield = '034' AND tagsubfield = 'r';");
3946     $dbh->do("UPDATE `marc_subfield_structure` SET libopac = 'Distance from earth' WHERE libopac = 'Distrance from earth' AND tagfield = '034' AND tagsubfield = 'r';");
3947     print "Upgrade to $DBversion done (Fix misspelled 034r subfield in MARC21 Frameworks)\n";
3948     SetVersion ($DBversion);
3949 }
3950
3951 $DBversion = "3.03.00.011";
3952 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3953     $dbh->do("UPDATE aqbooksellers SET gstrate=NULL WHERE gstrate=0.0");
3954     print "Upgrade to $DBversion done (Bug 5186: allow GST rate to be set to 0)\n";
3955     SetVersion ($DBversion);
3956 }
3957
3958 $DBversion = "3.03.00.012";
3959 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3960    $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('maxItemsInSearchResults',20,'Specify the maximum number of items to display for each result on a page of results',NULL,'free')");
3961    print "Upgrade to $DBversion done (Bug 2142: maxItemsInSearchResults syspref resurrected)\n";
3962    SetVersion ($DBversion);
3963 }
3964
3965 $DBversion = "3.03.00.013";
3966 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3967     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('OpacPublic','1','If set to OFF and user is not logged in, all  OPAC pages require authentication, and OPAC searchbar is removed)','','YesNo')");
3968     print "Upgrade to $DBversion done (added 'OpacPublic' syspref)\n";
3969    SetVersion ($DBversion);
3970 }
3971
3972 $DBversion = "3.03.00.014";
3973 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
3974     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('ShelfBrowserUsesLocation','1','Use the item location when finding items for the shelf browser.','1','YesNo')");
3975     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('ShelfBrowserUsesHomeBranch','1','Use the item home branch when finding items for the shelf browser.','1','YesNo')");
3976     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('ShelfBrowserUsesCcode','0','Use the item collection code when finding items for the shelf browser.','1','YesNo')");
3977     print "Upgrade to $DBversion done (Add flexible shelf browser constraints)\n";
3978     SetVersion ($DBversion);
3979 }
3980
3981 $DBversion = "3.03.00.015";
3982 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
3983     if ( C4::Context->preference("marcflavour") eq "MARC21" ) {
3984         my $sth = $dbh->prepare(
3985 "INSERT INTO `marc_subfield_structure` (`tagfield`, `tagsubfield`, `liblibrarian`, `libopac`, `repeatable`, `mandatory`, `kohafield`,
3986                              `tab`, `authorised_value`, `authtypecode`, `value_builder`, `isurl`, `hidden`, `frameworkcode`, `seealso`, `link`, `defaultvalue`)
3987                              VALUES ( ?, '9', '9 (RLIN)', '9 (RLIN)', 0, 0, '', 6, '', '', '', 0, -5, '', '', '', NULL)"
3988         );
3989         $sth->execute('648');
3990         $sth->execute('654');
3991         $sth->execute('655');
3992         $sth->execute('656');
3993         $sth->execute('657');
3994         $sth->execute('658');
3995         $sth->execute('662');
3996         $sth->finish;
3997         print
3998 "Upgrade to $DBversion done (Bug 5619: Add subfield 9 to marc21 648,654,655,656,657,658,662)\n";
3999     }
4000     SetVersion($DBversion);
4001 }
4002
4003 $DBversion = '3.03.00.016';
4004 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4005     # reimplement OpacPrivacy system preference
4006     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacPrivacy', '0', 'if ON, allows patrons to define their privacy rules (reading history)',NULL,'YesNo')");
4007     $dbh->do("ALTER TABLE `borrowers` ADD `privacy` INTEGER NOT NULL DEFAULT 1;");
4008     $dbh->do("ALTER TABLE `deletedborrowers` ADD `privacy` INTEGER NOT NULL DEFAULT 1;");
4009     print "Upgrade to $DBversion done (OpacPrivacy reimplementation)\n";
4010     SetVersion($DBversion);
4011 };
4012
4013 $DBversion = '3.03.00.017';
4014 if (C4::Context->preference("Version") < TransformToNum($DBversion) && $original_version < TransformToNum("3.02.03.001")) {
4015     $dbh->do("ALTER TABLE  `currency` CHANGE `rate` `rate` FLOAT( 15, 5 ) NULL DEFAULT NULL;");
4016     print "Upgrade to $DBversion done (Enable currency rates >= 100)\n";
4017     SetVersion ($DBversion);
4018 }
4019
4020 $DBversion = '3.03.00.018';
4021 if (C4::Context->preference("Version") < TransformToNum($DBversion) && $original_version < TransformToNum("3.02.03.002")) {
4022     $dbh->do( q|update language_descriptions set description = 'Nederlands' where lang = 'nl' and subtag = 'nl'|);
4023     $dbh->do( q|update language_descriptions set description = 'Dansk' where lang = 'da' and subtag = 'da'|);
4024     print "Upgrade to $DBversion done (Correct language descriptions)\n";
4025     SetVersion ($DBversion);
4026 }
4027
4028 $DBversion = '3.03.00.019';
4029 if (C4::Context->preference("Version") < TransformToNum($DBversion) && $original_version < TransformToNum("3.02.03.003")) {
4030     # Fix bokmål
4031     $dbh->do("UPDATE language_subtag_registry SET description = 'Norwegian bokm&#229;l' WHERE subtag = 'nb';");
4032     $dbh->do("INSERT INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES( 'nb','nob');");
4033     $dbh->do("UPDATE language_descriptions SET description = 'Norsk bokm&#229;l' WHERE subtag = 'nb' AND lang = 'nb';");
4034     $dbh->do("UPDATE language_descriptions SET description = 'Norwegian bokm&#229;l' WHERE subtag = 'nb' AND lang = 'en';");
4035     $dbh->do("UPDATE language_descriptions SET description = 'Norvégien bokm&#229;l' WHERE subtag = 'nb' AND lang = 'fr';");
4036     # Add nynorsk
4037     $dbh->do("INSERT INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'nn', 'language', 'Norwegian nynorsk','2011-02-14' )");
4038     $dbh->do("INSERT INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES( 'nn','nno')");
4039     $dbh->do("INSERT INTO language_descriptions(subtag, type, lang, description) VALUES( 'nn', 'language', 'nb', 'Norsk nynorsk')");
4040     $dbh->do("INSERT INTO language_descriptions(subtag, type, lang, description) VALUES( 'nn', 'language', 'nn', 'Norsk nynorsk')");
4041     $dbh->do("INSERT INTO language_descriptions(subtag, type, lang, description) VALUES( 'nn', 'language', 'en', 'Norwegian nynorsk')");
4042     $dbh->do("INSERT INTO language_descriptions(subtag, type, lang, description) VALUES( 'nn', 'language', 'fr', 'Norvégien nynorsk')");
4043     print "Upgrade to $DBversion done (Correct language descriptions for Norwegian)\n";
4044     SetVersion ($DBversion);
4045 }
4046
4047 $DBversion = '3.03.00.020';
4048 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4049     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('AllowFineOverride','0','If on, staff will be able to issue books to patrons with fines greater than noissuescharge.','0','YesNo')");
4050     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('AllFinesNeedOverride','1','If on, staff will be asked to override every fine, even if it is below noissuescharge.','0','YesNo')");
4051     print "Upgrade to $DBversion done (Bug 5811: Add sysprefs controlling overriding fines)\n";
4052     SetVersion($DBversion);
4053 };
4054
4055 $DBversion = '3.03.00.021';
4056 if (C4::Context->preference("Version") < TransformToNum($DBversion) && $original_version < TransformToNum("3.02.05.001")) {
4057     $dbh->do("ALTER TABLE items MODIFY enumchron TEXT");
4058     $dbh->do("ALTER TABLE deleteditems MODIFY enumchron TEXT");
4059     print "Upgrade to $DBversion done (bug 5642: longer serial enumeration)\n";
4060     SetVersion ($DBversion);
4061 }
4062
4063 $DBversion = '3.03.00.022';
4064 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4065     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('AuthoritiesLog','0','If ON, log edit/create/delete actions on authorities.','','YesNo');");
4066     print "Upgrade to $DBversion done (Add AuthoritiesLog syspref)\n";
4067     SetVersion ($DBversion);
4068 }
4069
4070 # due to a mismatch in kohastructure.sql some koha will have missing columns in aqbasketgroup
4071 # this attempts to fix that
4072 $DBversion = '3.03.00.023';
4073 if (C4::Context->preference("Version") < TransformToNum($DBversion) && $original_version < TransformToNum("3.02.05.002")) {
4074     my $sth = $dbh->prepare("SELECT * FROM INFORMATION_SCHEMA.COLUMNS WHERE TABLE_NAME = 'aqbasketgroups' AND COLUMN_NAME = 'billingplace'");
4075     $sth->execute;
4076     $dbh->do("ALTER TABLE aqbasketgroups ADD billingplace VARCHAR(10)") if ! $sth->fetchrow_hashref;
4077     $sth = $dbh->prepare("SELECT * FROM INFORMATION_SCHEMA.COLUMNS WHERE TABLE_NAME = 'aqbasketgroups' AND COLUMN_NAME = 'deliveryplace'");
4078     $sth->execute;
4079     $dbh->do("ALTER TABLE aqbasketgroups ADD deliveryplace VARCHAR(10)") if ! $sth->fetchrow_hashref;
4080     $sth = $dbh->prepare("SELECT * FROM INFORMATION_SCHEMA.COLUMNS WHERE TABLE_NAME = 'aqbasketgroups' AND COLUMN_NAME = 'deliverycomment'");
4081     $sth->execute;
4082     $dbh->do("ALTER TABLE aqbasketgroups ADD deliverycomment VARCHAR(255)") if ! $sth->fetchrow_hashref;
4083     print "Upgrade to $DBversion done (Reconcile aqbasketgroups)\n";
4084     SetVersion ($DBversion);
4085 }
4086
4087 $DBversion = '3.03.00.024';
4088 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4089     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('TraceCompleteSubfields','0','Force subject tracings to only match complete subfields.','0','YesNo')");
4090     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('UseAuthoritiesForTracings','1','Use authority record numbers for subject tracings instead of heading strings.','0','YesNo')");
4091     print "Upgrade to $DBversion done (Add syspref to force whole-subfield matching on subject tracings)\n";
4092     SetVersion($DBversion);
4093 };
4094
4095 $DBversion = "3.03.00.025";
4096 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4097     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('OPACAllowUserToChooseBranch', 1, 'Allow the user to choose the branch they want to pickup their hold from','1','YesNo')");
4098     print "Upgrade to $DBversion done (Add syspref to control if user can choose pickup branch for holds)\n";
4099     SetVersion ($DBversion);
4100 }
4101
4102 $DBversion = '3.03.00.026';
4103 if (C4::Context->preference("Version") < TransformToNum($DBversion) && $original_version < TransformToNum("3.02.05.003")) {
4104     $dbh->do("UPDATE `message_attributes` SET message_name='Item Due' WHERE message_attribute_id=1 AND message_name LIKE 'Item DUE'");
4105         print "Upgrade to $DBversion done ( fix capitalization in message type )\n";
4106     SetVersion ($DBversion);
4107 }
4108
4109 $DBversion = '3.03.00.027';
4110 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4111     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('displayFacetCount', '0', NULL, NULL, 'YesNo')");
4112     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('maxRecordsForFacets', '20', NULL, NULL, 'Integer')");
4113     print "Upgrade to $DBversion done (Preferences for facet count)\n";
4114     SetVersion ($DBversion);
4115 }
4116
4117 $DBversion = "3.03.00.028";
4118 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4119     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('FacetLabelTruncationLength', 20, 'Truncate facets length to','','free')");
4120     print "Upgrade to $DBversion done (Add FacetLabelTruncationLength syspref to control facets displayed length)\n";
4121     SetVersion ($DBversion);
4122 }
4123
4124 $DBversion = "3.03.00.029";
4125 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4126     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('AllowPurchaseSuggestionBranchChoice', 0, 'Allow user to choose branch when making a purchase suggestion','1','YesNo')");
4127     print "Upgrade to $DBversion done (Add syspref to control if user can choose branch when making purchase suggestion)\n";
4128     SetVersion ($DBversion);
4129 }
4130
4131 $DBversion = "3.03.00.030";
4132 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4133     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OpacFavicon','','Enter a complete URL to an image to replace the default Koha favicon on the OPAC','','free')");
4134     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('IntranetFavicon','','Enter a complete URL to an image to replace the default Koha favicon on the Staff client','','free')");
4135     print "Upgrade to $DBversion done (Add sysprefs to control custom favicons)\n";
4136     SetVersion ($DBversion);
4137 }
4138
4139 $DBversion = "3.03.00.031";
4140 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4141     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('FineNotifyAtCheckin',0,'If ON notify librarians of overdue fines on the items they are checking in.',NULL,'YesNo');");
4142     print "Upgrade to $DBversion done (Add syspref FineNotifyAtCheckin)\n";
4143     SetVersion ($DBversion);
4144 }
4145
4146 $DBversion = '3.03.00.032';
4147 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4148     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('TraceSubjectSubdivisions', 1, 'Create searches on all subdivisions for subject tracings.','1','YesNo')");
4149     print "Upgrade to $DBversion done ( include subdivisions when generating subject tracing searches )\n";
4150 }
4151
4152
4153 $DBversion = '3.03.00.033';
4154 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4155     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('StaffAuthorisedValueImages', '1', '', NULL, 'YesNo')");
4156     print "Upgrade to $DBversion done (System pref StaffAuthorisedValueImages)\n";
4157     SetVersion ($DBversion);
4158 }
4159
4160 $DBversion = '3.03.00.034';
4161 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4162     $dbh->do("ALTER TABLE `categories` ADD `hidelostitems` tinyint(1) NOT NULL default '0' AFTER `reservefee`");
4163     print "Upgrade to $DBversion done (Add hidelostitems preference to borrower categories)\n";
4164     SetVersion ($DBversion);
4165 }
4166
4167 $DBversion = '3.03.00.035';
4168 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4169     $dbh->do("ALTER TABLE `issuingrules` ADD hardduedate date default NULL AFTER issuelength");
4170     $dbh->do("ALTER TABLE `issuingrules` ADD hardduedatecompare tinyint NOT NULL default 0 AFTER hardduedate");
4171     my $duedate;
4172     if (C4::Context->preference("globalDueDate")) {
4173       $duedate = eval { output_pref( { dt => dt_from_string( C4::Context->preference("globalDueDate") ), dateonly => 1, dateformat => 'iso' } ); };
4174       $dbh->do("UPDATE `issuingrules` SET hardduedate = '$duedate', hardduedatecompare = 0");
4175     } elsif (C4::Context->preference("ceilingDueDate")) {
4176       $duedate = eval { output_pref( { dt => dt_from_string( C4::Context->preference("ceilingDueDate") ), dateonly => 1, dateformat => 'iso' } ); };
4177       $dbh->do("UPDATE `issuingrules` SET hardduedate = '$duedate', hardduedatecompare = -1");
4178     }
4179     $dbh->do("DELETE FROM `systempreferences` WHERE variable = 'globalDueDate' OR variable = 'ceilingDueDate'");
4180     print "Upgrade to $DBversion done (Move global and ceiling due dates to Circ Rules level)\n";
4181     SetVersion ($DBversion);
4182 }
4183
4184 $DBversion = '3.03.00.036';
4185 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4186     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('COinSinOPACResults', 1, 'If ON, use COinS in OPAC search results page.  NOTE: this can slow down search response time significantly','','YesNo')");
4187     print "Upgrade to $DBversion done ( Make COinS optional in OPAC search results )\n";
4188     SetVersion ($DBversion);
4189 }
4190
4191 $DBversion = '3.03.00.037';
4192 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4193     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACDisplay856uAsImage','OFF','Display the URI in the 856u field as an image, the corresponding OPACXSLT option must be on','OFF|Details|Results|Both','Choice')");
4194     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('Display856uAsImage','OFF','Display the URI in the 856u field as an image, the corresponding Staff Client XSLT option must be on','OFF|Details|Results|Both','Choice')");
4195     print "Upgrade to $DBversion done (Add 'Display856uAsImage' and 'OPACDisplay856uAsImage' syspref)\n";
4196     SetVersion ($DBversion);
4197 }
4198
4199 $DBversion = '3.03.00.038';
4200 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4201     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('SelfCheckTimeout',120,'Define the number of seconds before the Web-based Self Checkout times out a patron','','Integer')");
4202     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('AllowSelfCheckReturns',0,'If enabled, patrons may return items through the Web-based Self Checkout','','YesNo')");
4203     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('SelfCheckHelpMessage','','Enter HTML to include under the basic Web-based Self Checkout instructions on the Help page','70|10','Textarea')");
4204     print "Upgrade to $DBversion done ( Add Self-checkout by Login system preferences )\n";
4205 }
4206
4207 $DBversion = "3.03.00.039";
4208 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4209     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('ShowReviewer',1,'If ON, name of reviewer will be shown above comments in OPAC',NULL,'YesNo');");
4210     print "Upgrade to $DBversion done (Add syspref ShowReviewer)\n";
4211 }
4212
4213 $DBversion = "3.03.00.040";
4214 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4215     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('UseControlNumber',0,'If ON, record control number (w subfields) and control number (001) are used for linking of bibliographic records.','','YesNo');");
4216     print "Upgrade to $DBversion done (Add syspref UseControlNumber)\n";
4217 }
4218
4219 $DBversion = "3.03.00.041";
4220 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4221     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('AlternateHoldingsField','','The MARC field/subfield that contains alternate holdings information for bibs taht do not have items attached (e.g. 852abchi for libraries converting from MARC Magician).',NULL,'free')");
4222     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('AlternateHoldingsSeparator','','The string to use to separate subfields in alternate holdings displays.',NULL,'free')");
4223     print "Upgrade to $DBversion done (Add sysprefs to control alternate holdings information display)\n";
4224     SetVersion ($DBversion);
4225 }
4226
4227 $DBversion = '3.03.00.042';
4228 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4229     stocknumber_checker();
4230     print "Upgrade to $DBversion done (5860 Index itemstocknumber)\n";
4231     SetVersion ($DBversion);
4232 }
4233
4234 sub stocknumber_checker { #code reused later on
4235   my @row;
4236   #drop the obsolete itemSStocknumber idx if it exists
4237   @row = $dbh->selectrow_array("SHOW INDEXES FROM items WHERE key_name='itemsstocknumberidx'");
4238   $dbh->do("ALTER TABLE `items` DROP INDEX `itemsstocknumberidx`;") if @row;
4239
4240   #check itemstocknumber idx; remove it if it is unique
4241   @row = $dbh->selectrow_array("SHOW INDEXES FROM items WHERE key_name='itemstocknumberidx' AND non_unique=0");
4242   $dbh->do("ALTER TABLE `items` DROP INDEX `itemstocknumberidx`;") if @row;
4243
4244   #add itemstocknumber index non-unique IF it still not exists
4245   @row = $dbh->selectrow_array("SHOW INDEXES FROM items WHERE key_name='itemstocknumberidx'");
4246   $dbh->do("ALTER TABLE items ADD INDEX itemstocknumberidx (stocknumber);") unless @row;
4247 }
4248
4249 $DBversion = "3.03.00.043";
4250 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4251
4252     $dbh->do("INSERT INTO authorised_values (category,authorised_value,lib,lib_opac) VALUES ('YES_NO','0','No','No')");
4253     $dbh->do("INSERT INTO authorised_values (category,authorised_value,lib,lib_opac) VALUES ('YES_NO','1','Yes','Yes')");
4254
4255         print "Upgrade to $DBversion done ( add generic boolean YES_NO authorised_values pair )\n";
4256         SetVersion ($DBversion);
4257 }
4258
4259 $DBversion = '3.03.00.044';
4260 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4261     $dbh->do("ALTER TABLE `aqbasketgroups` ADD `freedeliveryplace` TEXT NULL AFTER `deliveryplace`;");
4262     print "Upgrade to $DBversion done (adding freedeliveryplace to basketgroups)\n";
4263 }
4264
4265 $DBversion = '3.03.00.045';
4266 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4267     #Remove obsolete columns from aqbooksellers if needed
4268     my $a = $dbh->selectall_hashref('SHOW columns from aqbooksellers','Field');
4269     my $sqldrop="ALTER TABLE aqbooksellers DROP COLUMN ";
4270     foreach(qw/deliverydays followupdays followupscancel invoicedisc nocalc specialty/) {
4271       $dbh->do($sqldrop.$_) if exists $a->{$_};
4272     }
4273     #Remove obsolete column from aqbudgets if needed
4274     #The correct column is budget_notes
4275     $a = $dbh->selectall_hashref('SHOW columns from aqbudgets','Field');
4276     if(exists $a->{budget_description}) {
4277       $dbh->do("ALTER TABLE aqbudgets DROP COLUMN budget_description");
4278     }
4279     print "Upgrade to $DBversion done (Remove obsolete columns from aqbooksellers and aqbudgets if needed)\n";
4280     SetVersion ($DBversion);
4281 }
4282
4283 $DBversion = "3.03.00.046";
4284 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4285     $dbh->do("ALTER TABLE overduerules ALTER delay1 SET DEFAULT NULL, ALTER delay2 SET DEFAULT NULL, ALTER delay3 SET DEFAULT NULL");
4286     print "Upgrade to $DBversion done (Setting NULL default value for delayn columns in table overduerules)\n";
4287     SetVersion($DBversion);
4288 }
4289
4290 $DBversion = '3.03.00.047';
4291 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4292     $dbh->do("ALTER TABLE borrowers ADD `state` mediumtext AFTER city;");
4293     $dbh->do("ALTER TABLE borrowers ADD `B_state` mediumtext AFTER B_city;");
4294     $dbh->do("ALTER TABLE borrowers ADD `altcontactstate` mediumtext AFTER altcontactaddress3;");
4295     $dbh->do("ALTER TABLE deletedborrowers ADD `state` mediumtext AFTER city;");
4296     $dbh->do("ALTER TABLE deletedborrowers ADD `B_state` mediumtext AFTER B_city;");
4297     $dbh->do("ALTER TABLE deletedborrowers ADD `altcontactstate` mediumtext AFTER altcontactaddress3;");
4298     print "Upgrade to $DBversion done (Add state field to patron's addresses)\n";
4299 }
4300
4301 $DBversion = '3.03.00.048';
4302 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4303     $dbh->do("ALTER TABLE branches ADD `branchstate` mediumtext AFTER `branchcity`;");
4304     print "Upgrade to $DBversion done (Add state to branch address)\n";
4305     SetVersion ($DBversion);
4306 }
4307
4308 $DBversion = '3.03.00.049';
4309 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4310     $dbh->do("ALTER TABLE `accountlines` ADD `note` text NULL default NULL");
4311     $dbh->do("ALTER TABLE `accountlines` ADD `manager_id` int( 11 ) NULL ");
4312     print "Upgrade to $DBversion done (adding note and manager_id fields in accountlines table)\n";
4313     SetVersion($DBversion);
4314 }
4315
4316 $DBversion = "3.03.00.050";
4317 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4318     $dbh->do("
4319         INSERT IGNORE INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OpacHiddenItems','','This syspref allows to define custom rules for hiding specific items at opac. See docs/opac/OpacHiddenItems.txt for more informations.','','Textarea');
4320         ");
4321     print "Upgrade to $DBversion done (Adding OpacHiddenItems syspref)\n";
4322     SetVersion($DBversion);
4323 }
4324
4325 $DBversion = "3.03.00.051";
4326 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4327     print "Upgrade to $DBversion done (Remove spaces and dashes from message_attribute names)\n";
4328     $dbh->do("UPDATE message_attributes SET message_name = 'Item_Due' WHERE message_name='Item Due'");
4329     $dbh->do("UPDATE message_attributes SET message_name = 'Advance_Notice' WHERE message_name='Advance Notice'");
4330     $dbh->do("UPDATE message_attributes SET message_name = 'Hold_Filled' WHERE message_name='Hold Filled'");
4331     $dbh->do("UPDATE message_attributes SET message_name = 'Item_Check_in' WHERE message_name='Item Check-in'");
4332     $dbh->do("UPDATE message_attributes SET message_name = 'Item_Checkout' WHERE message_name='Item Checkout'");
4333     SetVersion ($DBversion);
4334 }
4335
4336 $DBversion = "3.03.00.052";
4337 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4338     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('WaitingNotifyAtCheckin',0,'If ON, notify librarians of waiting holds for the patron whose items they are checking in.',NULL,'YesNo');");
4339     print "Upgrade to $DBversion done (Add syspref WaitingNotifyAtCheckin)\n";
4340     SetVersion ($DBversion);
4341 }
4342
4343 $DBversion = "3.04.00.000";
4344 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4345     print "Upgrade to $DBversion done Koha 3.4.0 release \n";
4346     SetVersion ($DBversion);
4347 }
4348
4349 $DBversion = "3.05.00.001";
4350 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4351     $dbh->do(qq{
4352     INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('numSearchRSSResults',50,'Specify the maximum number of results to display on a RSS page of results',NULL,'Integer');
4353     });
4354     print "Upgrade to $DBversion done (Adds New System preference numSearchRSSResults)\n";
4355     SetVersion($DBversion);
4356 }
4357
4358 $DBversion = '3.05.00.002';
4359 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4360     #follow up fix 5860: some installs already past 3.3.0.42
4361     stocknumber_checker();
4362     print "Upgrade to $DBversion done (Fix for stocknumber index)\n";
4363     SetVersion ($DBversion);
4364 }
4365
4366 $DBversion = "3.05.00.003";
4367 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4368     $dbh->do(qq{
4369     INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OpacRenewalBranch','checkoutbranch','Choose how the branch for an OPAC renewal is recorded in statistics','itemhomebranch|patronhomebranch|checkoutbranch|null','Choice');
4370     });
4371     print "Upgrade to $DBversion done (Adds New System preference OpacRenewalBranch)\n";
4372     SetVersion($DBversion);
4373 }
4374
4375 $DBversion = "3.05.00.004";
4376 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4377     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('ShowReviewerPhoto',1,'If ON, photo of reviewer will be shown beside comments in OPAC',NULL,'YesNo');");
4378     print "Upgrade to $DBversion done (Add syspref ShowReviewerPhoto)\n";
4379     SetVersion($DBversion);
4380 }
4381
4382 $DBversion = "3.05.00.005";
4383 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4384     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('BasketConfirmations', '1', 'When closing or reopening a basket,', 'always ask for confirmation.|do not ask for confirmation.', 'Choice');");
4385     print "Upgrade to $DBversion done (Adds pref BasketConfirmations)\n";
4386     SetVersion($DBversion);
4387 }
4388
4389 $DBversion = "3.05.00.006";
4390 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4391     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('MARCAuthorityControlField008', '|| aca||aabn           | a|a     d', NULL, NULL, 'Textarea')");
4392     print "Upgrade to $DBversion done (Add syspref MARCAuthorityControlField008)\n";
4393     SetVersion ($DBversion);
4394 }
4395
4396 $DBversion = "3.05.00.007";
4397 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4398     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpenLibraryCovers',0,'If ON Openlibrary book covers will be show',NULL,'YesNo');");
4399     print "Upgrade to $DBversion done (Add syspref OpenLibraryCovers)\n";
4400     SetVersion($DBversion);
4401 }
4402
4403 $DBversion = "3.05.00.008";
4404 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4405     $dbh->do("ALTER TABLE `cities` ADD `city_state` VARCHAR( 100 ) NULL DEFAULT NULL AFTER  `city_name`;");
4406     $dbh->do("ALTER TABLE `cities` ADD `city_country` VARCHAR( 100 ) NULL DEFAULT NULL AFTER  `city_zipcode`;");
4407     print "Add state and country to cities table corresponding to new columns in borrowers\n";
4408     SetVersion($DBversion);
4409 }
4410
4411 $DBversion = "3.05.00.009";
4412 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4413     $dbh->do("INSERT INTO old_issues (borrowernumber, itemnumber, date_due, branchcode, issuingbranch, returndate, lastreneweddate, `return`, renewals, timestamp, issuedate)
4414               SELECT borrowernumber, itemnumber, date_due, branchcode, issuingbranch, returndate, lastreneweddate, `return`, renewals, timestamp, issuedate FROM issues WHERE borrowernumber IS NULL");
4415     $dbh->do("DELETE FROM issues WHERE borrowernumber IS NULL");
4416
4417     $dbh->do("INSERT INTO old_issues (borrowernumber, itemnumber, date_due, branchcode, issuingbranch, returndate, lastreneweddate, `return`, renewals, timestamp, issuedate)
4418               SELECT borrowernumber, itemnumber, date_due, branchcode, issuingbranch, returndate, lastreneweddate, `return`, renewals, timestamp, issuedate FROM issues WHERE itemnumber IS NULL");
4419     $dbh->do("DELETE FROM issues WHERE itemnumber IS NULL");
4420
4421     $dbh->do("INSERT INTO old_issues (borrowernumber, itemnumber, date_due, branchcode, issuingbranch, returndate, lastreneweddate, `return`, renewals, timestamp, issuedate)
4422               SELECT borrowernumber, itemnumber, date_due, branchcode, issuingbranch, returndate, lastreneweddate, `return`, renewals, timestamp, issuedate FROM issues WHERE NOT EXISTS (SELECT * FROM borrowers WHERE borrowernumber = issues.borrowernumber)");
4423     $dbh->do("DELETE FROM issues WHERE NOT EXISTS (SELECT * FROM borrowers WHERE borrowernumber = issues.borrowernumber)");
4424
4425     $dbh->do("INSERT INTO old_issues (borrowernumber, itemnumber, date_due, branchcode, issuingbranch, returndate, lastreneweddate, `return`, renewals, timestamp, issuedate)
4426               SELECT borrowernumber, itemnumber, date_due, branchcode, issuingbranch, returndate, lastreneweddate, `return`, renewals, timestamp, issuedate FROM issues WHERE NOT EXISTS (SELECT * FROM items WHERE itemnumber = issues.itemnumber)");
4427     $dbh->do("DELETE FROM issues WHERE NOT EXISTS (SELECT * FROM items WHERE itemnumber = issues.itemnumber)");
4428
4429     $dbh->do("ALTER TABLE issues DROP FOREIGN KEY `issues_ibfk_1`");
4430     $dbh->do("ALTER TABLE issues DROP FOREIGN KEY `issues_ibfk_2`");
4431     $dbh->do("ALTER TABLE issues ALTER COLUMN borrowernumber DROP DEFAULT");
4432     $dbh->do("ALTER TABLE issues ALTER COLUMN itemnumber DROP DEFAULT");
4433     $dbh->do("ALTER TABLE issues MODIFY COLUMN borrowernumber int(11) NOT NULL");
4434     $dbh->do("ALTER TABLE issues MODIFY COLUMN itemnumber int(11) NOT NULL");
4435     $dbh->do("ALTER TABLE issues DROP KEY `issuesitemidx`");
4436     $dbh->do("ALTER TABLE issues ADD PRIMARY KEY (`itemnumber`)");
4437     $dbh->do("ALTER TABLE issues ADD CONSTRAINT `issues_ibfk_1` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE RESTRICT ON UPDATE CASCADE");
4438     $dbh->do("ALTER TABLE issues ADD CONSTRAINT `issues_ibfk_2` FOREIGN KEY (`itemnumber`) REFERENCES `items` (`itemnumber`) ON DELETE RESTRICT ON UPDATE CASCADE");
4439
4440     print "Upgrade to $DBversion done (issues referential integrity)\n";
4441     SetVersion ($DBversion);
4442 }
4443
4444 $DBversion = "3.05.00.010";
4445 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4446     $dbh->do("CREATE INDEX priorityfoundidx ON reserves (priority,found)");
4447     print "Create an index on reserves to speed up holds awaiting pickup report bug 5866\n";
4448     SetVersion($DBversion);
4449 }
4450
4451
4452 $DBversion = "3.05.00.011";
4453 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4454     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACResultsSidebar','','Define HTML to be included on the search results page, underneath the facets sidebar','70|10','Textarea')");
4455     print "Upgrade to $DBversion done (add OPACResultsSidebar syspref (enh 6165))\n";
4456     SetVersion($DBversion);
4457 }
4458
4459 $DBversion = "3.05.00.012";
4460 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4461     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('RecordLocalUseOnReturn',0,'If ON, statistically record returns of unissued items as local use, instead of return',NULL,'YesNo')");
4462     print "Upgrade to $DBversion done (add RecordLocalUseOnReturn syspref (enh 6403))\n";
4463     SetVersion($DBversion);
4464 }
4465
4466 $DBversion = "3.05.00.013";
4467 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4468     $dbh->do(qq|INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('OpacKohaUrl','0',"Show 'Powered by Koha' text on OPAC footer.",NULL,NULL)|);
4469     print "Upgrade to $DBversion done (Add syspref 'OpacKohaUrl')\n";
4470     SetVersion($DBversion);
4471 }
4472
4473 $DBversion = "3.05.00.014";
4474 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4475     $dbh->do("ALTER TABLE `borrowers` MODIFY `userid` VARCHAR(75)");
4476     print "Modified userid column length into 75 in borrowers\n";
4477     SetVersion($DBversion);
4478 }
4479
4480 $DBversion = "3.05.00.015";
4481 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4482     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('NovelistSelectEnabled',0,'Enable Novelist Select content.  Requires Novelist Profile and Password',NULL,'YesNo')");
4483     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('NovelistSelectProfile',NULL,'Novelist Select user Password',NULL,'free')");
4484     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('NovelistSelectPassword',NULL,'Enable Novelist user Profile',NULL,'free')");
4485     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('NovelistSelectView','tab','Where to display Novelist Select content','tab|above|below|right','Choice')");
4486     print "Upgrade to $DBversion done (Add support for EBSCO's NoveList Select (enh 6902))\n";
4487     SetVersion($DBversion);
4488 }
4489
4490 $DBversion = '3.05.00.016';
4491 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4492     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('EasyAnalyticalRecords','0','If on, display in the catalogue screens tools to easily setup analytical record relationships','','YesNo');");
4493     print "Upgrade to $DBversion done (Add EasyAnalyticalRecords syspref)\n";
4494     SetVersion ($DBversion);
4495 }
4496
4497 $DBversion = '3.05.00.017';
4498 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4499     if (C4::Context->preference("marcflavour") eq 'MARC21' ||
4500         C4::Context->preference("marcflavour") eq 'NORMARC'){
4501         $dbh->do("INSERT INTO `marc_subfield_structure` (`tagfield`, `tagsubfield`, `liblibrarian`, `libopac`, `repeatable`, `mandatory`, `kohafield`, `tab`, `authorised_value` , `authtypecode`, `value_builder`, `isurl`, `hidden`, `frameworkcode`, `seealso`, `link`, `defaultvalue`) VALUES ('773', '0', 'Host Biblionumber', 'Host Biblionumber', 0, 0, NULL, 7, NULL, NULL, '', NULL, -6, '', '', '', NULL)");
4502         $dbh->do("INSERT INTO `marc_subfield_structure` (`tagfield`, `tagsubfield`, `liblibrarian`, `libopac`, `repeatable`, `mandatory`, `kohafield`, `tab`, `authorised_value` , `authtypecode`, `value_builder`, `isurl`, `hidden`, `frameworkcode`, `seealso`, `link`, `defaultvalue`) VALUES ('773', '9', 'Host Itemnumber', 'Host Itemnumber', 0, 0, NULL, 7, NULL, NULL, '', NULL, -6, '', '', '', NULL)");
4503         print "Upgrade to $DBversion done (Add 773 subfield 9 and 0 to default framework)\n";
4504         SetVersion ($DBversion);
4505     } elsif (C4::Context->preference("marcflavour") eq 'UNIMARC'){
4506         $dbh->do("INSERT INTO `marc_subfield_structure` (`tagfield`, `tagsubfield`, `liblibrarian`, `libopac`, `repeatable`, `mandatory`, `kohafield`, `tab`, `authorised_value` , `authtypecode`, `value_builder`, `isurl`, `hidden`, `frameworkcode`, `seealso`, `link`, `defaultvalue`) VALUES ('461', '9', 'Host Itemnumber', 'Host Itemnumber', 0, 0, NULL, 7, NULL, NULL, '', NULL, -6, '', '', '', NULL)");
4507         print "Upgrade to $DBversion done (Add 461 subfield 9 to default framework)\n";
4508         SetVersion ($DBversion);
4509     }
4510 }
4511
4512 $DBversion = "3.05.00.018";
4513 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4514     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OpacNavBottom','','Links after OpacNav links','70|10','Textarea')");
4515     print "Upgrade to $DBversion done (add OpacNavBottom syspref (enh 6825): if appropriate, you can split OpacNav into OpacNav and OpacNavBottom)\n";
4516     SetVersion($DBversion);
4517 }
4518
4519 $DBversion = "3.05.00.019";
4520 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4521     $dbh->do("UPDATE itemtypes SET imageurl = 'vokal/Book.png' WHERE imageurl = 'vokal/BOOK.png'");
4522     $dbh->do("UPDATE itemtypes SET imageurl = 'vokal/Book-32px.png' WHERE imageurl = 'vokal/BOOK-32px.png'");
4523     $dbh->do("UPDATE authorised_values SET imageurl = 'vokal/Book.png' WHERE imageurl = 'vokal/BOOK.png'");
4524     $dbh->do("UPDATE authorised_values SET imageurl = 'vokal/Book-32px.png' WHERE imageurl = 'vokal/BOOK-32px.png'");
4525     print "Upgrade to $DBversion done (remove duplicate VOKAL Book icons, bug 6862)\n";
4526     SetVersion($DBversion);
4527 }
4528
4529 $DBversion = "3.05.00.020";
4530 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4531     $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type) VALUES ('AcqViewBaskets','user','user|branch|all','Define which baskets a user is allowed to view: his own only, any within his branch or all','Choice')");
4532     print "Upgrade to $DBversion done (Add syspref AcqViewBaskets)\n";
4533     SetVersion($DBversion);
4534 }
4535
4536 $DBversion = "3.05.00.021";
4537 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4538     $dbh->do("ALTER TABLE borrower_attribute_types ADD COLUMN display_checkout TINYINT(1) NOT NULL DEFAULT '0';");
4539     print "Upgrade to $DBversion done (Added a display_checkout field in borrower_attribute_types table)\n";
4540     SetVersion($DBversion);
4541 }
4542
4543 $DBversion = "3.05.00.022";
4544 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4545     $dbh->do("CREATE TABLE need_merge_authorities (id int NOT NULL auto_increment PRIMARY KEY, authid bigint NOT NULL, done tinyint DEFAULT 0) ENGINE=InnoDB DEFAULT CHARSET=utf8");
4546     print "Upgrade to $DBversion done (6094: Fixing ModAuthority problems, add a need_merge_authorities table)\n";
4547     SetVersion($DBversion);
4548 }
4549
4550 $DBversion = "3.05.00.023";
4551 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4552     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacShowRecentComments',0,'If ON a link to recent comments will appear in the OPAC masthead',NULL,'YesNo');");
4553     print "Upgrade to $DBversion done (Add syspref OpacShowRecentComments. When the preference is turned on a link to recent comments will appear in the OPAC masthead. )\n";
4554     SetVersion($DBversion);
4555 }
4556
4557 $DBversion = "3.06.00.000";
4558 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4559     print "Upgrade to $DBversion done Koha 3.6.0 release \n";
4560     SetVersion ($DBversion);
4561 }
4562
4563 $DBversion = "3.07.00.001";
4564 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4565     my $borrowers = $dbh->selectcol_arrayref( "SELECT borrowernumber from borrowers where debarred =1;", { Columns => [1] } );
4566     $dbh->do("ALTER TABLE borrowers MODIFY debarred DATE DEFAULT NULL;");
4567     $dbh->do( "UPDATE borrowers set debarred='9999-12-31' where borrowernumber IN (" . join( ",", @$borrowers ) . ");" ) if ($borrowers and scalar(@$borrowers)>0);
4568     $dbh->do("ALTER TABLE borrowers ADD COLUMN debarredcomment VARCHAR(255) DEFAULT NULL AFTER debarred;");
4569     $dbh->do("ALTER TABLE deletedborrowers MODIFY debarred DATE DEFAULT NULL;");
4570     $dbh->do("ALTER TABLE deletedborrowers ADD COLUMN debarredcomment VARCHAR(255) DEFAULT NULL AFTER debarred;");
4571     print "Upgrade done (Change borrowers.debarred into Date )\n";
4572     SetVersion($DBversion);
4573 }
4574
4575 $DBversion = "3.07.00.002";
4576 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4577     $dbh->do("UPDATE borrowers SET debarred=NULL WHERE debarred='0000-00-00';");
4578     print "Setting NULL to debarred where 0000-00-00 is stored (bug 7272)\n";
4579     SetVersion($DBversion);
4580 }
4581
4582 $DBversion = "3.07.00.003";
4583 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4584     $dbh->do(" UPDATE `message_attributes` SET message_name='Item_Due' WHERE message_name='Item_DUE'");
4585     print "Updating message_name in message_attributes\n";
4586     SetVersion($DBversion);
4587 }
4588
4589 $DBversion = "3.07.00.004";
4590 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4591     $dbh->do("ALTER TABLE  `suggestions` ADD  `patronreason` TEXT NULL AFTER  `reason`");
4592     print "Upgrade to $DBversion done (Add column to suggestions table to store patrons' reasons for submitting a suggestion. )\n";
4593     SetVersion($DBversion);
4594 }
4595
4596 $DBversion = "3.07.00.005";
4597 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4598     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('BorrowerUnwantedField','','Name the fields you don''t need to store for a patron''s account',NULL,'free')");
4599     print "Upgrade to $DBversion done (BorrowerUnwantedField syspref)\n";
4600     SetVersion ($DBversion);
4601 }
4602
4603 $DBversion = "3.07.00.006";
4604 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4605     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('CircAutoPrintQuickSlip', '1', 'Choose what should happen when an empty barcode field is submitted in circulation: Display a print quick slip window or Clear the screen.',NULL,'YesNo');");
4606     print "Upgrade to $DBversion done (Add syspref CircAutoPrintQuickSlip to control what should happen when an empty barcode field is submitted in circulation: Display a print quick slip window (default value, 3.6 behaviour) or clear the screen (previous 3.6 behaviour). )\n";
4607     SetVersion($DBversion);
4608 }
4609
4610 $DBversion = "3.07.00.007";
4611 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4612     $dbh->do("ALTER TABLE items MODIFY materials text;");
4613     print "Upgrade to $DBversion done alter items.material from varchar(10) to text \n";
4614     SetVersion($DBversion);
4615 }
4616
4617 $DBversion = '3.07.00.008';
4618 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4619     if (C4::Context->preference("marcflavour") eq 'MARC21') {
4620         if (C4::Context->preference("opaclanguages") eq "de") {
4621             $dbh->do("INSERT INTO `marc_tag_structure` (`tagfield`, `liblibrarian`, `libopac`, `repeatable`, `mandatory`, `authorised_value`, `frameworkcode`) VALUES ('545', 'Fußnote zu biografischen oder historischen Daten', 'Fußnote zu biografischen oder historischen Daten', 1, 0, NULL, '');");
4622         } else {
4623             $dbh->do("INSERT INTO `marc_tag_structure` (`tagfield`, `liblibrarian`, `libopac`, `repeatable`, `mandatory`, `authorised_value`, `frameworkcode`) VALUES ('545', 'BIOGRAPHICAL OR HISTORICAL DATA', 'BIOGRAPHICAL OR HISTORICAL DATA', 1, 0, NULL, '');");
4624         }
4625     }
4626     print "Upgrade to $DBversion done (add MARC21 field 545 to framework)\n";
4627     SetVersion ($DBversion);
4628 }
4629
4630 $DBversion = "3.07.00.009";
4631 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4632     $dbh->do("ALTER TABLE `aqorders` ADD COLUMN `claims_count` INT(11)  DEFAULT 0, ADD COLUMN `claimed_date` DATE  DEFAULT NULL AFTER `claims_count`");
4633     print "Upgrade to $DBversion done (Add claims_count and claimed_date fields in aqorders table)\n";
4634     SetVersion($DBversion);
4635 }
4636
4637 $DBversion = "3.07.00.010";
4638 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4639     $dbh->do(
4640         q|CREATE TABLE `biblioimages` (
4641           `imagenumber` int(11) NOT NULL AUTO_INCREMENT,
4642           `biblionumber` int(11) NOT NULL,
4643           `mimetype` varchar(15) NOT NULL,
4644           `imagefile` mediumblob NOT NULL,
4645           `thumbnail` mediumblob NOT NULL,
4646           PRIMARY KEY (`imagenumber`),
4647           CONSTRAINT `bibliocoverimage_fk1` FOREIGN KEY (`biblionumber`) REFERENCES `biblio` (`biblionumber`) ON DELETE CASCADE ON UPDATE CASCADE
4648           ) ENGINE=InnoDB DEFAULT CHARSET=utf8|
4649     );
4650     $dbh->do(
4651         q|INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('OPACLocalCoverImages','0','Display local cover images on OPAC search and details pages.','1','YesNo')|
4652         );
4653     $dbh->do(
4654         q|INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('LocalCoverImages','0','Display local cover images on intranet search and details pages.','1','YesNo')|
4655         );
4656     $dbh->do(
4657         q|INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('AllowMultipleCovers','0','Allow multiple cover images to be attached to each bibliographic record.','1','YesNo')|
4658     );
4659     $dbh->do(
4660         q|INSERT INTO permissions (module_bit, code, description) VALUES (13, 'upload_local_cover_images', 'Upload local cover images')|
4661     );
4662     print "Upgrade to $DBversion done (Added support for local cover images)\n";
4663     SetVersion($DBversion);
4664 }
4665
4666 $DBversion = "3.07.00.011";
4667 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4668     $dbh->do(<<ENDOFRENEWAL);
4669     INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('BorrowerRenewalPeriodBase', 'now', 'Set whether the borrower renewal date should be counted from the dateexpiry or from the current date ','dateexpiry|now','Choice');
4670 ENDOFRENEWAL
4671     print "Upgrade to $DBversion done (Added a system preference to allow renewal of Patron account either from todays date or from existing expiry date in the patrons account.)\n";
4672     SetVersion($DBversion);
4673 }
4674
4675 $DBversion = "3.07.00.012";
4676 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4677     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('AllowItemsOnHoldCheckout',0,'Do not generate RESERVE_WAITING and RESERVED warning when checking out items reserved to someone else. This allows self checkouts for those items.','','YesNo')");
4678     print "Upgrade to $DBversion add 'AllowItemsOnHoldCheckout' syspref \n";
4679     SetVersion ($DBversion);
4680 }
4681
4682 $DBversion = "3.07.00.013";
4683 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4684     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacExportOptions','bibtex|dc|marcxml|marc8|utf8|marcstd|mods|ris','Define available export options on OPAC detail page.','','free');");
4685     print "Upgrade to $DBversion done (Bug 7345: Add system preference OpacExportOptions.)\n";
4686     SetVersion ($DBversion);
4687 }
4688
4689 $DBversion = "3.07.00.014";
4690 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4691     print "RELTERMS category available for English-, French-, and Spanish-language relator terms. They are not loaded during upgrade but can be easily inserted using the provided marc21_relatorterms.sql SQL script (MARC21 only, and currently available for en, es, and fr only).\n";
4692     SetVersion($DBversion);
4693 }
4694
4695 $DBversion = "3.07.00.015";
4696 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4697     my $sth = $dbh->prepare(q|
4698         SELECT COUNT(*) FROM marc_subfield_structure where kohafield="biblioitems.editionstatement"
4699         |);
4700     $sth->execute;
4701     my $already_exists = $sth->fetchrow;
4702     if ( not $already_exists ) {
4703         my $field = C4::Context->preference("marcflavour") eq "UNIMARC" ? "205" : "250";
4704         my $subfield = "a";
4705         my $sth = $dbh->prepare( q|
4706             UPDATE marc_subfield_structure SET kohafield = "biblioitems.editionstatement"
4707             WHERE tagfield = ? AND tagsubfield = ?
4708         |);
4709         $sth->execute( $field, $subfield );
4710         print "Upgrade to $DBversion done (Added a mapping for biblioitems.editionstatement.)\n";
4711     } else {
4712         print "Upgrade to $DBversion done (Added a mapping for biblioitems.editionstatement (already exists, nothing to do).)\n";
4713     }
4714     SetVersion($DBversion);
4715 }
4716
4717 $DBversion = "3.07.00.016";
4718 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4719     $dbh->do("ALTER TABLE items ADD KEY `itemcallnumber` (itemcallnumber)");
4720     print "Upgrade to $DBversion done (Added index on items.itemcallnumber)\n";
4721     SetVersion($DBversion);
4722 }
4723
4724 $DBversion = "3.07.00.017";
4725 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4726     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('TransferWhenCancelAllWaitingHolds','0','Transfer items when cancelling all waiting holds',NULL,'YesNo')");
4727     print "Upgrade to $DBversion done (Add sysprefs to control transfer when cancel all waiting holds)\n";
4728     SetVersion ($DBversion);
4729 }
4730
4731 $DBversion = "3.07.00.018";
4732 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4733     $dbh->do("CREATE TABLE pending_offline_operations ( operationid int(11) NOT NULL AUTO_INCREMENT, userid varchar(30) NOT NULL, branchcode varchar(10) NOT NULL, timestamp timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP, action varchar(10) NOT NULL, barcode varchar(20) NOT NULL, cardnumber varchar(16) DEFAULT NULL, PRIMARY KEY (operationid) ) ENGINE=MyISAM DEFAULT CHARSET=utf8;");
4734     print "Upgrade to $DBversion done ( adding offline operations table )\n";
4735     SetVersion($DBversion);
4736 }
4737
4738 $DBversion = "3.07.00.019";
4739 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4740     $dbh->do(" UPDATE `systempreferences` SET  `value` =  'none', `options` =  'none|full|first|surname|firstandinitial|username', `explanation` =  'Choose how a commenter''s identity is presented alongside comments in the OPAC', `type` =  'Choice' WHERE  `systempreferences`.`variable` =  'ShowReviewer' AND `systempreferences`.`variable` = 0");
4741     $dbh->do(" UPDATE `systempreferences` SET  `value` =  'full', `options` =  'none|full|first|surname|firstandinitial|username', `explanation` =  'Choose how a commenter''s identity is presented alongside comments in the OPAC', `type` =  'Choice' WHERE  `systempreferences`.`variable` =  'ShowReviewer' AND `systempreferences`.`variable` = 1");
4742     print "Upgrade to $DBversion done ( Adding additional options for the display of commenter's identity in the OPAC: Full name, first name, last name, first name and last name first initial, username, or no information)\n";
4743     SetVersion($DBversion);
4744 }
4745
4746 $DBversion = "3.07.00.020";
4747 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4748     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OPACpatronimages',0,'Enable patron images in the OPAC',NULL,'YesNo');");
4749     print "Upgrade to $DBversion done (Bug 3516: Add the option to show patron images in the OPAC.)\n";
4750     SetVersion($DBversion);
4751 }
4752
4753 $DBversion = "3.07.00.021";
4754 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4755     $dbh->do(
4756     "INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('LinkerModule','Default','Chooses which linker module to use (see documentation).','Default|FirstMatchLastMatch','Choice');"
4757     );
4758     $dbh->do(
4759     "INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('LinkerOptions','','A pipe-separated list of options for the linker.','','free');"
4760     );
4761     $dbh->do(
4762     "INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('LinkerRelink',1,'If ON the authority linker will relink headings that have previously been linked every time it runs.',NULL,'YesNo');"
4763     );
4764     $dbh->do(
4765     "INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('LinkerKeepStale',0,'If ON the authority linker will keep existing authority links for headings where it is unable to find a match.',NULL,'YesNo');"
4766     );
4767     $dbh->do(
4768     "INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('AutoCreateAuthorities',0,'Automatically create authorities that do not exist when cataloging records.',NULL,'YesNo');"
4769     );
4770     $dbh->do(
4771     "INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('CatalogModuleRelink',0,'If OFF the linker will never replace the authids that are set in the cataloging module.',NULL,'YesNo');"
4772     );
4773     print "Upgrade to $DBversion done (Enhancement 7284, improved authority matching, see http://wiki.koha-community.org/wiki/Bug7284_authority_matching_improvement wiki page for configuration update needed)\n";
4774     SetVersion($DBversion);
4775 }
4776
4777 $DBversion = "3.07.00.022";
4778 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4779     $dbh->do("DELETE FROM reviews WHERE biblionumber NOT IN (SELECT biblionumber from biblio)");
4780     $dbh->do("UPDATE reviews SET borrowernumber = NULL WHERE borrowernumber NOT IN (SELECT borrowernumber FROM borrowers)");
4781     $dbh->do("ALTER TABLE reviews ADD CONSTRAINT reviews_ibfk_2 FOREIGN KEY (`biblionumber`) REFERENCES `biblio` (`biblionumber`) ON DELETE CASCADE ON UPDATE CASCADE");
4782     $dbh->do("ALTER TABLE reviews ADD CONSTRAINT reviews_ibfk_1 FOREIGN KEY (borrowernumber) REFERENCES borrowers (borrowernumber ) ON UPDATE CASCADE ON DELETE SET NULL");
4783     print "Upgrade to $DBversion done (Bug 7493 - Add constraint linking OPAC comment biblionumber to biblio, OPAC comment borrowernumber to borrowers.)\n";
4784     SetVersion($DBversion);
4785 }
4786
4787 $DBversion = "3.07.00.023";
4788 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4789     $dbh->do("ALTER TABLE `message_transports` DROP FOREIGN KEY `message_transports_ibfk_3`");
4790     $dbh->do("ALTER TABLE `letter` DROP PRIMARY KEY");
4791     $dbh->do("ALTER TABLE `letter` ADD `branchcode` varchar(10) default NULL AFTER `code`");
4792     $dbh->do("ALTER TABLE `letter` ADD PRIMARY KEY  (`module`,`code`, `branchcode`)");
4793     $dbh->do("ALTER TABLE `message_transports` ADD `branchcode` varchar(10) NOT NULL default ''");
4794     $dbh->do("ALTER TABLE `message_transports` ADD CONSTRAINT `message_transports_ibfk_3` FOREIGN KEY (`letter_module`, `letter_code`, `branchcode`) REFERENCES `letter` (`module`, `code`, `branchcode`) ON DELETE CASCADE ON UPDATE CASCADE");
4795     $dbh->do("ALTER TABLE `letter` ADD `is_html` tinyint(1) default 0 AFTER `name`");
4796
4797     $dbh->do("INSERT INTO `letter` (module, code, name, title, content, is_html)
4798               VALUES ('circulation','ISSUESLIP','Issue Slip','Issue Slip', '<h3><<branches.branchname>></h3>
4799 Checked out to <<borrowers.title>> <<borrowers.firstname>> <<borrowers.initials>> <<borrowers.surname>> <br />
4800 (<<borrowers.cardnumber>>) <br />
4801
4802 <<today>><br />
4803
4804 <h4>Checked Out</h4>
4805 <checkedout>
4806 <p>
4807 <<biblio.title>> <br />
4808 Barcode: <<items.barcode>><br />
4809 Date due: <<issues.date_due>><br />
4810 </p>
4811 </checkedout>
4812
4813 <h4>Overdues</h4>
4814 <overdue>
4815 <p>
4816 <<biblio.title>> <br />
4817 Barcode: <<items.barcode>><br />
4818 Date due: <<issues.date_due>><br />
4819 </p>
4820 </overdue>
4821
4822 <hr>
4823
4824 <h4 style=\"text-align: center; font-style:italic;\">News</h4>
4825 <news>
4826 <div class=\"newsitem\">
4827 <h5 style=\"margin-bottom: 1px; margin-top: 1px\"><b><<opac_news.title>></b></h5>
4828 <p style=\"margin-bottom: 1px; margin-top: 1px\"><<opac_news.new>></p>
4829 <p class=\"newsfooter\" style=\"font-size: 8pt; font-style:italic; margin-bottom: 1px; margin-top: 1px\">Posted on <<opac_news.timestamp>></p>
4830 <hr />
4831 </div>
4832 </news>', 1)");
4833     $dbh->do("INSERT INTO `letter` (module, code, name, title, content, is_html)
4834               VALUES ('circulation','ISSUEQSLIP','Issue Quick Slip','Issue Quick Slip', '<h3><<branches.branchname>></h3>
4835 Checked out to <<borrowers.title>> <<borrowers.firstname>> <<borrowers.initials>> <<borrowers.surname>> <br />
4836 (<<borrowers.cardnumber>>) <br />
4837
4838 <<today>><br />
4839
4840 <h4>Checked Out Today</h4>
4841 <checkedout>
4842 <p>
4843 <<biblio.title>> <br />
4844 Barcode: <<items.barcode>><br />
4845 Date due: <<issues.date_due>><br />
4846 </p>
4847 </checkedout>', 1)");
4848     $dbh->do("INSERT INTO `letter` (module, code, name, title, content, is_html)
4849               VALUES ('circulation','RESERVESLIP','Reserve Slip','Reserve Slip', '<h5>Date: <<today>></h5>
4850
4851 <h3> Transfer to/Hold in <<branches.branchname>></h3>
4852
4853 <h3><<borrowers.surname>>, <<borrowers.firstname>></h3>
4854
4855 <ul>
4856     <li><<borrowers.cardnumber>></li>
4857     <li><<borrowers.phone>></li>
4858     <li> <<borrowers.address>><br />
4859          <<borrowers.address2>><br />
4860          <<borrowers.city >>  <<borrowers.zipcode>>
4861     </li>
4862     <li><<borrowers.email>></li>
4863 </ul>
4864 <br />
4865 <h3>ITEM ON HOLD</h3>
4866 <h4><<biblio.title>></h4>
4867 <h5><<biblio.author>></h5>
4868 <ul>
4869    <li><<items.barcode>></li>
4870    <li><<items.itemcallnumber>></li>
4871    <li><<reserves.waitingdate>></li>
4872 </ul>
4873 <p>Notes:
4874 <pre><<reserves.reservenotes>></pre>
4875 </p>', 1)");
4876     $dbh->do("INSERT INTO `letter` (module, code, name, title, content, is_html)
4877               VALUES ('circulation','TRANSFERSLIP','Transfer Slip','Transfer Slip', '<h5>Date: <<today>></h5>
4878 <h3>Transfer to <<branches.branchname>></h3>
4879
4880 <h3>ITEM</h3>
4881 <h4><<biblio.title>></h4>
4882 <h5><<biblio.author>></h5>
4883 <ul>
4884    <li><<items.barcode>></li>
4885    <li><<items.itemcallnumber>></li>
4886 </ul>', 1)");
4887
4888     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('NoticeCSS','','Notices CSS url.',NULL,'free')");
4889     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('SlipCSS','','Slips CSS url.',NULL,'free')");
4890
4891     $dbh->do("UPDATE `letter` SET content = replace(content, '<<title>>', '<<biblio.title>>') WHERE code = 'HOLDPLACED'");
4892
4893     print "Upgrade to $DBversion done (Add branchcode and is_html to letter table; Default ISSUESLIP, RESERVESLIP and TRANSFERSLIP letters; Add NoticeCSS and SlipCSS sysprefs)\n";
4894     SetVersion($DBversion);
4895 }
4896
4897 $DBversion = "3.07.00.024";
4898 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4899     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('ExpireReservesMaxPickUpDelayCharge', '0', NULL , 'If ExpireReservesMaxPickUpDelay is enabled, and this field has a non-zero value, than a borrower whose waiting hold has expired will be charged this amount.',  'free')");
4900     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('ExpireReservesMaxPickUpDelay', '0', '', 'Enabling this allows holds to expire automatically if they have not been picked by within the time period specified in ReservesMaxPickUpDelay', 'YesNo')");
4901     print "Upgrade to $DBversion done (Added system preference ExpireReservesMaxPickUpDelay, system preference ExpireReservesMaxPickUpDelayCharge, add reseves.charge_if_expired)\n";
4902 }
4903
4904 $DBversion = "3.07.00.025";
4905 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4906     if (TableExists('bibliocoverimage')) {
4907         $dbh->do( q|DROP TABLE bibliocoverimage;| );
4908         $dbh->do(
4909             q|CREATE TABLE biblioimages (
4910               imagenumber int(11) NOT NULL AUTO_INCREMENT,
4911               biblionumber int(11) NOT NULL,
4912               mimetype varchar(15) NOT NULL,
4913               imagefile mediumblob NOT NULL,
4914               thumbnail mediumblob NOT NULL,
4915               PRIMARY KEY (imagenumber),
4916               CONSTRAINT bibliocoverimage_fk1 FOREIGN KEY (biblionumber) REFERENCES biblio (biblionumber) ON DELETE CASCADE ON UPDATE CASCADE
4917               ) ENGINE=InnoDB DEFAULT CHARSET=utf8;|
4918         );
4919     }
4920     print "Upgrade to $DBversion done (Correct table name for local cover images if needed. )\n";
4921     SetVersion($DBversion);
4922 }
4923
4924 $DBversion = "3.07.00.026";
4925 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
4926     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('CalendarFirstDayOfWeek','Sunday','Select the first day of week to use in the calendar.','Sunday|Monday','Choice');");
4927     print "Upgrade to $DBversion done (Add syspref CalendarFirstDayOfWeek used to select the first day of week to use in the calendar. )\n";
4928     SetVersion($DBversion);
4929 }
4930
4931 $DBversion = "3.07.00.027";
4932 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4933     $dbh->do(q{INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('RoutingListNote','','Define a note to be shown on all routing lists','70|10','Textarea');});
4934     print "Upgrade to $DBversion done (Added system preference RoutingListNote for adding a general note to all routing lists.)\n";
4935     SetVersion($DBversion);
4936 }
4937
4938 $DBversion = "3.07.00.028";
4939 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4940     $dbh->do(qq{
4941     INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('AllowPKIAuth','None','Use the field from a client-side SSL certificate to look a user in the Koha database','None|Common Name|emailAddress','Choice');
4942     });
4943     print "Upgrade to $DBversion done (Bug 6296 New System preference AllowPKIAuth)\n";
4944 }
4945
4946 $DBversion = "3.07.00.029";
4947 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
4948     $dbh->do(q{DROP TABLE IF EXISTS `oai_sets_descriptions`;});
4949     $dbh->do(q{DROP TABLE IF EXISTS `oai_sets_mappings`;});
4950     $dbh->do(q{DROP TABLE IF EXISTS `oai_sets_biblios`;});
4951     $dbh->do(q{DROP TABLE IF EXISTS `oai_sets`;});
4952
4953     $dbh->do(q{
4954         CREATE TABLE `oai_sets` (
4955           `id` int(11) NOT NULL auto_increment,
4956           `spec` varchar(80) NOT NULL UNIQUE,
4957           `name` varchar(80) NOT NULL,
4958           PRIMARY KEY (`id`)
4959         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
4960     });
4961
4962     $dbh->do(q{
4963         CREATE TABLE `oai_sets_descriptions` (
4964           `set_id` int(11) NOT NULL,
4965           `description` varchar(255) NOT NULL,
4966           CONSTRAINT `oai_sets_descriptions_ibfk_1` FOREIGN KEY (`set_id`) REFERENCES `oai_sets` (`id`) ON DELETE CASCADE ON UPDATE CASCADE
4967         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
4968     });
4969
4970     $dbh->do(q{
4971         CREATE TABLE `oai_sets_mappings` (
4972           `set_id` int(11) NOT NULL,
4973           `marcfield` char(3) NOT NULL,
4974           `marcsubfield` char(1) NOT NULL,
4975           `marcvalue` varchar(80) NOT NULL,
4976           CONSTRAINT `oai_sets_mappings_ibfk_1` FOREIGN KEY (`set_id`) REFERENCES `oai_sets` (`id`) ON DELETE CASCADE ON UPDATE CASCADE
4977         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
4978     });
4979
4980     $dbh->do(q{
4981         CREATE TABLE `oai_sets_biblios` (
4982           `biblionumber` int(11) NOT NULL,
4983           `set_id` int(11) NOT NULL,
4984           PRIMARY KEY (`biblionumber`, `set_id`),
4985           CONSTRAINT `oai_sets_biblios_ibfk_1` FOREIGN KEY (`biblionumber`) REFERENCES `biblio` (`biblionumber`) ON DELETE CASCADE ON UPDATE CASCADE,
4986           CONSTRAINT `oai_sets_biblios_ibfk_2` FOREIGN KEY (`set_id`) REFERENCES `oai_sets` (`id`) ON DELETE CASCADE ON UPDATE CASCADE
4987         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
4988     });
4989
4990     $dbh->do(q{
4991         INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OAI-PMH:AutoUpdateSets','0','Automatically update OAI sets when a bibliographic record is created or updated','','YesNo');
4992     });
4993
4994     print "Upgrade to $DBversion done (Atomic update for OAI-PMH sets management)\n";
4995     SetVersion($DBversion);
4996 }
4997
4998 $DBversion = "3.07.00.030";
4999 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5000     $dbh->do("ALTER TABLE default_circ_rules ADD
5001             COLUMN `returnbranch` varchar(15) default NULL AFTER `holdallowed`");
5002     $dbh->do("ALTER TABLE branch_item_rules ADD
5003             COLUMN `returnbranch` varchar(15) default NULL AFTER `holdallowed`");
5004     $dbh->do("ALTER TABLE default_branch_circ_rules ADD
5005             COLUMN `returnbranch` varchar(15) default NULL AFTER `holdallowed`");
5006     $dbh->do("ALTER TABLE default_branch_item_rules ADD
5007             COLUMN `returnbranch` varchar(15) default NULL AFTER `holdallowed`");
5008     # set the default rule to the current value of HomeOrHoldingBranchReturn (default to 'homebranch' if need be)
5009     my $homeorholdingbranchreturn = C4::Context->preference('HomeOrHoldingBranchReturn') || 'homebranch';
5010     $dbh->do("UPDATE default_circ_rules SET returnbranch = '$homeorholdingbranchreturn'");
5011     print "Upgrade to $DBversion done (Atomic update for OAI-PMH sets management)\n";
5012     SetVersion($DBversion);
5013 }
5014
5015 $DBversion = "3.07.00.031";
5016 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5017     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('UseICU', '1', 'Tell Koha if ICU indexing is in use for Zebra or not.','1','YesNo')");
5018     print "Upgrade to $DBversion done (Add syspref to tell Koha if ICU indexing is in use for Zebra or not.)\n";
5019     SetVersion ($DBversion);
5020 }
5021
5022 $DBversion = "3.07.00.032";
5023 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5024     $dbh->do("ALTER TABLE virtualshelves MODIFY COLUMN owner int"); #should have been int already (fk to borrowers)
5025     $dbh->do("UPDATE virtualshelves vi LEFT JOIN borrowers bo ON bo.borrowernumber=vi.owner SET vi.owner=NULL where bo.borrowernumber IS NULL"); #before adding the constraint on borrowernumber, we need to get rid of deleted owners
5026     $dbh->do("DELETE FROM virtualshelves WHERE owner IS NULL and category=1"); #delete private lists without owner (cascades to shelfcontents)
5027     $dbh->do("ALTER TABLE virtualshelves ADD COLUMN allow_add tinyint(1) DEFAULT 0, ADD COLUMN allow_delete_own tinyint(1) DEFAULT 1, ADD COLUMN allow_delete_other tinyint(1) DEFAULT 0, ADD CONSTRAINT `virtualshelves_ibfk_1` FOREIGN KEY (`owner`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE SET NULL");
5028     $dbh->do("UPDATE virtualshelves SET allow_add=0, allow_delete_own=1, allow_delete_other=0 WHERE category=1");
5029     $dbh->do("UPDATE virtualshelves SET allow_add=0, allow_delete_own=1, allow_delete_other=0 WHERE category=2");
5030     $dbh->do("UPDATE virtualshelves SET allow_add=1, allow_delete_own=1, allow_delete_other=1 WHERE category=3");
5031     $dbh->do("UPDATE virtualshelves SET category=2 WHERE category=3");
5032
5033     $dbh->do("ALTER TABLE virtualshelfcontents ADD COLUMN borrowernumber int, ADD CONSTRAINT `shelfcontents_ibfk_3` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE SET NULL");
5034     $dbh->do("UPDATE virtualshelfcontents co LEFT JOIN virtualshelves sh USING (shelfnumber) SET co.borrowernumber=sh.owner");
5035
5036     $dbh->do("CREATE TABLE virtualshelfshares
5037     (id int AUTO_INCREMENT PRIMARY KEY, shelfnumber int NOT NULL,
5038     borrowernumber int, invitekey varchar(10), sharedate datetime,
5039     CONSTRAINT `virtualshelfshares_ibfk_1` FOREIGN KEY (`shelfnumber`) REFERENCES `virtualshelves` (`shelfnumber`) ON DELETE CASCADE ON UPDATE CASCADE,
5040         CONSTRAINT `virtualshelfshares_ibfk_2` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE SET NULL) ENGINE=InnoDB DEFAULT CHARSET=utf8");
5041
5042     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacAllowPublicListCreation',1,'If set, allows opac users to create public lists',NULL,'YesNo');");
5043     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacAllowSharingPrivateLists',0,'If set, allows opac users to share private lists with other patrons',NULL,'YesNo');");
5044
5045     print "Upgrade to $DBversion done (BZ7310: Improving list permissions)\n";
5046     SetVersion($DBversion);
5047 }
5048
5049 $DBversion = "3.07.00.033";
5050 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5051     $dbh->do("ALTER TABLE branches ADD opac_info text;");
5052     print "Upgrade to $DBversion done add opac_info to branches \n";
5053     SetVersion($DBversion);
5054 }
5055
5056 $DBversion = "3.07.00.034";
5057 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5058     $dbh->do("ALTER TABLE borrower_attribute_types ADD COLUMN category_code VARCHAR(10) NULL DEFAULT NULL AFTER `display_checkout`");
5059     $dbh->do("ALTER TABLE borrower_attribute_types ADD COLUMN class VARCHAR(255)  NOT NULL DEFAULT '' AFTER `category_code`");
5060     $dbh->do("ALTER TABLE borrower_attribute_types ADD CONSTRAINT category_code_fk FOREIGN KEY (category_code) REFERENCES categories(categorycode)");
5061     print "Upgrade to $DBversion done (New fields category_code and class in borrower_attribute_types table)\n";
5062     SetVersion($DBversion);
5063 }
5064
5065 $DBversion = "3.07.00.035";
5066 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5067     $dbh->do("ALTER TABLE issues CHANGE date_due date_due datetime");
5068     $dbh->do("UPDATE issues SET date_due = CONCAT(SUBSTR(date_due,1,11),'23:59:00')");
5069     $dbh->do("ALTER TABLE issues CHANGE returndate returndate datetime");
5070     $dbh->do("ALTER TABLE issues CHANGE lastreneweddate lastreneweddate datetime");
5071     $dbh->do("ALTER TABLE issues CHANGE issuedate issuedate datetime");
5072     $dbh->do("ALTER TABLE old_issues CHANGE date_due date_due datetime");
5073     $dbh->do("ALTER TABLE old_issues CHANGE returndate returndate datetime");
5074     $dbh->do("ALTER TABLE old_issues CHANGE lastreneweddate lastreneweddate datetime");
5075     $dbh->do("ALTER TABLE old_issues CHANGE issuedate issuedate datetime");
5076     $dbh->do("UPDATE accountlines SET description = CONCAT(description,' 23:59') WHERE accounttype='F' OR accounttype='FU'"); #BUG-8253
5077     print "Upgrade to $DBversion done (Setting up issues and accountlines tables for hourly loans)\n";
5078     SetVersion($DBversion);
5079 }
5080
5081 $DBversion = "3.07.00.036";
5082 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5083     $dbh->do(qq{
5084        ALTER TABLE z3950servers ADD timeout INT( 11 ) NOT NULL DEFAULT '0' AFTER syntax;
5085     });
5086     print "Upgrade to $DBversion done (New timeout field in z3950servers)\n";
5087 }
5088
5089 $DBversion = "3.07.00.037";
5090 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5091     $dbh->do("
5092        ALTER TABLE  `marc_subfield_structure` ADD  `maxlength` INT( 4 ) NOT NULL DEFAULT  '9999';
5093        ");
5094        $dbh->do("
5095        UPDATE `marc_subfield_structure` SET maxlength=24 WHERE tagfield='000';
5096        ");
5097        $dbh->do("
5098        UPDATE marc_subfield_structure SET maxlength = IF ((SELECT value FROM systempreferences WHERE variable = 'marcflavour')='MARC21','40','9999') WHERE tagfield='008';
5099        ");
5100        $dbh->do("
5101        UPDATE marc_subfield_structure SET maxlength = IF ((SELECT value FROM systempreferences WHERE variable = 'marcflavour')='NORMARC','40','9999') WHERE tagfield='008';
5102        ");
5103        $dbh->do("
5104        UPDATE marc_subfield_structure SET maxlength = IF ((SELECT value FROM systempreferences WHERE variable = 'marcflavour')='UNIMARC','36','9999') WHERE tagfield='100';
5105        ");
5106     print "Upgrade to $DBversion done (Add new field maxlength to marc_subfield_structure)\n";
5107     SetVersion($DBversion);
5108 }
5109
5110 $DBversion = "3.07.00.038";
5111 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5112     $dbh->do(qq{
5113         INSERT INTO systempreferences(variable,value,explanation,options,type)
5114         VALUES('UniqueItemFields', 'barcode', 'Space-separated list of fields that should be unique (used in acquisition module for item creation). Fields must be valid SQL column names of items table', '', 'Free')
5115     });
5116     print "Upgrade to $DBversion done (Added system preference 'UniqueItemFields')\n";
5117     SetVersion($DBversion);
5118 }
5119
5120 $DBversion = "3.07.00.039";
5121 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5122     $dbh->do( qq{INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('Babeltheque_url_js','','Url for Babeltheque javascript (e.g. http://www.babeltheque.com/bw_XX.js','','Free')} );
5123     $dbh->do( qq{CREATE TABLE IF NOT EXISTS social_data
5124       ( isbn VARCHAR(30),
5125         num_critics INT,
5126         num_critics_pro INT,
5127         num_quotations INT,
5128         num_videos INT,
5129         score_avg DECIMAL(5,2),
5130         num_scores INT,
5131         PRIMARY KEY  (isbn)
5132       ) ENGINE=InnoDB DEFAULT CHARSET=utf8
5133     } );
5134     $dbh->do( qq{INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('Babeltheque_url_update', '', 'Url for Babeltheque update (E.G. http://www.babeltheque.com/.../file.csv.bz2)', '', 'Free')} );
5135     print "Upgrade to $DBversion done (added syspref and table for babeltheque (Babeltheque_url_js, babeltheque))\n";
5136     SetVersion($DBversion);
5137 }
5138
5139 $DBversion = "3.07.00.040";
5140 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5141     $dbh->do( qq{INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('SocialNetworks','0','Enable/Disable social networks links in opac detail','','YesNo')} );
5142     print "Upgrade to $DBversion done (added syspref SocialNetworks, to display facebook/ggl+ and other buttons)\n";
5143     SetVersion($DBversion);
5144 }
5145
5146
5147
5148 $DBversion = "3.07.00.041";
5149 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5150     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES('SubscriptionDuplicateDroppedInput','','','List of fields which must not be rewritten when a subscription is duplicated (Separated by pipe |)','Free')");
5151     print "Upgrade to $DBversion done (Add system preference SubscriptionDuplicateDroppedInput)\n";
5152     SetVersion($DBversion);
5153 }
5154
5155 $DBversion = "3.07.00.042";
5156 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5157     $dbh->do("ALTER TABLE reserves ADD suspend BOOLEAN NOT NULL DEFAULT 0");
5158     $dbh->do("ALTER TABLE old_reserves ADD suspend BOOLEAN NOT NULL DEFAULT 0");
5159
5160     $dbh->do("ALTER TABLE reserves ADD suspend_until DATETIME NULL DEFAULT NULL");
5161     $dbh->do("ALTER TABLE old_reserves ADD suspend_until DATETIME NULL DEFAULT NULL");
5162
5163     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('AutoResumeSuspendedHolds',  '1', NULL ,  'Allow suspended holds to be automatically resumed by a set date.',  'YesNo')");
5164
5165     print "Upgrade to $DBversion done (Add suspend fields to reserves table, add syspref AutoResumeSuspendedHolds)\n";
5166     SetVersion ($DBversion);
5167 }
5168
5169 $DBversion = "3.07.00.043";
5170 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5171     my $countXSLTDetailsDisplay = 0;
5172     my $valueXSLTDetailsDisplay = "";
5173     my $valueXSLTResultsDisplay = "";
5174     my $valueOPACXSLTDetailsDisplay = "";
5175     my $valueOPACXSLTResultsDisplay = "";
5176     #the line below test if database comes from a BibLibre's branch
5177     $countXSLTDetailsDisplay = $dbh->do('SELECT 1 FROM systempreferences WHERE variable="IntranetXSLTDetailsDisplay"');
5178     if ($countXSLTDetailsDisplay > 0)
5179     {
5180         #the two lines below will only be used to update the databases from the BibLibre's branch. They will not affect the others
5181         $dbh->do(q|UPDATE systempreferences SET variable="XSLTDetailsDisplay" WHERE variable="IntranetXSLTDetailsDisplay"|);
5182         $dbh->do(q|UPDATE systempreferences SET variable="XSLTResultsDisplay" WHERE variable="IntranetXSLTResultsDisplay"|);
5183     }
5184     else
5185     {
5186         $valueXSLTDetailsDisplay = "default" if (C4::Context->preference("XSLTDetailsDisplay"));
5187         $valueXSLTResultsDisplay = "default" if (C4::Context->preference("XSLTResultsDisplay"));
5188         $valueOPACXSLTDetailsDisplay = "default" if (C4::Context->preference("OPACXSLTDetailsDisplay"));
5189         $valueOPACXSLTResultsDisplay = "default" if (C4::Context->preference("OPACXSLTResultsDisplay"));
5190         $dbh->do("UPDATE systempreferences SET type='Free', value=\"$valueXSLTDetailsDisplay\" WHERE variable='XSLTDetailsDisplay'");
5191         $dbh->do("UPDATE systempreferences SET type='Free', value=\"$valueXSLTResultsDisplay\" WHERE variable='XSLTResultsDisplay'");
5192         $dbh->do("UPDATE systempreferences SET type='Free', value=\"$valueOPACXSLTDetailsDisplay\" WHERE variable='OPACXSLTDetailsDisplay'");
5193         $dbh->do("UPDATE systempreferences SET type='Free', value=\"$valueOPACXSLTResultsDisplay\" WHERE variable='OPACXSLTResultsDisplay'");
5194     }
5195     print "Upgrade to $DBversion done (XSLT systempreference takes a path to file rather than YesNo)\n";
5196     SetVersion($DBversion);
5197 }
5198
5199 $DBversion = "3.07.00.044";
5200 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5201     $dbh->do("ALTER TABLE aqbooksellers ADD deliverytime INT DEFAULT NULL");
5202     print "Upgrade to $DBversion done (Add deliverytime field in aqbooksellers table)";
5203     SetVersion($DBversion);
5204 }
5205
5206 $DBversion = "3.07.00.045";
5207 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5208     $dbh->do("ALTER TABLE import_batches MODIFY COLUMN batch_type ENUM('batch','z3950','webservice') NOT NULL default 'batch'");
5209     print "Upgrade to $DBversion done (Add 'webservice' to batch_type enum)\n";
5210     SetVersion ($DBversion);
5211 }
5212
5213 $DBversion = "3.07.00.046";
5214 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5215     $dbh->do("ALTER TABLE issuingrules ADD COLUMN lengthunit varchar(10) DEFAULT 'days' AFTER issuelength");
5216     print "Upgrade to $DBversion done (Setting up issues tables for hourly loans (lengthunit fix))\n";
5217     SetVersion($DBversion);
5218 }
5219
5220 $DBversion = "3.07.00.047";
5221 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5222     $dbh->do("CREATE INDEX items_location ON items(location)");
5223     $dbh->do("CREATE INDEX items_ccode ON items(ccode)");
5224     print "Upgrade to $DBversion done (items_location and items_ccode indexes added for ShelfBrowser)\n";
5225     SetVersion($DBversion);
5226 }
5227
5228 $DBversion = "3.07.00.048";
5229 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5230     $dbh->do(
5231         q | CREATE TABLE ratings (
5232   borrowernumber int(11) NOT NULL,
5233   biblionumber int(11) NOT NULL,
5234   rating_value tinyint(1) NOT NULL,
5235   timestamp timestamp NOT NULL default CURRENT_TIMESTAMP,
5236   PRIMARY KEY  (borrowernumber,biblionumber),
5237   CONSTRAINT ratings_ibfk_1 FOREIGN KEY (borrowernumber) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE,
5238   CONSTRAINT ratings_ibfk_2 FOREIGN KEY (biblionumber) REFERENCES biblio (biblionumber) ON DELETE CASCADE ON UPDATE CASCADE
5239 ) ENGINE=InnoDB DEFAULT CHARSET=utf8 |
5240     );
5241
5242     $dbh->do(
5243 q /INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('OpacStarRatings','disable',NULL,'disable|all|details','Choice') /
5244     );
5245
5246     print
5247 "Upgrade to $DBversion done (Add 'ratings' table and 'OpacStarRatings' syspref)\n";
5248     SetVersion($DBversion);
5249 }
5250
5251 $DBversion = "3.07.00.049";
5252 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5253     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacBrowseResults','1','Disable/enable browsing and paging search results from the OPAC detail page.',NULL,'YesNo')");
5254     print "Upgrade to $DBversion done (Add system preference OpacBrowseResults ))\n";
5255     SetVersion($DBversion);
5256 }
5257
5258 $DBversion = "3.08.00.000";
5259 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5260     print "Upgrade to $DBversion done\n";
5261     SetVersion($DBversion);
5262 }
5263
5264 $DBversion = "3.09.00.001";
5265 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5266     $dbh->do("ALTER TABLE borrower_attribute_types MODIFY category_code VARCHAR( 1 ) NULL DEFAULT NULL");
5267     print "Upgrade to $DBversion done. (Bug 8002: Update patron attribute types table to allow NULL category_code)\n";
5268     SetVersion($DBversion);
5269 }
5270
5271 $DBversion = "3.09.00.002";
5272 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5273     $dbh->do("ALTER TABLE saved_sql
5274         ADD (
5275             cache_expiry INT NOT NULL DEFAULT 300,
5276             public BOOLEAN NOT NULL DEFAULT FALSE
5277         );
5278     ");
5279     print "Upgrade to $DBversion done (Added cache_expiry and public fields in
5280 saved_reports table.)\n";
5281     SetVersion($DBversion);
5282 }
5283
5284 $DBversion = "3.09.00.003";
5285 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5286     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('SvcMaxReportRows','10','Maximum number of rows to return via the report web service.',NULL,'Integer');");
5287     print "Upgrade to $DBversion done (Added SvcMaxReportRows syspref)\n";
5288     SetVersion($DBversion);
5289 }
5290
5291 $DBversion = "3.09.00.004";
5292 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5293     $dbh->do("INSERT IGNORE INTO permissions (module_bit, code, description) VALUES('13', 'edit_patrons', 'Perform batch modifivation of patrons')");
5294     print "Upgrade to $DBversion done (Adds permissions flag for access to the patron modifications tool)\n";
5295     SetVersion($DBversion);
5296 }
5297
5298 $DBversion = "3.09.00.005";
5299 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5300     unless (TableExists('quotes')) {
5301         $dbh->do( qq{
5302             CREATE TABLE `quotes` (
5303               `id` int(11) NOT NULL AUTO_INCREMENT,
5304               `source` text DEFAULT NULL,
5305               `text` mediumtext NOT NULL,
5306               `timestamp` datetime NOT NULL,
5307               PRIMARY KEY (`id`)
5308             ) ENGINE=InnoDB DEFAULT CHARSET=utf8
5309         });
5310     }
5311     $dbh->do( qq{
5312         INSERT IGNORE INTO permissions VALUES (13, "edit_quotes","Edit quotes for quote-of-the-day feature");
5313     });
5314     $dbh->do( qq{
5315         INSERT IGNORE INTO `systempreferences` (variable,value,explanation,options,type) VALUES('QuoteOfTheDay',0,'Enable or disable display of Quote of the Day on the OPAC home page',NULL,'YesNo');
5316     });
5317     print "Upgrade to $DBversion done (Adding Quote of the Day Option.)\n";
5318     SetVersion($DBversion);
5319 }
5320
5321 $DBversion = "3.09.00.006";
5322 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5323     $dbh->do("UPDATE systempreferences SET
5324                 variable = 'OPACShowHoldQueueDetails',
5325                 value = CASE value WHEN '1' THEN 'priority' ELSE 'none' END,
5326                 options = 'none|priority|holds|holds_priority',
5327                 explanation = 'Show holds details in OPAC',
5328                 type = 'Choice'
5329               WHERE variable = 'OPACDisplayRequestPriority'");
5330     print "Upgrade to $DBversion done (Changed system preference OPACDisplayRequestPriority -> OPACShowHoldQueueDetails)\n";
5331     SetVersion($DBversion);
5332 }
5333
5334 $DBversion = "3.09.00.007";
5335 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5336     unless(C4::Context->preference('ReservesControlBranch')){
5337         $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type) VALUES ('ReservesControlBranch','PatronLibrary','ItemHomeLibrary|PatronLibrary','Branch checked for members reservations rights.','Choice')");
5338     }
5339     print "Upgrade to $DBversion done (Insert ReservesControlBranch systempreference into systempreferences table )\n";
5340     SetVersion($DBversion);
5341 }
5342
5343 $DBversion = "3.09.00.008";
5344 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5345     $dbh->do("ALTER TABLE sessions ADD PRIMARY KEY (id);");
5346     $dbh->do("ALTER TABLE sessions DROP INDEX `id`;");
5347     print "Upgrade to $DBversion done (redefine the field id as PRIMARY KEY of sessions)\n";
5348     SetVersion($DBversion);
5349 }
5350
5351 $DBversion = "3.09.00.009";
5352 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5353     $dbh->do("ALTER TABLE branches ADD PRIMARY KEY (branchcode);");
5354     $dbh->do("ALTER TABLE branches DROP INDEX branchcode;");
5355     print "Upgrade to $DBversion done (redefine the field branchcode as PRIMARY KEY of branches)\n";
5356     SetVersion ($DBversion);
5357 }
5358
5359 $DBversion = "3.09.00.010";
5360 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5361     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('IssueLostItem', 'alert', 'alert|confirm|nothing', 'Defines what should be done when an attempt is made to issue an item that has been marked as lost.', 'Choice')");
5362     print "Upgrade to $DBversion done (Add system preference issuelostitem ))\n";
5363     SetVersion($DBversion);
5364 }
5365
5366 $DBversion = "3.09.00.011";
5367 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5368     $dbh->do("ALTER TABLE `biblioitems` ADD `ean` VARCHAR( 13 ) NULL AFTER issn");
5369     $dbh->do("CREATE INDEX `ean` ON biblioitems (`ean`) ");
5370     $dbh->do("ALTER TABLE `deletedbiblioitems` ADD `ean` VARCHAR( 13 ) NULL AFTER issn");
5371     if (C4::Context->preference("marcflavour") eq 'UNIMARC') {
5372          $dbh->do("UPDATE marc_subfield_structure SET kohafield='biblioitems.ean' WHERE tagfield='073' and tagsubfield='a'");
5373     }
5374     print "Upgrade to $DBversion done (Adding ean in biblioitems and deletedbiblioitems)\n";
5375     print "If you have records with ean, please run misc/batchRebuildBiblioTables.pl to populate bibliotems.ean\n" if (C4::Context->preference("marcflavour") eq 'UNIMARC');
5376     SetVersion($DBversion);
5377 }
5378
5379 $DBversion = "3.09.00.012";
5380 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5381     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('SuspendHoldsIntranet', '1', NULL , 'Allow holds to be suspended from the intranet.', 'YesNo')");
5382     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('SuspendHoldsOpac', '1', NULL , 'Allow holds to be suspended from the OPAC.', 'YesNo')");
5383     print "Upgrade to $DBversion done (Add system preference OpacBrowseResults ))\n";
5384     SetVersion($DBversion);
5385 }
5386
5387 $DBversion ="3.09.00.013";
5388 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5389     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('DefaultLanguageField008','','Fill in the default language for field 008 Range 35-37 (e.g. eng, nor, ger, see www.loc.gov/marc/languages/language_code.html)','','Free');");
5390     print "Upgrade to $DBversion done (Add system preference DefaultLanguageField008))\n";
5391     SetVersion($DBversion);
5392 }
5393
5394 $DBversion ="3.09.00.014";
5395 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5396     # add phone message transport type
5397     $dbh->do("INSERT INTO message_transport_types (message_transport_type) VALUES ('phone')");
5398
5399     # adds HOLD_PHONE and PREDUE_PHONE letters (as placeholders)
5400     $dbh->do("INSERT INTO letter (module, code, name, title, content) VALUES
5401               ('reserves', 'HOLD_PHONE', 'Item Available for Pick-up (phone notice)', 'Item Available for Pick-up (phone notice)', 'Your item is available for pickup'),
5402               ('circulation', 'PREDUE_PHONE', 'Advance Notice of Item Due (phone notice)', 'Advance Notice of Item Due (phone notice)', 'Your item is due soon'),
5403               ('circulation', 'OVERDUE_PHONE', 'Overdue Notice (phone notice)', 'Overdue Notice (phone notice)', 'Your item is overdue')
5404               ");
5405
5406     # add phone notifications to patron message preferences options
5407     $dbh->do("INSERT INTO message_transports
5408              (message_attribute_id, message_transport_type, is_digest, letter_module, letter_code) VALUES
5409              (4, 'phone', 0, 'reserves', 'HOLD_PHONE'),
5410              (2, 'phone', 0, 'circulation', 'PREDUE_PHONE')
5411              ");
5412
5413     # add TalkingTechItivaPhoneNotification syspref
5414     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('TalkingTechItivaPhoneNotification',0,'If ON, enables Talking Tech I-tiva phone notifications',NULL,'YesNo');");
5415
5416     print "Upgrade done (Support for Talking Tech i-tiva phone notification system)\n";
5417     SetVersion($DBversion);
5418 }
5419
5420 $DBversion = "3.09.00.015";
5421 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5422     $dbh->do(qq{
5423         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('StatisticsFields','location|itype|ccode','Define Fields (from the items table) used for statistics members','location|itype|ccode','free')
5424     });
5425     print "Upgrade to $DBversion done (Add System preference StatisticsFields)\n";
5426     SetVersion($DBversion);
5427 }
5428
5429 $DBversion = "3.09.00.016";
5430 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5431     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('OPACShowBarcode','0','Show items barcode in holding tab','','YesNo')");
5432     print "Upgrade to $DBversion done (Add syspref OPACShowBarcode)\n";
5433     SetVersion ($DBversion);
5434 }
5435
5436 $DBversion = "3.09.00.017";
5437 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5438     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('OpacNavRight', '', '70|10', 'Show the following HTML in the right hand column of the main page under the main login form', 'Textarea');");
5439     print "Upgrade to $DBversion done (Add customizable OpacNavRight region to the OPAC main page)\n";
5440     SetVersion ($DBversion);
5441 }
5442
5443 $DBversion = "3.09.00.018";
5444 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5445     $dbh->do("DROP TABLE IF EXISTS aqbudgetborrowers");
5446     $dbh->do("
5447         CREATE TABLE aqbudgetborrowers (
5448           budget_id int(11) NOT NULL,
5449           borrowernumber int(11) NOT NULL,
5450           PRIMARY KEY (budget_id, borrowernumber),
5451           CONSTRAINT aqbudgetborrowers_ibfk_1 FOREIGN KEY (budget_id)
5452             REFERENCES aqbudgets (budget_id)
5453             ON DELETE CASCADE ON UPDATE CASCADE,
5454           CONSTRAINT aqbudgetborrowers_ibfk_2 FOREIGN KEY (borrowernumber)
5455             REFERENCES borrowers (borrowernumber)
5456             ON DELETE CASCADE ON UPDATE CASCADE
5457         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
5458     ");
5459     $dbh->do("
5460         INSERT INTO permissions (module_bit, code, description)
5461         VALUES (11, 'budget_manage_all', 'Manage all budgets')
5462     ");
5463     print "Upgrade to $DBversion done (Add aqbudgetborrowers table)\n";
5464     SetVersion($DBversion);
5465 }
5466
5467 $DBversion = "3.09.00.019";
5468 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5469     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('OPACShowUnusedAuthorities','1','','Show authorities that are not being used in the OPAC.','YesNo')");
5470     print "Upgrade to $DBversion done (Add OPACShowUnusedAuthorities system preference)\n";
5471     SetVersion ($DBversion);
5472 }
5473
5474 $DBversion = "3.09.00.020";
5475 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5476     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,type) VALUES('EnableBorrowerFiles','0','If enabled, allows librarians to upload and attach arbitrary files to a borrower record.','YesNo')");
5477     $dbh->do("
5478 CREATE TABLE IF NOT EXISTS borrower_files (
5479   file_id int(11) NOT NULL AUTO_INCREMENT,
5480   borrowernumber int(11) NOT NULL,
5481   file_name varchar(255) NOT NULL,
5482   file_type varchar(255) NOT NULL,
5483   file_description varchar(255) DEFAULT NULL,
5484   file_content longblob NOT NULL,
5485   date_uploaded timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP,
5486   PRIMARY KEY (file_id),
5487   KEY borrowernumber (borrowernumber)
5488 ) ENGINE=InnoDB  DEFAULT CHARSET=utf8;
5489     ");
5490     $dbh->do("ALTER TABLE borrower_files ADD CONSTRAINT borrower_files_ibfk_1 FOREIGN KEY (borrowernumber) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE");
5491
5492     print "Upgrade to $DBversion done (Added borrow_files table, EnableBorrowerFiles syspref)\n";
5493     SetVersion($DBversion);
5494 }
5495
5496 $DBversion = "3.09.00.021";
5497 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5498     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('UpdateTotalIssuesOnCirc','0','Whether to update the totalissues field in the biblio on each circ.',NULL,'YesNo');");
5499     print "Upgrade to $DBversion done (Add syspref UpdateTotalIssuesOnCirc)\n";
5500     SetVersion($DBversion);
5501 }
5502
5503 $DBversion = "3.09.00.022";
5504 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5505     $dbh->do("ALTER TABLE search_history MODIFY COLUMN query_cgi text NOT NULL");
5506     print "Upgrade to $DBversion done (Change search_history.query_cgi type to text. bug 5981)\n";
5507     SetVersion($DBversion);
5508 }
5509
5510 $DBversion = "3.09.00.023";
5511 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5512     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES('SearchEngine','Zebra','Solr|Zebra','Search Engine','Choice')");
5513     print "Upgrade to $DBversion done (Add system preference SearchEngine )\n";
5514     SetVersion($DBversion);
5515 }
5516
5517 $DBversion ="3.09.00.024";
5518 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5519     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('IntranetSlipPrinterJS','','Use this JavaScript for printing slips. Define at least function printThenClose(). For use e.g. with Firefox PlugIn jsPrintSetup, see http://jsprintsetup.mozdev.org/','','Free')");
5520     print "Upgrade to $DBversion done (Add system preference IntranetSlipPrinterJS))\n";
5521     SetVersion($DBversion);
5522 }
5523
5524 $DBversion = "3.09.00.025";
5525 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5526     $dbh->do('START TRANSACTION');
5527     $dbh->do('CREATE TABLE tmp_reserves AS SELECT * FROM old_reserves LIMIT 0');
5528     $dbh->do('ALTER TABLE tmp_reserves ADD reserve_id INT( 11 ) NOT NULL AUTO_INCREMENT PRIMARY KEY FIRST');
5529     $dbh->do("
5530         INSERT INTO tmp_reserves (
5531           borrowernumber, reservedate, biblionumber,
5532           constrainttype, branchcode, notificationdate,
5533           reminderdate, cancellationdate, reservenotes,
5534           priority, found, timestamp, itemnumber,
5535           waitingdate, expirationdate, lowestPriority,
5536           suspend, suspend_until
5537         ) SELECT
5538           borrowernumber, reservedate, biblionumber,
5539           constrainttype, branchcode, notificationdate,
5540           reminderdate, cancellationdate, reservenotes,
5541           priority, found, timestamp, itemnumber,
5542           waitingdate, expirationdate, lowestPriority,
5543           suspend, suspend_until
5544         FROM old_reserves ORDER BY reservedate
5545     ");
5546     $dbh->do('SET @ai = ( SELECT MAX( reserve_id ) FROM tmp_reserves )');
5547     $dbh->do('TRUNCATE old_reserves');
5548     $dbh->do('ALTER TABLE old_reserves ADD reserve_id INT( 11 ) NOT NULL PRIMARY KEY FIRST');
5549     $dbh->do('INSERT INTO old_reserves SELECT * FROM tmp_reserves WHERE reserve_id <= @ai');
5550     $dbh->do("
5551         INSERT INTO tmp_reserves (
5552           borrowernumber, reservedate, biblionumber,
5553           constrainttype, branchcode, notificationdate,
5554           reminderdate, cancellationdate, reservenotes,
5555           priority, found, timestamp, itemnumber,
5556           waitingdate, expirationdate, lowestPriority,
5557           suspend, suspend_until
5558         ) SELECT
5559           borrowernumber, reservedate, biblionumber,
5560           constrainttype, branchcode, notificationdate,
5561           reminderdate, cancellationdate, reservenotes,
5562           priority, found, timestamp, itemnumber,
5563           waitingdate, expirationdate, lowestPriority,
5564           suspend, suspend_until
5565         FROM reserves ORDER BY reservedate
5566     ");
5567     $dbh->do('TRUNCATE reserves');
5568     $dbh->do('ALTER TABLE reserves ADD reserve_id INT( 11 ) NOT NULL AUTO_INCREMENT PRIMARY KEY FIRST');
5569     $dbh->do('INSERT INTO reserves SELECT * FROM tmp_reserves WHERE reserve_id > COALESCE(@ai, 0)');
5570     $dbh->do('DROP TABLE tmp_reserves');
5571     $dbh->do('COMMIT');
5572
5573     my $sth = $dbh->prepare("
5574         SELECT COUNT( * ) AS count
5575         FROM information_schema.COLUMNS
5576         WHERE COLUMN_NAME =  'reserve_id'
5577         AND (
5578           TABLE_NAME LIKE  'reserves'
5579           OR
5580           TABLE_NAME LIKE  'old_reserves'
5581         )
5582     ");
5583     $sth->execute();
5584     my $row = $sth->fetchrow_hashref();
5585     die("Failed to add reserve_id to reserves tables, please refresh the page to try again.") unless ( $row->{'count'} );
5586
5587     print "Upgrade to $DBversion done (add reserve_id to reserves & old_reserves tables)\n";
5588     SetVersion($DBversion);
5589 }
5590
5591 $DBversion = "3.09.00.026";
5592 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5593     $dbh->do("INSERT INTO permissions (module_bit, code, description) VALUES
5594         ( 3, 'parameters_remaining_permissions', 'Remaining system parameters permissions'),
5595         ( 3, 'manage_circ_rules', 'manage circulation rules')");
5596     $dbh->do("INSERT INTO user_permissions (borrowernumber, module_bit, code)
5597         SELECT borrowernumber, 3, 'parameters_remaining_permissions'
5598         FROM borrowers WHERE flags & (1 << 3)");
5599     # Give new subpermissions to all users that have 'parameters' permission flag (bit 3) set
5600     # see userflags table
5601     $dbh->do("INSERT INTO user_permissions (borrowernumber, module_bit, code)
5602         SELECT borrowernumber, 3, 'manage_circ_rules'
5603         FROM borrowers WHERE flags & (1 << 3)");
5604     print "Upgrade to $DBversion done (Added parameters subpermissions)\n";
5605     SetVersion($DBversion);
5606 }
5607
5608 $DBversion = '3.09.00.027';
5609 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5610     $dbh->do("ALTER TABLE issuingrules ADD overduefinescap decimal(28,6) DEFAULT NULL");
5611     my $maxfine = C4::Context->preference('MaxFine');
5612     if ($maxfine && $maxfine < 900) { # an arbitrary value that tells us it's not "some huge value"
5613       $dbh->do("UPDATE issuingrules SET overduefinescap=?",undef,$maxfine);
5614       $dbh->do("UPDATE systempreferences SET value = NULL WHERE variable = 'MaxFine'");
5615     }
5616     $dbh->do("UPDATE systempreferences SET explanation = 'Maximum fine a patron can have for all late returns at one moment. Single item caps are specified in the circulation rules matrix.' WHERE variable = 'MaxFine'");
5617     print "Upgrade to $DBversion done (Bug 7420 add overduefinescap to circulation matrix)\n";
5618     SetVersion ($DBversion);
5619 }
5620
5621 $DBversion = "3.09.00.028";
5622 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5623     unless ( C4::Context->preference('marcflavour') eq 'UNIMARC' ) {
5624         my %referencetypes = (  '00' => 'PERSO_NAME',
5625                                 '10' => 'CORPO_NAME',
5626                                 '11' => 'MEETI_NAME',
5627                                 '30' => 'UNIF_TITLE',
5628                                 '48' => 'CHRON_TERM',
5629                                 '50' => 'TOPIC_TERM',
5630                                 '51' => 'GEOGR_NAME',
5631                                 '55' => 'GENRE/FORM'
5632                 );
5633         my $query = q{SELECT DISTINCT authtypecode, tagfield
5634                     FROM auth_subfield_structure
5635                     WHERE (tagfield BETWEEN '400' AND '455' OR
5636                     tagfield BETWEEN '500' and '555') AND tagsubfield='a' AND
5637                     frameworkcode = '' AND ROW(authtypecode, tagfield) NOT IN
5638                     (SELECT authtypecode, tagfield FROM auth_subfield_structure
5639                     WHERE tagsubfield ='9' )};
5640         $sth = $dbh->prepare($query);
5641         $sth->execute;
5642         my $sth2 = $dbh->prepare(q{INSERT INTO auth_subfield_structure
5643                 (authtypecode, tagfield, tagsubfield, liblibrarian, libopac,
5644                  repeatable, mandatory, tab, authorised_value, value_builder,
5645                  seealso, isurl, hidden, linkid, kohafield, frameworkcode)
5646                 VALUES (?, ?, '9', '9 (RLIN)', '9 (RLIN)', 0, 0, ?, NULL, NULL,
5647                     NULL, 0, 1, '', '', '')});
5648         my $sth3 = $dbh->prepare(q{UPDATE auth_subfield_structure SET
5649                                     frameworkcode = ? WHERE authtypecode = ? AND
5650                                     tagfield = ? AND tagsubfield = 'a'});
5651         while (my $row = $sth->fetchrow_arrayref()) {
5652             my ($authtypecode, $field) = @$row;
5653             $sth2->execute($authtypecode, $field, substr($field, 0, 1));
5654             my $authtypemarker = substr $field, 1, 2;
5655             if ($authtypemarker && $referencetypes{$authtypemarker}) {
5656                 $sth3->execute($referencetypes{$authtypemarker}, $authtypecode, $field);
5657             }
5658         }
5659     }
5660
5661     print "Upgrade to $DBversion done (Add thesaurus links for MARC21/NORMARC)\n";
5662     SetVersion($DBversion);
5663 }
5664
5665 $DBversion = "3.09.00.029"; # FIXME
5666 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5667     $dbh->do("UPDATE systempreferences SET options=concat(options,'|EAN13') WHERE variable='itemBarcodeInputFilter' AND options NOT LIKE '%EAN13%'");
5668     print "Upgrade to $DBversion done (Add itemBarcodeInputFilter choice EAN13)\n";
5669
5670     $dbh->do("UPDATE systempreferences SET options = concat(options,'|EAN13'), explanation = concat(explanation,'; EAN13 - incremental') WHERE variable = 'autoBarcode' AND options NOT LIKE '%EAN13%'");
5671     print "Upgrade to $DBversion done ( Added EAN13 barcode autogeneration sequence )\n";
5672     SetVersion($DBversion);
5673 }
5674
5675 $DBversion ="3.09.00.030";
5676 if(C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5677     my $query = "SELECT value FROM systempreferences WHERE variable='opacstylesheet'";
5678     my $remote= $dbh->selectrow_arrayref($query);
5679     $dbh->do("DELETE from systempreferences WHERE variable='opacstylesheet'");
5680     if($remote && $remote->[0]) {
5681         $query="UPDATE systempreferences SET value=? WHERE variable='opaclayoutstylesheet'";
5682         $dbh->do($query,undef,$remote->[0]);
5683         print "NOTE: The URL of your remote opac css file has been moved to preference opaclayoutstylesheet.\n";
5684     }
5685     print "Upgrade to $DBversion done (BZ 8263: Make OPAC stylesheet preferences more consistent)\n";
5686     SetVersion($DBversion);
5687 }
5688
5689 $DBversion = "3.09.00.031";
5690 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5691     $dbh->do("DELETE FROM systempreferences WHERE variable='AmazonReviews'");
5692     $dbh->do("DELETE FROM systempreferences WHERE variable='AmazonSimilarItems'");
5693     $dbh->do("DELETE FROM systempreferences WHERE variable='AWSAccessKeyID'");
5694     $dbh->do("DELETE FROM systempreferences WHERE variable='AWSPrivateKey'");
5695     $dbh->do("DELETE FROM systempreferences WHERE variable='OPACAmazonReviews'");
5696     $dbh->do("DELETE FROM systempreferences WHERE variable='OPACAmazonSimilarItems'");
5697     $dbh->do("DELETE FROM systempreferences WHERE variable='AmazonEnabled'");
5698     $dbh->do("DELETE FROM systempreferences WHERE variable='OPACAmazonEnabled'");
5699     print "Upgrade to $DBversion done ('Remove preferences controlling broken Amazon features (Bug 8679')\n";
5700     SetVersion ($DBversion);
5701 }
5702
5703 $DBversion = "3.09.00.032";
5704 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5705     $dbh->do("UPDATE systempreferences SET value = 'call_number' WHERE variable = 'defaultSortField' AND value = 'callnumber'");
5706     $dbh->do("UPDATE systempreferences SET value = 'call_number' WHERE variable = 'OPACdefaultSortField' AND value = 'callnumber'");
5707     print "Upgrade to $DBversion done (Bug 8657 - Default sort by call number does not work. Correcting system preference value.)\n";
5708     SetVersion ($DBversion);
5709 }
5710
5711
5712 $DBversion = '3.09.00.033';
5713 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5714    $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacSuppressionByIPRange','','Restrict the suppression to IP adresses outside of the IP range','','free');");
5715    print "Upgrade to $DBversion done (Add OpacSuppressionByIPRange syspref)\n";
5716    SetVersion ($DBversion);
5717 }
5718
5719 $DBversion ="3.09.00.034";
5720 if(C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5721     $dbh->do("UPDATE auth_subfield_structure SET frameworkcode = 'PERSO_NAME' WHERE frameworkcode = 'PERSO_CODE'");
5722     $dbh->do("UPDATE auth_subfield_structure SET frameworkcode = 'CORPO_NAME' WHERE frameworkcode = 'ORGO_CODE'");
5723     print "Upgrade to $DBversion done (Bug 8207: correct typo in authority types)\n";
5724     SetVersion ($DBversion);
5725 }
5726
5727 $DBversion = "3.09.00.035";
5728 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5729     $dbh->do("
5730     INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('PrefillItem','0','When a new item is added, should it be prefilled with last created item values?','','YesNo');
5731     ");
5732     $dbh->do(
5733     "INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SubfieldsToUseWhenPrefill','','Define a list of subfields to use when prefilling items (separated by space)','','Free');
5734     ");
5735     print "Upgrade to $DBversion done (Adding PrefillItem and SubfieldsToUseWhenPrefill sysprefs)\n";
5736     SetVersion ($DBversion);
5737 }
5738
5739 $DBversion = "3.09.00.036";
5740 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5741     # biblioitems changes
5742     $dbh->do("ALTER TABLE biblioitems ADD COLUMN agerestriction VARCHAR(255) DEFAULT NULL AFTER cn_sort");
5743     $dbh->do("ALTER TABLE deletedbiblioitems ADD COLUMN agerestriction VARCHAR(255) DEFAULT NULL AFTER cn_sort");
5744     # preferences changes
5745     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('AgeRestrictionMarker','','Markers for age restriction indication, e.g. FSK|PEGI|Age|. See: http://wiki.koha-community.org/wiki/Age_restriction',NULL,'free')");
5746     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('AgeRestrictionOverride',0,'Allow staff to check out an item with age restriction.',NULL,'YesNo')");
5747
5748     print "Upgrade to $DBversion done (Add colum agerestriction to biblioitems and deletedbiblioitems, add system preferences AgeRestrictionMarker and AgeRestrictionOverride)\n";
5749    SetVersion ($DBversion);
5750 }
5751
5752 $DBversion = "3.09.00.037";
5753 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5754     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('UseTransportCostMatrix',0,'Use Transport Cost Matrix when filling holds','','YesNo')");
5755
5756  $dbh->do("CREATE TABLE `transport_cost` (
5757               `frombranch` varchar(10) NOT NULL,
5758               `tobranch` varchar(10) NOT NULL,
5759               `cost` decimal(6,2) NOT NULL,
5760               `disable_transfer` tinyint(1) NOT NULL DEFAULT 0,
5761               CHECK ( `frombranch` <> `tobranch` ), -- a dud check, mysql does not support that
5762               PRIMARY KEY (`frombranch`, `tobranch`),
5763               CONSTRAINT `transport_cost_ibfk_1` FOREIGN KEY (`frombranch`) REFERENCES `branches` (`branchcode`) ON DELETE CASCADE ON UPDATE CASCADE,
5764               CONSTRAINT `transport_cost_ibfk_2` FOREIGN KEY (`tobranch`) REFERENCES `branches` (`branchcode`) ON DELETE CASCADE ON UPDATE CASCADE
5765           ) ENGINE=InnoDB DEFAULT CHARSET=utf8");
5766
5767     print "Upgrade to $DBversion done (creating `transport_cost` table; adding UseTransportCostMatrix systempref, in circulation)\n";
5768     SetVersion($DBversion);
5769 }
5770
5771 $DBversion ="3.09.00.038";
5772 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5773     $dbh->do("ALTER TABLE borrower_attributes CHANGE  attribute  attribute VARCHAR( 255 ) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL");
5774     print "Upgrade to $DBversion done (Increase the maximum size of a borrower attribute value)\n";
5775     SetVersion($DBversion);
5776 }
5777
5778 $DBversion ="3.09.00.039";
5779 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5780     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,type) VALUES('DidYouMeanFromAuthorities','0','Suggest searches based on authority file.','YesNo');");
5781     print "Upgrade to $DBversion done (Add system preference DidYouMeanFromAuthorities)\n";
5782     SetVersion($DBversion);
5783 }
5784
5785 $DBversion = "3.09.00.040";
5786 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5787     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('IncludeSeeFromInSearches','0','','Include see-from references in searches.','YesNo');");
5788     print "Upgrade to $DBversion done (Add IncludeSeeFromInSearches system preference)\n";
5789     SetVersion ($DBversion);
5790 }
5791
5792 $DBversion = "3.09.00.041";
5793 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5794     $dbh->do(qq{
5795         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('ExportRemoveFields','','List of fields for non export in circulation.pl (separated by a space)','','');
5796     });
5797     print "Upgrade to $DBversion done (Add system preference ExportRemoveFields)\n";
5798     SetVersion($DBversion);
5799 }
5800
5801 $DBversion = "3.09.00.042";
5802 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5803     $dbh->do(qq{
5804         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('ExportWithCsvProfile','','Set a profile name for CSV export','','');
5805     });
5806     print "Upgrade to $DBversion done (Adds New System preference ExportWithCsvProfile)\n";
5807     SetVersion($DBversion)
5808 }
5809
5810 $DBversion = "3.09.00.043";
5811 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5812     $dbh->do("
5813         ALTER TABLE aqorders
5814         ADD parent_ordernumber int(11) DEFAULT NULL
5815     ");
5816     $dbh->do("
5817         UPDATE aqorders
5818         SET parent_ordernumber = ordernumber;
5819     ");
5820     print "Upgrade to $DBversion done (Adding parent_ordernumber in aqorders)\n";
5821     SetVersion($DBversion);
5822 }
5823
5824 $DBversion = '3.09.00.044';
5825 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5826     $dbh->do("ALTER TABLE statistics ADD COLUMN ccode VARCHAR ( 10 ) NULL AFTER associatedborrower");
5827     $dbh->do("UPDATE statistics SET statistics.ccode = ( SELECT items.ccode FROM items WHERE statistics.itemnumber = items.itemnumber )");
5828     $dbh->do("UPDATE statistics SET statistics.ccode = (
5829               SELECT deleteditems.ccode FROM deleteditems
5830                   WHERE statistics.itemnumber = deleteditems.itemnumber
5831               ) WHERE statistics.ccode IS NULL");
5832     print "Upgrade done ( Added Collection Code to Statistics table. )\n";
5833     SetVersion ($DBversion);
5834 }
5835
5836 $DBversion = "3.09.00.045";
5837 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5838     $dbh->do("ALTER TABLE borrower_attribute_types MODIFY category_code VARCHAR( 10 ) NULL DEFAULT NULL");
5839     print "Upgrade to $DBversion done. (Bug 8002: Update patron attribute types table from varchar(1) to varchar(10) category_code)\nWarning to Koha System Administrators: If you use borrower attributes defined by borrower categories, you have to check your configuration. A bug may have removed your attribute links to borrower categories.\nPlease check, and fix it if necessary.";
5840     SetVersion($DBversion);
5841 }
5842
5843 $DBversion = "3.09.00.046";
5844 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5845     $dbh->do("ALTER TABLE `accountlines` ADD `accountlines_id` INT NOT NULL AUTO_INCREMENT PRIMARY KEY FIRST;");
5846     print "Upgrade to $DBversion done (adding accountlines_id field in accountlines table)\n";
5847     SetVersion($DBversion);
5848 }
5849
5850 $DBversion = "3.09.00.047";
5851 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5852     # to preserve default behaviour as best as possible, set this new preference differently depending on whether IndependantBranches is set or not
5853     my $prefvalue = 'anywhere';
5854     if (C4::Context->preference("IndependantBranches")) { $prefvalue = 'homeorholdingbranch';}
5855     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('AllowReturnToBranch', '$prefvalue', 'Where an item may be returned', 'anywhere|homebranch|holdingbranch|homeorholdingbranch', 'Choice');");
5856
5857     print "Upgrade to $DBversion done: adding AllowReturnToBranch syspref (bug 6151)";
5858     SetVersion($DBversion);
5859 }
5860
5861 $DBversion = "3.09.00.048";
5862 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5863     $dbh->do("ALTER TABLE authorised_values MODIFY lib varchar(200)");
5864     $dbh->do("ALTER TABLE authorised_values MODIFY lib_opac varchar(200)");
5865
5866     print "Upgrade to $DBversion done (Raise the length of Authorised Values descriptions)\n";
5867     SetVersion($DBversion);
5868 }
5869
5870 $DBversion ="3.09.00.049";
5871 if(C4::Context->preference("Version") < TransformToNum($DBversion) ) {
5872     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OPACMobileUserCSS','','Include the following CSS for the mobile view on all pages in the OPAC:',NULL,'free');");
5873     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacMainUserBlockMobile','','Show the following HTML in its own column on the main page of the OPAC (mobile version):',NULL,'free');");
5874     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacShowLibrariesPulldownMobile','1','Show the libraries pulldown on the mobile version of the OPAC.',NULL,'YesNo');");
5875     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacShowFiltersPulldownMobile','1','Show the search filters pulldown on the mobile version of the OPAC.',NULL,'YesNo');");
5876     print "Upgrade to $DBversion done (Add OPACMobileUserCSS, OpacMainUserBlockMobile, OpacShowLibrariesPulldownMobile and OpacShowFiltersPulldownMobile sysprefs)\n";
5877     SetVersion($DBversion);
5878 }
5879
5880 $DBversion = "3.09.00.050";
5881 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5882     $dbh->do("ALTER TABLE authorised_values MODIFY category varchar(16) NOT NULL DEFAULT '';");
5883     $dbh->do("INSERT INTO authorised_values (category, authorised_value, lib) VALUES
5884               ('REPORT_GROUP', 'CIRC', 'Circulation'),
5885               ('REPORT_GROUP', 'CAT', 'Catalog'),
5886               ('REPORT_GROUP', 'PAT', 'Patrons'),
5887               ('REPORT_GROUP', 'ACQ', 'Acquisitions'),
5888               ('REPORT_GROUP', 'ACC', 'Accounts');");
5889
5890     $dbh->do("ALTER TABLE reports_dictionary ADD report_area varchar(6) DEFAULT NULL;");
5891     $dbh->do("UPDATE reports_dictionary SET report_area = CASE area
5892                   WHEN 1 THEN 'CIRC'
5893                   WHEN 2 THEN 'CAT'
5894                   WHEN 3 THEN 'PAT'
5895                   WHEN 4 THEN 'ACQ'
5896                   WHEN 5 THEN 'ACC'
5897                   END;");
5898     $dbh->do("ALTER TABLE reports_dictionary DROP area;");
5899     $dbh->do("ALTER TABLE reports_dictionary ADD KEY dictionary_area_idx (report_area);");
5900
5901     $dbh->do("ALTER TABLE saved_sql ADD report_area varchar(6) DEFAULT NULL;");
5902     $dbh->do("ALTER TABLE saved_sql ADD report_group varchar(80) DEFAULT NULL;");
5903     $dbh->do("ALTER TABLE saved_sql ADD report_subgroup varchar(80) DEFAULT NULL;");
5904     $dbh->do("ALTER TABLE saved_sql ADD KEY sql_area_group_idx (report_group, report_subgroup);");
5905
5906     print "Upgrade to $DBversion done saved_sql new fields report_group and report_area; authorised_values.category 16 char \n";
5907     SetVersion($DBversion);
5908 }
5909
5910 $DBversion = "3.09.00.051";
5911 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5912     $dbh->do("
5913         CREATE TABLE aqinvoices (
5914           invoiceid int(11) NOT NULL AUTO_INCREMENT,
5915           invoicenumber mediumtext NOT NULL,
5916           booksellerid int(11) NOT NULL,
5917           shipmentdate date default NULL,
5918           billingdate date default NULL,
5919           closedate date default NULL,
5920           shipmentcost decimal(28,6) default NULL,
5921           shipmentcost_budgetid int(11) default NULL,
5922           PRIMARY KEY (invoiceid),
5923           CONSTRAINT aqinvoices_fk_aqbooksellerid FOREIGN KEY (booksellerid) REFERENCES aqbooksellers (id) ON DELETE CASCADE ON UPDATE CASCADE,
5924           CONSTRAINT aqinvoices_fk_shipmentcost_budgetid FOREIGN KEY (shipmentcost_budgetid) REFERENCES aqbudgets (budget_id) ON DELETE SET NULL ON UPDATE CASCADE
5925         ) ENGINE=InnoDB DEFAULT CHARSET=utf8
5926     ");
5927
5928     # Fill this new table with existing invoices
5929     my $sth = $dbh->prepare("
5930         SELECT aqorders.booksellerinvoicenumber AS invoicenumber, aqbasket.booksellerid, aqorders.datereceived
5931         FROM aqorders
5932           LEFT JOIN aqbasket ON aqorders.basketno = aqbasket.basketno
5933         WHERE aqorders.booksellerinvoicenumber IS NOT NULL
5934           AND aqorders.booksellerinvoicenumber != ''
5935         GROUP BY aqorders.booksellerinvoicenumber
5936     ");
5937     $sth->execute;
5938     my $results = $sth->fetchall_arrayref({});
5939     $sth = $dbh->prepare("
5940         INSERT INTO aqinvoices (invoicenumber, booksellerid, shipmentdate) VALUES (?,?,?)
5941     ");
5942     foreach(@$results) {
5943         $sth->execute($_->{invoicenumber}, $_->{booksellerid}, $_->{datereceived});
5944     }
5945
5946     # Add the column in aqorders, fill it with correct value
5947     # and then drop booksellerinvoicenumber column
5948     $dbh->do("
5949         ALTER TABLE aqorders
5950         ADD COLUMN invoiceid int(11) default NULL AFTER booksellerinvoicenumber,
5951         ADD CONSTRAINT aqorders_ibfk_3 FOREIGN KEY (invoiceid) REFERENCES aqinvoices (invoiceid) ON DELETE SET NULL ON UPDATE CASCADE
5952     ");
5953
5954     $dbh->do("
5955         UPDATE aqorders, aqinvoices
5956         SET aqorders.invoiceid = aqinvoices.invoiceid
5957         WHERE aqorders.booksellerinvoicenumber = aqinvoices.invoicenumber
5958     ");
5959
5960     $dbh->do("
5961         ALTER TABLE aqorders
5962         DROP COLUMN booksellerinvoicenumber
5963     ");
5964
5965     print "Upgrade to $DBversion done (Add aqinvoices table) \n";
5966     SetVersion ($DBversion);
5967 }
5968
5969 $DBversion = "3.09.00.052";
5970 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5971     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('decreaseLoanHighHolds', NULL, '', 'Decreases the loan period for items with number of holds above the threshold specified in decreaseLoanHighHoldsValue', 'YesNo');");
5972     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('decreaseLoanHighHoldsValue', NULL, '', 'Specifies a threshold for the minimum number of holds needed to trigger a reduction in loan duration (used with decreaseLoanHighHolds)', 'Integer');");
5973     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('decreaseLoanHighHoldsDuration', NULL, '', 'Specifies a number of days that a loan is reduced to when used in conjunction with decreaseLoanHighHolds', 'Integer');");
5974     print "Upgrade to $DBversion done (Add systempreferences to decrease loan length on high demand items decreaseLoanHighHolds, decreaseLoanHighHoldsValue and decreaseLoanHighHoldsDuration) \n";
5975     SetVersion ($DBversion);
5976 }
5977
5978 $DBversion = "3.09.00.053";
5979 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
5980     $dbh->do(
5981     q|CREATE TABLE `import_auths` (
5982         import_record_id int(11) NOT NULL,
5983         matched_authid int(11) default NULL,
5984         control_number varchar(25) default NULL,
5985         authorized_heading varchar(128) default NULL,
5986         original_source varchar(25) default NULL,
5987         CONSTRAINT import_auths_ibfk_1 FOREIGN KEY (import_record_id)
5988         REFERENCES import_records (import_record_id) ON DELETE CASCADE ON UPDATE CASCADE,
5989         KEY matched_authid (matched_authid)
5990         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;|
5991     );
5992     $dbh->do("ALTER TABLE import_batches
5993                 CHANGE COLUMN num_biblios num_records int(11) NOT NULL default 0,
5994                 ADD COLUMN record_type enum('biblio', 'auth', 'holdings') NOT NULL default 'biblio'");
5995     $dbh->do("UPDATE import_batches SET record_type='auth' WHERE import_batch_id IN
5996                 (SELECT import_batch_id FROM import_records WHERE record_type='auth')");
5997
5998     print "Upgrade to $DBversion done (Added support for staging authorities)\n";
5999     SetVersion ($DBversion);
6000 }
6001
6002 $DBversion = "3.09.00.054";
6003 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
6004     $dbh->do("ALTER TABLE aqorders CHANGE COLUMN gst gstrate DECIMAL(6,4)  DEFAULT NULL");
6005     print "Upgrade to $DBversion done (Change column name in aqorders gst --> gstrate)\n";
6006     SetVersion($DBversion);
6007 }
6008
6009 $DBversion = "3.09.00.055";
6010 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
6011     $dbh->do("ALTER TABLE aqorders ADD discount float(6,4) DEFAULT NULL AFTER gstrate");
6012     print "Upgrade to $DBversion done (Add discount field in aqorders table)\n";
6013     SetVersion($DBversion);
6014 }
6015
6016 $DBversion ="3.09.00.056";
6017 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
6018     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('AuthDisplayHierarchy','0','Display authority hierarchies','','YesNo')");
6019     print "Upgrade to $DBversion done (Add system preference AuthDisplayHierarchy)\n";
6020     SetVersion($DBversion);
6021 }
6022
6023 $DBversion = "3.09.00.057";
6024 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
6025     $dbh->do("ALTER TABLE aqbasket ADD deliveryplace VARCHAR(10) default NULL AFTER basketgroupid;");
6026     $dbh->do("ALTER TABLE aqbasket ADD billingplace VARCHAR(10) default NULL AFTER deliveryplace;");
6027     print "Upgrade to $DBversion done (Bug 5356: Added billingplace, deliveryplace to the aqbasket table)\n";
6028     SetVersion($DBversion);
6029 }
6030
6031 $DBversion ="3.09.00.058";
6032 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
6033     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,type) VALUES('OPACdidyoumean',NULL,'Did you mean? configuration for the OPAC. Do not change, as this is controlled by /cgi-bin/koha/admin/didyoumean.pl.','Free');");
6034     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,type) VALUES('INTRAdidyoumean',NULL,'Did you mean? configuration for the Intranet. Do not change, as this is controlled by /cgi-bin/koha/admin/didyoumean.pl.','Free');");
6035     print "Upgrade to $DBversion done (Add Did You Mean? configuration)\n";
6036     SetVersion($DBversion);
6037 }
6038
6039 $DBversion ="3.09.00.059";
6040 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
6041     $dbh->do("INSERT INTO systempreferences (variable, value, options, explanation, type) VALUES ('BlockReturnOfWithdrawnItems', '1', '0', 'If enabled, items that are marked as withdrawn cannot be returned.', 'YesNo');");
6042     print "Upgrade to $DBversion done (Add system preference BlockReturnOfWithdrawnItems)\n";
6043     SetVersion($DBversion);
6044 }
6045
6046 $DBversion = "3.09.00.060";
6047 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
6048     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('HoldsToPullStartDate','2','Set the default start date for the Holds to pull list to this many days ago',NULL,'Integer')");
6049     print "Upgrade to $DBversion done (Added HoldsToPullStartDate syspref)\n";
6050     SetVersion($DBversion);
6051 }
6052
6053 $DBversion = "3.09.00.061";
6054 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6055     $dbh->do("UPDATE systempreferences set value=0 WHERE variable='OPACItemsResultsDisplay' AND value='statuses'");
6056     $dbh->do("UPDATE systempreferences set value=1 WHERE variable='OPACItemsResultsDisplay' AND value='itemdetails'");
6057     $dbh->do("UPDATE systempreferences SET explanation='If No, show only the status of items in result list. If Yes, show full location of items (branchlocation+callnumber) as in staff interface',options=NULL,type='YesNo' WHERE variable='OPACItemsResultsDisplay'");
6058     print "Upgrade to $DBversion done (Fixes Bug 5409, Set the syspref value to 1 if it is itemdetails and 0 if it is statuses, leaving it alone if it is already 1 or 0 and change the type of the syspref to YesNo.)\n";
6059     SetVersion ($DBversion);
6060 }
6061
6062 $DBversion = "3.09.00.062";
6063 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6064    $dbh->do("UPDATE systempreferences SET value=0 WHERE variable='NoZebra'");
6065    $dbh->do("UPDATE systempreferences SET value=0 WHERE variable='QueryRemoveStopwords'");
6066    print "Upgrade to $DBversion done (Disable obsolete NoZebra and QueryRemoveStopwords sysprefs)\n";
6067    SetVersion ($DBversion);
6068 }
6069
6070 $DBversion = "3.09.00.063";
6071 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6072     my $gst_booksellers = $dbh->selectcol_arrayref("SELECT DISTINCT(gstrate) FROM aqbooksellers");
6073     my $gist_syspref = C4::Context->preference("gist");
6074     # remove the undef values and construct and array with the syspref and the supplier values
6075     my @gstrates = map { defined $_ ? $_ : () } @$gst_booksellers;
6076     push @gstrates, split ('\|', $gist_syspref);
6077     # we want to compare integer (or float)
6078     $_ = $_ + 0 for @gstrates;
6079     use List::MoreUtils qw/uniq/;
6080     # remove duplicate values
6081     @gstrates = uniq sort @gstrates;
6082     my $new_syspref_value = join '|', @gstrates;
6083     # update the syspref with the new values
6084     my $sth = $dbh->prepare("UPDATE systempreferences set value=? WHERE variable='gist'");
6085     $sth->execute( $new_syspref_value );
6086
6087     print "Upgrade to $DBversion done (Bug 8832, Set the syspref gist with the existing values)\n";
6088     SetVersion ($DBversion);
6089 }
6090
6091 $DBversion = "3.09.00.064";
6092 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6093    $dbh->do('ALTER TABLE items ADD coded_location_qualifier varchar(10) default NULL AFTER itemcallnumber');
6094    print "Upgrade to $DBversion done (Bug 6428: Added coded_location_qualifier to the items table)\n";
6095    SetVersion ($DBversion);
6096 }
6097
6098 $DBversion = "3.09.00.065";
6099 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6100    $dbh->do('ALTER TABLE deleteditems ADD coded_location_qualifier varchar(10) default NULL AFTER itemcallnumber');
6101    print "Upgrade to $DBversion done (Bug 6428: Added coded_location_qualifier to the deleteditems table)\n";
6102    SetVersion ($DBversion);
6103 }
6104
6105 $DBversion = "3.09.00.066";
6106 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6107    $dbh->do("DELETE FROM systempreferences WHERE variable='DidYouMeanFromAuthorities'");
6108    print "Upgrade to $DBversion done (Bug 9107: remove DidYouMeanFromAuthorities syspref)\n";
6109    SetVersion ($DBversion);
6110 }
6111
6112 $DBversion = "3.09.00.067";
6113 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6114    $dbh->do("ALTER TABLE statistics CHANGE COLUMN ccode ccode varchar(10) NULL");
6115    print "Upgrade to $DBversion done (Bug 9064: statistics.ccode potentially wrongly defined)\n";
6116    SetVersion ($DBversion);
6117 }
6118
6119 $DBversion = "3.10.00.00";
6120 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6121    print "Upgrade to $DBversion done (release tag)\n";
6122    SetVersion ($DBversion);
6123 }
6124
6125 $DBversion = "3.11.00.001";
6126 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
6127     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('alphabet','A B C D E F G H I J K L M N O P Q R S T U V W X Y Z','Alphabet that can be expanded into browse links, e.g. on Home > Patrons',NULL,'free')");
6128     print "Upgrade to $DBversion done (Bug 2832 - Add alphabet syspref)\n";
6129 }
6130
6131 $DBversion = "3.11.00.002";
6132 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6133     $dbh->do(q{
6134         DELETE from aqorders_items where ordernumber NOT IN (SELECT ordernumber FROM aqorders);
6135     });
6136     $dbh->do(q{
6137         ALTER TABLE aqorders_items
6138         ADD CONSTRAINT aqorders_items_ibfk_1 FOREIGN KEY (ordernumber) REFERENCES aqorders (ordernumber)
6139         ON DELETE CASCADE ON UPDATE CASCADE;
6140     });
6141     print "Upgrade to $DBversion done (Bug 9030: Add constraint on aqorders_items.ordernumber)\n";
6142     SetVersion ($DBversion);
6143 }
6144
6145 $DBversion = "3.11.00.003";
6146 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
6147     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('RefundLostItemFeeOnReturn', '1', 'If enabled, the lost item fee charged to a borrower will be refunded when the lost item is returned.', NULL, 'YesNo')");
6148     print "Upgrade to $DBversion done (Bug 7189: Add system preference RefundLostItemFeeOnReturn)\n";
6149     SetVersion($DBversion);
6150 }
6151
6152 $DBversion = "3.11.00.004";
6153 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
6154     $dbh->do(qq{
6155         ALTER TABLE subscription ADD COLUMN closed INT(1) NOT NULL DEFAULT 0 AFTER enddate;
6156     });
6157
6158     print "Upgrade to $DBversion done (Bug 8782: Add field subscription.closed)\n";
6159     SetVersion($DBversion);
6160 }
6161
6162 $DBversion = "3.11.00.005";
6163 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
6164     $dbh->do(qq{CREATE TABLE borrower_attribute_types_branches(bat_code VARCHAR(10), b_branchcode VARCHAR(10),FOREIGN KEY (bat_code) REFERENCES borrower_attribute_types(code) ON DELETE CASCADE,FOREIGN KEY (b_branchcode) REFERENCES branches(branchcode) ON DELETE CASCADE ) ENGINE=INNODB DEFAULT CHARSET=utf8;});
6165
6166     $dbh->do(qq{CREATE TABLE categories_branches(categorycode VARCHAR(10), branchcode VARCHAR(10), FOREIGN KEY (categorycode) REFERENCES categories(categorycode) ON DELETE CASCADE, FOREIGN KEY (branchcode) REFERENCES branches(branchcode) ON DELETE CASCADE ) ENGINE=INNODB DEFAULT CHARSET=utf8;});
6167
6168     $dbh->do(qq{CREATE TABLE authorised_values_branches(av_id INTEGER, branchcode VARCHAR(10), FOREIGN KEY (av_id) REFERENCES authorised_values(id) ON DELETE CASCADE, FOREIGN KEY  (branchcode) REFERENCES branches(branchcode) ON DELETE CASCADE ) ENGINE=INNODB DEFAULT CHARSET=utf8;});
6169
6170     print "Upgrade to $DBversion done (Bug 7919: Display of values depending on the connexion library)\n";
6171     SetVersion($DBversion);
6172 }
6173
6174 $DBversion = "3.11.00.006";
6175 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6176     $dbh->do(q{
6177         UPDATE virtualshelves SET sortfield="copyrightdate" where sortfield="year";
6178     });
6179     print "Upgrade to $DBversion done (Bug 9167: Update the virtualshelves.sortfield column with 'copyrightdate' if needed)\n";
6180     SetVersion($DBversion);
6181 }
6182
6183 $DBversion = "3.11.00.007";
6184 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6185     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'ar', 'language', 'de', 'Arabisch')");
6186     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'hy', 'language', 'de', 'Armenisch')");
6187     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'bg', 'language', 'de', 'Bulgarisch')");
6188     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'zh', 'language', 'de', 'Chinesisch')");
6189     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'cs', 'language', 'de', 'Tschechisch')");
6190     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'da', 'language', 'de', 'Dänisch')");
6191     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'nl', 'language', 'de', 'Niederländisch')");
6192     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'en', 'language', 'de', 'Englisch')");
6193     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'fi', 'language', 'de', 'Finnisch')");
6194     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'fr', 'language', 'de', 'Französisch')");
6195     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'lo', 'language', 'fr', 'Laotien')");
6196     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'lo', 'language', 'de', 'Laotisch')");
6197     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'el', 'language', 'de', 'Griechisch (Nach 1453)')");
6198     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'he', 'language', 'de', 'Hebräisch')");
6199     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'hi', 'language', 'de', 'Hindi')");
6200     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'hu', 'language', 'de', 'Ungarisch')");
6201     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'id', 'language', 'de', 'Indonesisch')");
6202     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'it', 'language', 'de', 'Italienisch')");
6203     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'ja', 'language', 'de', 'Japanisch')");
6204     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'ko', 'language', 'de', 'Koreanisch')");
6205     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'la', 'language', 'de', 'Latein')");
6206     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'gl', 'language', 'fr', 'Galicien')");
6207     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'gl', 'language', 'de', 'Galizisch')");
6208     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'nb', 'language', 'de', 'Norwegisch bokm&#229;l')");
6209     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'nn', 'language', 'de', 'Norwegisch nynorsk')");
6210     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'fa', 'language', 'de', 'Persisch')");
6211     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'pl', 'language', 'de', 'Polnisch')");
6212     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'pt', 'language', 'de', 'Portugiesisch')");
6213     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'ro', 'language', 'de', 'Rumänisch')");
6214     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'ru', 'language', 'de', 'Russisch')");
6215     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'sr', 'language', 'fr', 'Serbe')");
6216     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'sr', 'language', 'de', 'Serbisch')");
6217     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'es', 'language', 'de', 'Spanisch')");
6218     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'sv', 'language', 'de', 'Schwedisch')");
6219     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'tet', 'language', 'fr', 'Tétoum')");
6220     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'tet', 'language', 'de', 'Tetum')");
6221     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'th', 'language', 'de', 'Thailändisch')");
6222     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'tr', 'language', 'de', 'Türkisch')");
6223     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'uk', 'language', 'de', 'Ukrainisch')");
6224     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'ur', 'language', 'fr', 'Ourdou')");
6225     $dbh->do("INSERT INTO language_descriptions (subtag, type, lang, description) VALUES( 'ur', 'language', 'de', 'Urdu')");
6226     print "Upgrade to $DBversion done (Bug 9056: add German and a couple of French translations to language_descriptions)\n";
6227     SetVersion ($DBversion);
6228 }
6229
6230 $DBversion = "3.11.00.008";
6231 if (CheckVersion($DBversion)) {
6232     $dbh->do("
6233         CREATE TABLE IF NOT EXISTS `borrower_modifications` (
6234           `timestamp` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
6235           `verification_token` varchar(255) NOT NULL DEFAULT '',
6236           `borrowernumber` int(11) NOT NULL DEFAULT '0',
6237           `cardnumber` varchar(16) DEFAULT NULL,
6238           `surname` mediumtext,
6239           `firstname` text,
6240           `title` mediumtext,
6241           `othernames` mediumtext,
6242           `initials` text,
6243           `streetnumber` varchar(10) DEFAULT NULL,
6244           `streettype` varchar(50) DEFAULT NULL,
6245           `address` mediumtext,
6246           `address2` text,
6247           `city` mediumtext,
6248           `state` text,
6249           `zipcode` varchar(25) DEFAULT NULL,
6250           `country` text,
6251           `email` mediumtext,
6252           `phone` text,
6253           `mobile` varchar(50) DEFAULT NULL,
6254           `fax` mediumtext,
6255           `emailpro` text,
6256           `phonepro` text,
6257           `B_streetnumber` varchar(10) DEFAULT NULL,
6258           `B_streettype` varchar(50) DEFAULT NULL,
6259           `B_address` varchar(100) DEFAULT NULL,
6260           `B_address2` text,
6261           `B_city` mediumtext,
6262           `B_state` text,
6263           `B_zipcode` varchar(25) DEFAULT NULL,
6264           `B_country` text,
6265           `B_email` text,
6266           `B_phone` mediumtext,
6267           `dateofbirth` date DEFAULT NULL,
6268           `branchcode` varchar(10) DEFAULT NULL,
6269           `categorycode` varchar(10) DEFAULT NULL,
6270           `dateenrolled` date DEFAULT NULL,
6271           `dateexpiry` date DEFAULT NULL,
6272           `gonenoaddress` tinyint(1) DEFAULT NULL,
6273           `lost` tinyint(1) DEFAULT NULL,
6274           `debarred` date DEFAULT NULL,
6275           `debarredcomment` varchar(255) DEFAULT NULL,
6276           `contactname` mediumtext,
6277           `contactfirstname` text,
6278           `contacttitle` text,
6279           `guarantorid` int(11) DEFAULT NULL,
6280           `borrowernotes` mediumtext,
6281           `relationship` varchar(100) DEFAULT NULL,
6282           `ethnicity` varchar(50) DEFAULT NULL,
6283           `ethnotes` varchar(255) DEFAULT NULL,
6284           `sex` varchar(1) DEFAULT NULL,
6285           `password` varchar(30) DEFAULT NULL,
6286           `flags` int(11) DEFAULT NULL,
6287           `userid` varchar(75) DEFAULT NULL,
6288           `opacnote` mediumtext,
6289           `contactnote` varchar(255) DEFAULT NULL,
6290           `sort1` varchar(80) DEFAULT NULL,
6291           `sort2` varchar(80) DEFAULT NULL,
6292           `altcontactfirstname` varchar(255) DEFAULT NULL,
6293           `altcontactsurname` varchar(255) DEFAULT NULL,
6294           `altcontactaddress1` varchar(255) DEFAULT NULL,
6295           `altcontactaddress2` varchar(255) DEFAULT NULL,
6296           `altcontactaddress3` varchar(255) DEFAULT NULL,
6297           `altcontactstate` text,
6298           `altcontactzipcode` varchar(50) DEFAULT NULL,
6299           `altcontactcountry` text,
6300           `altcontactphone` varchar(50) DEFAULT NULL,
6301           `smsalertnumber` varchar(50) DEFAULT NULL,
6302           `privacy` int(11) DEFAULT NULL,
6303           PRIMARY KEY (`verification_token`,`borrowernumber`),
6304           KEY `verification_token` (`verification_token`),
6305           KEY `borrowernumber` (`borrowernumber`)
6306         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
6307 ");
6308
6309     $dbh->do("
6310         INSERT INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`) VALUES
6311         ('PatronSelfRegistration', '0', NULL, 'If enabled, patrons will be able to register themselves via the OPAC.', 'YesNo'),
6312         ('PatronSelfRegistrationVerifyByEmail', '0', NULL, 'If enabled, any patron attempting to register themselves via the OPAC will be required to verify themselves via email to activate his or her account.', 'YesNo'),
6313         ('PatronSelfRegistrationDefaultCategory', '', '', 'A patron registered via the OPAC will receive a borrower category code set in this system preference.', 'free'),
6314         ('PatronSelfRegistrationExpireTemporaryAccountsDelay', '0', NULL, 'If PatronSelfRegistrationDefaultCategory is enabled, this system preference controls how long a patron can have a temporary status before the account is deleted automatically. It is an integer value representing a number of days to wait before deleting a temporary patron account. Setting it to 0 disables the deleting of temporary accounts.', 'Integer'),
6315         ('PatronSelfRegistrationBorrowerMandatoryField',  'surname|firstname', NULL ,  'Choose the mandatory fields for a patron''s account, when registering via the OPAC.',  'free'),
6316         ('PatronSelfRegistrationBorrowerUnwantedField',  '', NULL ,  'Name the fields you don''t want to display when registering a new patron via the OPAC.',  'free');
6317     ");
6318
6319     $dbh->do("
6320     INSERT INTO  letter ( `module`, `code`, `branchcode`, `name`, `is_html`, `title`, `content` )
6321     VALUES ( 'members', 'OPAC_REG_VERIFY', '', 'Opac Self-Registration Verification Email', '1', 'Verify Your Account', 'Hello!
6322
6323     Your library account has been created. Please verify your email address by clicking this link to complete the signup process:
6324
6325     http://<<OPACBaseURL>>/cgi-bin/koha/opac-registration-verify.pl?token=<<borrower_modifications.verification_token>>
6326
6327     If you did not initiate this request, you may safely ignore this one-time message. The request will expire shortly.'
6328     )");
6329
6330     print "Upgrade to $DBversion done (Bug 7067: Add Patron Self Registration)\n";
6331     SetVersion ($DBversion);
6332 }
6333
6334 $DBversion = "3.11.00.009";
6335 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6336     $dbh->do("
6337         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES
6338         ('SeparateHoldings', '0', 'Separate current branch holdings from other holdings', NULL, 'YesNo'),
6339         ('SeparateHoldingsBranch', 'homebranch', 'Branch used to separate holdings', 'homebranch|holdingbranch', 'Choice'),
6340         ('OpacSeparateHoldings', '0', 'Separate current branch holdings from other holdings (OPAC)', NULL, 'YesNo'),
6341         ('OpacSeparateHoldingsBranch', 'homebranch', 'Branch used to separate holdings (OPAC)', 'homebranch|holdingbranch', 'Choice')
6342     ");
6343
6344     print "Upgrade to $DBversion done (Bug 7674: Add systempreferences SeparateHoldings, SeparateHoldingsBranch, OpacSeparateHoldings and OpacSeparateHoldingsBranch) \n";
6345     SetVersion ($DBversion);
6346 }
6347
6348 $DBversion = "3.11.00.010";
6349 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
6350     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES('RenewalSendNotice', '0', '', NULL, 'YesNo')");
6351     $dbh->do(q{
6352         INSERT INTO `letter` (`module`, `code`, `name`, `title`, `content`) VALUES
6353         ('circulation','RENEWAL','Item Renewals','Item Renewals','The following items have been renewed:\r\n----\r\n<<biblio.title>>\r\n----\r\nThank you for visiting <<branches.branchname>>.');
6354     });
6355     print "Upgrade to $DBversion done (Bug 9151 - Renewal notice according to patron alert preferences)\n";
6356     SetVersion($DBversion);
6357 }
6358
6359 $DBversion = "3.11.00.011";
6360 if ( CheckVersion($DBversion) ) {
6361    $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('HTML5MediaEnabled','not','Show a HTML5 media player in a tab on opac-detail.pl for media files catalogued in field 856.','not|opac|staff|both','Choice');");
6362    $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('HTML5MediaExtensions','webm|ogg|ogv|oga|vtt','Media file extensions','','free');");
6363    print "Upgrade to $DBversion done (Bug 8377: Add HTML5MediaEnabled and HTML5MediaExtensions sysprefs)\n";
6364    SetVersion ($DBversion);
6365 }
6366
6367 $DBversion = "3.11.00.012";
6368 if ( CheckVersion($DBversion) ) {
6369     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('AllowHoldsOnPatronsPossessions', '1', 'Allow holds on records that patron have items of it',NULL,'YesNo')");
6370     print "Upgrade to $DBversion done (Bug 9206: Only allow place holds in records that the patron don't have in his possession)\n";
6371     SetVersion($DBversion);
6372 }
6373
6374 $DBversion = "3.11.00.013";
6375 if ( CheckVersion($DBversion) ) {
6376     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('NotesBlacklist','','List of notes fields that should not appear in the title notes/description separator of details',NULL,'free')");
6377     print "Upgrade to $DBversion done (Bug 9162 - Add a system preference to set which notes fields appears on title notes/description separator)\n";
6378     SetVersion($DBversion);
6379 }
6380
6381 $DBversion = "3.11.00.014";
6382 if ( CheckVersion($DBversion) ) {
6383    $dbh->do("INSERT INTO systempreferences ( variable, value, explanation, type ) VALUES ( 'SCOUserCSS', '', 'Add CSS to be included in the SCO module in an embedded <style> tag.', 'free' )");
6384    $dbh->do("INSERT INTO systempreferences ( variable, value, explanation, type ) VALUES ( 'SCOUserJS', '', 'Define custom javascript for inclusion in the SCO module', 'free' )");
6385    print "Upgrade to $DBversion done (Bug 9009: Add SCOUserCSS and SCOUserJS sysprefs)\n";
6386 }
6387
6388 $DBversion = "3.11.00.015";
6389 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6390     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('RentalsInNoissuesCharge', '1', 'Rental charges block checkouts (added to noissuescharge).',NULL,'YesNo');");
6391     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('ManInvInNoissuesCharge', '1', 'MANUAL_INV charges block checkouts (added to noissuescharge).',NULL,'YesNo');");
6392     print "Upgrade to $DBversion done (Add sysprefs RentalsInNoissuesCharge and ManInvInNoissuesCharge.)\n";
6393     SetVersion($DBversion);
6394 }
6395
6396 $DBversion = "3.11.00.016";
6397 if ( CheckVersion($DBversion) ) {
6398    $dbh->do(q{
6399         UPDATE userflags SET flagdesc="<b>Required for staff login.</b> Staff access, allows viewing of catalogue in staff client." where flagdesc="Modify login / permissions for staff users";
6400         });
6401    $dbh->do(q{
6402         UPDATE userflags SET flagdesc="Edit Authorities" where flagdesc="Allow to edit authorities";
6403         });
6404    $dbh->do(q{
6405         UPDATE userflags SET flagdesc="Allow access to the reports module" where flagdesc="Allow to access to the reports module";
6406         });
6407    $dbh->do(q{
6408         UPDATE userflags SET flagdesc="Set library management parameters (deprecated)" where flagdesc="Set library management parameters";
6409         });
6410    $dbh->do(q{
6411         UPDATE userflags SET flagdesc="Manage serial subscriptions" where flagdesc="Allow to manage serials subscriptions";
6412         });
6413    $dbh->do(q{
6414         UPDATE userflags SET flagdesc="Manage patrons fines and fees" where flagdesc="Update borrower charges";
6415         });
6416    $dbh->do(q{
6417         UPDATE userflags SET flagdesc="Check out and check in items" where flagdesc="Circulate books";
6418         });
6419    $dbh->do(q{
6420         UPDATE userflags SET flagdesc="Manage Koha system settings (Administration panel)" where flagdesc="Set Koha system parameters";
6421         });
6422    $dbh->do(q{
6423         UPDATE userflags SET flagdesc="Add or modify patrons" where flagdesc="Add or modify borrowers";
6424         });
6425    $dbh->do(q{
6426         UPDATE userflags SET flagdesc="Use all tools (expand for granular tools permissions)" where flagdesc="Use tools (export, import, barcodes)";
6427         });
6428    $dbh->do(q{
6429         UPDATE userflags SET flagdesc="Allow staff members to modify permissions for other staff members" where flagdesc="Set user permissions";
6430         });
6431    $dbh->do(q{
6432         UPDATE permissions SET description="Perform batch modification of patrons" where description="Perform batch modifivation of patrons";
6433         });
6434
6435    print "Upgrade to $DBversion done (Bug 9382 (updated with bug 9745) - refresh permission descriptions to make more sense)\n";
6436    SetVersion ($DBversion);
6437 }
6438
6439 $DBversion ="3.11.00.017";
6440 if ( CheckVersion($DBversion) ) {
6441     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('IDreamBooksReviews','0','Display book review snippets from IDreamBooks.com','','YesNo');");
6442     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('IDreamBooksReadometer','0','Display Readometer from IDreamBooks.com','','YesNo');");
6443     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('IDreamBooksResults','0','Display IDreamBooks.com rating in search results','','YesNo');");
6444     print "Upgrade to $DBversion done (Add IDreamBooks enhanced content)\n";
6445     SetVersion($DBversion);
6446 }
6447
6448 $DBversion = "3.11.00.018";
6449 if ( CheckVersion($DBversion) ) {
6450    $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('OPACNumbersPreferPhrase','0', NULL, 'Control the use of phr operator in callnumber and standard number OPAC searches', 'YesNo')");
6451    $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('IntranetNumbersPreferPhrase','0', NULL, 'Control the use of phr operator in callnumber and standard number staff client searches', 'YesNo')");
6452    print "Upgrade to $DBversion done (Bug 9395: Problem with callnumber and standard number search in OPAC and Staff Client)\n";
6453    SetVersion ($DBversion);
6454 }
6455
6456 $DBversion = "3.11.00.019";
6457 if ( CheckVersion($DBversion) ) {
6458     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('UNIMARCAuthorityField100', 'afrey50      ba0', NULL, NULL, 'Textarea')");
6459     print "Upgrade to $DBversion done (Bug 9145 - Add syspref UNIMARCAuthorityField100)\n";
6460     SetVersion ($DBversion);
6461 }
6462
6463 $DBversion = "3.11.00.020";
6464 if ( CheckVersion($DBversion) ) {
6465     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('UNIMARCField100Language', 'fre','UNIMARC field 100 default language',NULL,'short')");
6466     print "Upgrade to $DBversion done (Bug 8347 - Koha forces UNIMARC 100 field code language to 'fre')\n";
6467     SetVersion($DBversion);
6468 }
6469
6470 $DBversion ="3.11.00.021";
6471 if ( CheckVersion($DBversion) ) {
6472     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('OPACPopupAuthorsSearch','0','Display the list of authors when clicking on one author.','','YesNo');");
6473     print "Upgrade to $DBversion done (Bug 5888 - Subject search pop-up for the OPAC)\n";
6474     SetVersion($DBversion);
6475 }
6476
6477 $DBversion = "3.11.00.022";
6478 if ( CheckVersion($DBversion) ) {
6479     $dbh->do(
6480 "INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('Persona',0,'Use Mozilla Persona for login','','YesNo')"
6481     );
6482     print "Upgrade to $DBversion done (Bug 9587 - Allow login via Persona)\n";
6483     SetVersion($DBversion);
6484 }
6485
6486 $DBversion = "3.11.00.023";
6487 if ( CheckVersion($DBversion) ) {
6488     $dbh->do("UPDATE z3950servers SET host = 'lx2.loc.gov', port = 210, db = 'LCDB', syntax = 'USMARC', encoding = 'utf8' WHERE name = 'LIBRARY OF CONGRESS'");
6489     print "Upgrade to $DBversion done (Bug 9520 - Update default LOC Z39.50 target)\n";
6490     SetVersion($DBversion);
6491 }
6492
6493 $DBversion = "3.11.00.024";
6494 if ( CheckVersion($DBversion) ) {
6495     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacItemLocation','callnum','Show the shelving location of items in the opac','callnum|ccode|location','Choice');");
6496     print "Upgrade to $DBversion done (Bug 5079: Add OpacItemLocation syspref)\n";
6497     SetVersion ($DBversion);
6498 }
6499
6500 $DBversion = "3.11.00.025";
6501 if ( CheckVersion($DBversion) ) {
6502     $dbh->do(
6503         "CREATE TABLE linktracker (
6504   id int(11) NOT NULL AUTO_INCREMENT,
6505   biblionumber int(11) DEFAULT NULL,
6506   itemnumber int(11) DEFAULT NULL,
6507   borrowernumber int(11) DEFAULT NULL,
6508   url text,
6509   timeclicked datetime DEFAULT NULL,
6510   PRIMARY KEY (id),
6511   KEY bibidx (biblionumber),
6512   KEY itemidx (itemnumber),
6513   KEY borridx (borrowernumber),
6514   KEY dateidx (timeclicked)
6515     ) ENGINE=InnoDB DEFAULT CHARSET=utf8;"
6516     );
6517     $dbh->do( "
6518   INSERT INTO systempreferences (variable,value,explanation,options,type)
6519   VALUES('TrackClicks','0','Track links clicked',NULL,'Integer')" );
6520     print
6521 "Upgrade to $DBversion done (Adds feature Bug 8917, the ability to track links clicked)\n";
6522     SetVersion($DBversion);
6523 }
6524
6525 $DBversion = "3.11.00.026";
6526 if ( CheckVersion($DBversion) ) {
6527     $dbh->do(qq{
6528         ALTER TABLE import_records ADD INDEX batch_id_record_type ( import_batch_id, record_type );
6529     });
6530     print "Upgrade to $DBversion done (Bug 9207: Add new index batch_id_record_type to import_records)\n";
6531     SetVersion($DBversion);
6532 }
6533
6534 $DBversion = "3.11.00.027";
6535 if ( CheckVersion($DBversion) ) {
6536     $dbh->do(q{
6537         INSERT INTO permissions ( module_bit, code, description )
6538         VALUES  ( '1', 'overdues_report', 'Execute overdue items report' )
6539     });
6540     # add new permission for users with all report permissions and circulation remaining permission
6541     $dbh->do(q{
6542         INSERT INTO user_permissions (borrowernumber, module_bit, code)
6543         SELECT user_permissions.borrowernumber, 1, 'overdues_report'
6544         FROM user_permissions
6545         LEFT JOIN borrowers USING(borrowernumber)
6546         WHERE borrowers.flags & (1 << 16)
6547         AND user_permissions.code = 'circulate_remaining_permissions'
6548     });
6549     print "Upgrade to $DBversion done ( Add circ permission overdues_report )\n";
6550     SetVersion($DBversion);
6551 }
6552
6553 $DBversion = "3.11.00.028";
6554 if ( CheckVersion($DBversion) ) {
6555     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES ('PatronSelfRegistrationAdditionalInstructions', '', NULL , 'A free text field to display additional instructions to newly self registered patrons.', 'free'    );");
6556     print "Upgrade to $DBversion done (Bug 9756 - Patron self registration missing the system preference PatronSelfRegistrationAdditionalInstructions)\n";
6557     SetVersion($DBversion);
6558 }
6559
6560 $DBversion = "3.11.00.029";
6561 if (CheckVersion($DBversion)) {
6562     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('UseQueryParser', '0', 'If enabled, try to use QueryParser for queries.', NULL, 'YesNo')");
6563     print "Upgrade to $DBversion done (Bug 9239: Make it possible for Koha to use QueryParser)\n";
6564     SetVersion ($DBversion);
6565 }
6566
6567 $DBversion = "3.11.00.030";
6568 if ( CheckVersion($DBversion) ) {
6569     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('FinesIncludeGracePeriod','1','If enabled, fines calculations will include the grace period.',NULL,'YesNo');");
6570     print "Upgrade to $DBversion done (Add system preference FinesIncludeGracePeriod)\n";
6571     SetVersion($DBversion);
6572 }
6573
6574 $DBversion = "3.11.00.100";
6575 if ( CheckVersion($DBversion) ) {
6576     print "Upgrade to $DBversion done (3.12-alpha release)\n";
6577     SetVersion ($DBversion);
6578 }
6579
6580 $DBversion = "3.11.00.101";
6581 if ( CheckVersion($DBversion) ) {
6582    $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('UNIMARCAuthorsFacetsSeparator',', ', 'UNIMARC authors facets separator', NULL, 'short')");
6583    print "Upgrade to $DBversion done (Bug 9341: Problem with UNIMARC authors facets)\n";
6584    SetVersion ($DBversion);
6585 }
6586
6587 $DBversion = "3.11.00.102";
6588 if ( CheckVersion($DBversion) ) {
6589     $dbh->do(q{
6590         DELETE FROM systempreferences WHERE variable='NoZebra'
6591     });
6592     $dbh->do(q{
6593         DELETE FROM systempreferences WHERE variable='QueryRemoveStopwords'
6594     });
6595     print "Upgrade to $DBversion done (Remove deprecated NoZebra and QueryRemoveStopwords sysprefs)\n";
6596     SetVersion($DBversion);
6597 }
6598
6599 $DBversion = "3.11.00.103";
6600 if ( CheckVersion($DBversion) ) {
6601     $dbh->do("DELETE FROM systempreferences WHERE variable = 'insecure';");
6602     print "Upgrade to $DBversion done (Bug 9827 - Remove 'insecure' system preference)\n";
6603     SetVersion($DBversion);
6604 }
6605
6606 $DBversion = "3.11.00.104";
6607 if ( CheckVersion($DBversion) ) {
6608     print "Upgrade to $DBversion done (3.12-alpha2 release)\n";
6609     SetVersion ($DBversion);
6610 }
6611
6612 $DBversion = "3.11.00.105";
6613 if ( CheckVersion($DBversion) ) {
6614     if ( C4::Context->preference("marcflavour") eq 'MARC21' ) {
6615         $sth = $dbh->prepare(
6616 "SELECT frameworkcode FROM marc_tag_structure WHERE tagfield = '029'"
6617         );
6618         $sth->execute;
6619         my $frameworkcodes = $sth->fetchall_hashref('frameworkcode');
6620
6621         for my $frameworkcode ( keys %$frameworkcodes ) {
6622             $dbh->do( "
6623     INSERT IGNORE INTO marc_subfield_structure (tagfield, tagsubfield, liblibrarian,
6624     libopac, repeatable, mandatory, kohafield, tab, authorised_value, authtypecode,
6625     value_builder, isurl, hidden, frameworkcode, seealso, link, defaultvalue) VALUES
6626     ('029', 'a', 'OCLC library identifier', 'OCLC library identifier', 0, 0, '', 0, '', '', '', 0, -6, '$frameworkcode', '', '', NULL),
6627     ('029', 'b', 'System control number', 'System control number', 0, 0, '', 0, '', '', '', 0, -6, '$frameworkcode', '', '', NULL),
6628     ('029', 'c', 'OAI set name', 'OAI set name', 0, 0, '', 0, '', '', '', 0, -6, '$frameworkcode', '', '', NULL),
6629     ('029', 't', 'Content type identifier', 'Content type identifier', 0, 0, '', 0, '', '', '', 0, -6, '$frameworkcode', '', '', NULL)
6630    " );
6631         }
6632
6633         for my $tag ( '863', '864', '865' ) {
6634             $sth = $dbh->prepare(
6635 "SELECT frameworkcode FROM marc_tag_structure WHERE tagfield = '$tag'"
6636             );
6637             $sth->execute;
6638             my $frameworkcodes = $sth->fetchall_hashref('frameworkcode');
6639
6640             for my $frameworkcode ( keys %$frameworkcodes ) {
6641                 $dbh->do( "
6642      INSERT IGNORE INTO marc_subfield_structure (tagfield, tagsubfield, liblibrarian,
6643      libopac, repeatable, mandatory, kohafield, tab, authorised_value, authtypecode,
6644      value_builder, isurl, hidden, frameworkcode, seealso, link, defaultvalue) VALUES
6645      ('$tag', '6', 'Linkage', 'Linkage', 0, 0, '', 8, '', '', '', NULL, 5, '$frameworkcode', '', '', NULL),
6646      ('$tag', '8', 'Field link and sequence number', 'Field link and sequence number', 0, 0, '', 8, '', '', '', NULL, 5, '$frameworkcode', '', '', NULL),
6647      ('$tag', 'a', 'First level of enumeration', 'First level of enumeration', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6648      ('$tag', 'b', 'Second level of enumeration', 'Second level of enumeration', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6649      ('$tag', 'c', 'Third level of enumeration', 'Third level of enumeration', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6650      ('$tag', 'd', 'Fourth level of enumeration', 'Fourth level of enumeration', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6651      ('$tag', 'e', 'Fifth level of enumeration', 'Fifth level of enumeration', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6652      ('$tag', 'f', 'Sixth level of enumeration', 'Sixth level of enumeration', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6653      ('$tag', 'g', 'Alternative numbering scheme, first level of enumeration', 'Alternative numbering scheme, first level of enumeration', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6654      ('$tag', 'h', 'Alternative numbering scheme, second level of enumeration', 'Alternative numbering scheme, second level of enumeration', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6655      ('$tag', 'i', 'First level of chronology', 'First level of chronology', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6656      ('$tag', 'j', 'Second level of chronology', 'Second level of chronology', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6657      ('$tag', 'k', 'Third level of chronology', 'Third level of chronology', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6658      ('$tag', 'l', 'Fourth level of chronology', 'Fourth level of chronology', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6659      ('$tag', 'm', 'Alternative numbering scheme, chronology', 'Alternative numbering scheme, chronology', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6660      ('$tag', 'n', 'Converted Gregorian year', 'Converted Gregorian year', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6661      ('$tag', 'o', 'Type of unit', 'Type of unit', 1, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6662      ('$tag', 'p', 'Piece designation', 'Piece designation', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6663      ('$tag', 'q', 'Piece physical condition', 'Piece physical condition', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6664      ('$tag', 's', 'Copyright article-fee code', 'Copyright article-fee code', 1, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6665      ('$tag', 't', 'Copy number', 'Copy number', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6666      ('$tag', 'v', 'Issuing date', 'Issuing date', 1, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6667      ('$tag', 'w', 'Break indicator', 'Break indicator', 0, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6668      ('$tag', 'x', 'Nonpublic note', 'Nonpublic note', 1, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL),
6669      ('$tag', 'z', 'Public note', 'Public note', 1, 0, '', 8, '', '', '', 0, 5, '$frameworkcode', '', '', NULL)
6670     " );
6671             }
6672         }
6673     }
6674     print "Upgrade to $DBversion done (Bug 9353: Missing subfields on MARC21 frameworks)\n";
6675     SetVersion($DBversion);
6676 }
6677
6678
6679 $DBversion = "3.11.00.106";
6680 if ( CheckVersion($DBversion) ) {
6681     $dbh->do("INSERT INTO userflags (bit, flag, flagdesc, defaulton) VALUES ('19', 'plugins', 'Koha plugins', '0')");
6682     $dbh->do("INSERT INTO permissions (module_bit, code, description) VALUES
6683               ('19', 'manage', 'Manage plugins ( install / uninstall )'),
6684               ('19', 'tool', 'Use tool plugins'),
6685               ('19', 'report', 'Use report plugins'),
6686               ('19', 'configure', 'Configure plugins')
6687             ");
6688     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('UseKohaPlugins','0','Enable or disable the ability to use Koha Plugins.','','YesNo')");
6689
6690     $dbh->do("
6691         CREATE TABLE IF NOT EXISTS plugin_data (
6692             plugin_class varchar(255) NOT NULL,
6693             plugin_key varchar(255) NOT NULL,
6694             plugin_value text,
6695             PRIMARY KEY (plugin_class,plugin_key)
6696         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
6697     ");
6698
6699     print "Upgrade to $DBversion done (Bug 7804: Added plugin system.)\n";
6700     SetVersion($DBversion);
6701 }
6702
6703 $DBversion = "3.11.00.107";
6704 if ( CheckVersion($DBversion) ) {
6705    $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('TimeFormat','24hr','12hr|24hr','Defines the global time format for visual output.','Choice')");
6706    print "Upgrade to $DBversion done (Bug 9014: Add syspref TimeFormat)\n";
6707    SetVersion ($DBversion);
6708 }
6709
6710 $DBversion = "3.11.00.108";
6711 if ( CheckVersion($DBversion) ) {
6712     $dbh->do("ALTER TABLE action_logs CHANGE timestamp timestamp TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP;");
6713     $dbh->do("UPDATE action_logs SET info=(SELECT itemnumber FROM items WHERE biblionumber= action_logs.info LIMIT 1) WHERE module='CIRCULATION' AND action in ('ISSUE','RETURN');");
6714     $dbh->do("ALTER TABLE action_logs CHANGE timestamp timestamp TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP;");
6715     print "Upgrade to $DBversion done (Bug 7241: Fix on circulation logs)\n";
6716     print "WARNING about bug 7241: to partially correct the broken logs, the log history is filled with the first found item for each biblio.\n";
6717     SetVersion($DBversion);
6718 }
6719
6720 $DBversion = "3.11.00.109";
6721 if ( CheckVersion($DBversion) ) {
6722    $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES('DisplayIconsXSLT', '1', '', 'If ON, displays the format, audience, and material type icons in XSLT MARC21 results and detail pages.', 'YesNo');");
6723    print "Upgrade to $DBversion done (Bug 9403: Add DisplayIconsXSLT)\n";
6724    SetVersion ($DBversion);
6725 }
6726
6727 $DBversion = "3.11.00.110";
6728 if ( CheckVersion($DBversion) ) {
6729     $dbh->do("ALTER TABLE pending_offline_operations CHANGE barcode barcode VARCHAR( 20 ) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL");
6730     $dbh->do("ALTER TABLE pending_offline_operations ADD amount DECIMAL( 28, 6 ) NULL DEFAULT NULL");
6731     print "Upgrade to $DBversion done (Bug 8220 - Allow koc uploads to go to process queue)\n";
6732     SetVersion ($DBversion);
6733 }
6734
6735 $DBversion = "3.11.00.111";
6736 if ( CheckVersion($DBversion) ) {
6737     my $sth = $dbh->prepare("
6738         SELECT module, code, branchcode, content
6739         FROM letter
6740         WHERE content LIKE '%<fine>%'
6741     ");
6742     $sth->execute;
6743     my $sth_update = $dbh->prepare("UPDATE letter SET content = ? WHERE module = ? AND code = ? AND branchcode = ?");
6744     while(my $row = $sth->fetchrow_hashref){
6745         $row->{content} =~ s/<fine>\w+<\/fine>/<<items.fine>>/;
6746         $sth_update->execute($row->{content}, $row->{module}, $row->{code}, $row->{branchcode});
6747     }
6748     print "Upgrade to $DBversion done (use new <<items.fine>> syntax in notices)\n";
6749     SetVersion($DBversion);
6750 }
6751
6752 $DBversion = "3.11.00.112";
6753 if ( CheckVersion($DBversion) ) {
6754     $dbh->do(qq{
6755         ALTER TABLE issuingrules ADD COLUMN renewalperiod int(4) DEFAULT NULL AFTER renewalsallowed
6756     });
6757     $dbh->do(qq{
6758         UPDATE issuingrules SET renewalperiod = issuelength
6759     });
6760     print "Upgrade to $DBversion done (Bug 8365: Add colum issuingrules.renewalperiod)\n";
6761     SetVersion ($DBversion);
6762 }
6763
6764 $DBversion = "3.11.00.113";
6765 if ( CheckVersion($DBversion) ) {
6766     $dbh->do(q{
6767         ALTER TABLE branchcategories ADD show_in_pulldown BOOLEAN NOT NULL DEFAULT '0',
6768         ADD INDEX ( show_in_pulldown )
6769     });
6770     print "Upgrade to $DBversion done (Bug 9257 - Add groups to normal search pulldown)\n";
6771     SetVersion ($DBversion);
6772 }
6773
6774 $DBversion = "3.11.00.115";
6775 if ( CheckVersion($DBversion) ) {
6776     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('HighlightOwnItemsOnOPAC','0','','If on, and a patron is logged into the OPAC, items from his or her home library will be emphasized and shown first in search results and item details.','YesNo')");
6777     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('HighlightOwnItemsOnOPACWhich','PatronBranch','PatronBranch|OpacURLBranch','Decides which branch''s items to emphasize. If PatronBranch, emphasize the logged in user''s library''s items. If OpacURLBranch, highlight the items of the Apache var BRANCHCODE defined in Koha''s Apache configuration file.','Choice')");
6778     print "Upgrade to $DBversion done (Bug 7740: Add syspref HighlightOwnItemsOnOPAC)\n";
6779     SetVersion ($DBversion);
6780 }
6781
6782 $DBversion = "3.11.00.116";
6783 if ( CheckVersion($DBversion) ) {
6784     $dbh->do(q{ALTER TABLE aqorders DROP COLUMN serialid;});
6785     $dbh->do(q{ALTER TABLE aqorders DROP COLUMN subscription;});
6786     $dbh->do(q{ALTER TABLE aqorders ADD COLUMN subscriptionid INT(11) DEFAULT NULL;});
6787     $dbh->do(q{ALTER TABLE aqorders ADD CONSTRAINT aqorders_subscriptionid FOREIGN KEY (subscriptionid) REFERENCES subscription (subscriptionid) ON DELETE CASCADE ON UPDATE CASCADE;});
6788     $dbh->do(q{ALTER TABLE subscription ADD COLUMN reneweddate DATE DEFAULT NULL;});
6789     print "Upgrade to $DBversion done (Bug 5343: table aqorders: DROP serialid and subscription fields and ADD subscriptionid, table subscription: ADD reneweddate)\n";
6790     SetVersion ($DBversion);
6791 }
6792
6793 $DBversion = "3.11.00.200";
6794 if ( CheckVersion($DBversion) ) {
6795     print "Upgrade to $DBversion done (3.12-beta1 release)\n";
6796     SetVersion ($DBversion);
6797 }
6798
6799 $DBversion = "3.11.00.201";
6800 if ( CheckVersion($DBversion) ) {
6801     $dbh->do("UPDATE z3950servers SET encoding = 'ISO_8859-1' WHERE name = 'BIBSYS' AND host LIKE 'z3950.bibsys.no'");
6802     $dbh->do("UPDATE z3950servers SET encoding = 'ISO_8859-1' WHERE name = 'NORBOK' AND host LIKE 'z3950.nb.no'");
6803     $dbh->do("UPDATE z3950servers SET encoding = 'ISO_8859-1' WHERE name = 'SAMBOK' AND host LIKE 'z3950.nb.no'");
6804     $dbh->do("UPDATE z3950servers SET encoding = 'ISO_8859-1' WHERE name = 'DEICHMAN' AND host like 'z3950.deich.folkebibl.no'");
6805     print "Upgrade to $DBversion done (Bug 9498 - Update encoding for Norwegian sample Z39.50 servers)\n";
6806     SetVersion($DBversion);
6807 }
6808
6809 $DBversion = "3.11.00.202";
6810 if ( CheckVersion($DBversion) ) {
6811    $dbh->do("INSERT INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'ca', 'language', 'Catalan','2013-01-12' )");
6812    $dbh->do("INSERT INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES( 'ca','cat')");
6813    $dbh->do("INSERT INTO language_descriptions(subtag, type, lang, description) VALUES( 'ca', 'language', 'es', 'Catalán')");
6814    $dbh->do("INSERT INTO language_descriptions(subtag, type, lang, description) VALUES( 'ca', 'language', 'en', 'Catalan')");
6815    $dbh->do("INSERT INTO language_descriptions(subtag, type, lang, description) VALUES( 'ca', 'language', 'fr', 'Catalan')");
6816    $dbh->do("INSERT INTO language_descriptions(subtag, type, lang, description) VALUES( 'ca', 'language', 'ca', 'Català')");
6817    $dbh->do("INSERT INTO language_descriptions(subtag, type, lang, description) VALUES( 'ca', 'language', 'de', 'Katalanisch')");
6818    print "Upgrade to $DBversion done (Bug 9381: Add Catalan laguage)\n";
6819    SetVersion ($DBversion);
6820 }
6821
6822 $DBversion = "3.11.00.203";
6823 if ( CheckVersion($DBversion) ) {
6824     $dbh->do(q{ALTER TABLE suggestions CHANGE COLUMN title title VARCHAR(255) DEFAULT NULL;});
6825     print "Upgrade to $DBversion done (Bug 2046 - increasing title column length for suggestions)\n";
6826     SetVersion ($DBversion);
6827 }
6828
6829 $DBversion = "3.11.00.300";
6830 if ( CheckVersion($DBversion) ) {
6831     print "Upgrade to $DBversion done (3.12-beta3 release)\n";
6832     SetVersion ($DBversion);
6833 }
6834
6835 $DBversion = "3.11.00.301";
6836 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
6837     #issues
6838     $dbh->do(q{
6839         ALTER TABLE `issues`
6840             ADD KEY `itemnumber_idx` (`itemnumber`),
6841             ADD KEY `branchcode_idx` (`branchcode`),
6842             ADD KEY `issuingbranch_idx` (`issuingbranch`)
6843     });
6844     $dbh->do(q{
6845         ALTER TABLE `old_issues`
6846             ADD KEY `branchcode_idx` (`branchcode`),
6847             ADD KEY `issuingbranch_idx` (`issuingbranch`)
6848     });
6849     #items
6850     $dbh->do(q{
6851         ALTER TABLE `items` ADD KEY `itype_idx` (`itype`)
6852     });
6853     $dbh->do(q{
6854         ALTER TABLE `deleteditems` ADD KEY `itype_idx` (`itype`)
6855     });
6856     # biblioitems
6857     $dbh->do(q{
6858         ALTER TABLE `biblioitems` ADD KEY `itemtype_idx` (`itemtype`)
6859     });
6860     $dbh->do(q{
6861         ALTER TABLE `deletedbiblioitems` ADD KEY `itemtype_idx` (`itemtype`)
6862     });
6863     # statistics
6864     $dbh->do(q{
6865         ALTER TABLE `statistics`
6866             ADD KEY `branch_idx` (`branch`),
6867             ADD KEY `proccode_idx` (`proccode`),
6868             ADD KEY `type_idx` (`type`),
6869             ADD KEY `usercode_idx` (`usercode`),
6870             ADD KEY `itemnumber_idx` (`itemnumber`),
6871             ADD KEY `itemtype_idx` (`itemtype`),
6872             ADD KEY `borrowernumber_idx` (`borrowernumber`),
6873             ADD KEY `associatedborrower_idx` (`associatedborrower`),
6874             ADD KEY `ccode_idx` (`ccode`)
6875     });
6876
6877     print "Upgrade to $DBversion done (Bug 9681: Add some database indexes)\n";
6878     SetVersion($DBversion);
6879 }
6880
6881 $DBversion = "3.12.00.000";
6882 if ( CheckVersion($DBversion) ) {
6883     print "Upgrade to $DBversion done (3.12.0 release)\n";
6884     SetVersion ($DBversion);
6885 }
6886
6887 $DBversion = '3.13.00.000';
6888 if ( CheckVersion($DBversion) ) {
6889     print "Upgrade to $DBversion done (start the journey to Koha Pi)\n";
6890     SetVersion ($DBversion);
6891 }
6892
6893 $DBversion = "3.13.00.001";
6894 if ( CheckVersion($DBversion) ) {
6895     $dbh->do("INSERT INTO `systempreferences` (`variable`, `value`, `options`, `explanation`, `type`) VALUES ('UseCourseReserves', '0', NULL, 'Enable the course reserves feature.', 'YesNo')");
6896     $dbh->do("INSERT INTO userflags (bit,flag,flagdesc,defaulton) VALUES ('18','coursereserves','Course Reserves','0')");
6897     $dbh->do("
6898 CREATE TABLE `courses` (
6899   `course_id` int(11) NOT NULL AUTO_INCREMENT,
6900   `department` varchar(20) DEFAULT NULL,
6901   `course_number` varchar(255) DEFAULT NULL,
6902   `section` varchar(255) DEFAULT NULL,
6903   `course_name` varchar(255) DEFAULT NULL,
6904   `term` varchar(20) DEFAULT NULL,
6905   `staff_note` mediumtext,
6906   `public_note` mediumtext,
6907   `students_count` varchar(20) DEFAULT NULL,
6908   `enabled` enum('yes','no') NOT NULL DEFAULT 'yes',
6909   `timestamp` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
6910    PRIMARY KEY (`course_id`)
6911 ) ENGINE=InnoDB  DEFAULT CHARSET=utf8;
6912     ");
6913
6914     $dbh->do("
6915 CREATE TABLE `course_instructors` (
6916   `course_id` int(11) NOT NULL,
6917   `borrowernumber` int(11) NOT NULL,
6918   PRIMARY KEY (`course_id`,`borrowernumber`),
6919   KEY `borrowernumber` (`borrowernumber`)
6920 ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
6921     ");
6922
6923     $dbh->do("
6924 ALTER TABLE `course_instructors`
6925   ADD CONSTRAINT `course_instructors_ibfk_2` FOREIGN KEY (`course_id`) REFERENCES `courses` (`course_id`),
6926   ADD CONSTRAINT `course_instructors_ibfk_1` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE CASCADE ON UPDATE CASCADE;
6927     ");
6928
6929     $dbh->do("
6930 CREATE TABLE `course_items` (
6931   `ci_id` int(11) NOT NULL AUTO_INCREMENT,
6932   `itemnumber` int(11) NOT NULL,
6933   `itype` varchar(10) DEFAULT NULL,
6934   `ccode` varchar(10) DEFAULT NULL,
6935   `holdingbranch` varchar(10) DEFAULT NULL,
6936   `location` varchar(80) DEFAULT NULL,
6937   `enabled` enum('yes','no') NOT NULL DEFAULT 'no',
6938   `timestamp` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
6939    PRIMARY KEY (`ci_id`),
6940    UNIQUE KEY `itemnumber` (`itemnumber`),
6941    KEY `holdingbranch` (`holdingbranch`)
6942 ) ENGINE=InnoDB  DEFAULT CHARSET=utf8;
6943     ");
6944
6945     $dbh->do("
6946 ALTER TABLE `course_items`
6947   ADD CONSTRAINT `course_items_ibfk_2` FOREIGN KEY (`holdingbranch`) REFERENCES `branches` (`branchcode`) ON DELETE CASCADE ON UPDATE CASCADE,
6948   ADD CONSTRAINT `course_items_ibfk_1` FOREIGN KEY (`itemnumber`) REFERENCES `items` (`itemnumber`) ON DELETE CASCADE ON UPDATE CASCADE;
6949 ");
6950
6951     $dbh->do("
6952 CREATE TABLE `course_reserves` (
6953   `cr_id` int(11) NOT NULL AUTO_INCREMENT,
6954   `course_id` int(11) NOT NULL,
6955   `ci_id` int(11) NOT NULL,
6956   `staff_note` mediumtext,
6957   `public_note` mediumtext,
6958   `timestamp` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
6959    PRIMARY KEY (`cr_id`),
6960    UNIQUE KEY `pseudo_key` (`course_id`,`ci_id`),
6961    KEY `course_id` (`course_id`)
6962 ) ENGINE=InnoDB  DEFAULT CHARSET=utf8;
6963 ");
6964
6965     $dbh->do("
6966 ALTER TABLE `course_reserves`
6967   ADD CONSTRAINT `course_reserves_ibfk_1` FOREIGN KEY (`course_id`) REFERENCES `courses` (`course_id`);
6968     ");
6969
6970     $dbh->do("
6971 INSERT INTO permissions (module_bit, code, description) VALUES
6972   (18, 'manage_courses', 'Add, edit and delete courses'),
6973   (18, 'add_reserves', 'Add course reserves'),
6974   (18, 'delete_reserves', 'Remove course reserves')
6975 ;
6976     ");
6977
6978
6979     print "Upgrade to $DBversion done (Add Course Reserves ( system preference UseCourseReserves ))\n";
6980     SetVersion($DBversion);
6981 }
6982
6983 $DBversion = "3.13.00.002";
6984 if ( CheckVersion($DBversion) ) {
6985    $dbh->do("UPDATE systempreferences SET variable = 'IndependentBranches' WHERE variable = 'IndependantBranches'");
6986    print "Upgrade to $DBversion done (Bug 10080 - Change system pref IndependantBranches to IndependentBranches)\n";
6987    SetVersion ($DBversion);
6988 }
6989
6990 $DBversion = '3.13.00.003';
6991 if ( CheckVersion($DBversion) ) {
6992     $dbh->do("ALTER TABLE serial DROP itemnumber");
6993     print "Upgrade to $DBversion done (Bug 7718 - Remove itemnumber column from serials table)\n";
6994     SetVersion($DBversion);
6995 }
6996
6997 $DBversion = "3.13.00.004";
6998 if(CheckVersion($DBversion)) {
6999     $dbh->do(
7000 "INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacShowHoldNotes',0,'Show hold notes on OPAC','','YesNo')"
7001     );
7002     print "Upgrade to $DBversion done (Bug 9722: Allow users to add notes when placing a hold in OPAC)\n";
7003     SetVersion($DBversion);
7004 }
7005
7006 $DBversion = "3.13.00.005";
7007 if(CheckVersion($DBversion)) {
7008     my $intra= C4::Context->preference("intranetstylesheet");
7009     #if this pref is not blank or starting with http, https or / [root], then
7010     #add an additional / to the front
7011     if($intra && $intra !~ /^(\/|https?)/) {
7012         $dbh->do("UPDATE systempreferences SET value=? WHERE variable=?",
7013             undef,('/'.$intra,"intranetstylesheet"));
7014         print "WARNING: Your system preference intranetstylesheet has been prefixed with a slash to make it an absolute path.\n";
7015     }
7016     print "Upgrade to $DBversion done (Bug 10052: Make intranetstylesheet and intranetcolorstylesheet behave exactly like their opac counterparts)\n";
7017     SetVersion ($DBversion);
7018 }
7019
7020 $DBversion = "3.13.00.006";
7021 if ( CheckVersion($DBversion) ) {
7022     $dbh->do(q{
7023         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
7024         VALUES ('CalculateFinesOnReturn','1','Switch to control if overdue fines are calculated on return or not', '', 'YesNo')
7025     });
7026     print "Upgrade to $DBversion done (Bug 10120: Fines on item return controlled by a systempreference)\n";
7027     SetVersion($DBversion);
7028 }
7029
7030 $DBversion = "3.13.00.007";
7031 if ( CheckVersion($DBversion) ) {
7032     $dbh->do("UPDATE systempreferences SET variable='OpacHoldNotes' WHERE variable='OpacShowHoldNotes'");
7033     print "Upgrade to $DBversion done (Bug 10343: Rename OpacShowHoldNotes to OpacHoldNotes)\n";
7034     SetVersion($DBversion);
7035 }
7036
7037 $DBversion = "3.13.00.008";
7038 if ( CheckVersion($DBversion) ) {
7039     $dbh->do("
7040 CREATE TABLE IF NOT EXISTS borrower_files (
7041   file_id int(11) NOT NULL AUTO_INCREMENT,
7042   borrowernumber int(11) NOT NULL,
7043   file_name varchar(255) NOT NULL,
7044   file_type varchar(255) NOT NULL,
7045   file_description varchar(255) DEFAULT NULL,
7046   file_content longblob NOT NULL,
7047   date_uploaded timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP,
7048   PRIMARY KEY (file_id),
7049   KEY borrowernumber (borrowernumber),
7050   CONSTRAINT borrower_files_ibfk_1 FOREIGN KEY (borrowernumber) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE
7051 ) ENGINE=InnoDB  DEFAULT CHARSET=utf8;
7052     ");
7053     print "Upgrade to $DBversion done (Bug 10443: make sure borrower_files table exists)\n";
7054     SetVersion($DBversion);
7055 }
7056
7057 $DBversion = "3.13.00.009";
7058 if ( CheckVersion($DBversion) ) {
7059     $dbh->do("ALTER TABLE aqorders DROP COLUMN biblioitemnumber");
7060     print "Upgrade to $DBversion done (Bug 9987 - Drop column aqorders.biblioitemnumber)\n";
7061     SetVersion($DBversion);
7062 }
7063
7064 $DBversion = "3.13.00.010";
7065 if ( CheckVersion($DBversion) ) {
7066     $dbh->do(
7067         q{
7068 INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('AcqWarnOnDuplicateInvoice','0','Warn librarians when they try to create a duplicate invoice', '', 'YesNo');
7069 }
7070     );
7071     print
7072 "Upgrade to $DBversion done (Bug 10366 - Add system preference to enabling warning librarian when invoice is duplicated)\n";
7073     SetVersion($DBversion);
7074 }
7075
7076 $DBversion = "3.13.00.011";
7077 if ( CheckVersion($DBversion) ) {
7078     $dbh->do("UPDATE language_rfc4646_to_iso639 SET iso639_2_code='ita' WHERE rfc4646_subtag='it'");
7079     print "Upgrade to $DBversion done (Bug 9519: Wrong language code for Italian in the advanced search language limitations)\n";
7080     SetVersion($DBversion);
7081 }
7082
7083 $DBversion = "3.13.00.012";
7084 if ( CheckVersion($DBversion) ) {
7085     $dbh->do("ALTER TABLE issuingrules MODIFY COLUMN overduefinescap decimal(28,6) DEFAULT NULL;");
7086     print "Upgrade to $DBversion done (Bug 10490: Correct datatype for overduefinescap in issuingrules)\n";
7087     SetVersion($DBversion);
7088 }
7089
7090 $DBversion ="3.13.00.013";
7091 if ( CheckVersion($DBversion) ) {
7092     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('AllowTooManyOverride', '1', 'If on, allow staff to override and check out items when the patron has reached the maximum number of allowed checkouts', '', 'YesNo');");
7093     print "Upgrade to $DBversion done (Bug 9576: add AllowTooManyOverride syspref to enable or disable issue limit confirmation)\n";
7094     SetVersion($DBversion);
7095 }
7096
7097 $DBversion = "3.13.00.014";
7098 if ( CheckVersion($DBversion) ) {
7099     $dbh->do("ALTER TABLE courses MODIFY COLUMN department varchar(80) DEFAULT NULL;");
7100     $dbh->do("ALTER TABLE courses MODIFY COLUMN term       varchar(80) DEFAULT NULL;");
7101     print "Upgrade to $DBversion done (Bug 10604: correct width of courses.department and courses.term)\n";
7102     SetVersion($DBversion);
7103 }
7104
7105 $DBversion = "3.13.00.015";
7106 if ( CheckVersion($DBversion) ) {
7107     $dbh->do(
7108 "INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('itemBarcodeFallbackSearch','','If set, enables the automatic use of a keyword catalog search if the phrase entered as a barcode on the checkout page does not turn up any results during an item barcode search',NULL,'YesNo')"
7109     );
7110     print "Upgrade to $DBversion done (Bug 7494: Add itemBarcodeFallbackSearch syspref)\n";
7111     SetVersion($DBversion);
7112 }
7113
7114 $DBversion = "3.13.00.016";
7115 if ( CheckVersion($DBversion) ) {
7116     $dbh->do(q{
7117         ALTER TABLE items CHANGE wthdrawn withdrawn TINYINT( 1 ) NOT NULL DEFAULT  '0'
7118     });
7119
7120     $dbh->do(q{
7121         ALTER TABLE deleteditems CHANGE wthdrawn withdrawn TINYINT( 1 ) NOT NULL DEFAULT  '0'
7122     });
7123
7124     $dbh->do(q{
7125         UPDATE saved_sql SET savedsql = REPLACE(savedsql, 'wthdrawn', 'withdrawn')
7126     });
7127
7128     $dbh->do(q{
7129         UPDATE marc_subfield_structure SET kohafield = 'items.withdrawn' WHERE kohafield = 'items.wthdrawn'
7130     });
7131
7132     print "Upgrade to $DBversion done (Bug 10550 - Fix database typo wthdrawn)\n";
7133     SetVersion($DBversion);
7134 }
7135
7136 $DBversion = "3.13.00.017";
7137 if ( CheckVersion($DBversion) ) {
7138     $dbh->do(
7139 "INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('OverDriveClientKey','','Client key for OverDrive integration','30','Free')"
7140     );
7141     $dbh->do(
7142 "INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('OverDriveClientSecret','','Client key for OverDrive integration','30','YesNo')"
7143     );
7144     $dbh->do(
7145 "INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('OverDriveLibraryID','','Library ID for OverDrive integration','','Integer')"
7146     );
7147     print "Upgrade to $DBversion done (Bug 10320 - Show results from library's OverDrive collection in OPAC search)\n";
7148     SetVersion($DBversion);
7149 }
7150
7151 $DBversion = "3.13.00.018";
7152 if ( CheckVersion($DBversion) ) {
7153     $dbh->do(qq{DROP TABLE IF EXISTS aqorders_transfers;});
7154     $dbh->do(qq{
7155         CREATE TABLE aqorders_transfers (
7156           ordernumber_from int(11) NULL,
7157           ordernumber_to int(11) NULL,
7158           timestamp timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP,
7159           UNIQUE KEY ordernumber_from (ordernumber_from),
7160           UNIQUE KEY ordernumber_to (ordernumber_to),
7161           CONSTRAINT aqorders_transfers_ordernumber_from FOREIGN KEY (ordernumber_from) REFERENCES aqorders (ordernumber) ON DELETE SET NULL ON UPDATE CASCADE,
7162           CONSTRAINT aqorders_transfers_ordernumber_to FOREIGN KEY (ordernumber_to) REFERENCES aqorders (ordernumber) ON DELETE SET NULL ON UPDATE CASCADE
7163         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
7164     });
7165     print "Upgrade to $DBversion done (Bug 5349: Add aqorders_transfers table)\n";
7166     SetVersion($DBversion);
7167 }
7168
7169 $DBversion = "3.13.00.019";
7170 if ( CheckVersion($DBversion) ) {
7171     $dbh->do("ALTER TABLE itemtypes ADD COLUMN checkinmsg VARCHAR(255) AFTER summary;");
7172     $dbh->do("ALTER TABLE itemtypes ADD COLUMN checkinmsgtype CHAR(16) DEFAULT 'message' NOT NULL AFTER checkinmsg;");
7173     print "Upgrade to $DBversion done (Bug 10513 - Light up a warning/message when returning a chosen item type)\n";
7174     SetVersion($DBversion);
7175 }
7176
7177 $DBversion = "3.13.00.020";
7178 if ( CheckVersion($DBversion) ) {
7179     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES('WhenLostForgiveFine','0',NULL,'If ON, Forgives the fines on an item when it is lost.','YesNo')");
7180     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES('WhenLostChargeReplacementFee','1',NULL,'If ON, Charge the replacement price when a patron loses an item.','YesNo')");
7181     print "Upgrade to $DBversion done (Bug 7639: system preferences to forgive fines on lost items)\n";
7182     SetVersion($DBversion);
7183 }
7184
7185 $DBversion ="3.13.00.021";
7186 if ( CheckVersion($DBversion) ) {
7187     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('ConfirmFutureHolds','0','Number of days for confirming future holds','','Integer');");
7188     print "Upgrade to $DBversion done (Bug 9761: Add ConfirmFutureHolds pref)\n";
7189     SetVersion($DBversion);
7190 }
7191
7192 $DBversion = "3.13.00.022";
7193 if ( CheckVersion($DBversion) ) {
7194     $dbh->do("DELETE from auth_tag_structure WHERE tagfield IN ('68a','68b')");
7195     $dbh->do("DELETE from auth_subfield_structure WHERE tagfield IN ('68a','68b')");
7196     print "Upgrade to $DBversion done (Bug 10687 - Delete erroneous tags 68a and 68b on default MARC21 auth framework)\n";
7197     SetVersion($DBversion);
7198 }
7199
7200 $DBversion = "3.13.00.023";
7201 if ( CheckVersion($DBversion) ) {
7202     $dbh->do("ALTER TABLE borrowers CHANGE password password VARCHAR(60);");
7203     print "Upgrade to $DBversion done (Bug 9611 upgrading password storage system)\n";
7204     SetVersion($DBversion);
7205 }
7206
7207 $DBversion = "3.13.00.024";
7208 if ( CheckVersion($DBversion) ) {
7209     $dbh->do(q{ALTER TABLE z3950servers ADD COLUMN recordtype VARCHAR(45) NOT NULL DEFAULT 'biblio' AFTER description;});
7210     print "Upgrade to $DBversion done (Bug 10096 - Add a Z39.50 interface for authority searching)\n";
7211 }
7212
7213 $DBversion = "3.13.00.025";
7214 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
7215    $dbh->do("ALTER TABLE oai_sets_mappings ADD COLUMN operator varchar(8) NOT NULL default 'equal' AFTER marcsubfield;");
7216    print "Upgrade to $DBversion done (Bug 9295: OAI notequal: add operator column to OAI mappings table)\n";
7217    SetVersion ($DBversion);
7218 }
7219
7220 $DBversion = "3.13.00.026";
7221 if ( CheckVersion($DBversion) ) {
7222     $dbh->do(q|
7223         ALTER TABLE auth_subfield_structure ADD COLUMN defaultvalue TEXT DEFAULT NULL AFTER frameworkcode
7224     |);
7225     print "Upgrade to $DBversion done (Bug 10602: Add the column auth_subfield_structure.defaultvalue)\n";
7226     SetVersion($DBversion);
7227 }
7228
7229 $DBversion = "3.13.00.027";
7230 if ( CheckVersion($DBversion) ) {
7231     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('AllowOfflineCirculation','0','','If on, enables HTML5 offline circulation functionality.','YesNo')");
7232     print "Upgrade to $DBversion done (Bug 10240: Add syspref AllowOfflineCirculation)\n";
7233     SetVersion ($DBversion);
7234 }
7235
7236 $DBversion = "3.13.00.028";
7237 if ( CheckVersion($DBversion) ) {
7238     $dbh->do(q{
7239         ALTER TABLE export_format ADD type VARCHAR(255) DEFAULT 'marc' AFTER encoding
7240     });
7241     $dbh->do(q{
7242         ALTER TABLE export_format CHANGE marcfields content mediumtext NOT NULL
7243     });
7244     print "Upgrade to $DBversion done (Bug 10853: Add new field export_format.type and rename export_format.marcfields with export_format.content)\n";
7245     SetVersion($DBversion);
7246 }
7247
7248 $DBversion = "3.13.00.029";
7249 if ( CheckVersion($DBversion) ) {
7250     $dbh->do(q{
7251         INSERT IGNORE INTO export_format( profile, description, content, csv_separator, type )
7252         VALUES ( "issues to claim", "Default CSV export for serial issue claims",
7253                 "SUPPLIER=aqbooksellers.name|TITLE=subscription.title|ISSUE NUMBER=serial.serialseq|LATE SINCE=serial.planneddate",
7254                 ",", "sql" )
7255     });
7256     print "Upgrade to $DBversion done (Bug 10854: Add the default CSV profile for claiming issues)\n";
7257     SetVersion($DBversion);
7258 }
7259
7260 $DBversion = "3.13.00.030";
7261 if ( CheckVersion($DBversion) ) {
7262     $dbh->do(qq{
7263         DELETE FROM patronimage WHERE NOT EXISTS (SELECT * FROM borrowers WHERE borrowers.cardnumber = patronimage.cardnumber)
7264     });
7265
7266     $dbh->do(qq{
7267         ALTER TABLE patronimage ADD borrowernumber INT( 11 ) NULL FIRST
7268     });
7269
7270     $dbh->{AutoCommit} = 0;
7271     $dbh->{RaiseError} = 1;
7272
7273     eval {
7274         $dbh->do(qq{
7275             UPDATE patronimage LEFT JOIN borrowers USING ( cardnumber ) SET patronimage.borrowernumber = borrowers.borrowernumber
7276         });
7277         $dbh->commit();
7278     };
7279
7280     if ($@) {
7281         print "Upgrade to $DBversion done (Bug 10636 - patronimage should have borrowernumber as PK, not cardnumber) failed! Transaction aborted because $@\n";
7282         eval { $dbh->rollback };
7283     }
7284     else {
7285         $dbh->do(qq{
7286             ALTER TABLE patronimage DROP FOREIGN KEY patronimage_fk1
7287         });
7288         $dbh->do(qq{
7289             ALTER TABLE patronimage DROP PRIMARY KEY, ADD PRIMARY KEY( borrowernumber )
7290         });
7291         $dbh->do(qq{
7292             ALTER TABLE patronimage DROP cardnumber
7293         });
7294         $dbh->do(qq{
7295             ALTER TABLE patronimage ADD FOREIGN KEY ( borrowernumber ) REFERENCES borrowers ( borrowernumber ) ON DELETE CASCADE ON UPDATE CASCADE
7296         });
7297
7298         print "Upgrade to $DBversion done (Bug 10636 - patronimage should have borrowernumber as PK, not cardnumber)\n";
7299         SetVersion($DBversion);
7300     }
7301
7302     $dbh->{AutoCommit} = 1;
7303     $dbh->{RaiseError} = 0;
7304 }
7305
7306 $DBversion = "3.13.00.031";
7307 if ( CheckVersion($DBversion) ) {
7308
7309     $dbh->do(q{
7310         CREATE TABLE IF NOT EXISTS `patron_lists` (
7311           patron_list_id int(11) NOT NULL AUTO_INCREMENT,
7312           name varchar(255) CHARACTER SET utf8 NOT NULL,
7313           owner int(11) NOT NULL,
7314           PRIMARY KEY (patron_list_id),
7315           KEY owner (owner)
7316         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
7317     });
7318
7319     $dbh->do(q{
7320         ALTER TABLE `patron_lists`
7321           ADD CONSTRAINT patron_lists_ibfk_1 FOREIGN KEY (`owner`) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE;
7322     });
7323
7324     $dbh->do(q{
7325         CREATE TABLE patron_list_patrons (
7326           patron_list_patron_id int(11) NOT NULL AUTO_INCREMENT,
7327           patron_list_id int(11) NOT NULL,
7328           borrowernumber int(11) NOT NULL,
7329           PRIMARY KEY (patron_list_patron_id),
7330           KEY patron_list_id (patron_list_id),
7331           KEY borrowernumber (borrowernumber)
7332         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
7333     });
7334
7335     $dbh->do(q{
7336         ALTER TABLE `patron_list_patrons`
7337           ADD CONSTRAINT patron_list_patrons_ibfk_1 FOREIGN KEY (patron_list_id) REFERENCES patron_lists (patron_list_id) ON DELETE CASCADE ON UPDATE CASCADE,
7338           ADD CONSTRAINT patron_list_patrons_ibfk_2 FOREIGN KEY (borrowernumber) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE;
7339     });
7340
7341     $dbh->do(q{
7342         INSERT INTO permissions (module_bit, code, description) VALUES
7343         (13, 'manage_patron_lists', 'Add, edit and delete patron lists and their contents')
7344     });
7345
7346     print "Upgrade to $DBversion done (Bug 10565 - Add a 'Patron List' feature for storing and manipulating collections of patrons)\n";
7347     SetVersion($DBversion);
7348 }
7349
7350 $DBversion = "3.13.00.032";
7351 if ( CheckVersion($DBversion) ) {
7352     $dbh->do("ALTER TABLE aqorders ADD COLUMN orderstatus varchar(16) DEFAULT 'new' AFTER parent_ordernumber");
7353     $dbh->do("UPDATE aqorders SET orderstatus='ordered' WHERE basketno IN (SELECT basketno FROM aqbasket WHERE closedate IS NOT NULL)");
7354     $dbh->do(q{
7355         UPDATE aqorders SET orderstatus='partial'
7356         WHERE quantity > quantityreceived
7357         AND quantityreceived > 0
7358         AND ordernumber IN (
7359             SELECT parent_ordernumber
7360             FROM (
7361                 SELECT DISTINCT(parent_ordernumber)
7362                 FROM aqorders
7363                 WHERE ordernumber != parent_ordernumber
7364             ) AS aq
7365         )
7366         AND basketno IN (SELECT basketno FROM aqbasket WHERE closedate IS NOT NULL)
7367     });
7368     $dbh->do("UPDATE aqorders SET orderstatus='complete' WHERE quantity=quantityreceived");
7369     $dbh->do("UPDATE aqorders SET orderstatus='cancelled' WHERE datecancellationprinted IS NOT NULL");
7370     print "Upgrade to $DBversion done (Bug 5336: Add the new column aqorders.orderstatus)\n";
7371     SetVersion($DBversion);
7372 }
7373
7374 $DBversion = "3.13.00.033";
7375 if ( CheckVersion($DBversion) ) {
7376     $dbh->do(qq|
7377         DROP TABLE IF EXISTS subscription_frequencies
7378     |);
7379     $dbh->do(qq|
7380         CREATE TABLE subscription_frequencies (
7381             id INTEGER NOT NULL AUTO_INCREMENT,
7382             description TEXT NOT NULL,
7383             displayorder INT DEFAULT NULL,
7384             unit ENUM('day','week','month','year') DEFAULT NULL,
7385             unitsperissue INTEGER NOT NULL DEFAULT '1',
7386             issuesperunit INTEGER NOT NULL DEFAULT '1',
7387             PRIMARY KEY (id)
7388         ) ENGINE=InnoDB DEFAULT CHARSET=utf8
7389     |);
7390
7391     $dbh->do(qq|
7392         DROP TABLE IF EXISTS subscription_numberpatterns
7393     |);
7394     $dbh->do(qq|
7395         CREATE TABLE subscription_numberpatterns (
7396             id INTEGER NOT NULL AUTO_INCREMENT,
7397             label VARCHAR(255) NOT NULL,
7398             displayorder INTEGER DEFAULT NULL,
7399             description TEXT NOT NULL,
7400             numberingmethod VARCHAR(255) NOT NULL,
7401             label1 VARCHAR(255) DEFAULT NULL,
7402             add1 INTEGER DEFAULT NULL,
7403             every1 INTEGER DEFAULT NULL,
7404             whenmorethan1 INTEGER DEFAULT NULL,
7405             setto1 INTEGER DEFAULT NULL,
7406             numbering1 VARCHAR(255) DEFAULT NULL,
7407             label2 VARCHAR(255) DEFAULT NULL,
7408             add2 INTEGER DEFAULT NULL,
7409             every2 INTEGER DEFAULT NULL,
7410             whenmorethan2 INTEGER DEFAULT NULL,
7411             setto2 INTEGER DEFAULT NULL,
7412             numbering2 VARCHAR(255) DEFAULT NULL,
7413             label3 VARCHAR(255) DEFAULT NULL,
7414             add3 INTEGER DEFAULT NULL,
7415             every3 INTEGER DEFAULT NULL,
7416             whenmorethan3 INTEGER DEFAULT NULL,
7417             setto3 INTEGER DEFAULT NULL,
7418             numbering3 VARCHAR(255) DEFAULT NULL,
7419             PRIMARY KEY (id)
7420         ) ENGINE=InnoDB DEFAULT CHARSET=utf8
7421     |);
7422
7423     $dbh->do(qq|
7424         INSERT INTO subscription_frequencies (description, unit, unitsperissue, issuesperunit, displayorder)
7425         VALUES
7426             ('2/day', 'day', 1, 2, 1),
7427             ('1/day', 'day', 1, 1, 2),
7428             ('3/week', 'week', 1, 3, 3),
7429             ('1/week', 'week', 1, 1, 4),
7430             ('1/2 weeks', 'week', 2, 1, 5),
7431             ('1/3 weeks', 'week', 3, 1, 6),
7432             ('1/month', 'month', 1, 1, 7),
7433             ('1/2 months', 'month', 2, 1, 8),
7434             ('1/3 months', 'month', 3, 1, 9),
7435             ('2/year', 'month', 6, 1, 10),
7436             ('1/year', 'year', 1, 1, 11),
7437             ('1/2 year', 'year', 2, 1, 12),
7438             ('Irregular', NULL, 1, 1, 13)
7439     |);
7440
7441     # Used to link existing subscription to newly created frequencies
7442     my $frequencies_mapping = {     # keys are old frequency numbers, values are the new ones
7443         1 => 2,     # daily (n/week)
7444         2 => 4,     # 1/week
7445         3 => 5,     # 1/2 weeks
7446         4 => 6,     # 1/3 weeks
7447         5 => 7,     # 1/month
7448         6 => 8,     # 1/2 months (6/year)
7449         7 => 9,     # 1/3 months (1/quarter)
7450         8 => 9,    # 1/quarter (seasonal)
7451         9 => 10,    # 2/year
7452         10 => 11,   # 1/year
7453         11 => 12,   # 1/2 years
7454         12 => 1,    # 2/day
7455         16 => 13,   # Without periodicity
7456         32 => 13,   # Irregular
7457         48 => 13    # Unknown
7458     };
7459
7460     $dbh->do(qq|
7461         INSERT INTO subscription_numberpatterns
7462             (label, displayorder, description, numberingmethod,
7463             label1, add1, every1, whenmorethan1, setto1, numbering1,
7464             label2, add2, every2, whenmorethan2, setto2, numbering2,
7465             label3, add3, every3, whenmorethan3, setto3, numbering3)
7466         VALUES
7467             ('Number', 1, 'Simple Numbering method', 'No.{X}',
7468             'Number', 1, 1, 99999, 1, NULL,
7469             NULL, NULL, NULL, NULL, NULL, NULL,
7470             NULL, NULL, NULL, NULL, NULL, NULL),
7471
7472             ('Volume, Number, Issue', 2, 'Volume Number Issue 1', 'Vol.{X}, Number {Y}, Issue {Z}',
7473             'Volume', 1, 48, 99999, 1, NULL,
7474             'Number', 1, 4, 12, 1, NULL,
7475             'Issue', 1, 1, 4, 1, NULL),
7476
7477             ('Volume, Number', 3, 'Volume Number 1', 'Vol {X}, No {Y}',
7478             'Volume', 1, 12, 99999, 1, NULL,
7479             'Number', 1, 1, 12, 1, NULL,
7480             NULL, NULL, NULL, NULL, NULL, NULL),
7481
7482             ('Seasonal', 4, 'Season Year', '{X} {Y}',
7483             'Season', 1, 1, 3, 0, 'season',
7484             'Year', 1, 4, 99999, 1, NULL,
7485             NULL, NULL, NULL, NULL, NULL, NULL)
7486     |);
7487
7488     $dbh->do(qq|
7489         ALTER TABLE subscription
7490         MODIFY COLUMN numberpattern INTEGER DEFAULT NULL,
7491         MODIFY COLUMN periodicity INTEGER DEFAULT NULL
7492     |);
7493
7494     # Update existing subscriptions
7495
7496     my $query = qq|
7497         SELECT subscriptionid, periodicity, numberingmethod,
7498             add1, every1, whenmorethan1, setto1,
7499             add2, every2, whenmorethan2, setto2,
7500             add3, every3, whenmorethan3, setto3
7501         FROM subscription
7502         ORDER BY subscriptionid
7503     |;
7504     my $sth = $dbh->prepare($query);
7505     $sth->execute;
7506     my $insert_numberpatterns_sth = $dbh->prepare(qq|
7507         INSERT INTO subscription_numberpatterns
7508              (label, displayorder, description, numberingmethod,
7509             label1, add1, every1, whenmorethan1, setto1, numbering1,
7510             label2, add2, every2, whenmorethan2, setto2, numbering2,
7511             label3, add3, every3, whenmorethan3, setto3, numbering3)
7512         VALUES
7513             (?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?)
7514     |);
7515     my $check_numberpatterns_sth = $dbh->prepare(qq|
7516         SELECT * FROM subscription_numberpatterns
7517         WHERE (add1 = ? OR (add1 IS NULL AND ? IS NULL)) AND (add2 = ? OR (add2 IS NULL AND ? IS NULL))
7518         AND (add3 = ? OR (add3 IS NULL AND ? IS NULL)) AND (every1 = ? OR (every1 IS NULL AND ? IS NULL))
7519         AND (every2 = ? OR (every2 IS NULL AND ? IS NULL)) AND (every3 = ? OR (every3 IS NULL AND ? IS NULL))
7520         AND (whenmorethan1 = ? OR (whenmorethan1 IS NULL AND ? IS NULL)) AND (whenmorethan2 = ? OR (whenmorethan2 IS NULL AND ? IS NULL))
7521         AND (whenmorethan3 = ? OR (whenmorethan3 IS NULL AND ? IS NULL)) AND (setto1 = ? OR (setto1 IS NULL AND ? IS NULL))
7522         AND (setto2 = ? OR (setto2 IS NULL AND ? IS NULL)) AND (setto3 = ? OR (setto3 IS NULL AND ? IS NULL))
7523         AND (numberingmethod = ? OR (numberingmethod IS NULL AND ? IS NULL))
7524         LIMIT 1
7525     |);
7526     my $update_subscription_sth = $dbh->prepare(qq|
7527         UPDATE subscription
7528         SET numberpattern = ?,
7529             periodicity = ?
7530         WHERE subscriptionid = ?
7531     |);
7532
7533     my $i = 1;
7534     while(my $sub = $sth->fetchrow_hashref) {
7535         $check_numberpatterns_sth->execute(
7536             $sub->{add1}, $sub->{add1}, $sub->{add2}, $sub->{add2}, $sub->{add3}, $sub->{add3},
7537             $sub->{every1}, $sub->{every1}, $sub->{every2}, $sub->{every2}, $sub->{every3}, $sub->{every3},
7538             $sub->{whenmorethan1}, $sub->{whenmorethan1}, $sub->{whenmorethan2}, $sub->{whenmorethan2},
7539             $sub->{whenmorethan3}, $sub->{whenmorethan3}, $sub->{setto1}, $sub->{setto1}, $sub->{setto2},
7540             $sub->{setto2}, $sub->{setto3}, $sub->{setto3}, $sub->{numberingmethod}, $sub->{numberingmethod}
7541         );
7542         my $p = $check_numberpatterns_sth->fetchrow_hashref;
7543         if (defined $p) {
7544             # Pattern already exists, link to it
7545             $update_subscription_sth->execute($p->{id},
7546                 $frequencies_mapping->{$sub->{periodicity}},
7547                 $sub->{subscriptionid});
7548         } else {
7549             # Create a new numbering pattern for this subscription
7550             my $ok = $insert_numberpatterns_sth->execute(
7551                 "Backup pattern $i", 4+$i, "Automatically created pattern by updatedatabase", $sub->{numberingmethod},
7552                 "X", $sub->{add1}, $sub->{every1}, $sub->{whenmorethan1}, $sub->{setto1}, undef,
7553                 "Y", $sub->{add2}, $sub->{every2}, $sub->{whenmorethan2}, $sub->{setto2}, undef,
7554                 "Z", $sub->{add3}, $sub->{every3}, $sub->{whenmorethan3}, $sub->{setto3}, undef
7555             );
7556             if($ok) {
7557                 my $id = $dbh->last_insert_id(undef, undef, 'subscription_numberpatterns', undef);
7558                 # Link to subscription_numberpatterns and subscription_frequencies
7559                 $update_subscription_sth->execute($id,
7560                     $frequencies_mapping->{$sub->{periodicity}},
7561                     $sub->{subscriptionid});
7562             }
7563             $i++;
7564         }
7565     }
7566
7567     # Remove now useless columns
7568     $dbh->do(qq|
7569         ALTER TABLE subscription
7570         DROP COLUMN numberingmethod,
7571         DROP COLUMN add1,
7572         DROP COLUMN every1,
7573         DROP COLUMN whenmorethan1,
7574         DROP COLUMN setto1,
7575         DROP COLUMN add2,
7576         DROP COLUMN every2,
7577         DROP COLUMN whenmorethan2,
7578         DROP COLUMN setto2,
7579         DROP COLUMN add3,
7580         DROP COLUMN every3,
7581         DROP COLUMN whenmorethan3,
7582         DROP COLUMN setto3,
7583         DROP COLUMN dow,
7584         DROP COLUMN issuesatonce,
7585         DROP COLUMN hemisphere,
7586         ADD COLUMN countissuesperunit INTEGER NOT NULL DEFAULT 1 AFTER periodicity,
7587         ADD COLUMN skip_serialseq BOOLEAN NOT NULL DEFAULT 0 AFTER irregularity,
7588         ADD COLUMN locale VARCHAR(80) DEFAULT NULL AFTER numberpattern,
7589         ADD CONSTRAINT subscription_ibfk_1 FOREIGN KEY (periodicity) REFERENCES subscription_frequencies (id) ON DELETE SET NULL ON UPDATE CASCADE,
7590         ADD CONSTRAINT subscription_ibfk_2 FOREIGN KEY (numberpattern) REFERENCES subscription_numberpatterns (id) ON DELETE SET NULL ON UPDATE CASCADE
7591     |);
7592
7593     # Set firstacquidate if not already set (firstacquidate is now mandatory)
7594     my $get_first_planneddate_sth = $dbh->prepare(qq|
7595         SELECT planneddate
7596         FROM serial
7597         WHERE subscriptionid = ?
7598         ORDER BY serialid
7599         LIMIT 1
7600     |);
7601     my $update_firstacquidate_sth = $dbh->prepare(qq|
7602         UPDATE subscription
7603         SET firstacquidate = ?
7604         WHERE subscriptionid = ?
7605     |);
7606     my $get_subscriptions_sth = $dbh->prepare(qq|
7607         SELECT subscriptionid, startdate
7608         FROM subscription
7609         WHERE firstacquidate IS NULL
7610           OR firstacquidate = '0000-00-00'
7611     |);
7612     $get_subscriptions_sth->execute;
7613     while ( my ($subscriptionid, $startdate) = $get_subscriptions_sth->fetchrow ) {
7614         # Try to get the planned date of the first serial
7615         $get_first_planneddate_sth->execute($subscriptionid);
7616         my ($first_planneddate) = $get_first_planneddate_sth->fetchrow;
7617         if ($first_planneddate and $first_planneddate =~ /^\d{4}-\d{2}-\d{2}$/) {
7618             $update_firstacquidate_sth->execute($first_planneddate, $subscriptionid);
7619         } else {
7620             # Defaults to subscription start date
7621             $update_firstacquidate_sth->execute($startdate, $subscriptionid);
7622         }
7623     }
7624
7625     print "Upgrade to $DBversion done (Bug 7688: add subscription_frequencies and subscription_numberpatterns tables)\n";
7626     SetVersion($DBversion);
7627 }
7628
7629 $DBversion = "3.13.00.034";
7630 if ( CheckVersion($DBversion) ) {
7631     $dbh->do("
7632         ALTER TABLE `import_batches`
7633         CHANGE `item_action` `item_action`
7634           ENUM( 'always_add', 'add_only_for_matches', 'add_only_for_new', 'ignore', 'replace' )
7635           NOT NULL DEFAULT 'always_add'
7636     ");
7637     print "Upgrade to $DBversion done (Bug 7131 - way to overlay items in in marc import)\n";
7638     SetVersion($DBversion);
7639 }
7640
7641 $DBversion ="3.13.00.035";
7642 if ( CheckVersion($DBversion) ) {
7643     $dbh->do(q{
7644 CREATE TABLE borrower_debarments (
7645   borrower_debarment_id int(11) NOT NULL AUTO_INCREMENT,
7646   borrowernumber int(11) NOT NULL,
7647   expiration date DEFAULT NULL,
7648   `type` enum('SUSPENSION','OVERDUES','MANUAL') NOT NULL DEFAULT 'MANUAL',
7649   `comment` text,
7650   manager_id int(11) DEFAULT NULL,
7651   created timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
7652   updated timestamp NULL DEFAULT NULL,
7653   PRIMARY KEY (borrower_debarment_id),
7654   KEY borrowernumber (borrowernumber) ,
7655   CONSTRAINT `borrower_debarments_ibfk_1` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`)
7656     ON DELETE CASCADE ON UPDATE CASCADE
7657 ) ENGINE=InnoDB  DEFAULT CHARSET=utf8;
7658     });
7659
7660     # debarments with end date
7661     $dbh->do(q{
7662 INSERT INTO borrower_debarments ( borrowernumber, expiration, comment ) SELECT borrowernumber, debarred, debarredcomment FROM borrowers WHERE debarred IS NOT NULL AND debarred <> '9999-12-31'
7663     });
7664     # debarments with no end date
7665     $dbh->do(q{
7666 INSERT INTO borrower_debarments ( borrowernumber, comment ) SELECT borrowernumber, debarredcomment FROM borrowers WHERE debarred = '9999-12-31'
7667     });
7668
7669     $dbh->do(q{
7670 INSERT IGNORE INTO systempreferences (variable,value,explanation,type) VALUES
7671 ('AutoRemoveOverduesRestrictions','0','Defines whether an OVERDUES debarment should be lifted automatically if all overdue items are returned by the patron.','YesNo')
7672     });
7673
7674     print "Upgrade to $DBversion done (Bug 2720 - Overdues which debar automatically should undebar automatically when returned)\n";
7675     SetVersion($DBversion);
7676 }
7677
7678 $DBversion = "3.13.00.036";
7679 if ( CheckVersion($DBversion) ) {
7680     $dbh->do(qq{
7681         INSERT INTO systempreferences (variable, value, explanation, options, type)
7682         VALUES ('StaffDetailItemSelection', '1', 'Enable item selection in record detail page', NULL, 'YesNo')
7683     });
7684     print "Upgrade to $DBversion done (Add system preference StaffDetailItemSelection)\n";
7685     SetVersion($DBversion);
7686 }
7687
7688 $DBversion = "3.13.00.037";
7689 if ( CheckVersion($DBversion) ) {
7690     #add phone if it is not there already (explains the ignore option)
7691     $dbh->do("
7692 INSERT IGNORE INTO message_transport_types (message_transport_type) values ('phone');
7693     ");
7694     print "Upgrade to $DBversion done (Bug 10572: Add phone to message_transport_types table for new installs)\n";
7695     SetVersion($DBversion);
7696 }
7697
7698 $DBversion = "3.13.00.038";
7699 if ( CheckVersion($DBversion) ) {
7700     $dbh->do("INSERT INTO permissions (module_bit, code, description) VALUES(15, 'superserials', 'Manage subscriptions from any branch (only applies when IndependentBranches is used)')");
7701     print "Upgrade to $DBversion done (Bug 8435: Add superserials permission)\n";
7702     SetVersion($DBversion);
7703 }
7704
7705 $DBversion = "3.13.00.039";
7706 if ( CheckVersion($DBversion) ) {
7707     $dbh->do("
7708         ALTER TABLE aqbasket ADD branch varchar(10) default NULL
7709     ");
7710     $dbh->do("
7711         ALTER TABLE aqbasket
7712         ADD CONSTRAINT aqbasket_ibfk_4 FOREIGN KEY (branch)
7713             REFERENCES branches (branchcode)
7714             ON UPDATE CASCADE ON DELETE SET NULL
7715     ");
7716     $dbh->do("
7717         DROP TABLE IF EXISTS aqbasketusers
7718     ");
7719     $dbh->do("
7720         CREATE TABLE aqbasketusers (
7721             basketno int(11) NOT NULL,
7722             borrowernumber int(11) NOT NULL,
7723             PRIMARY KEY (basketno,borrowernumber),
7724             CONSTRAINT aqbasketusers_ibfk_1 FOREIGN KEY (basketno) REFERENCES aqbasket (basketno) ON DELETE CASCADE ON UPDATE CASCADE,
7725             CONSTRAINT aqbasketusers_ibfk_2 FOREIGN KEY (borrowernumber) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE
7726         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
7727     ");
7728     $dbh->do("
7729         INSERT INTO permissions (module_bit, code, description)
7730         VALUES (11, 'order_manage_all', 'Manage all orders and baskets, regardless of restrictions on them')
7731     ");
7732
7733     print "Upgrade to $DBversion done (Add branch and users list to baskets. "
7734         . "New permission order_manage_all)\n";
7735     SetVersion($DBversion);
7736 }
7737
7738 $DBversion = "3.13.00.040";
7739 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
7740     $dbh->do("CREATE TABLE IF NOT EXISTS marc_modification_templates (
7741               template_id int(11) NOT NULL auto_increment,
7742               name text NOT NULL,
7743               PRIMARY KEY  (template_id)
7744               ) ENGINE=InnoDB  DEFAULT CHARSET=utf8;"
7745     );
7746
7747     $dbh->do("
7748       CREATE TABLE IF NOT EXISTS marc_modification_template_actions (
7749       mmta_id int(11) NOT NULL auto_increment,
7750       template_id int(11) NOT NULL,
7751       ordering int(3) NOT NULL,
7752       action enum('delete_field','update_field','move_field','copy_field') NOT NULL,
7753       field_number smallint(6) NOT NULL default '0',
7754       from_field varchar(3) NOT NULL,
7755       from_subfield varchar(1) NULL,
7756       field_value varchar(100) default NULL,
7757       to_field varchar(3) default NULL,
7758       to_subfield varchar(1) default NULL,
7759       to_regex_search text,
7760       to_regex_replace text,
7761       to_regex_modifiers varchar(8) default '',
7762       conditional enum('if','unless') default NULL,
7763       conditional_field varchar(3) default NULL,
7764       conditional_subfield varchar(1) default NULL,
7765       conditional_comparison enum('exists','not_exists','equals','not_equals') default NULL,
7766       conditional_value text,
7767       conditional_regex tinyint(1) NOT NULL default '0',
7768       description text,
7769       PRIMARY KEY  (mmta_id),
7770       CONSTRAINT `mmta_ibfk_1` FOREIGN KEY (`template_id`) REFERENCES `marc_modification_templates` (`template_id`) ON DELETE CASCADE ON UPDATE CASCADE
7771       ) ENGINE=InnoDB  DEFAULT CHARSET=utf8;
7772     ");
7773
7774     $dbh->do("INSERT INTO permissions (module_bit, code, description) VALUES ('13', 'marc_modification_templates', 'Manage marc modification templates')");
7775
7776     print "Upgrade to $DBversion done ( Bug 8015: Added tables for MARC Modification Framework )\n";
7777     SetVersion($DBversion);
7778 }
7779
7780 $DBversion = "3.13.00.041";
7781 if(CheckVersion($DBversion)) {
7782     $dbh->do(q{
7783         INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('AcqItemSetSubfieldsWhenReceived','','Set subfields for item when items are created when receiving (e.g. o=5|a="foo bar")','','Free');
7784     });
7785     print "Upgrade to $DBversion done (Bug 10986: Added AcqItemSetSubfieldsWhenReceived syspref)\n";
7786     SetVersion($DBversion);
7787 }
7788
7789 $DBversion = "3.13.00.042";
7790 if(CheckVersion($DBversion)) {
7791     print "Upgrade to $DBversion done (Koha 3.14 beta)\n";
7792     SetVersion($DBversion);
7793 }
7794
7795 $DBversion = "3.13.00.043";
7796 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
7797     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES('SearchEngine','Zebra','Solr|Zebra','Search Engine','Choice')");
7798     print "Upgrade to $DBversion done (Bug 11196: Add system preference SearchEngine if missing )\n";
7799     SetVersion($DBversion);
7800 }
7801
7802 $DBversion = "3.14.00.000";
7803 if ( CheckVersion($DBversion) ) {
7804     print "Upgrade to $DBversion done (3.14.0 release)\n";
7805     SetVersion ($DBversion);
7806 }
7807
7808 $DBversion = '3.15.00.000';
7809 if ( CheckVersion($DBversion) ) {
7810     print "Upgrade to $DBversion done (the road goes ever on)\n";
7811     SetVersion ($DBversion);
7812 }
7813
7814 $DBversion = "3.15.00.001";
7815 if ( CheckVersion($DBversion) ) {
7816     $dbh->do("UPDATE systempreferences SET value='clear' where variable = 'CircAutoPrintQuickSlip' and value = '0'");
7817     $dbh->do("UPDATE systempreferences SET value='qslip' where variable = 'CircAutoPrintQuickSlip' and value = '1'");
7818     $dbh->do("UPDATE systempreferences SET explanation = 'Choose what should happen when an empty barcode field is submitted in circulation: Display a print quick slip window, Display a print slip window or Clear the screen.', type = 'Choice' where variable = 'CircAutoPrintQuickSlip'");
7819     print "Upgrade to $DBversion done (Bug 11040: Add option to print full slip when checking out a null barcode)\n";
7820     SetVersion($DBversion);
7821 }
7822
7823 $DBversion = "3.15.00.002";
7824 if(CheckVersion($DBversion)) {
7825     $dbh->do("ALTER TABLE deleteditems MODIFY materials text;");
7826     print "Upgrade to $DBversion done (Bug 11275: alter deleteditems.materials from varchar(10) to text)\n";
7827     SetVersion($DBversion);
7828 }
7829
7830 $DBversion = "3.15.00.003";
7831 if ( CheckVersion($DBversion) ) {
7832     $dbh->do(q{
7833         UPDATE accountlines
7834         SET description = ''
7835         WHERE description IN (
7836             ' New Card',
7837             ' Fine',
7838             ' Sundry',
7839             'Writeoff',
7840             ' Account Management fee',
7841             'Payment,thanks', 'Payment,thanks - ',
7842             ' Lost Item'
7843         )
7844     });
7845     print "Upgrade to $DBversion done (Bug 2546: Update fine descriptions)\n";
7846     SetVersion($DBversion);
7847 }
7848
7849 $DBversion = "3.15.00.004";
7850 if ( CheckVersion($DBversion) ) {
7851     if ( C4::Context->preference("marcflavour") eq 'MARC21' ) {
7852         $dbh->do(qq{
7853             INSERT IGNORE INTO marc_subfield_structure (tagfield, tagsubfield, liblibrarian, libopac, repeatable, mandatory,
7854             kohafield, tab, authorised_value, authtypecode, value_builder, isurl, hidden, frameworkcode, seealso, link,
7855             defaultvalue) VALUES
7856             ('015', 'q', 'Qualifying information', 'Qualifying information', 1, 0, '', 0, '', '', '', 0, 0, '', '', '', NULL),
7857             ('020', 'q', 'Qualifying information', 'Qualifying information', 1, 0, '', 0, '', '', '', 0, 0, '', '', '', NULL),
7858             ('024', 'q', 'Qualifying information', 'Qualifying information', 1, 0, '', 0, '', '', '', 0, 0, '', '', '', NULL),
7859             ('027', 'q', 'Qualifying information', 'Qualifying information', 1, 0, '', 0, '', '', '', 0, 0, '', '', '', NULL),
7860             ('800', '7', 'Control subfield', 'Control subfield', 0, 0, '', 8, '', '', '', NULL, -6, '', '', '', NULL),
7861             ('810', '7', 'Control subfield', 'Control subfield', 0, 0, '', 8, '', '', '', NULL, -6, '', '', '', NULL),
7862             ('811', '7', 'Control subfield', 'Control subfield', 0, 0, '', 8, '', '', '', NULL, -6, '', '', '', NULL),
7863             ('830', '7', 'Control subfield', 'Control subfield', 0, 0, '', 8, '', '', '', NULL, -6, '', '', '', NULL);
7864         });
7865         $dbh->do(qq{
7866             INSERT IGNORE INTO auth_subfield_structure (authtypecode, tagfield, tagsubfield, liblibrarian, libopac, repeatable,
7867             mandatory, tab, authorised_value, value_builder, seealso, isurl, hidden, linkid, kohafield, frameworkcode) VALUES
7868             ('', '020', 'q', 'Qualifying information', 'Qualifying information', 1, 0, 0, NULL, NULL, NULL, 0, 0, '', '', ''),
7869             ('', '024', 'q', 'Qualifying information', 'Qualifying information', 1, 0, 0, NULL, NULL, NULL, 0, 0, '', '', '');
7870         });
7871     }
7872     print "Upgrade to $DBversion done (Bug 10970 - Update MARC21 frameworks to Update Nr. 17 - DB update)\n";
7873     SetVersion($DBversion);
7874 }
7875
7876 $DBversion = "3.15.00.005";
7877 if ( CheckVersion($DBversion) ) {
7878    $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES('AcquisitionDetails', '1', '', 'Hide/Show acquisition details on the biblio detail page.', 'YesNo');");
7879    print "Upgrade to $DBversion done (Bug 8230: Add AcquisitionDetails system preference)\n";
7880    SetVersion ($DBversion);
7881 }
7882
7883 $DBversion = "3.15.00.006";
7884 if(CheckVersion($DBversion)) {
7885     $dbh->do(q{
7886         ALTER TABLE `borrowers`
7887         ADD KEY `surname_idx` (`surname`(255)),
7888         ADD KEY `firstname_idx` (`firstname`(255)),
7889         ADD KEY `othernames_idx` (`othernames`(255))
7890     });
7891     print "Upgrade to $DBversion done (Bug 11249 - Add DB indexes on borrower names)\n";
7892     SetVersion($DBversion);
7893 }
7894
7895 $DBversion = "3.15.00.007";
7896 if ( CheckVersion($DBversion) ) {
7897    $dbh->do("ALTER TABLE items ADD itemlost_on DATETIME NULL AFTER itemlost");
7898    $dbh->do("ALTER TABLE items ADD withdrawn_on DATETIME NULL AFTER withdrawn");
7899    $dbh->do("ALTER TABLE deleteditems ADD itemlost_on DATETIME NULL AFTER itemlost");
7900    $dbh->do("ALTER TABLE deleteditems ADD withdrawn_on DATETIME NULL AFTER withdrawn");
7901    print "Upgrade to $DBversion done (Bug 9673 - Track when items are marked as lost or withdrawn)\n";
7902    SetVersion ($DBversion);
7903 }
7904
7905 $DBversion = "3.15.00.008";
7906 if ( CheckVersion($DBversion) ) {
7907     $dbh->do(q{
7908         ALTER TABLE collections_tracking CHANGE ctId collections_tracking_id integer(11) NOT NULL auto_increment;
7909     });
7910     print "Upgrade to $DBversion done (Bug 11384) - change name of collections_tracker.ctId column)\n";
7911    SetVersion ($DBversion);
7912 }
7913
7914 $DBversion = "3.15.00.009";
7915 if ( CheckVersion($DBversion) ) {
7916     $dbh->do(q{
7917         ALTER TABLE suggestions MODIFY suggesteddate DATE NOT NULL
7918     });
7919     print "Upgrade to $DBversion done (Bug 11391) - drop default value on suggestions.suggesteddate column)\n";
7920    SetVersion ($DBversion);
7921 }
7922
7923 $DBversion = "3.15.00.010";
7924 if(CheckVersion($DBversion)) {
7925     $dbh->do("ALTER TABLE deleteditems DROP COLUMN marc");
7926     print "Upgrade to $DBversion done (Bug 6331: remove obsolete column in deleteditems.marc)\n";
7927     SetVersion ($DBversion);
7928 }
7929
7930 $DBversion = "3.15.00.011";
7931 if(CheckVersion($DBversion)) {
7932     $dbh->do("UPDATE marc_subfield_structure SET maxlength=9999 WHERE maxlength IS NULL OR maxlength=0;");
7933     print "Upgrade to $DBversion done (Bug 8018: set 9999 as default max length for subfields)\n";
7934     SetVersion ($DBversion);
7935 }
7936
7937 $DBversion = "3.15.00.012";
7938 if ( CheckVersion($DBversion) ) {
7939     $dbh->do(q{
7940         INSERT INTO permissions (module_bit, code, description) VALUES ( 1, 'force_checkout', 'Force checkout if a limitation exists')
7941     });
7942     $dbh->do(q{
7943         INSERT INTO permissions (module_bit, code, description) VALUES ( 1, 'manage_restrictions', 'Manage restrictions for accounts')
7944     });
7945     $dbh->do(q{
7946         INSERT INTO user_permissions (borrowernumber, module_bit, code)
7947             SELECT user_permissions.borrowernumber, 1, 'force_checkout'
7948             FROM user_permissions
7949             LEFT JOIN borrowers USING(borrowernumber)
7950             WHERE borrowers.flags & (1 << 1)
7951     });
7952     $dbh->do(q{
7953         INSERT INTO user_permissions (borrowernumber, module_bit, code)
7954             SELECT user_permissions.borrowernumber, 1, 'manage_restrictions'
7955             FROM user_permissions
7956             LEFT JOIN borrowers USING(borrowernumber)
7957             WHERE borrowers.flags & (1 << 1)
7958     });
7959
7960     print "Upgrade to $DBversion done (Bug 10863 - Add permissions force_checkout and manage_restrictions)\n";
7961     SetVersion($DBversion);
7962 }
7963
7964 $DBversion = "3.15.00.013";
7965 if(CheckVersion($DBversion)) {
7966     $dbh->do(q{
7967         UPDATE systempreferences
7968         SET explanation = 'Upon receiving items, update their subfields if they were created when placing an order (e.g. o=5|a="foo bar")'
7969         WHERE variable = "AcqItemSetSubfieldsWhenReceived"
7970     });
7971
7972     $dbh->do(q{
7973         UPDATE systempreferences
7974         SET value = ''
7975         WHERE variable = "AcqItemSetSubfieldsWhenReceived"
7976             AND value = "0"
7977     });
7978     print "Upgrade to $DBversion done (Bug 11237: Update explanation and default value for AcqItemSetSubfieldsWhenReceived syspref)\n";
7979     SetVersion($DBversion);
7980 }
7981
7982 $DBversion = "3.15.00.014";
7983 if (CheckVersion($DBversion)) {
7984     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES('SelfCheckReceiptPrompt', '1', 'NULL', 'If ON, print receipt dialog pops up when self checkout is finished.', 'YesNo');");
7985     print "Upgrade to $DBversion done (Bug 11415: add system preference for automatic self checkout receipt printing)\n";
7986     SetVersion($DBversion);
7987 }
7988
7989 $DBversion = "3.15.00.015";
7990 if (CheckVersion($DBversion)) {
7991     $dbh->do("INSERT INTO systempreferences ( variable, value, options, explanation, type ) VALUES
7992         ('OpacSuggestionManagedBy',1,'','Show the name of the staff member who managed a suggestion in OPAC','YesNo');");
7993     print "Upgrade to $DBversion done (Bug 10907: Add OpacSuggestionManagedBy system preference)\n";
7994     SetVersion($DBversion);
7995 }
7996
7997 $DBversion = "3.15.00.016";
7998 if (CheckVersion($DBversion)) {
7999     $dbh->do("ALTER TABLE biblioitems CHANGE url url TEXT NULL DEFAULT NULL");
8000     $dbh->do("ALTER TABLE deletedbiblioitems CHANGE url url TEXT NULL DEFAULT NULL");
8001     print "Upgrade to $DBversion done (Bug 11268 - Biblioitems URL field is too small for some URLs)\n";
8002     SetVersion($DBversion);
8003 }
8004
8005 $DBversion = "3.15.00.017";
8006 if(CheckVersion($DBversion)) {
8007     $dbh->do(q{
8008         UPDATE systempreferences
8009         SET explanation = 'Define the contents of UNIMARC authority control field 100 position 08-35'
8010         WHERE variable = "UNIMARCAuthorityField100"
8011     });
8012     $dbh->do(q{
8013         UPDATE systempreferences
8014         SET explanation = 'Define the contents of MARC21 authority control field 008 position 06-39'
8015         WHERE variable = "MARCAuthorityControlField008"
8016     });
8017     $dbh->do(q{
8018         UPDATE systempreferences
8019         SET explanation = 'Define MARC Organization Code for MARC21 records - http://www.loc.gov/marc/organizations/orgshome.html'
8020         WHERE variable = "MARCOrgCode"
8021     });
8022     print "Upgrade to $DBversion done (Bug 11611 - fix possible confusion between UNIMARC and MARC21 in some sysprefs)\n";
8023     SetVersion($DBversion);
8024 }
8025
8026 $DBversion = "3.15.00.018";
8027 if ( CheckVersion($DBversion) ) {
8028     $dbh->{AutoCommit} = 0;
8029     $dbh->{RaiseError} = 1;
8030
8031     eval {
8032         $dbh->selectcol_arrayref(q|SELECT COUNT(*) FROM roadtype|);
8033     };
8034     unless ( $@ ) {
8035         my $av_added = $dbh->do(q|
8036             INSERT INTO authorised_values(category, authorised_value, lib, lib_opac)
8037                 SELECT 'ROADTYPE', roadtypeid, road_type, road_type
8038                 FROM roadtype;
8039         |);
8040
8041         my $rt_deleted = $dbh->do(q|
8042             DELETE FROM roadtype
8043         |);
8044
8045         if ( $av_added == $rt_deleted or $rt_deleted eq "0E0" ) {
8046             $dbh->do(q|
8047                 DROP TABLE roadtype;
8048             |);
8049             $dbh->commit;
8050             print "Upgrade to $DBversion done (Bug 7372: Move road types from the roadtype table to the ROADTYPE authorised values)\n";
8051             SetVersion($DBversion);
8052         } else {
8053             print "Upgrade to $DBversion failed (Bug 7372: Move road types from the roadtype table to the ROADTYPE authorised values.\nTransaction aborted because $@\n)";
8054             $dbh->rollback;
8055         }
8056     }
8057     $dbh->{AutoCommit} = 1;
8058     $dbh->{RaiseError} = 0;
8059 }
8060
8061 $DBversion = "3.15.00.019";
8062 if ( CheckVersion($DBversion) ) {
8063     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES('OpacMaxItemsToDisplay','50','','Max items to display at the OPAC on a biblio detail','Integer')");
8064     print "Upgrade to $DBversion done (Bug 11256: Add system preference OpacMaxItemsToDisplay)\n";
8065     SetVersion($DBversion);
8066 }
8067
8068 $DBversion = "3.15.00.020";
8069 if ( CheckVersion($DBversion) ) {
8070     $dbh->do(q|
8071         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES('MaxItemsForBatch','1000',NULL,'Max number of items record to process in a batch (modification or deletion)','Integer')
8072     |);
8073     print "Upgrade to $DBversion done (Bug 11343: Add system preference MaxItemsForBatch )\n";
8074     SetVersion($DBversion);
8075 }
8076
8077 $DBversion = "3.15.00.021";
8078 if(CheckVersion($DBversion)) {
8079     $dbh->do(q{
8080         ALTER TABLE `action_logs`
8081             DROP KEY timestamp,
8082             ADD KEY `timestamp_idx` (`timestamp`),
8083             ADD KEY `user_idx` (`user`),
8084             ADD KEY `module_idx` (`module`(255)),
8085             ADD KEY `action_idx` (`action`(255)),
8086             ADD KEY `object_idx` (`object`),
8087             ADD KEY `info_idx` (`info`(255))
8088     });
8089     print "Upgrade to $DBversion done (Bug 3445: Add indexes to action_logs table)\n";
8090     SetVersion($DBversion);
8091 }
8092
8093 $DBversion = "3.15.00.022";
8094 if (CheckVersion($DBversion)) {
8095     $dbh->do(q|
8096         DELETE FROM systempreferences WHERE variable= "memberofinstitution"
8097     |);
8098     print "Upgrade to $DBversion done (Bug 11751: Remove memberofinstitytion system preference)\n";
8099     SetVersion($DBversion);
8100 }
8101
8102 $DBversion = "3.15.00.023";
8103 if ( CheckVersion($DBversion) ) {
8104    $dbh->do("
8105        INSERT INTO systempreferences (variable,value,options,explanation,type)
8106        VALUES('CardnumberLength', '', '', 'Set a length for card numbers.', 'Free');
8107     ");
8108    print "Upgrade to $DBversion done (Bug 10861: Add CardnumberLength syspref)\n";
8109    SetVersion ($DBversion);
8110 }
8111
8112 $DBversion = "3.15.00.024";
8113 if ( CheckVersion($DBversion) ) {
8114     $dbh->do(q{
8115         DELETE FROM systempreferences WHERE variable = 'NoZebraIndexes'
8116     });
8117     print "Upgrade to $DBversion done (Bug 10012 - remove last vestiges of NoZebra)\n";
8118     SetVersion($DBversion);
8119 }
8120
8121 $DBversion = "3.15.00.025";
8122 if ( CheckVersion($DBversion) ) {
8123     $dbh->do(q{
8124         DROP TABLE aqorderdelivery;
8125     });
8126     print "Upgrade to $DBversion done (Bug 11928 - remove unused table)\n";
8127     SetVersion($DBversion);
8128 }
8129
8130 $DBversion = "3.15.00.026";
8131 if ( CheckVersion($DBversion) ) {
8132     $dbh->do(q{
8133         UPDATE language_descriptions SET description = 'Հայերեն' WHERE subtag = 'hy' AND lang = 'hy';
8134     });
8135     print "Upgrade to $DBversion done (Bug 11973 - Fix Armenian language description)\n";
8136     SetVersion($DBversion);
8137 }
8138
8139 $DBversion = "3.15.00.027";
8140 if (CheckVersion($DBversion)) {
8141     $dbh->do(q{
8142         ALTER TABLE opac_news ADD branchcode varchar(10) DEFAULT NULL
8143                                   AFTER idnew,
8144                               ADD CONSTRAINT opac_news_branchcode_ibfk
8145                                   FOREIGN KEY (branchcode)
8146                                   REFERENCES branches (branchcode)
8147                                   ON DELETE CASCADE ON UPDATE CASCADE;
8148     });
8149     print "Upgrade to $DBversion done (Bug 7567: Add branchcode to opac_news)\n";
8150     SetVersion($DBversion);
8151 }
8152
8153 $DBversion = "3.15.00.028";
8154 if(CheckVersion($DBversion)) {
8155     $dbh->do(q{
8156         ALTER TABLE issuingrules ADD norenewalbefore int(4) default NULL AFTER renewalperiod
8157     });
8158     print "Upgrade to $DBversion done (Bug 7413: Allow OPAC renewal x days before due date)\n";
8159     SetVersion($DBversion);
8160 }
8161
8162 $DBversion = "3.15.00.029";
8163 if ( CheckVersion($DBversion) ) {
8164     $dbh->do(q{
8165         UPDATE borrower_debarments SET expiration = NULL WHERE expiration = '9999-12-31'
8166     });
8167     print "Upgrade to $DBversion done (Bug 11846 - correct borrower_debarments with expiration 9999-12-31)\n";
8168     SetVersion($DBversion);
8169 }
8170
8171 $DBversion = "3.15.00.030";
8172 if(CheckVersion($DBversion)) {
8173     $dbh->do(q|
8174         INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('OPACMySummaryNote','','','Note to display on the patron summary page. This note only appears if the patron is connected.','Free')
8175     |);
8176     print "Upgrade to $DBversion done (Bug 12052: Add OPACMySummaryNote syspref)\n";
8177     SetVersion($DBversion);
8178 }
8179
8180 $DBversion = "3.15.00.031";
8181 if ( CheckVersion($DBversion) ) {
8182    $dbh->do("INSERT INTO permissions (module_bit, code, description) VALUES ('10', 'writeoff', 'Write off fines and fees')");
8183    $dbh->do("INSERT INTO permissions (module_bit, code, description) VALUES ('10', 'remaining_permissions', 'Remaining permissions for managing fines and fees')");
8184    print "Upgrade to $DBversion done (Bug 9448 - Add separate permission for writing off fees)\n";
8185    SetVersion ($DBversion);
8186 }
8187
8188 $DBversion = "3.15.00.032";
8189 if ( CheckVersion($DBversion) ) {
8190     $dbh->do("ALTER TABLE aqorders CHANGE notes order_internalnote MEDIUMTEXT;");
8191     $dbh->do("ALTER TABLE aqorders ADD COLUMN order_vendornote MEDIUMTEXT AFTER order_internalnote;");
8192     print "Upgrade to $DBversion done (Bug 9416 - In each order, add a new note made for the vendor)\n";
8193    SetVersion ($DBversion);
8194 }
8195
8196 $DBversion = "3.15.00.033";
8197 if ( CheckVersion($DBversion) ) {
8198     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES ('NoLoginInstructions', '', '60|10', 'Instructions to display on the OPAC login form when a patron is not logged in', 'Textarea')");
8199     print "Upgrade to $DBversion done (Bug 10951: Add NoLoginInstructions pref)\n";
8200     SetVersion($DBversion);
8201 }
8202
8203 $DBversion = "3.15.00.034";
8204 if ( CheckVersion($DBversion) ) {
8205     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES('AdvancedSearchLanguages','','','ISO 639-2 codes of languages you wish to see appear as an advanced search option.  Example: eng|fra|ita','Textarea')");
8206     print "Upgrade to $DBversion done (Bug 10986: system preferences to limit languages in advanced search )\n";
8207     SetVersion ($DBversion);
8208 }
8209
8210 $DBversion = "3.15.00.035";
8211 if ( CheckVersion($DBversion) ) {
8212     #insert a notice for sharing a list and accepting a share
8213     $dbh->do("
8214 INSERT INTO letter (module, code, branchcode, name, is_html, title, content)
8215 VALUES ( 'members', 'SHARE_INVITE', '', 'Invitation for sharing a list', '0', 'Share list <<listname>>', 'Dear patron,
8216
8217 One of our patrons, <<borrowers.firstname>> <<borrowers.surname>>, invites you to share a list <<listname>> in our library catalog.
8218
8219 To access this shared list, please click on the following URL or copy-and-paste it into your browser address bar.
8220
8221 <<shareurl>>
8222
8223 In case you are not a patron in our library or do not want to accept this invitation, please ignore this mail. Note also that this invitation expires within two weeks.
8224
8225 Thank you.
8226
8227 Your library.'
8228     )");
8229     $dbh->do("
8230 INSERT INTO letter (module, code, branchcode, name, is_html, title, content)
8231 VALUES ( 'members', 'SHARE_ACCEPT', '', 'Notification about an accepted share', '0', 'Share on list <<listname>> accepted', 'Dear patron,
8232
8233 We want to inform you that <<borrowers.firstname>> <<borrowers.surname>> accepted your invitation to share your list <<listname>> in our library catalog.
8234
8235 Thank you.
8236
8237 Your library.'
8238     )");
8239     print "Upgrade to $DBversion done (Bug 9032: Share a list)\n";
8240     SetVersion($DBversion);
8241 }
8242
8243 $DBversion = "3.15.00.036";
8244 if ( CheckVersion($DBversion) ) {
8245     $dbh->do(q{
8246         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
8247         VALUES('AllowMultipleIssuesOnABiblio',1,'Allow/Don\'t allow patrons to check out multiple items from one biblio','','YesNo')
8248     });
8249
8250     print "Upgrade to $DBversion done (Bug 10859 - Add system preference AllowMultipleIssuesOnABiblio)\n";
8251     SetVersion($DBversion);
8252 }
8253
8254 $DBversion = "3.15.00.037";
8255 if(CheckVersion($DBversion)) {
8256     $dbh->do(q{
8257         ALTER TABLE itemtypes ADD sip_media_type VARCHAR( 3 ) DEFAULT NULL AFTER checkinmsgtype
8258     });
8259     $dbh->do(q{
8260         INSERT INTO authorised_values (category, authorised_value, lib) VALUES
8261          ('SIP_MEDIA_TYPE', '000', 'Other'),
8262          ('SIP_MEDIA_TYPE', '001', 'Book'),
8263          ('SIP_MEDIA_TYPE', '002', 'Magazine'),
8264          ('SIP_MEDIA_TYPE', '003', 'Bound journal'),
8265          ('SIP_MEDIA_TYPE', '004', 'Audio tape'),
8266          ('SIP_MEDIA_TYPE', '005', 'Video tape'),
8267          ('SIP_MEDIA_TYPE', '006', 'CD/CDROM'),
8268          ('SIP_MEDIA_TYPE', '007', 'Diskette'),
8269          ('SIP_MEDIA_TYPE', '008', 'Book with diskette'),
8270          ('SIP_MEDIA_TYPE', '009', 'Book with CD'),
8271          ('SIP_MEDIA_TYPE', '010', 'Book with audio tape')
8272     });
8273     print "Upgrade to $DBversion done (Bug 11351 - Add support for SIP2 media type)\n";
8274     SetVersion($DBversion);
8275 }
8276
8277 $DBversion = '3.15.00.038';
8278 if ( CheckVersion($DBversion) ) {
8279     $dbh->do(q{
8280         INSERT INTO  systempreferences (
8281             variable,
8282             value,
8283             options,
8284             explanation,
8285             type
8286             )
8287         VALUES (
8288             'DisplayLibraryFacets',  'holding',  'home|holding|both',  'Defines which library facets to display.',  'Choice'
8289         );
8290     });
8291     print "Upgrade to $DBversion done (Bug 11334 - Add facet for home library)\n";
8292     SetVersion ($DBversion);
8293 }
8294
8295 $DBversion = "3.15.00.039";
8296 if ( CheckVersion($DBversion) ) {
8297
8298     $dbh->do( q{
8299         ALTER TABLE letter ADD COLUMN message_transport_type VARCHAR(20) NOT NULL DEFAULT 'email' AFTER content
8300     } );
8301
8302     $dbh->do( q{
8303         ALTER TABLE letter ADD CONSTRAINT message_transport_type_fk FOREIGN KEY (message_transport_type) REFERENCES message_transport_types(message_transport_type);
8304     } );
8305
8306     $dbh->do( q{
8307         ALTER TABLE letter DROP PRIMARY KEY, ADD PRIMARY KEY (`module`,`code`,`branchcode`, message_transport_type);
8308     } );
8309
8310     $dbh->do( q{
8311         CREATE TABLE overduerules_transport_types(
8312             id INT(11) NOT NULL AUTO_INCREMENT,
8313             branchcode varchar(10) NOT NULL DEFAULT '',
8314             categorycode VARCHAR(10) NOT NULL DEFAULT '',
8315             letternumber INT(1) NOT NULL DEFAULT 1,
8316             message_transport_type VARCHAR(20) NOT NULL DEFAULT 'email',
8317             PRIMARY KEY (id),
8318             CONSTRAINT overduerules_fk FOREIGN KEY (branchcode, categorycode) REFERENCES overduerules (branchcode, categorycode) ON DELETE CASCADE ON UPDATE CASCADE,
8319             CONSTRAINT mtt_fk FOREIGN KEY (message_transport_type) REFERENCES message_transport_types (message_transport_type) ON DELETE CASCADE ON UPDATE CASCADE
8320         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
8321     } );
8322
8323     my $sth = $dbh->prepare( q{
8324         SELECT * FROM overduerules;
8325     } );
8326
8327     $sth->execute;
8328     my $sth_insert_mtt = $dbh->prepare( q{
8329         INSERT INTO overduerules_transport_types (branchcode, categorycode, letternumber, message_transport_type) VALUES ( ?, ?, ?, ? )
8330     } );
8331     while ( my $row = $sth->fetchrow_hashref ) {
8332         my $branchcode = $row->{branchcode};
8333         my $categorycode = $row->{categorycode};
8334         for my $letternumber ( 1 .. 3 ) {
8335             next unless $row->{"letter$letternumber"};
8336             $sth_insert_mtt->execute(
8337                 $branchcode, $categorycode, $letternumber, 'email'
8338             );
8339         }
8340     }
8341
8342     print "Upgrade done (Bug 9016: Adds multi transport types management for notices)\n";
8343     SetVersion($DBversion);
8344 }
8345
8346 $DBversion = "3.15.00.040";
8347 if ( CheckVersion($DBversion) ) {
8348     $dbh->do(q|
8349         UPDATE message_transports SET letter_code='HOLD' WHERE letter_code='HOLD_PHONE' OR letter_code='HOLD_PRINT'
8350     |);
8351     $dbh->do(q|
8352         UPDATE letter SET code='HOLD', message_transport_type='print' WHERE code='HOLD_PRINT'
8353     |);
8354     $dbh->do(q|
8355         UPDATE letter SET code='HOLD', message_transport_type='phone' WHERE code='HOLD_PHONE'
8356     |);
8357     print "Upgrade to $DBversion done (Bug 10845: Multi transport types for holds)\n";
8358     SetVersion($DBversion);
8359 }
8360
8361 $DBversion = "3.15.00.041";
8362 if ( CheckVersion($DBversion) ) {
8363     my ( $name ) = $dbh->selectrow_array(q|
8364         SELECT name FROM letter WHERE code="HOLD"
8365     |);
8366     $dbh->do(q|
8367         UPDATE letter
8368         SET code="HOLD",
8369             message_transport_type="phone",
8370             name= ?
8371         WHERE code="HOLD_PHONE"
8372     |, {}, $name);
8373
8374     ( $name ) = $dbh->selectrow_array(q|
8375         SELECT name FROM letter WHERE code="PREDUE"
8376     |);
8377     $dbh->do(q|
8378         UPDATE letter
8379         SET code="PREDUE",
8380             message_transport_type="phone",
8381             name= ?
8382         WHERE code="PREDUE_PHONE"
8383     |, {}, $name);
8384
8385     ( $name ) = $dbh->selectrow_array(q|
8386         SELECT name FROM letter WHERE code="OVERDUE"
8387     |);
8388     $dbh->do(q|
8389         UPDATE letter
8390         SET code="OVERDUE",
8391             message_transport_type="phone",
8392             name= ?
8393         WHERE code="OVERDUE_PHONE"
8394     |, {}, $name);
8395
8396     print "Upgrade to $DBversion done (Bug 11867: Update letters *_PHONE)\n";
8397     SetVersion($DBversion);
8398 }
8399
8400 $DBversion = "3.15.00.042";
8401 if ( CheckVersion($DBversion) ) {
8402     $dbh->do(q{
8403         INSERT INTO systempreferences
8404             (variable,value,explanation,options,type)
8405         VALUES
8406             ('SpecifyReturnDate',0,'Define whether to display \"Specify Return Date\" form in Circulation','','YesNo')
8407     });
8408     print "Upgrade to $DBversion done (Bug 10694 - Allow arbitrary backdating of returns)\n";
8409     SetVersion($DBversion);
8410 }
8411
8412 $DBversion = "3.15.00.043";
8413 if ( CheckVersion($DBversion) ) {
8414     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('MarcFieldsToOrder','','Set the mapping values for a new order line created from a MARC record in a staged file. In a YAML format.', NULL, 'textarea')");
8415    print "Upgrade to $DBversion done (Bug 7180: Added MarcFieldsToOrder syspref)\n";
8416    SetVersion ($DBversion);
8417 }
8418
8419 $DBversion = "3.15.00.044";
8420 if ( CheckVersion($DBversion) ) {
8421     $dbh->do("ALTER TABLE currency ADD isocode VARCHAR(5) default NULL AFTER symbol;");
8422     print "Upgrade to $DBversion done (Added isocode to the currency table)\n";
8423     SetVersion($DBversion);
8424 }
8425
8426 $DBversion = "3.15.00.045";
8427 if ( CheckVersion($DBversion) ) {
8428     $dbh->do("
8429         INSERT INTO systempreferences (variable,value,explanation,options,type)
8430         VALUES (
8431             'BlockExpiredPatronOpacActions',
8432             '0',
8433             'Set whether an expired patron can perform opac actions such as placing holds or renew books, can be overridden on a per patron-type basis',
8434             NULL,
8435             'YesNo'
8436         )
8437     ");
8438     $dbh->do("ALTER TABLE `categories` ADD COLUMN `BlockExpiredPatronOpacActions` TINYINT(1) DEFAULT -1 NOT NULL AFTER category_type");
8439     print "Upgraded to $DBversion done (Bug 6739 - expired patrons not blocked from opac actions)\n";
8440     SetVersion ($DBversion);
8441 }
8442
8443 $DBversion = "3.15.00.046";
8444 if ( CheckVersion($DBversion) ) {
8445     $dbh->do(q|
8446         ALTER TABLE search_history ADD COLUMN type VARCHAR(16) NOT NULL DEFAULT 'biblio' AFTER query_cgi
8447     |);
8448     print "Upgrade to $DBversion done (Bug 10807 - Add db field search_history.type)\n";
8449     SetVersion($DBversion);
8450 }
8451
8452 $DBversion = "3.15.00.047";
8453 if ( CheckVersion($DBversion) ) {
8454     $dbh->do(q|
8455         INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES ('EnableSearchHistory','0','','Enable or disable search history','YesNo')
8456     |);
8457     print "Upgrade to $DBversion done (Bug 10862: Add EnableSearchHistory syspref)\n";
8458     SetVersion($DBversion);
8459 }
8460
8461 $DBversion = "3.15.00.048";
8462 if ( CheckVersion($DBversion) ) {
8463     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('OpacSuppressionRedirect','1','Redirect the opac detail page for suppressed records to an explanatory page (otherwise redirect to 404 error page)','','YesNo')");
8464     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('OpacSuppressionMessage', '','Display this message on the redirect page for suppressed biblios','70|10','Textarea')");
8465     print "Upgrade to $DBversion done (Bug 10195: Records hidden with OpacSuppression can still be accessed)\n";
8466     SetVersion($DBversion);
8467 }
8468
8469 $DBversion = "3.15.00.049";
8470 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
8471     $dbh->do("ALTER TABLE biblioitems DROP INDEX isbn");
8472     $dbh->do("ALTER TABLE biblioitems DROP INDEX issn");
8473     $dbh->do("ALTER TABLE biblioitems DROP INDEX issn_idx");
8474     $dbh->do("ALTER TABLE biblioitems
8475               CHANGE isbn isbn MEDIUMTEXT NULL DEFAULT NULL,
8476               CHANGE issn issn MEDIUMTEXT NULL DEFAULT NULL
8477     ");
8478     $dbh->do("ALTER TABLE biblioitems
8479               ADD INDEX isbn ( isbn ( 255 ) ),
8480               ADD INDEX issn ( issn ( 255 ) )
8481     ");
8482
8483     $dbh->do("ALTER TABLE deletedbiblioitems DROP INDEX isbn");
8484     $dbh->do("ALTER TABLE deletedbiblioitems
8485               CHANGE isbn isbn MEDIUMTEXT NULL DEFAULT NULL,
8486               CHANGE issn issn MEDIUMTEXT NULL DEFAULT NULL
8487     ");
8488     $dbh->do("ALTER TABLE deletedbiblioitems
8489               ADD INDEX isbn ( isbn ( 255 ) )
8490     ");
8491
8492     print "Upgrade to $DBversion done (Bug 5377 - Biblioitems isbn and issn fields too small for multiple ISBN and ISSN)\n";
8493     SetVersion($DBversion);
8494 }
8495
8496 $DBversion = "3.15.00.050";
8497 if ( CheckVersion($DBversion) ) {
8498     $dbh->do("
8499         INSERT INTO systempreferences (
8500             variable,
8501             value,
8502             explanation,
8503             type
8504         ) VALUES (
8505             'AggressiveMatchOnISBN',
8506             '0',
8507             'If enabled, attempt to match aggressively by trying all variations of the ISBNs in the imported record as a phrase in the ISBN fields of already cataloged records when matching on ISBN with the record import tool',
8508             'YesNo'
8509         )
8510     ");
8511
8512     print "Upgrade to $DBversion done (Bug 10500 - Improve isbn matching when importing records)\n";
8513     SetVersion($DBversion);
8514 }
8515
8516 $DBversion = "3.15.00.051";
8517 if ( CheckVersion($DBversion) ) {
8518     print "Upgrade to $DBversion done (Koha 3.16 beta)\n";
8519     SetVersion($DBversion);
8520 }
8521
8522 $DBversion = "3.15.00.052";
8523 if ( CheckVersion($DBversion) ) {
8524     print "Upgrade to $DBversion done (Koha 3.16 RC)\n";
8525     SetVersion($DBversion);
8526 }
8527
8528 $DBversion = "3.16.00.000";
8529 if ( CheckVersion($DBversion) ) {
8530     print "Upgrade to $DBversion done (3.16.0 release)\n";
8531     SetVersion ($DBversion);
8532 }
8533
8534 $DBversion = '3.17.00.000';
8535 if ( CheckVersion($DBversion) ) {
8536     print "Upgrade to $DBversion done (there is no time to rest on our laurels)\n";
8537     SetVersion ($DBversion);
8538 }
8539
8540 $DBversion = '3.17.00.001';
8541 if ( CheckVersion($DBversion) ) {
8542    $dbh->do("UPDATE systempreferences SET variable = 'AuthoritySeparator' WHERE variable = 'authoritysep'");
8543    print "Upgrade to $DBversion done (Bug 10330 - Rename system preference authoritysep to AuthoritySeparator)\n";
8544    SetVersion ($DBversion);
8545 }
8546
8547 $DBversion = "3.17.00.002";
8548 if (CheckVersion($DBversion)) {
8549     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,type) VALUES('AcqEnableFiles','0','If enabled, allows librarians to upload and attach arbitrary files to invoice records.','YesNo')");
8550     $dbh->do("
8551 CREATE TABLE IF NOT EXISTS `misc_files` (
8552   `file_id` int(11) NOT NULL AUTO_INCREMENT,
8553   `table_tag` varchar(255) NOT NULL,
8554   `record_id` int(11) NOT NULL,
8555   `file_name` varchar(255) NOT NULL,
8556   `file_type` varchar(255) NOT NULL,
8557   `file_description` varchar(255) DEFAULT NULL,
8558   `file_content` longblob NOT NULL, -- file content
8559   `date_uploaded` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP,
8560   PRIMARY KEY (`file_id`),
8561   KEY `table_tag` (`table_tag`),
8562   KEY `record_id` (`record_id`)
8563 ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
8564     ");
8565     print "Upgrade to $DBversion done (Bug 3050 - Add an option to upload scanned invoices)\n";
8566     SetVersion($DBversion);
8567 }
8568
8569 $DBversion = "3.17.00.003";
8570 if (CheckVersion($DBversion)) {
8571     $dbh->do("UPDATE systempreferences SET type = 'Choice', options = '0|1|force' WHERE variable = 'OPACItemHolds'");
8572     print "Upgrade to $DBversion done (Bug 7825 - Changed OPACItemHolds syspref to Choice)\n";
8573     SetVersion($DBversion);
8574 }
8575
8576 $DBversion = "3.17.00.004";
8577 if (CheckVersion($DBversion)) {
8578     $dbh->do("ALTER TABLE categories ADD default_privacy ENUM( 'default', 'never', 'forever' ) NOT NULL DEFAULT 'default' AFTER category_type");
8579     print "Upgrade to $DBversion done (Bug 6254 - can't set patron privacy by default)\n";
8580     SetVersion($DBversion);
8581 }
8582
8583 $DBversion = "3.17.00.005";
8584 if (CheckVersion($DBversion)) {
8585     $dbh->do(q|
8586         ALTER TABLE issuingrules
8587         ADD maxsuspensiondays INT(11) DEFAULT NULL AFTER finedays;
8588     |);
8589     print "Upgrade to $DBversion done (Bug 12230: Add new issuing rule maxsuspensiondays)\n";
8590     SetVersion($DBversion);
8591 }
8592
8593 $DBversion = "3.17.00.006";
8594 if ( CheckVersion($DBversion) ) {
8595     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('OpacLocationBranchToDisplay',  'holding',  'holding|home|both',  'In the OPAC, under location show which branch for Location in the record details.',  'Choice')");
8596     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('OpacLocationBranchToDisplayShelving',  'holding',  'holding|home|both',  'In the OPAC, display the shelving location under which which column',  'Choice')");
8597     print "Upgrade to $DBversion done (Bug 7720 - Ambiguity in OPAC Details location.)\n";
8598     SetVersion($DBversion);
8599 }
8600
8601 $DBversion = "3.17.00.007";
8602 if (CheckVersion($DBversion)) {
8603     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES('UpdateNotForLoanStatusOnCheckin', '', 'NULL', 'This is a list of value pairs. When an item is checked in, if the not for loan value on the left matches the items not for loan value it will be updated to the right-hand value. E.g. ''-1: 0'' will cause an item that was set to ''Ordered'' to now be available for loan. Each pair of values should be on a separate line.', 'Free');");
8604     print "Upgrade to $DBversion done (Bug 11629 - Add ability to update not for loan status on checkin)\n";
8605     SetVersion($DBversion);
8606 }
8607
8608 $DBversion = "3.17.00.008";
8609 if ( CheckVersion($DBversion) ) {
8610     $dbh->do(q|
8611         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES('OPACAcquisitionDetails','0', '','Show the acquisition details at the OPAC','YesNo')
8612     |);
8613     print "Upgrade to $DBversion done (Bug 11169 - Add OPACAcquisitionDetails syspref)\n";
8614     SetVersion($DBversion);
8615 }
8616
8617 $DBversion = "3.17.00.009";
8618 if ( CheckVersion($DBversion) ) {
8619     $dbh->do(q{
8620         DELETE FROM systempreferences WHERE variable = 'UseTablesortForCirc'
8621     });
8622
8623     print "Upgrade to $DBversion done (Bug 11703 - Remove UseTablesortForCirc syspref)\n";
8624     SetVersion($DBversion);
8625 }
8626
8627 $DBversion = "3.17.00.010";
8628 if ( CheckVersion($DBversion) ) {
8629     $dbh->do("DELETE FROM systempreferences WHERE variable='opacsmallimage'");
8630     print "Upgrade to $DBversion done (Bug 11347 - PROG/CCSR deprecation: Remove opacsmallimage system preference)\n";
8631     SetVersion($DBversion);
8632 }
8633
8634 $DBversion = "3.17.00.011";
8635 if ( CheckVersion($DBversion) ) {
8636     $dbh->do("INSERT INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'hr', 'language', 'Croatian','2014-07-24' )");
8637     $dbh->do("INSERT INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES( 'hr','hrv')");
8638     $dbh->do("INSERT INTO language_descriptions(subtag, type, lang, description) VALUES( 'hr', 'language', 'hr', 'Hrvatski')");
8639     $dbh->do("INSERT INTO language_descriptions(subtag, type, lang, description) VALUES( 'hr', 'language', 'en', 'Croatian')");
8640     $dbh->do("INSERT INTO language_descriptions(subtag, type, lang, description) VALUES( 'hr', 'language', 'fr', 'Croate')");
8641     $dbh->do("INSERT INTO language_descriptions(subtag, type, lang, description) VALUES( 'hr', 'language', 'de', 'Kroatisch')");
8642     print "Upgrade to $DBversion done (Bug 12649: Add Croatian language)\n";
8643     SetVersion ($DBversion);
8644 }
8645
8646 $DBversion = "3.17.00.012";
8647 if ( CheckVersion($DBversion) ) {
8648     $dbh->do("DELETE FROM systempreferences WHERE variable='OpacShowFiltersPulldownMobile'");
8649     print "Upgrade to $DBversion done ( Bug 12512 - PROG/CCSR deprecation: Remove OpacShowFiltersPulldownMobile system preference )\n";
8650     SetVersion ($DBversion);
8651 }
8652
8653 $DBversion = "3.17.00.013";
8654 if ( CheckVersion($DBversion) ) {
8655     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('maxreserves',50,'System-wide maximum number of holds a patron can place','','Integer')");
8656     print "Upgrade to $DBversion done (Re-add system preference maxreserves)\n";
8657     SetVersion ($DBversion);
8658 }
8659
8660 $DBversion = '3.17.00.014';
8661 if ( CheckVersion($DBversion) ) {
8662     $dbh->do("
8663         INSERT INTO systempreferences (variable,value,explanation,type) VALUES
8664         ('OverdueNoticeCalendar',0,'Take calendar into consideration when working out sending overdue notices','YesNo')
8665     ");
8666     print "Upgrade to $DBversion done (Bug 12529 - Adding a syspref to allow the overdue notices to consider the calendar when generating notices)\n";
8667     SetVersion($DBversion);
8668 }
8669
8670 $DBversion = "3.17.00.015";
8671 if ( CheckVersion($DBversion) ) {
8672     $dbh->do(q{
8673         CREATE TABLE IF NOT EXISTS columns_settings (
8674             module varchar(255) NOT NULL,
8675             page varchar(255) NOT NULL,
8676             tablename varchar(255) NOT NULL,
8677             columnname varchar(255) NOT NULL,
8678             cannot_be_toggled int(1) NOT NULL DEFAULT 0,
8679             is_hidden int(1) NOT NULL DEFAULT 0,
8680             PRIMARY KEY(module, page, tablename, columnname)
8681         ) ENGINE=InnoDB DEFAULT CHARSET=utf8
8682     });
8683     print "Upgrade to $DBversion done (Bug 10212 - Create new table columns_settings)\n";
8684     SetVersion ($DBversion);
8685 }
8686
8687 $DBversion = "3.17.00.016";
8688 if ( CheckVersion($DBversion) ) {
8689     $dbh->do("CREATE TABLE aqcontacts (
8690         id int(11) NOT NULL auto_increment,
8691         name varchar(100) default NULL,
8692         position varchar(100) default NULL,
8693         phone varchar(100) default NULL,
8694         altphone varchar(100) default NULL,
8695         fax varchar(100) default NULL,
8696         email varchar(100) default NULL,
8697         notes mediumtext,
8698         claimacquisition BOOLEAN NOT NULL DEFAULT 0,
8699         claimissues BOOLEAN NOT NULL DEFAULT 0,
8700         acqprimary BOOLEAN NOT NULL DEFAULT 0,
8701         serialsprimary BOOLEAN NOT NULL DEFAULT 0,
8702         booksellerid int(11) not NULL,
8703         PRIMARY KEY  (id),
8704         CONSTRAINT booksellerid_aqcontacts_fk FOREIGN KEY (booksellerid)
8705             REFERENCES aqbooksellers (id) ON DELETE CASCADE ON UPDATE CASCADE
8706         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 AUTO_INCREMENT=1;");
8707     $dbh->do("INSERT INTO aqcontacts (name, position, phone, altphone, fax,
8708             email, notes, booksellerid, claimacquisition, claimissues, acqprimary, serialsprimary)
8709         SELECT contact, contpos, contphone, contaltphone, contfax, contemail,
8710             contnotes, id, 1, 1, 1, 1 FROM aqbooksellers;");
8711     $dbh->do("ALTER TABLE aqbooksellers DROP COLUMN contact,
8712         DROP COLUMN contpos, DROP COLUMN contphone,
8713         DROP COLUMN contaltphone, DROP COLUMN contfax,
8714         DROP COLUMN contemail, DROP COLUMN contnotes;");
8715     $dbh->do("UPDATE letter SET content = replace(content, '<<aqbooksellers.contact>>', '<<aqcontacts.name>>')");
8716     $dbh->do("UPDATE letter SET content = replace(content, '<<aqbooksellers.contpos>>', '<<aqcontacts.position>>')");
8717     $dbh->do("UPDATE letter SET content = replace(content, '<<aqbooksellers.contphone>>', '<<aqcontacts.phone>>')");
8718     $dbh->do("UPDATE letter SET content = replace(content, '<<aqbooksellers.contaltphone>>', '<<aqcontacts.altphone>>')");
8719     $dbh->do("UPDATE letter SET content = replace(content, '<<aqbooksellers.contfax>>', '<<aqcontacts.contfax>>')");
8720     $dbh->do("UPDATE letter SET content = replace(content, '<<aqbooksellers.contemail>>', '<<aqcontacts.contemail>>')");
8721     $dbh->do("UPDATE letter SET content = replace(content, '<<aqbooksellers.contnotes>>', '<<aqcontacts.contnotes>>')");
8722     print "Upgrade to $DBversion done (Bug 10402: Move bookseller contacts to separate table)\n";
8723     SetVersion($DBversion);
8724 }
8725
8726 $DBversion = "3.17.00.017";
8727 if ( CheckVersion($DBversion) ) {
8728     # Correct invalid recordtypes (should be very exceptional)
8729     $dbh->do(q{
8730         UPDATE z3950servers set recordtype='biblio' WHERE recordtype NOT IN ('authority','biblio')
8731     });
8732     # Correct invalid server types (should also be very exceptional)
8733     $dbh->do(q{
8734         UPDATE z3950servers set type='zed' WHERE type <> 'zed'
8735     });
8736     # Adjust table
8737     $dbh->do(q{
8738         ALTER TABLE z3950servers
8739         DROP COLUMN icon,
8740         DROP COLUMN description,
8741         DROP COLUMN position,
8742         MODIFY COLUMN id int NOT NULL AUTO_INCREMENT FIRST,
8743         MODIFY COLUMN recordtype enum('authority','biblio') NOT NULL DEFAULT 'biblio',
8744         CHANGE COLUMN name servername mediumtext NOT NULL,
8745         CHANGE COLUMN type servertype enum('zed','sru') NOT NULL DEFAULT 'zed',
8746         ADD COLUMN sru_options varchar(255) default NULL,
8747         ADD COLUMN sru_fields mediumtext default NULL,
8748         ADD COLUMN add_xslt mediumtext default NULL
8749     });
8750     print "Upgrade to $DBversion done (Bug 6536: Z3950 improvements)\n";
8751     SetVersion ($DBversion);
8752 }
8753
8754 $DBversion = "3.17.00.018";
8755 if ( CheckVersion($DBversion) ) {
8756     $dbh->do("INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('HoldsInNoissuesCharge', '0', 'Hold charges block checkouts (added to noissuescharge).',NULL,'YesNo');");
8757     print "Upgrade to $DBversion done (Bug 12205: Add HoldsInNoissuesCharge systempreference)\n";
8758     SetVersion($DBversion);
8759 }
8760
8761 $DBversion = "3.17.00.019";
8762 if ( CheckVersion($DBversion) ) {
8763     $dbh->do("INSERT INTO `systempreferences` (variable,value,explanation,options,type) VALUES('NotHighlightedWords','and|or|not',NULL,'List of words to NOT highlight when OpacHighlightedWords is enabled','free')"
8764     );
8765     print "Upgrade to $DBversion done (Bug 6149: Operator highlighted in search results)\n";
8766     SetVersion($DBversion);
8767 }
8768
8769 $DBversion = "3.17.00.020";
8770 if(C4::Context->preference("Version") < TransformToNum($DBversion) ) {
8771     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('ExpireReservesOnHolidays', '1', NULL, 'If false, reserves at a library will not be canceled on days the library is not open.', 'YesNo')");
8772     print "Upgrade to $DBversion done (Bug 8735 - Expire holds waiting only on days the library is open)\n";
8773     SetVersion ($DBversion);
8774 }
8775
8776 $DBversion = "3.17.00.021";
8777 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
8778     my $pref = C4::Context->preference('HomeOrHoldingBranch');
8779     $dbh->do("INSERT INTO `systempreferences` (variable,value,options,explanation,type)
8780        VALUES ('StaffSearchResultsDisplayBranch', ?,'homebranch|holdingbranch','Controls the display of the home or holding branch for staff search results','choice')", undef, $pref);
8781     print "Upgrade to $DBversion done (Bug 12582 - Control of branch displayed in search results linked to HomeOrHoldingBranch)\n";
8782     SetVersion ($DBversion);
8783 }
8784
8785 $DBversion = '3.17.00.022';
8786 if ( CheckVersion($DBversion) ) {
8787     my @temp= $dbh->selectrow_array(qq|
8788         SELECT count(*)
8789         FROM marc_subfield_structure
8790         WHERE kohafield='permanent_location' OR kohafield='items.permanent_location'
8791     |);
8792     print "Upgrade to $DBversion done (Bug 7817: Check for permanent_location)\n";
8793     if( $temp[0] ) {
8794         print "WARNING for Koha administrator: Your database contains one or more mappings for permanent_location to the MARC structure. This item field however is for internal use and should not be linked to a MARC (sub)field. Please correct it. See also Bugzilla reports 7817 and 12818.\n";
8795     }
8796     SetVersion($DBversion);
8797 }
8798
8799 $DBversion = "3.17.00.023";
8800 if ( CheckVersion($DBversion) ) {
8801     $dbh->do(q{
8802         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES('AcqItemSetSubfieldsWhenReceiptIsCancelled','', '','Upon cancelling a receipt, update the items subfields if they were created when placing an order (e.g. o=5|a="bar foo")', 'Free')
8803     });
8804     print "Upgrade to $DBversion done (Bug 11169 - Add AcqItemSetSubfieldsWhenReceiptIsCancelled syspref)\n";
8805     SetVersion($DBversion);
8806 }
8807
8808 $DBversion = "3.17.00.024";
8809 if(CheckVersion($DBversion)) {
8810     $dbh->do(q{
8811         ALTER TABLE issues ADD auto_renew BOOLEAN default FALSE AFTER renewals
8812     });
8813     $dbh->do(q{
8814         ALTER TABLE old_issues ADD auto_renew BOOLEAN default FALSE AFTER renewals
8815     });
8816     $dbh->do(q{
8817         ALTER TABLE issuingrules ADD auto_renew BOOLEAN default FALSE AFTER norenewalbefore
8818     });
8819     print "Upgrade to $DBversion done (Bug 11577: [ENH] Automatic renewal feature)\n";
8820     SetVersion($DBversion);
8821 }
8822
8823 $DBversion = '3.17.00.025';
8824 if ( CheckVersion($DBversion) ) {
8825     $dbh->do(qq{
8826         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('StatisticsFields','location|itype|ccode','Define fields (from the items table) used for statistics members',NULL,'Free')
8827     });
8828     print "Upgrade to $DBversion done (Bug 12728: Checked syspref StatisticsFields)\n";
8829 }
8830
8831 $DBversion = "3.17.00.026";
8832 if ( CheckVersion($DBversion) ) {
8833     if ( C4::Context->preference('marcflavour') eq 'MARC21' ) {
8834         $dbh->do("UPDATE marc_subfield_structure SET liblibrarian = 'Encoded bitrate', libopac = 'Encoded bitrate' WHERE tagfield = '347' AND tagsubfield = 'f'");
8835         $dbh->do("UPDATE marc_subfield_structure SET repeatable = 1 WHERE tagfield IN ('110','111','610','611','710','711','810','811') AND tagsubfield = 'c'");
8836         $dbh->do("UPDATE auth_subfield_structure SET repeatable = 1 WHERE tagfield IN ('110','111','410','411','510','511','710','711') AND tagsubfield = 'c'");
8837         print "Upgrade to $DBversion done (Bug 12435 - Update MARC21 frameworks to Update No. 18 (April 2014))\n";
8838     }
8839     SetVersion($DBversion);
8840 }
8841
8842 $DBversion = "3.17.00.027";
8843 if ( CheckVersion($DBversion) ) {
8844     $dbh->do(q{
8845         DELETE FROM systempreferences WHERE variable = 'SearchEngine'
8846     });
8847     print "Upgrade to $DBversion done (Bug 12538 - Remove SearchEngine syspref)\n";
8848     SetVersion($DBversion);
8849 }
8850
8851 $DBversion = "3.17.00.028";
8852 if ( CheckVersion($DBversion) ) {
8853     $dbh->do(q{
8854         INSERT INTO systempreferences (variable,value) VALUES('OpacCustomSearch','');
8855     });
8856     print "Upgrade to $DBversion done (Bug 12296 - search box replaceable with a system preference)\n";
8857     SetVersion($DBversion);
8858 }
8859
8860 $DBversion = "3.17.00.029";
8861 if ( CheckVersion($DBversion) ) {
8862     $dbh->do("ALTER TABLE  `items` CHANGE  `cn_sort`  `cn_sort` VARCHAR( 255 ) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL");
8863     $dbh->do("ALTER TABLE  `deleteditems` CHANGE  `cn_sort`  `cn_sort` VARCHAR( 255 ) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL");
8864     $dbh->do("ALTER TABLE  `biblioitems` CHANGE  `cn_sort`  `cn_sort` VARCHAR( 255 ) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL");
8865     $dbh->do("ALTER TABLE  `deletedbiblioitems` CHANGE  `cn_sort`  `cn_sort` VARCHAR( 255 ) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL");
8866     print "Upgrade to $DBversion done (Bug 12424 - ddc sorting of call numbers truncates long Cutter parts)\n";
8867     SetVersion ($DBversion);
8868 }
8869
8870 $DBversion = "3.17.00.030";
8871 if ( CheckVersion($DBversion) ) {
8872     $dbh->do(
8873         q{
8874        INSERT INTO systempreferences (variable, value, options, explanation, type )
8875        VALUES
8876         ('UsageStatsCountry', '', NULL, 'The country where your library is located, to be shown on the Hea Koha community website', 'YesNo'),
8877         ('UsageStatsID', '', NULL, 'This preference is part of Koha but it should not be deleted or updated manually.',  'Free'),
8878         ('UsageStatsLastUpdateTime', '', NULL, 'This preference is part of Koha but it should not be deleted or updated manually.', 'Free'),
8879         ('UsageStatsLibraryName', '', NULL, 'The library name to be shown on Hea Koha community website', 'Free'),
8880         ('UsageStatsLibraryType', 'public', 'public|university', 'The library type to be shown on the Hea Koha community website', 'Choice'),
8881         ('UsageStatsLibraryUrl', '', NULL, 'The library URL to be shown on Hea Koha community website', 'Free'),
8882         ('UsageStats', 0, NULL, 'Share anonymous usage data on the Hea Koha community website.', 'YesNo')
8883     });
8884     print "Upgrade to $DBversion done (Bug 11926: Add UsageStats systempreferences (HEA))\n";
8885     SetVersion ($DBversion);
8886 }
8887
8888 $DBversion = "3.17.00.031";
8889 if ( CheckVersion($DBversion) ) {
8890    $dbh->do("ALTER TABLE saved_sql CHANGE report_name report_name VARCHAR( 255 ) NOT NULL DEFAULT '' ");
8891    print "Upgrade to $DBversion done (Bug 2969: Report Name should be mandatory for saved reports)\n";
8892    SetVersion ($DBversion);
8893 }
8894
8895 $DBversion = "3.17.00.032";
8896 if ( CheckVersion($DBversion) ) {
8897     $dbh->do(
8898 "INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('ReplytoDefault',  '',  NULL,  'The default email address to be set as replyto.',  'Free')"
8899     );
8900     $dbh->do(
8901 "INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES ('ReturnpathDefault',  '',  NULL,  'The default email address to be set as return-path',  'Free')"
8902     );
8903     $dbh->do("ALTER TABLE branches ADD branchreplyto mediumtext AFTER branchemail");
8904     $dbh->do("ALTER TABLE branches ADD branchreturnpath mediumtext AFTER branchreplyto");
8905     print "Upgrade to $DBversion done (Bug 9530: Adding replyto and returnpath addresses.)\n";
8906     SetVersion($DBversion);
8907 }
8908
8909 $DBversion = "3.17.00.033";
8910 if ( CheckVersion($DBversion) ) {
8911     $dbh->do(q{
8912         INSERT IGNORE INTO systempreferences (variable, value, explanation, options, type)
8913         VALUES('FacetMaxCount', '20','Specify the max facet count for each category',NULL,'Integer')
8914     });
8915     print "Upgrade to $DBversion done (Bug 13088 - Allow the user to specify a max amount of facets to show)\n";
8916     SetVersion($DBversion);
8917 }
8918
8919 $DBversion = "3.17.00.034";
8920 if ( CheckVersion($DBversion) ) {
8921     $dbh->do(q|
8922         ALTER TABLE aqorders DROP COLUMN cancelledby;
8923     |);
8924
8925     print "Upgrade to $DBversion done (Bug 11007 - DROP column aqorders.cancelledby)\n";
8926     SetVersion($DBversion);
8927 }
8928
8929 $DBversion = "3.17.00.035";
8930 if ( CheckVersion($DBversion) ) {
8931     $dbh->do(q|
8932         ALTER TABLE serial ADD COLUMN claims_count INT(11) DEFAULT 0 after claimdate
8933     |);
8934     $dbh->do(q|
8935         UPDATE serial
8936         SET claims_count = 1
8937         WHERE claimdate IS NOT NULL
8938     |);
8939     print "Upgrade to $DBversion done (Bug 5342: Add claims_count field in serial table)\n";
8940     SetVersion($DBversion);
8941 }
8942
8943 $DBversion = "3.17.00.036";
8944 if ( CheckVersion($DBversion) ) {
8945     $dbh->do("DELETE FROM systempreferences WHERE variable='OpacShowLibrariesPulldownMobile'");
8946     print "Upgrade to $DBversion done ( Bug 12513 - PROG/CCSR deprecation: Remove OpacShowLibrariesPulldownMobile system preference )\n";
8947     SetVersion ($DBversion);
8948 }
8949
8950 $DBversion = "3.17.00.037";
8951 if ( CheckVersion($DBversion) ) {
8952     $dbh->do("DELETE FROM systempreferences WHERE variable='OpacMainUserBlockMobile'");
8953     print "Upgrade to $DBversion done ( Bug 12246 - PROG/CCSR deprecation: Remove OpacMainUserBlockMobile system preference )\n";
8954     SetVersion ($DBversion);
8955 }
8956
8957 $DBversion = "3.17.00.038";
8958 if ( CheckVersion($DBversion) ) {
8959     $dbh->do("DELETE FROM systempreferences WHERE variable='OPACMobileUserCSS'");
8960     print "Upgrade to $DBversion done ( Bug 12245 - PROG/CCSR deprecation: Remove OPACMobileUserCSS system preference )\n";
8961     SetVersion ($DBversion);
8962 }
8963
8964 $DBversion = "3.17.00.039";
8965 if ( CheckVersion($DBversion) ) {
8966     $dbh->do("INSERT IGNORE INTO systempreferences (variable, value, options, explanation, type) VALUES
8967     ('OPACFallback', 'prog', 'bootstrap|prog', 'Define the fallback theme for the OPAC interface.', 'Themes')");
8968     print "Upgrade to $DBversion done (Bug 12539 - PROG/CCSR deprecation: Remove hardcoded theme from C4/Templates.pm)\n";
8969     SetVersion ($DBversion);
8970 }
8971
8972 $DBversion = "3.17.00.040";
8973 if ( CheckVersion($DBversion) ) {
8974     my $opac_theme = C4::Context->preference( 'opacthemes' );
8975     if ( !defined $opac_theme || $opac_theme eq 'prog' || $opac_theme eq 'ccsr' ) {
8976         $dbh->do("UPDATE systempreferences SET value='bootstrap' WHERE variable='opacthemes'");
8977     }
8978     print "Upgrade to $DBversion done (Bug 12223: 'prog' and 'ccsr' themes removed)\n";
8979     SetVersion($DBversion);
8980 }
8981
8982 $DBversion = "3.17.00.041";
8983 if ( CheckVersion($DBversion) ) {
8984     print "Upgrade to $DBversion done (Bug 11346: Deprecate the 'prog' and 'CCSR' themes)\n";
8985     SetVersion($DBversion);
8986 }
8987
8988 $DBversion = "3.17.00.042";
8989 if ( CheckVersion($DBversion) ) {
8990     $dbh->do("DELETE FROM systempreferences WHERE variable='yuipath'");
8991     print "Upgrade to $DBversion done (Bug 12494: Remove yuipath system preference)\n";
8992     SetVersion ($DBversion);
8993 }
8994
8995 $DBversion = "3.17.00.043";
8996 if ( CheckVersion($DBversion) ) {
8997     $dbh->do("
8998         ALTER TABLE aqorders
8999         ADD COLUMN cancellationreason TEXT DEFAULT NULL AFTER datecancellationprinted
9000     ");
9001     print "Upgrade to $DBversion done (Bug 7162: Add aqorders.cancellationreason)\n";
9002     SetVersion ($DBversion);
9003 }
9004
9005 $DBversion = "3.17.00.044";
9006 if ( CheckVersion($DBversion) ) {
9007     $dbh->do(q{
9008         INSERT IGNORE INTO systempreferences
9009             (variable,value,explanation,options,type)
9010             VALUES('OnSiteCheckouts','0','Enable/Disable the on-site checkouts feature','','YesNo');
9011     });
9012     $dbh->do(q{
9013         INSERT IGNORE INTO systempreferences
9014             (variable,value,explanation,options,type)
9015             VALUES('OnSiteCheckoutsForce','0','Enable/Disable the on-site for all cases (Even if a user is debarred, etc.)','','YesNo');
9016     });
9017     $dbh->do(q{
9018         ALTER TABLE issues ADD COLUMN onsite_checkout INT(1) NOT NULL DEFAULT 0 AFTER issuedate;
9019     });
9020     $dbh->do(q{
9021         ALTER TABLE old_issues ADD COLUMN onsite_checkout INT(1) NOT NULL DEFAULT 0 AFTER issuedate;
9022     });
9023     print "Upgrade to $DBversion done (Bug 10860: Add new system preference OnSiteCheckouts + fields [old_]issues.onsite_checkout)\n";
9024     SetVersion($DBversion);
9025 }
9026
9027 $DBversion = "3.17.00.045";
9028 if ( CheckVersion($DBversion) ) {
9029     $dbh->do(q{
9030         INSERT INTO systempreferences ( variable, value, options, explanation, type ) VALUES
9031         ('LocalHoldsPriority',  '0', NULL,  'Enables the LocalHoldsPriority feature',  'YesNo'),
9032         ('LocalHoldsPriorityItemControl',  'holdingbranch',  'holdingbranch|homebranch',  'decides if the feature operates using the item''s home or holding library.',  'Choice'),
9033         ('LocalHoldsPriorityPatronControl',  'PickupLibrary',  'HomeLibrary|PickupLibrary',  'decides if the feature operates using the library set as the patron''s home library, or the library set as the pickup library for the given hold.',  'Choice')
9034     });
9035     print "Upgrade to $DBversion done (Bug 11126 - Make the holds system optionally give precedence to local holds)\n";
9036     SetVersion($DBversion);
9037 }
9038
9039 $DBversion = "3.17.00.046";
9040 if ( CheckVersion($DBversion) ) {
9041     $dbh->do(q{
9042         CREATE TABLE IF NOT EXISTS items_search_fields (
9043           name VARCHAR(255) NOT NULL,
9044           label VARCHAR(255) NOT NULL,
9045           tagfield CHAR(3) NOT NULL,
9046           tagsubfield CHAR(1) NULL DEFAULT NULL,
9047           authorised_values_category VARCHAR(16) NULL DEFAULT NULL,
9048           PRIMARY KEY(name),
9049           CONSTRAINT items_search_fields_authorised_values_category
9050             FOREIGN KEY (authorised_values_category) REFERENCES authorised_values (category)
9051             ON DELETE SET NULL ON UPDATE CASCADE
9052         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
9053     });
9054     print "Upgrade to $DBversion done (Bug 11425: Add items_search_fields table)\n";
9055     SetVersion($DBversion);
9056 }
9057
9058 $DBversion = "3.17.00.047";
9059 if ( CheckVersion($DBversion) ) {
9060     $dbh->do(q{
9061         ALTER TABLE collections
9062             CHANGE colBranchcode colBranchcode VARCHAR( 10 ) NULL DEFAULT NULL,
9063             ADD INDEX ( colBranchcode ),
9064             ADD CONSTRAINT collections_ibfk_1 FOREIGN KEY (colBranchcode) REFERENCES branches (branchcode) ON DELETE CASCADE ON UPDATE CASCADE
9065     });
9066     print "Upgrade to $DBversion done (Bug 8836 - Resurrect Rotating Collections)\n";
9067     SetVersion($DBversion);
9068 }
9069
9070 $DBversion = "3.17.00.048";
9071 if ( CheckVersion($DBversion) ) {
9072     $dbh->do(q|
9073         INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES('RentalFeesCheckoutConfirmation', '0', NULL , 'Allow user to confirm when checking out an item with rental fees.', 'YesNo')
9074     |);
9075     print "Upgrade to $DBversion done (Bug 12448 - Add RentalFeesCheckoutConfirmation syspref)\n";
9076     SetVersion($DBversion);
9077 }
9078
9079 $DBversion = "3.17.00.049";
9080 if ( CheckVersion($DBversion) ) {
9081     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'am', 'language', 'Amharic','2014-10-29')");
9082     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'am','amh')");
9083     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'am', 'language', 'am', 'አማርኛ')");
9084     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'am', 'language', 'en', 'Amharic')");
9085
9086     $dbh->do("UPDATE language_descriptions SET description = 'لعربية' WHERE subtag = 'ar' AND type = 'language' AND lang = 'ar'");
9087
9088     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'az', 'language', 'Azerbaijani','2014-10-30')");
9089     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'az','aze')");
9090     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'az', 'language', 'az', 'Azərbaycan dili')");
9091     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'az', 'language', 'en', 'Azerbaijani')");
9092
9093     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'be', 'language', 'Byelorussian','2014-10-30')");
9094     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'be','bel')");
9095     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'be', 'language', 'be', 'Беларуская мова')");
9096     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'be', 'language', 'en', 'Byelorussian')");
9097
9098     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'bn', 'language', 'Bengali','2014-10-30')");
9099     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'bn','ben')");
9100     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'bn', 'language', 'bn', 'বাংলা')");
9101     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'bn', 'language', 'en', 'Bengali')");
9102
9103     $dbh->do("UPDATE language_descriptions SET description = 'Български' WHERE subtag = 'bg' AND type = 'language' AND lang = 'bg'");
9104     $dbh->do("UPDATE language_descriptions SET description = 'Ceština' WHERE subtag = 'cs' AND type = 'language' AND lang = 'cs'");
9105     $dbh->do("UPDATE language_descriptions SET description = 'Ελληνικά' WHERE subtag = 'el' AND type = 'language' AND lang = 'el'");
9106     $dbh->do("UPDATE language_descriptions SET description = 'Español' WHERE subtag = 'es' AND type = 'language' AND lang = 'es'");
9107
9108     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'eu', 'language', 'Basque','2014-10-30')");
9109     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'eu','eus')");
9110     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'eu', 'language', 'eu', 'Euskera')");
9111     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'eu', 'language', 'en', 'Basque')");
9112
9113     $dbh->do("UPDATE language_descriptions SET description = 'فارسى' WHERE subtag = 'fa' AND type = 'language' AND lang = 'fa'");
9114     $dbh->do("UPDATE language_descriptions SET description = 'Suomi' WHERE subtag = 'fi' AND type = 'language' AND lang = 'fi'");
9115
9116     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'fo', 'language', 'Faroese','2014-10-30')");
9117     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'fo','fao')");
9118     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'fo', 'language', 'fo', 'Føroyskt')");
9119     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'fo', 'language', 'en', 'Faroese')");
9120
9121     $dbh->do("UPDATE language_descriptions SET description = 'Français' WHERE subtag = 'fr' AND type = 'language' AND lang = 'fr'");
9122     $dbh->do("UPDATE language_descriptions SET description = 'עִבְרִית' WHERE subtag = 'he' AND type = 'language' AND lang = 'he'");
9123     $dbh->do("UPDATE language_descriptions SET description = 'हिन्दी' WHERE subtag = 'hi' AND type = 'language' AND lang = 'hi'");
9124
9125     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'is', 'language', 'Icelandic','2014-10-30')");
9126     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'is','ice')");
9127     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'is', 'language', 'is', 'Íslenska')");
9128     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'is', 'language', 'en', 'Icelandic')");
9129
9130     $dbh->do("UPDATE language_descriptions SET description = '日本語' WHERE subtag = 'ja' AND type = 'language' AND lang = 'ja'");
9131
9132     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'ka', 'language', 'Kannada','2014-10-30')");
9133     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'ka','kan')");
9134     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ka', 'language', 'ka', 'ಕನ್ನಡ')");
9135     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ka', 'language', 'en', 'Kannada')");
9136
9137     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'km', 'language', 'Khmer','2014-10-30')");
9138     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES( 'km','khm')");
9139     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'km', 'language', 'km', 'ភាសាខ្មែរ')");
9140     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES( 'km', 'language', 'en', 'Khmer')");
9141
9142     $dbh->do("UPDATE language_descriptions SET description = '한국어' WHERE subtag = 'ko' AND type = 'language' AND lang = 'ko'");
9143
9144     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'ku', 'language', 'Kurdish','2014-05-13')");
9145     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'ku','kur')");
9146     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ku', 'language', 'ku', 'کوردی')");
9147     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ku', 'language', 'en', 'Kurdish')");
9148     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ku', 'language', 'fr', 'Kurde')");
9149     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ku', 'language', 'de', 'Kurdisch')");
9150     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ku', 'language', 'es', 'Kurdo')");
9151
9152     $dbh->do("UPDATE language_descriptions SET description = 'ພາສາລາວ' WHERE subtag = 'lo' AND type = 'language' AND lang = 'lo'");
9153
9154     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'mi', 'language', 'Maori','2014-10-30')");
9155     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'mi','mri')");
9156     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'mi', 'language', 'mi', 'Te Reo Māori')");
9157     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'mi', 'language', 'en', 'Maori')");
9158
9159     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'mn', 'language', 'Mongolian','2014-10-30')");
9160     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'mn','mon')");
9161     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'mn', 'language', 'mn', 'Mонгол')");
9162     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'mn', 'language', 'en', 'Mongolian')");
9163
9164     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'mr', 'language', 'Marathi','2014-10-30')");
9165     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'mr','mar')");
9166     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'mr', 'language', 'mr', 'मराठी')");
9167     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'mr', 'language', 'en', 'Marathi')");
9168
9169     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'ms', 'language', 'Malay','2014-10-30')");
9170     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'ms','may')");
9171     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ms', 'language', 'ms', 'Bahasa melayu')");
9172     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ms', 'language', 'en', 'Malay')");
9173
9174     $dbh->do("UPDATE language_descriptions SET description = 'Norsk bokmål' WHERE subtag = 'nb' AND type = 'language' AND lang = 'nb'");
9175     $dbh->do("UPDATE language_descriptions SET description = 'Norwegian bokmål' WHERE subtag = 'nb' AND type = 'language' AND lang = 'en'");
9176     $dbh->do("UPDATE language_descriptions SET description = 'Norvégien bokmål' WHERE subtag = 'nb' AND type = 'language' AND lang = 'fr'");
9177     $dbh->do("UPDATE language_descriptions SET description = 'Norwegisch bokmål' WHERE subtag = 'nb' AND type = 'language' AND lang = 'de'");
9178
9179     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'ne', 'language', 'Nepali','2014-10-30')");
9180     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'ne','nep')");
9181     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description)VALUES ( 'ne', 'language', 'ne', 'नेपाली')");
9182     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ne', 'language', 'en', 'Nepali')");
9183
9184     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'pbr', 'language', 'Pangwa','2014-10-30')");
9185     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'pbr','pbr')");
9186     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'pbr', 'language', 'pbr', 'Ekipangwa')");
9187     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'pbr', 'language', 'en', 'Pangwa')");
9188
9189     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'prs', 'language', 'Dari','2014-10-30')");
9190     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'prs','prs')");
9191     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'prs', 'language', 'prs', 'درى')");
9192     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'prs', 'language', 'en', 'Dari')");
9193
9194     $dbh->do("UPDATE language_descriptions SET description = 'Português' WHERE subtag = 'pt' AND type = 'language' AND lang = 'pt'");
9195     $dbh->do("UPDATE language_descriptions SET description = 'Român' WHERE subtag = 'ro' AND type = 'language' AND lang = 'ro'");
9196     $dbh->do("UPDATE language_descriptions SET description = 'Русский' WHERE subtag = 'ru' AND type = 'language' AND lang = 'ru'");
9197
9198     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'rw', 'language', 'Kinyarwanda','2014-10-30')");
9199     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'rw','kin')");
9200     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'rw', 'language', 'rw', 'Ikinyarwanda')");
9201     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'rw', 'language', 'en', 'Kinyarwanda')");
9202
9203     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'sd', 'language', 'Sindhi','2014-10-30')");
9204     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'sd','snd')");
9205     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'sd', 'language', 'sd', 'سنڌي')");
9206     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'sd', 'language', 'en', 'Sindhi')");
9207
9208     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'sk', 'language', 'Slovak','2014-10-30')");
9209     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'sk','slk')");
9210     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'sk', 'language', 'sk', 'Slovenčina')");
9211     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'sk', 'language', 'en', 'Slovak')");
9212
9213     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'sl', 'language', 'Slovene','2014-10-30')");
9214     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'sl','slv')");
9215     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'sl', 'language', 'sl', 'Slovenščina')");
9216     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'sl', 'language', 'en', 'Slovene')");
9217
9218     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'sq', 'language', 'Albanian','2014-10-30')");
9219     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'sq','sqi')");
9220     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'sq', 'language', 'sq', 'Shqip')");
9221     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'sq', 'language', 'en', 'Albanian')");
9222
9223     $dbh->do("UPDATE language_descriptions SET description = 'Cрпски' WHERE subtag = 'sr' AND type = 'language' AND lang = 'sr'");
9224
9225     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'sw', 'language', 'Swahili','2014-10-30')");
9226     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'sw','swa')");
9227     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'sw', 'language', 'sw', 'Kiswahili')");
9228     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'sw', 'language', 'en', 'Swahili')");
9229
9230     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'ta', 'language', 'Tamil','2014-10-30')");
9231     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'ta','tam')");
9232     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ta', 'language', 'ta', 'தமிழ்')");
9233     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ta', 'language', 'en', 'Tamil')");
9234
9235     $dbh->do("UPDATE language_descriptions SET description = 'Tetun' WHERE subtag = 'tet' AND type = 'language' AND lang = 'tet'");
9236     $dbh->do("UPDATE language_descriptions SET description = 'ภาษาไทย' WHERE subtag = 'th' AND type = 'language' AND lang = 'th'");
9237
9238     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'tl', 'language', 'Tagalog','2014-10-30')");
9239     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'tl','tgl')");
9240     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'tl', 'language', 'tl', 'Tagalog')");
9241     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'tl', 'language', 'en', 'Tagalog')");
9242
9243     $dbh->do("UPDATE language_descriptions SET description = 'Türkçe' WHERE subtag = 'tr' AND type = 'language' AND lang = 'tr'");
9244     $dbh->do("UPDATE language_descriptions SET description = 'Українська' WHERE subtag = 'uk' AND type = 'language' AND lang = 'uk'");
9245     $dbh->do("UPDATE language_descriptions SET description = 'اردو' WHERE subtag = 'ur' AND type = 'language' AND lang = 'ur'");
9246
9247     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'vi', 'language', 'Vietnamese','2014-10-30')");
9248     $dbh->do("INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'vi','vie')");
9249     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'vi', 'language', 'vi', '㗂越')");
9250     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'vi', 'language', 'en', 'Vietnamese')");
9251
9252     $dbh->do("UPDATE language_descriptions SET description = '中文' WHERE subtag = 'zh' AND type = 'language' AND lang = 'zh'");
9253     $dbh->do("UPDATE language_descriptions SET description = '' WHERE subtag = 'Arab,script' AND type = 'Arab' AND lang = 'العربية'");
9254
9255     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'Armn', 'script', 'Armenian','2014-10-30')");
9256     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'Armn', 'script', 'Armn', 'Հայոց այբուբեն')");
9257     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES( 'Armn', 'script', 'en', 'Armenian')");
9258
9259     $dbh->do("UPDATE language_descriptions SET description = 'Кирилица' WHERE subtag = 'Cyrl' AND type = 'script' AND lang = 'Cyrl'");
9260
9261     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'Ethi', 'script', 'Ethiopic','2014-10-30')");
9262     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'Ethi', 'script', 'Ethi', 'ግዕዝ')");
9263     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES( 'Ethi', 'script', 'en', 'Ethiopic')");
9264
9265     $dbh->do("UPDATE language_descriptions SET description = 'Ελληνικό αλφάβητο' WHERE subtag = 'Grek' AND type = 'script' AND lang = 'Grek'");
9266     $dbh->do("UPDATE language_descriptions SET description = '简体字' WHERE subtag = 'Hans' AND type = 'script' AND lang = 'Hans'");
9267     $dbh->do("UPDATE language_descriptions SET description = '繁體字' WHERE subtag = 'Hant' AND type = 'script' AND lang = 'Hant'");
9268     $dbh->do("UPDATE language_descriptions SET description = 'אָלֶף־בֵּית עִבְרִי' WHERE subtag = 'Hebr' AND type = 'script' AND lang = 'Hebr'");
9269
9270     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'Jpan', 'script', 'Japanese','2014-10-30')");
9271     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'Jpan', 'script', 'Jpan', '漢字')");
9272     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES( 'Jpan', 'script', 'en', 'Japanese')");
9273
9274     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'Knda', 'script', 'Kannada','2014-10-30')");
9275     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'Knda', 'script', 'Knda', 'ಕನ್ನಡ ಲಿಪಿ')");
9276     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES( 'Knda', 'script', 'en', 'Kannada')");
9277
9278     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'Kore', 'script', 'Korean','2014-10-30')");
9279     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'Kore', 'script', 'Kore', '한글')");
9280     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES( 'Kore', 'script', 'en', 'Korean')");
9281
9282     $dbh->do("UPDATE language_descriptions SET description = 'ອັກສອນລາວ' WHERE subtag = 'Laoo' AND type = 'script' AND lang = 'Laoo'");
9283
9284     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'AL', 'region', 'Albania','2014-10-30')");
9285     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'AL', 'region', 'en', 'Albania')");
9286     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'AL', 'region', 'sq', 'Shqipërisë')");
9287
9288     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'AZ', 'region', 'Azerbaijan','2014-10-30')");
9289     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'AZ', 'region', 'en', 'Azerbaijan')");
9290     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'AZ', 'region', 'az', 'Azərbaycan')");
9291
9292     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'BE', 'region', 'Belgium','2014-10-30')");
9293     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'BE', 'region', 'en', 'Belgium')");
9294     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'BE', 'region', 'nl', 'België')");
9295
9296     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'BR', 'region', 'Brazil','2014-10-30')");
9297     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'BR', 'region', 'en', 'Brazil')");
9298     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'BR', 'region', 'pt', 'Brasil')");
9299
9300     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'BY', 'region', 'Belarus','2014-10-30')");
9301     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'BY', 'region', 'en', 'Belarus')");
9302     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'BY', 'region', 'be', 'Беларусь')");
9303
9304     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'CA', 'region', 'fr', 'Canada')");
9305
9306     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'CH', 'region', 'Switzerland','2014-10-30')");
9307     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'CH', 'region', 'en', 'Switzerland')");
9308     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'CH', 'region', 'de', 'Schweiz')");
9309
9310     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'CN', 'region', 'China','2014-10-30')");
9311     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'CN', 'region', 'en', 'China')");
9312     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'CN', 'region', 'zh', '中国')");
9313
9314     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'CZ', 'region', 'Czech Republic','2014-10-30')");
9315     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'CZ', 'region', 'en', 'Czech Republic')");
9316     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'CZ', 'region', 'cs', 'Česká republika')");
9317
9318     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'DE', 'region', 'Germany','2014-10-30')");
9319     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'DE', 'region', 'en', 'Germany')");
9320     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'DE', 'region', 'de', 'Deutschland')");
9321
9322     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'DK', 'region', 'en', 'Denmark')");
9323
9324     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'ES', 'region', 'Spain','2014-10-30')");
9325     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ES', 'region', 'en', 'Spain')");
9326     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ES', 'region', 'es', 'España')");
9327
9328     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'FI', 'region', 'Finland','2014-10-30')");
9329     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'FI', 'region', 'en', 'Finland')");
9330     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'FI', 'region', 'fi', 'Suomi')");
9331
9332     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'FO', 'region', 'Faroe Islands','2014-10-30')");
9333     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'FO', 'region', 'en', 'Faroe Islands')");
9334     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'FO', 'region', 'fo', 'Føroyar')");
9335
9336     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'GR', 'region', 'Greece','2014-10-30')");
9337     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'GR', 'region', 'en', 'Greece')");
9338     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'GR', 'region', 'el', 'Ελλάδα')");
9339
9340     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'HR', 'region', 'Croatia','2014-10-30')");
9341     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'HR', 'region', 'en', 'Croatia')");
9342     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'HR', 'region', 'hr', 'Hrvatska')");
9343
9344     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'HU', 'region', 'Hungary','2014-10-30')");
9345     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'HU', 'region', 'en', 'Hungary')");
9346     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'HU', 'region', 'hu', 'Magyarország')");
9347
9348     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'ID', 'region', 'Indonesia','2014-10-30')");
9349     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ID', 'region', 'en', 'Indonesia')");
9350     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ID', 'region', 'id', 'Indonesia')");
9351
9352     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'IS', 'region', 'Iceland','2014-10-30')");
9353     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'IS', 'region', 'en', 'Iceland')");
9354     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'IS', 'region', 'is', 'Ísland')");
9355
9356     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'IT', 'region', 'Italy','2014-10-30')");
9357     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'IT', 'region', 'en', 'Italy')");
9358     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'IT', 'region', 'it', 'Italia')");
9359
9360     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'JP', 'region', 'Japan','2014-10-30')");
9361     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'JP', 'region', 'en', 'Japan')");
9362     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'JP', 'region', 'ja', '日本')");
9363
9364     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'KE', 'region', 'Kenya','2014-10-30')");
9365     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'KE', 'region', 'en', 'Kenya')");
9366     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'KE', 'region', 'rw', 'Kenya')");
9367
9368     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'KH', 'region', 'Cambodia','2014-10-30')");
9369     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'KH', 'region', 'en', 'Cambodia')");
9370     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'KH', 'region', 'km', 'កម្ពុជា')");
9371
9372     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'KP', 'region', 'North Korea','2014-10-30')");
9373     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'KP', 'region', 'en', 'North Korea')");
9374     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'KP', 'region', 'ko', '조선민주주의인민공화국')");
9375
9376     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'LK', 'region', 'Sri Lanka','2014-10-30')");
9377     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'LK', 'region', 'en', 'Sri Lanka')");
9378     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'LK', 'region', 'ta', 'இலங்கை')");
9379
9380     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'MY', 'region', 'Malaysia','2014-10-30')");
9381     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'MY', 'region', 'en', 'Malaysia')");
9382     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'MY', 'region', 'ms', 'Malaysia')");
9383
9384     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'NE', 'region', 'Niger','2014-10-30')");
9385     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'NE', 'region', 'en', 'Niger')");
9386     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'NE', 'region', 'ne', 'Niger')");
9387
9388     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'NL', 'region', 'Netherlands','2014-10-30')");
9389     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'NL', 'region', 'en', 'Netherlands')");
9390     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'NL', 'region', 'nl', 'Nederland')");
9391
9392     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'NO', 'region', 'Norway','2014-10-30')");
9393     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'NO', 'region', 'en', 'Norway')");
9394     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'NO', 'region', 'ne', 'Noreg')");
9395     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'NO', 'region', 'nn', 'Noreg')");
9396
9397     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'PH', 'region', 'Philippines','2014-10-30')");
9398     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'PH', 'region', 'en', 'Philippines')");
9399     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'PH', 'region', 'tl', 'Pilipinas')");
9400
9401     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'PK', 'region', 'Pakistan','2014-10-30')");
9402     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'PK', 'region', 'en', 'Pakistan')");
9403     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'PK', 'region', 'sd', 'پاكستان')");
9404
9405     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'PL', 'region', 'Poland','2014-10-30')");
9406     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'PL', 'region', 'en', 'Poland')");
9407     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'PL', 'region', 'pl', 'Polska')");
9408
9409     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'PT', 'region', 'Portugal','2014-10-30')");
9410     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'PT', 'region', 'en', 'Portugal')");
9411     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'PT', 'region', 'pt', 'Portugal')");
9412
9413     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'RO', 'region', 'Romania','2014-10-30')");
9414     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'RO', 'region', 'en', 'Romania')");
9415     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'RO', 'region', 'ro', 'România')");
9416
9417     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'RU', 'region', 'Russia','2014-10-30')");
9418     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'RU', 'region', 'en', 'Russia')");
9419     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'RU', 'region', 'ru', 'Россия')");
9420
9421     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'RW', 'region', 'Rwanda','2014-10-30')");
9422     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'RW', 'region', 'en', 'Rwanda')");
9423     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'RW', 'region', 'rw', 'Rwanda')");
9424
9425     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'SE', 'region', 'Sweden','2014-10-30')");
9426     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'SE', 'region', 'en', 'Sweden')");
9427     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'SE', 'region', 'sv', 'Sverige')");
9428
9429     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'SI', 'region', 'Slovenia','2014-10-30')");
9430     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'SI', 'region', 'en', 'Slovenia')");
9431     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'SI', 'region', 'sl', 'Slovenija')");
9432
9433     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'SK', 'region', 'Slovakia','2014-10-30')");
9434     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'SK', 'region', 'en', 'Slovakia')");
9435     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'SK', 'region', 'sk', 'Slovensko')");
9436
9437     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'TH', 'region', 'Thailand','2014-10-30')");
9438     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'TH', 'region', 'en', 'Thailand')");
9439     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'TH', 'region', 'th', 'ประเทศไทย')");
9440
9441     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'TR', 'region', 'Turkey','2014-10-30')");
9442     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'TR', 'region', 'en', 'Turkey')");
9443     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'TR', 'region', 'tr', 'Türkiye')");
9444
9445     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'TW', 'region', 'Taiwan','2014-10-30')");
9446     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'TW', 'region', 'en', 'Taiwan')");
9447     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'TW', 'region', 'zh', '台灣')");
9448
9449     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'UA', 'region', 'Ukraine','2014-10-30')");
9450     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'UA', 'region', 'en', 'Ukraine')");
9451     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'UA', 'region', 'uk', 'Україна')");
9452
9453     $dbh->do("INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'VN', 'region', 'Vietnam','2014-10-30')");
9454     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'VN', 'region', 'en', 'Vietnam')");
9455     $dbh->do("INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'VN', 'region', 'vi', 'Việt Nam')");
9456
9457     print "Upgrade to $DBversion done (Bug 12250: Update descriptions for languages, scripts and regions)\n";
9458     SetVersion($DBversion);
9459 }
9460
9461 $DBversion = "3.17.00.050";
9462 if ( CheckVersion($DBversion) ) {
9463     $dbh->do(q|
9464         INSERT INTO permissions (module_bit, code, description) VALUES
9465           (13, 'records_batchdel', 'Perform batch deletion of records (bibliographic or authority)')
9466     |);
9467     print "Upgrade to $DBversion done (Bug 12403: Add permission tools_records_batchdelitem)\n";
9468     SetVersion($DBversion);
9469 }
9470
9471 $DBversion = "3.17.00.051";
9472 if ( CheckVersion($DBversion) ) {
9473     $dbh->do("INSERT INTO systempreferences (variable,value,options,explanation,type) VALUES('GoogleIndicTransliteration','0','','GoogleIndicTransliteration on the OPAC.','YesNo')");
9474     print "Upgrade to $DBversion done (Bug 13211: Added system preferences GoogleIndicTransliteration on the OPAC)\n";
9475     SetVersion($DBversion);
9476 }
9477
9478 $DBversion = "3.17.00.052";
9479 if ( CheckVersion($DBversion) ) {
9480     $dbh->do(q{
9481         INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacAdvSearchOptions','pubdate|itemtype|language|sorting|location','Show search options','pubdate|itemtype|language|subtype|sorting|location','multiple');
9482     });
9483
9484     $dbh->do(q{
9485         INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES('OpacAdvSearchMoreOptions','pubdate|itemtype|language|subtype|sorting|location','Show search options for the expanded view (More options)','pubdate|itemtype|language|subtype|sorting|location','multiple');
9486    });
9487    print "Upgrade to $DBversion done (Bug 9043: Add system preference OpacAdvSearchOptions and OpacAdvSearchMoreOptions)\n";
9488    SetVersion ($DBversion);
9489 }
9490
9491 $DBversion = "3.17.00.053";
9492 if ( CheckVersion($DBversion) ) {
9493     $dbh->do(q{
9494         INSERT INTO permissions (module_bit, code, description) VALUES ('9', 'edit_items_restricted', 'Limit item modification to subfields defined in the SubfieldsToAllowForRestrictedEditing preference (please note that edit_item is still required)');
9495     });
9496
9497     $dbh->do(q{
9498         INSERT INTO permissions (module_bit, code, description) VALUES ('9', 'delete_all_items', 'Delete all items at once');
9499     });
9500
9501     $dbh->do(q{
9502         INSERT INTO permissions (module_bit, code, description) VALUES ('13', 'items_batchmod_restricted', 'Limit batch item modification to subfields defined in the SubfieldsToAllowForRestrictedBatchmod preference (please note that items_batchmod is still required)');
9503     });
9504
9505     # The delete_all_items permission should be added to users having the edit_items permission.
9506     $dbh->do(q{
9507         INSERT INTO user_permissions (borrowernumber, module_bit, code) SELECT borrowernumber, module_bit, "delete_all_items" FROM user_permissions WHERE code="edit_items";
9508     });
9509
9510     # Add 2 new prefs
9511     $dbh->do(q{
9512         INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SubfieldsToAllowForRestrictedEditing','','Define a list of subfields for which edition is authorized when edit_items_restricted permission is enabled, separated by spaces. Example: 995\$f 995\$h 995\$j','','Free');
9513     });
9514
9515     $dbh->do(q{
9516         INSERT INTO systempreferences (variable,value,explanation,options,type) VALUES ('SubfieldsToAllowForRestrictedBatchmod','','Define a list of subfields for which edition is authorized when items_batchmod_restricted permission is enabled, separated by spaces. Example: 995\$f 995\$h 995\$j','','Free');
9517     });
9518
9519     print "Upgrade to $DBversion done (Bug 7673: Adds 2 new prefs (SubfieldsToAllowForRestrictedEditing and SubfieldsToAllowForRestrictedBatchmod) and 3 new permissions (edit_items_restricted and delete_all_items and items_batchmod_restricted))\n";
9520     SetVersion($DBversion);
9521 }
9522
9523 $DBversion = "3.17.00.054";
9524 if (CheckVersion($DBversion)) {
9525     $dbh->do(q{
9526         INSERT INTO systempreferences ( variable, value, options, explanation, type ) VALUES
9527         ('AllowRenewalIfOtherItemsAvailable','0',NULL,'If enabled, allow a patron to renew an item with unfilled holds if other available items can fill that hold.','YesNo')
9528     });
9529     print "Upgrade to $DBversion done (Bug 11634 - Allow renewal of item with unfilled holds if other available items can fill those holds)\n";
9530     SetVersion($DBversion);
9531 }
9532
9533 $DBversion = "3.17.00.055";
9534 if ( CheckVersion($DBversion) ) {
9535     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES ('NorwegianPatronDBEnable', '0', NULL, 'Enable communication with the Norwegian national patron database.', 'YesNo')");
9536     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES ('NorwegianPatronDBEndpoint', '', NULL, 'Which NL endpoint to use.', 'Free')");
9537     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES ('NorwegianPatronDBUsername', '', NULL, 'Username for communication with the Norwegian national patron database.', 'Free')");
9538     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES ('NorwegianPatronDBPassword', '', NULL, 'Password for communication with the Norwegian national patron database.', 'Free')");
9539     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES ('NorwegianPatronDBSearchNLAfterLocalHit','0',NULL,'Search NL if a search has already given one or more local hits?.','YesNo')");
9540     $dbh->do("
9541 CREATE TABLE borrower_sync (
9542     borrowersyncid int(11) NOT NULL AUTO_INCREMENT,
9543     borrowernumber int(11) NOT NULL,
9544     synctype varchar(32) NOT NULL,
9545     sync tinyint(1) NOT NULL DEFAULT '0',
9546     syncstatus varchar(10) DEFAULT NULL,
9547     lastsync varchar(50) DEFAULT NULL,
9548     hashed_pin varchar(64) DEFAULT NULL,
9549     PRIMARY KEY (borrowersyncid),
9550     KEY borrowernumber (borrowernumber),
9551     CONSTRAINT borrower_sync_ibfk_1 FOREIGN KEY (borrowernumber) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE
9552 ) ENGINE=InnoDB DEFAULT CHARSET=utf8"
9553 );
9554     print "Upgrade to $DBversion done (Bug 11401 - Add support for Norwegian national library card)\n";
9555     SetVersion($DBversion);
9556 }
9557
9558 $DBversion = "3.17.00.056";
9559 if ( CheckVersion($DBversion) ) {
9560     $dbh->do(q{
9561         UPDATE systempreferences SET value = 'pubdate,itemtype,language,sorting,location' WHERE variable='OpacAdvSearchOptions'
9562     });
9563
9564     $dbh->do(q{
9565         UPDATE systempreferences SET value = 'pubdate,itemtype,language,subtype,sorting,location' WHERE variable='OpacAdvSearchMoreOptions'
9566     });
9567
9568     print "Upgrade to $DBversion done (Bug 9043 - Update the values for OpacAdvSearchOptions and OpacAdvSearchOptions)\n";
9569     SetVersion($DBversion);
9570 }
9571
9572 $DBversion = "3.17.00.057";
9573 if ( CheckVersion($DBversion) ) {
9574     print "Upgrade to $DBversion done (Koha 3.18 beta)\n";
9575     SetVersion ($DBversion);
9576 }
9577
9578 $DBversion = "3.17.00.058";
9579 if( CheckVersion($DBversion) ){
9580     $dbh->do("INSERT INTO systempreferences (variable, explanation, type) VALUES('DefaultLongOverdueChargeValue','Charge a lost item to the borrower account when the LOST value of the item changes to n',  'integer')");
9581     $dbh->do("INSERT INTO systempreferences (variable, explanation, type) VALUES('DefaultLongOverdueLostValue', 'Set the LOST value of an item to n when the item has been overdue for more than defaultlongoverduedays days.', 'integer')");
9582     $dbh->do("INSERT INTO systempreferences (variable, explanation, type) VALUES('DefaultLongOverdueDays', 'Set the LOST value of an item when the item has been overdue for more than n days.',  'integer')");
9583     print "Upgrade to $DBversion done (Bug 8337: System preferences for longoverdue cron)\n";
9584     SetVersion($DBversion);
9585 }
9586
9587 $DBversion = "3.17.00.059";
9588 if ( CheckVersion($DBversion) ) {
9589     $dbh->do(q{
9590         UPDATE permissions SET description = "Add and delete budgets (but can't modifiy budgets)" WHERE description = "Add and delete budgets (but cant modify budgets)";
9591     });
9592     print "Upgrade to $DBversion done (Bug 10749: Fix typo in budget_add_del permission description)\n";
9593     SetVersion ($DBversion);
9594 }
9595
9596 $DBversion = "3.17.00.060";
9597 if ( CheckVersion($DBversion) ) {
9598     my $count_l = $dbh->selectcol_arrayref(q|
9599         SELECT COUNT(*) FROM letter WHERE message_transport_type='feed'
9600     |);
9601     my $count_mq = $dbh->selectcol_arrayref(q|
9602         SELECT COUNT(*) FROM message_queue WHERE message_transport_type='feed'
9603     |);
9604     my $count_ott = $dbh->selectcol_arrayref(q|
9605         SELECT COUNT(*) FROM overduerules_transport_types WHERE message_transport_type='feed'
9606     |);
9607     my $count_mt = $dbh->selectcol_arrayref(q|
9608         SELECT COUNT(*) FROM message_transports WHERE message_transport_type='feed'
9609     |);
9610     my $count_bmtp = $dbh->selectcol_arrayref(q|
9611         SELECT COUNT(*) FROM borrower_message_transport_preferences WHERE message_transport_type='feed'
9612     |);
9613
9614     my $deleted = 0;
9615     if ( $count_l->[0] == 0 and $count_mq->[0] == 0 and $count_ott->[0] == 0 and $count_mt->[0] == 0 and $count_bmtp->[0] == 0 ) {
9616         $deleted = $dbh->do(q|
9617             DELETE FROM message_transport_types where message_transport_type='feed'
9618         |);
9619         $deleted = $deleted ne '0E0' ? 1 : 0;
9620     }
9621
9622     print "Upgrade to $DBversion done (Bug 12298: Delete the 'feed' message transport type " . ($deleted ? '(deleted!)' : '(not deleted)') . ")\n";
9623     SetVersion($DBversion);
9624 }
9625
9626 $DBversion = "3.18.00.000";
9627 if ( CheckVersion($DBversion) ) {
9628     print "Upgrade to $DBversion done (3.18.0 release)\n";
9629     SetVersion($DBversion);
9630 }
9631
9632 $DBversion = "3.19.00.000";
9633 if ( CheckVersion($DBversion) ) {
9634     print "Upgrade to $DBversion done (there's life after 3.18)\n";
9635     SetVersion ($DBversion);
9636 }
9637
9638 $DBversion = "3.19.00.001";
9639 if ( CheckVersion($DBversion) ) {
9640     $dbh->do("
9641         UPDATE systempreferences
9642         SET options = 'public|school|academic|research|private|societyAssociation|corporate|government|religiousOrg|subscription'
9643         WHERE variable = 'UsageStatsLibraryType'
9644     ");
9645     if ( C4::Context->preference("UsageStatsLibraryType") eq "university" ) {
9646         C4::Context->set_preference("UsageStatsLibraryType", "academic")
9647     }
9648     print "Upgrade to $DBversion done (Bug 13436: Add more options to UsageStatsLibraryType)\n";
9649     SetVersion ($DBversion);
9650 }
9651
9652 $DBversion = "3.19.00.002";
9653 if ( CheckVersion($DBversion) ) {
9654     $dbh->do(q|
9655         UPDATE suggestions SET branchcode="" WHERE branchcode="__ANY__"
9656     |);
9657     print "upgrade to $DBversion done (Bug 10753: replace __ANY__ with empty string in suggestions.branchcode)\n";
9658     SetVersion ($DBversion);
9659 }
9660
9661 $DBversion = "3.19.00.003";
9662 if ( CheckVersion($DBversion) ) {
9663     my ($count) = $dbh->selectrow_array("SELECT COUNT(*) FROM borrowers GROUP BY userid HAVING COUNT(userid) > 1");
9664
9665     if ( $count ) {
9666         print "Upgrade to $DBversion done (Bug 1861 - Unique patrons logins not (totally) enforced) FAILED!\n";
9667         print "Your database has users with duplicate user logins. Please have your administrator deduplicate your user logins.\n";
9668         print "Afterward, your Koha administrator should execute the following database query: ALTER TABLE borrowers DROP INDEX userid, ADD UNIQUE userid (userid)";
9669     } else {
9670         $dbh->do(q{
9671             ALTER TABLE borrowers
9672                 DROP INDEX userid ,
9673                 ADD UNIQUE userid (userid)
9674         });
9675         print "Upgrade to $DBversion done (Bug 1861: Unique patrons logins not (totally) enforced)\n";
9676     }
9677     SetVersion ($DBversion);
9678 }
9679
9680 $DBversion = "3.19.00.004";
9681 if ( CheckVersion($DBversion) ) {
9682     my $pref_value = C4::Context->preference('OpacExportOptions');
9683     $pref_value =~ s/\|/,/g; # multiple is separated by ,
9684     $dbh->do(q{
9685         UPDATE systempreferences
9686             SET value = ?,
9687                 type = 'multiple'
9688         WHERE variable = 'OpacExportOptions'
9689     }, {}, $pref_value );
9690     print "Upgrade to $DBversion done (Bug 13346: OpacExportOptions is now multiple)\n";
9691     SetVersion ($DBversion);
9692 }
9693
9694 $DBversion = "3.19.00.005";
9695 if(CheckVersion($DBversion)) {
9696     $dbh->do(q{
9697         ALTER TABLE authorised_values MODIFY COLUMN category VARCHAR(32) NOT NULL DEFAULT ''
9698     });
9699
9700     $dbh->do(q{
9701         ALTER TABLE borrower_attribute_types MODIFY COLUMN authorised_value_category VARCHAR(32) DEFAULT NULL
9702     });
9703
9704     print "Upgrade to $DBversion done (Bug 13379: Modify authorised_values.category to varchar(32))\n";
9705     SetVersion($DBversion);
9706 }
9707
9708 $DBversion = "3.19.00.006";
9709 if ( CheckVersion($DBversion) ) {
9710     $dbh->do(q|SET foreign_key_checks = 0|);
9711     my $sth = $dbh->table_info( '','','','TABLE' );
9712     my ( $cat, $schema, $name, $type, $remarks );
9713     while ( ( $cat, $schema, $name, $type, $remarks ) = $sth->fetchrow_array ) {
9714         my $table_sth = $dbh->prepare(qq|SHOW CREATE TABLE $name|);
9715         $table_sth->execute;
9716         my @table = $table_sth->fetchrow_array;
9717         unless ( $table[1] =~ /COLLATE=utf8mb4_unicode_ci/ ) { #catches utf8mb4 collated tables
9718             if ( $name eq 'marc_subfield_structure' ) {
9719                 $dbh->do(q|
9720                     ALTER TABLE marc_subfield_structure
9721                     MODIFY COLUMN tagfield varchar(3) COLLATE utf8_unicode_ci NOT NULL DEFAULT '',
9722                     MODIFY COLUMN tagsubfield varchar(1) COLLATE utf8_bin NOT NULL DEFAULT '',
9723                     MODIFY COLUMN liblibrarian varchar(255) COLLATE utf8_unicode_ci NOT NULL DEFAULT '',
9724                     MODIFY COLUMN libopac varchar(255) COLLATE utf8_unicode_ci NOT NULL DEFAULT '',
9725                     MODIFY COLUMN kohafield varchar(40) COLLATE utf8_unicode_ci DEFAULT NULL,
9726                     MODIFY COLUMN authorised_value varchar(20) COLLATE utf8_unicode_ci DEFAULT NULL,
9727                     MODIFY COLUMN authtypecode varchar(20) COLLATE utf8_unicode_ci DEFAULT NULL,
9728                     MODIFY COLUMN value_builder varchar(80) COLLATE utf8_unicode_ci DEFAULT NULL,
9729                     MODIFY COLUMN frameworkcode varchar(4) COLLATE utf8_unicode_ci NOT NULL DEFAULT '',
9730                     MODIFY COLUMN seealso varchar(1100) COLLATE utf8_unicode_ci DEFAULT NULL,
9731                     MODIFY COLUMN link varchar(80) COLLATE utf8_unicode_ci DEFAULT NULL
9732                 |);
9733                 $dbh->do(qq|ALTER TABLE $name CHARACTER SET utf8 COLLATE utf8_unicode_ci|);
9734             }
9735             else {
9736                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8 COLLATE utf8_unicode_ci|);
9737             }
9738         }
9739     }
9740     $dbh->do(q|SET foreign_key_checks = 1|);;
9741
9742     print "Upgrade to $DBversion done (Bug 11944: Convert DB tables to utf8_unicode_ci)\n";
9743     SetVersion($DBversion);
9744 }
9745
9746 $DBversion = "3.19.00.007";
9747 if ( CheckVersion($DBversion) ) {
9748     my $orphan_budgets = $dbh->selectall_arrayref(q|
9749         SELECT budget_id, budget_name, budget_code
9750         FROM aqbudgets
9751         WHERE   budget_parent_id IS NOT NULL
9752             AND budget_parent_id NOT IN (
9753                 SELECT DISTINCT budget_id FROM aqbudgets
9754             )
9755     |, { Slice => {} } );
9756
9757     if ( @$orphan_budgets ) {
9758         for my $b ( @$orphan_budgets ) {
9759             print "Fund $b->{budget_name} (code:$b->{budget_code}, id:$b->{budget_id}) does not have a parent, it may cause problem\n";
9760         }
9761         print "Upgrade to $DBversion done (Bug 12905: Check budget integrity: FAIL)\n";
9762     } else {
9763         print "Upgrade to $DBversion done (Bug 12905: Check budget integrity: OK)\n";
9764     }
9765     SetVersion ($DBversion);
9766 }
9767
9768 $DBversion = "3.19.00.008";
9769 if ( CheckVersion($DBversion) ) {
9770     my $number_of_orders_not_linked = $dbh->selectcol_arrayref(q|
9771         SELECT COUNT(*)
9772         FROM aqorders o
9773         WHERE NOT EXISTS (
9774             SELECT NULL
9775             FROM aqbudgets b
9776             WHERE b.budget_id = o.budget_id
9777         );
9778     |);
9779
9780     if ( $number_of_orders_not_linked->[0] > 0 ) {
9781         $dbh->do(q|
9782             INSERT INTO aqbudgetperiods(budget_period_startdate, budget_period_enddate, budget_period_active, budget_period_description, budget_period_total) VALUES ( CAST(NOW() AS date), CAST(NOW() AS date), 0, "WARNING: This budget has been automatically created by the updatedatabase script, please see bug 12601 for more information", 0)
9783         |);
9784         my $budget_period_id = $dbh->last_insert_id( undef, undef, 'aqbudgetperiods', undef );
9785         $dbh->do(qq|
9786             INSERT INTO aqbudgets(budget_code, budget_name, budget_amount, budget_period_id) VALUES ( "BACKUP_TMP", "WARNING: fund created by the updatedatabase script, please see bug 12601", 0, $budget_period_id );
9787         |);
9788         my $budget_id = $dbh->last_insert_id( undef, undef, 'aqbudgets', undef );
9789         $dbh->do(qq|
9790             UPDATE aqorders o
9791             SET budget_id = $budget_id
9792             WHERE NOT EXISTS (
9793                 SELECT NULL
9794                 FROM aqbudgets b
9795                 WHERE b.budget_id = o.budget_id
9796             )
9797         |);
9798     }
9799
9800     $dbh->do(q|
9801         ALTER TABLE aqorders
9802         ADD CONSTRAINT aqorders_budget_id_fk FOREIGN KEY (budget_id) REFERENCES aqbudgets(budget_id) ON DELETE CASCADE ON UPDATE CASCADE
9803     |);
9804
9805     print "Upgrade to $DBversion done (Bug 12601: Add new foreign key aqorders.budget_id" . ( ( $number_of_orders_not_linked->[0] > 0 )  ? ' WARNING: temporary budget and fund have been created (search for "BACKUP_TMP"). At least one of your order was not linked to a budget' : '' ) . ")\n";
9806     SetVersion($DBversion);
9807 }
9808
9809 $DBversion = "3.19.00.009";
9810 if ( CheckVersion($DBversion) ) {
9811     $dbh->do(q|
9812         UPDATE suggestions s SET s.budgetid = NULL
9813         WHERE NOT EXISTS (
9814             SELECT NULL
9815             FROM aqbudgets b
9816             WHERE b.budget_id = s.budgetid
9817         );
9818     |);
9819
9820     $dbh->do(q|
9821         ALTER TABLE suggestions
9822         ADD CONSTRAINT suggestions_budget_id_fk FOREIGN KEY (budgetid) REFERENCES aqbudgets(budget_id) ON DELETE SET NULL ON UPDATE CASCADE
9823     |);
9824
9825     print "Upgrade to $DBversion done (Bug 13007: Add new foreign key suggestions.budgetid)\n";
9826     SetVersion($DBversion);
9827 }
9828
9829 $DBversion = "3.19.00.010";
9830 if ( CheckVersion($DBversion) ) {
9831     $dbh->do(q|
9832         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
9833         VALUES('SessionRestrictionByIP','1','Check for Change in  Remote IP address for Session Security. Disable when remote ip address changes frequently.','','YesNo')
9834     |);
9835     print "Upgrade to $DBversion done (Bug 5511: SessionRestrictionByIP)\n";
9836     SetVersion ($DBversion);
9837 }
9838
9839 $DBversion = "3.19.00.011";
9840 if ( CheckVersion($DBversion) ) {
9841     $dbh->do(q|
9842         INSERT INTO userflags (bit, flag, flagdesc, defaulton) VALUES
9843         (20, 'lists', 'Lists', 0)
9844     |);
9845     $dbh->do(q|
9846         INSERT INTO permissions (module_bit, code, description) VALUES
9847         (20, 'delete_public_lists', 'Delete public lists')
9848     |);
9849     print "Upgrade to $DBversion done (Bug 13417: Add permission to delete public lists)\n";
9850     SetVersion ($DBversion);
9851 }
9852
9853 $DBversion = "3.19.00.012";
9854 if(CheckVersion($DBversion)) {
9855     $dbh->do(q{
9856         ALTER TABLE biblioitems MODIFY COLUMN marcxml longtext
9857     });
9858
9859     $dbh->do(q{
9860         ALTER TABLE deletedbiblioitems MODIFY COLUMN marcxml longtext
9861     });
9862
9863     print "Upgrade to $DBversion done (Bug 13523 Remove NOT NULL restriction on field marcxml due to mysql STRICT_TRANS_TABLES)\n";
9864     SetVersion ($DBversion);
9865 }
9866
9867 $DBversion = "3.19.00.013";
9868 if ( CheckVersion($DBversion) ) {
9869     $dbh->do(q|
9870         INSERT INTO permissions (module_bit, code, description) VALUES
9871           (13, 'records_batchmod', 'Perform batch modification of records (biblios or authorities)')
9872     |);
9873     print "Upgrade to $DBversion done (Bug 11395: Add permission tools_records_batchmod)\n";
9874     SetVersion($DBversion);
9875 }
9876
9877 $DBversion = "3.19.00.014";
9878 if ( CheckVersion($DBversion) ) {
9879     $dbh->do(q|
9880         CREATE TABLE aqorder_users (
9881             ordernumber int(11) NOT NULL,
9882             borrowernumber int(11) NOT NULL,
9883             PRIMARY KEY (ordernumber, borrowernumber),
9884             CONSTRAINT aqorder_users_ibfk_1 FOREIGN KEY (ordernumber) REFERENCES aqorders (ordernumber) ON DELETE CASCADE ON UPDATE CASCADE,
9885             CONSTRAINT aqorder_users_ibfk_2 FOREIGN KEY (borrowernumber) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE
9886         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
9887     |);
9888
9889     $dbh->do(q|
9890         INSERT INTO letter(module, code, branchcode, name, title, content, message_transport_type)
9891         VALUES ('acquisition', 'ACQ_NOTIF_ON_RECEIV', '', 'Notification on receiving', 'Order received', 'Dear <<borrowers.firstname>> <<borrowers.surname>>,\n\n The order <<aqorders.ordernumber>> (<<biblio.title>>) has been received.\n\nYour library.', 'email')
9892     |);
9893     print "Upgrade to $DBversion done (Bug 12648: Add letter ACQ_NOTIF_ON_RECEIV )\n";
9894     SetVersion ($DBversion);
9895 }
9896
9897 $DBversion = "3.19.00.015";
9898 if ( CheckVersion($DBversion) ) {
9899     $dbh->do(q|
9900         ALTER TABLE search_history ADD COLUMN id INT(11) NOT NULL AUTO_INCREMENT FIRST, ADD PRIMARY KEY(id);
9901     |);
9902     print "Upgrade to $DBversion done (Bug 11430: Add primary key for search_history)\n";
9903     SetVersion ($DBversion);
9904 }
9905
9906 $DBversion = "3.19.00.016";
9907 if(CheckVersion($DBversion)) {
9908     my @order_cancellation_reason = $dbh->selectrow_array("SELECT count(*) FROM authorised_values WHERE category='ORDER_CANCELLATION_REASON'");
9909     if ($order_cancellation_reason[0] == 0) {
9910         $dbh->do(q{
9911             INSERT INTO authorised_values (category, authorised_value, lib) VALUES
9912              ('ORDER_CANCELLATION_REASON', 0, 'No reason provided'),
9913              ('ORDER_CANCELLATION_REASON', 1, 'Out of stock'),
9914              ('ORDER_CANCELLATION_REASON', 2, 'Restocking')
9915         });
9916
9917         my $already_existing_reasons = $dbh->selectcol_arrayref(q{
9918             SELECT DISTINCT( cancellationreason )
9919             FROM aqorders;
9920         }, { Slice => {} });
9921
9922         my $update_orders_sth = $dbh->prepare(q{
9923             UPDATE aqorders
9924             SET cancellationreason = ?
9925             WHERE cancellationreason = ?
9926         });
9927
9928         my $insert_av_sth = $dbh->prepare(q{
9929             INSERT INTO authorised_values (category, authorised_value, lib) VALUES
9930              ('ORDER_CANCELLATION_REASON', ?, ?)
9931         });
9932         my $i = 3;
9933         for my $reason ( @$already_existing_reasons ) {
9934             next unless $reason;
9935             $insert_av_sth->execute( $i, $reason );
9936             $update_orders_sth->execute( $i, $reason );
9937             $i++;
9938         }
9939         print "Upgrade to $DBversion done (Bug 13380: Add the ORDER_CANCELLATION_REASON authorised value)\n";
9940     }
9941     else {
9942         print "Upgrade to $DBversion done (Bug 13380: ORDER_CANCELLATION_REASON authorised value already existed from earlier update!)\n";
9943     }
9944
9945     SetVersion($DBversion);
9946 }
9947
9948 $DBversion = '3.19.00.017';
9949 if ( CheckVersion($DBversion) ) {
9950     # First create the column
9951     $dbh->do("ALTER TABLE issuingrules ADD onshelfholds tinyint(1) default 0 NOT NULL");
9952     # Now update the column
9953     if (C4::Context->preference("AllowOnShelfHolds")){
9954         # Pref is on, set allow for all rules
9955         $dbh->do("UPDATE issuingrules SET onshelfholds=1");
9956     } else {
9957         # If the preference is not set, leave off
9958         $dbh->do("UPDATE issuingrules SET onshelfholds=0");
9959     }
9960     # Remove from the systempreferences table
9961     $dbh->do("DELETE FROM systempreferences WHERE variable = 'AllowOnShelfHolds'");
9962
9963     # First create the column
9964     $dbh->do("ALTER TABLE issuingrules ADD opacitemholds char(1) DEFAULT 'N' NOT NULL");
9965     # Now update the column
9966     my $opacitemholds = C4::Context->preference("OPACItemHolds") || '';
9967     if (lc ($opacitemholds) eq 'force') {
9968         $opacitemholds = 'F';
9969     }
9970     else {
9971         $opacitemholds = $opacitemholds ? 'Y' : 'N';
9972     }
9973     # Set allow for all rules
9974     $dbh->do("UPDATE issuingrules SET opacitemholds='$opacitemholds'");
9975
9976     # Remove from the systempreferences table
9977     $dbh->do("DELETE FROM systempreferences WHERE variable = 'OPACItemHolds'");
9978
9979     print "Upgrade to $DBversion done (Bug 5786: Move AllowOnShelfHolds to circulation matrix; Move OPACItemHolds system preference to circulation matrix)\n";
9980     SetVersion ($DBversion);
9981 }
9982
9983
9984 $DBversion = "3.19.00.018";
9985 if ( CheckVersion($DBversion) ) {
9986     $dbh->do(q|
9987         UPDATE systempreferences set variable="OpacAdditionalStylesheet" WHERE variable="opaccolorstylesheet"
9988     |);
9989     print "Upgrade to $DBversion done (Bug 10328: Rename opaccolorstylesheet to OpacAdditionalStylesheet\n";
9990     SetVersion ($DBversion);
9991 }
9992
9993 $DBversion = "3.19.00.019";
9994 if ( CheckVersion($DBversion) ) {
9995     $dbh->do(q{
9996         INSERT IGNORE INTO systempreferences (variable, value, explanation, options, type)
9997         VALUES('Coce','0', 'If on, enables cover retrieval from the configured Coce server', NULL, 'YesNo')
9998     });
9999     $dbh->do(q{
10000         INSERT IGNORE INTO systempreferences (variable, value, explanation, options, type)
10001         VALUES('CoceHost', NULL, 'Coce server URL', NULL,'Free')
10002     });
10003     $dbh->do(q{
10004         INSERT IGNORE INTO systempreferences (variable, value, explanation, options, type)
10005         VALUES('CoceProviders', NULL, 'Coce providers', 'aws,gb,ol', 'multiple')
10006     });
10007     print "Upgrade to $DBversion done (Bug 9580: Cover image from Coce, a remote image URL cache)\n";
10008     SetVersion($DBversion);
10009 }
10010
10011 $DBversion = "3.19.00.020";
10012 if ( CheckVersion($DBversion) ) {
10013     $dbh->do(q|
10014         ALTER TABLE aqorders DROP COLUMN supplierreference;
10015     |);
10016
10017     print "Upgrade to $DBversion done (Bug 11008: DROP column aqorders.supplierreference)\n";
10018     SetVersion($DBversion);
10019 }
10020
10021 $DBversion = "3.19.00.021";
10022 if ( CheckVersion($DBversion) ) {
10023     $dbh->do(q|
10024         ALTER TABLE issues DROP COLUMN issuingbranch
10025     |);
10026     $dbh->do(q|
10027         ALTER TABLE old_issues DROP COLUMN issuingbranch
10028     |);
10029     print "Upgrade to $DBversion done (Bug 2806: Remove issuingbranch columns)\n";
10030     SetVersion ($DBversion);
10031 }
10032
10033 $DBversion = '3.19.00.022';
10034 if ( CheckVersion($DBversion) ) {
10035     $dbh->do(q{
10036         ALTER TABLE suggestions DROP COLUMN mailoverseeing;
10037     });
10038     print "Upgrade to $DBversion done (Bug 13006: Drop column suggestion.mailoverseeing)\n";
10039     SetVersion($DBversion);
10040 }
10041
10042 $DBversion = "3.19.00.023";
10043 if ( CheckVersion($DBversion) ) {
10044     $dbh->do(q|
10045         DELETE FROM systempreferences where variable = 'AddPatronLists'
10046     |);
10047     print "Upgrade to $DBversion done (Bug 13497: Remove the AddPatronLists system preferences)\n";
10048     SetVersion ($DBversion);
10049 }
10050
10051 $DBversion = "3.19.00.024";
10052 if ( CheckVersion($DBversion) ) {
10053     $dbh->do(qq|DROP table patroncards;|);
10054     print "Upgrade to $DBversion done (Bug 13539: Remove table patroncards from database as it's no longer in use)\n";
10055     SetVersion ($DBversion);
10056 }
10057
10058 $DBversion = "3.19.00.025";
10059 if ( CheckVersion($DBversion) ) {
10060     $dbh->do(q|
10061         INSERT INTO systempreferences ( variable, value, options, explanation, type ) VALUES
10062         ('SearchWithISBNVariations','0',NULL,'If enabled, search on all variations of the ISBN','YesNo')
10063     |);
10064     print "Upgrade to $DBversion done (Bug 13528: Add the SearchWithISBNVariations syspref)\n";
10065     SetVersion ($DBversion);
10066 }
10067
10068 $DBversion = "3.19.00.026";
10069 if( CheckVersion($DBversion) ) {
10070     if ( C4::Context->preference('marcflavour') eq 'MARC21' ) {
10071     $dbh->do(q{
10072         INSERT IGNORE INTO auth_tag_structure (authtypecode, tagfield, liblibrarian, libopac, repeatable, mandatory, authorised_value) VALUES
10073         ('', '388', 'TIME PERIOD OF CREATION', 'TIME PERIOD OF CREATION', 1, 0, NULL);
10074     });
10075
10076     $dbh->do(q{
10077         INSERT IGNORE INTO auth_subfield_structure (authtypecode, tagfield, tagsubfield, liblibrarian, libopac, repeatable,
10078         mandatory, tab, authorised_value, value_builder, seealso, isurl, hidden, linkid, kohafield, frameworkcode) VALUES
10079         ('', '388', '0', 'Authority record control number or standard number', 'Authority record control number or standard number', 1, 0, 3, NULL, NULL, NULL, 0, 0, '', '', ''),
10080         ('', '388', '2', 'Source of term', 'Source of term', 0, 0, 3, NULL, NULL, NULL, 0, 0, '', '', ''),
10081         ('', '388', '3', 'Materials specified', 'Materials specified', 0, 0, 3, NULL, NULL, NULL, 0, 0, '', '', ''),
10082         ('', '388', '6', 'Linkage', 'Linkage', 0, 0, 3, NULL, NULL, NULL, 0, 0, '', '', ''),
10083         ('', '388', '8', 'Field link and sequence number', 'Field link and sequence number', 1, 0, 3, NULL, NULL, NULL, 0, 0, '', '', ''),
10084         ('', '388', 'a', 'Time period of creation term', 'Time period of creation term', 1, 0, 3, NULL, NULL, NULL, 0, 0, '', '', '');
10085     });
10086
10087     $dbh->do(q{
10088         UPDATE IGNORE auth_subfield_structure SET repeatable = 1 WHERE tagsubfield = 'g' AND tagfield IN
10089         ('100','110','111','130','400','410','411','430','500','510','511','530','700','710','730');
10090     });
10091
10092     $dbh->do(q{
10093         INSERT IGNORE INTO auth_subfield_structure (authtypecode, tagfield, tagsubfield, liblibrarian, libopac, repeatable,
10094         mandatory, tab, authorised_value, value_builder, seealso, isurl, hidden, linkid, kohafield, frameworkcode) VALUES
10095         ('', '150', 'g', 'Miscellaneous information', 'Miscellaneous information', 1, 0, 1, NULL, NULL, NULL, 0, 0, '', '', ''),
10096         ('', '151', 'g', 'Miscellaneous information', 'Miscellaneous information', 1, 0, 1, NULL, NULL, NULL, 0, 0, '', '', ''),
10097         ('', '450', 'g', 'Miscellaneous information', 'Miscellaneous information', 1, 0, 4, NULL, NULL, NULL, 0, 0, '', '', ''),
10098         ('', '451', 'g', 'Miscellaneous information', 'Miscellaneous information', 1, 0, 4, NULL, NULL, NULL, 0, 0, '', '', ''),
10099         ('', '550', 'g', 'Miscellaneous information', 'Miscellaneous information', 1, 0, 5, NULL, NULL, NULL, 0, 0, '', '', ''),
10100         ('', '551', 'g', 'Miscellaneous information', 'Miscellaneous information', 1, 0, 5, NULL, NULL, NULL, 0, 0, '', '', ''),
10101         ('', '750', 'g', 'Miscellaneous information', 'Miscellaneous information', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10102         ('', '751', 'g', 'Miscellaneous information', 'Miscellaneous information', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10103         ('', '748', 'i', 'Relationship information', 'Relationship information', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10104         ('', '755', 'i', 'Relationship information', 'Relationship information', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10105         ('', '780', 'i', 'Relationship information', 'Relationship information', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10106         ('', '781', 'i', 'Relationship information', 'Relationship information', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10107         ('', '782', 'i', 'Relationship information', 'Relationship information', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10108         ('', '785', 'i', 'Relationship information', 'Relationship information', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10109         ('', '710', '4', 'Relationship code', 'Relationship code', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10110         ('', '730', '4', 'Relationship code', 'Relationship code', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10111         ('', '748', '4', 'Relationship code', 'Relationship code', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10112         ('', '750', '4', 'Relationship code', 'Relationship code', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10113         ('', '751', '4', 'Relationship code', 'Relationship code', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10114         ('', '755', '4', 'Relationship code', 'Relationship code', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10115         ('', '762', '4', 'Relationship code', 'Relationship code', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10116         ('', '780', '4', 'Relationship code', 'Relationship code', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10117         ('', '781', '4', 'Relationship code', 'Relationship code', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10118         ('', '782', '4', 'Relationship code', 'Relationship code', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10119         ('', '785', '4', 'Relationship code', 'Relationship code', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', ''),
10120         ('', '788', '4', 'Relationship code', 'Relationship code', 1, 0, 7, NULL, NULL, NULL, 0, 0, '', '', '');
10121     });
10122
10123     $dbh->do(q{
10124         UPDATE IGNORE auth_subfield_structure SET liblibrarian = 'Relationship information', libopac = 'Relationship information'
10125         WHERE tagsubfield = 'i' AND tagfield IN ('700','710','730','750','751','762');
10126     });
10127
10128     $dbh->do(q{
10129         UPDATE IGNORE auth_subfield_structure SET liblibrarian = 'Relationship code', libopac = 'Relationship code'
10130         WHERE tagsubfield = '4' AND tagfield IN ('700','710');
10131     });
10132
10133     $dbh->do(q{
10134         INSERT IGNORE INTO marc_tag_structure (tagfield, liblibrarian, libopac, repeatable, mandatory, authorised_value, frameworkcode) VALUES
10135         ('370', 'ASSOCIATED PLACE', 'ASSOCIATED PLACE', 1, 0, NULL, ''),
10136         ('388', 'TIME PERIOD OF CREATION', 'TIME PERIOD OF CREATION', 1, 0, NULL, '');
10137     });
10138
10139     $dbh->do(q{
10140         INSERT IGNORE INTO marc_subfield_structure (tagfield, tagsubfield, liblibrarian, libopac, repeatable, mandatory,
10141         kohafield, tab, authorised_value, authtypecode, value_builder, isurl, hidden, frameworkcode, seealso, link, defaultvalue) VALUES
10142         ('370', '0', 'Authority record control number or standard number', 'Authority record control number or standard number', 1, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10143         ('370', '2', 'Source of term', 'Source of term', 0, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10144         ('370', '6', 'Linkage', 'Linkage', 0, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10145         ('370', '8', 'Field link and sequence number', 'Field link and sequence number', 1, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10146         ('370', 'c', 'Associated country', 'Associated country', 1, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10147         ('370', 'f', 'Other associated place', 'Other associated place', 1, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10148         ('370', 'g', 'Place of origin of work', 'Place of origin of work', 1, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10149         ('370', 's', 'Start period', 'Start period', 0, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10150         ('370', 't', 'End period', 'End period', 0, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10151         ('370', 'u', 'Uniform Resource Identifier', 'Uniform Resource Identifier', 1, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10152         ('370', 'v', 'Source of information', 'Source of information', 1, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10153         ('377', 'l', 'Language term', 'Language term', 1, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10154         ('382', 's', 'Total number of performers', 'Total number of performers', 0, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10155         ('388', '0', 'Authority record control number or standard number', 'Authority record control number or standard number', 1, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10156         ('388', '2', 'Source of term', 'Source of term', 0, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10157         ('388', '3', ' Materials specified', ' Materials specified', 0, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10158         ('388', '6', ' Linkage', ' Linkage', 0, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10159         ('388', '8', 'Field link and sequence number', 'Field link and sequence number', 1, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10160         ('388', 'a', 'Time period of creation term', 'Time period of creation term', 1, 0, '', 3, '', '', '', NULL, -6, '', '', '', NULL),
10161         ('650', 'g', 'Miscellaneous information', 'Miscellaneous information', 1, 0, '', 6, '', '', '', 0, -1, '', '', '', NULL),
10162         ('651', 'g', 'Miscellaneous information', 'Miscellaneous information', 1, 0, '', 6, '', '', '', 0, -1, '', '', '', NULL);
10163     });
10164
10165     $dbh->do(q{
10166         UPDATE IGNORE marc_subfield_structure SET repeatable = 1 WHERE tagsubfield = 'g' AND
10167         tagfield IN ('100','110','111','130','240','243','246','247','600','610','611','630','700','710','711','730','800','810','811','830');
10168     });
10169     }
10170
10171     print "Upgrade to $DBversion done (Bug 13322: Update MARC21 frameworks to Update No. 19 - October 2014)\n";
10172     SetVersion($DBversion);
10173 }
10174
10175 $DBversion = '3.19.00.027';
10176 if ( CheckVersion($DBversion) ) {
10177     $dbh->do("ALTER TABLE items ADD COLUMN itemnotes_nonpublic MEDIUMTEXT AFTER itemnotes");
10178     $dbh->do("ALTER TABLE deleteditems ADD COLUMN itemnotes_nonpublic MEDIUMTEXT AFTER itemnotes");
10179     print "Upgrade to $DBversion done (Bug 4222: Nonpublic note not appearing in the staff client) <b>Please check each of your frameworks to ensure your non-public item notes are mapped to items.itemnotes_nonpublic. After doing so please have your administrator run misc/batchRebuildItemsTables.pl </b>)\n";
10180     SetVersion($DBversion);
10181 }
10182
10183 $DBversion = "3.19.00.028";
10184 if( CheckVersion($DBversion) ) {
10185     eval {
10186         local $dbh->{PrintError} = 0;
10187         $dbh->do(q{
10188             ALTER TABLE issues DROP PRIMARY KEY
10189         });
10190     };
10191
10192     $dbh->do(q{
10193         ALTER TABLE old_issues ADD issue_id INT( 11 ) NOT NULL AUTO_INCREMENT PRIMARY KEY FIRST
10194     });
10195
10196     $dbh->do(q{
10197         ALTER TABLE old_issues CHANGE issue_id issue_id INT( 11 ) NOT NULL
10198     });
10199
10200     $dbh->do(q{
10201         ALTER TABLE issues ADD issue_id INT( 11 ) NOT NULL AUTO_INCREMENT PRIMARY KEY FIRST
10202     });
10203
10204     $dbh->do(q{
10205         UPDATE issues SET issue_id = issue_id + ( SELECT COUNT(*) FROM old_issues ) ORDER BY issue_id DESC
10206     });
10207
10208     my $max_issue_id = $schema->resultset('Issue')->get_column('issue_id')->max();
10209     if ($max_issue_id) {
10210         $max_issue_id++;
10211         $dbh->do(qq{
10212             ALTER TABLE issues AUTO_INCREMENT = $max_issue_id
10213         });
10214     }
10215
10216     print "Upgrade to $DBversion done (Bug 13790: Add unique id issue_id to issues and oldissues tables)\n";
10217     SetVersion($DBversion);
10218 }
10219
10220 $DBversion = "3.19.00.029";
10221 if ( CheckVersion($DBversion) ) {
10222     $dbh->do(q|
10223          ALTER TABLE sessions CHANGE COLUMN a_session a_session MEDIUMTEXT
10224     |);
10225     print "Upgrade to $DBversion done (Bug 13606: Upgrade sessions.a_session to MEDIUMTEXT)\n";
10226     SetVersion($DBversion);
10227 }
10228
10229 $DBversion = "3.19.00.030";
10230 if ( CheckVersion($DBversion) ) {
10231     $dbh->do(q|
10232 UPDATE language_subtag_registry SET subtag = 'kn' WHERE subtag = 'ka' AND description = 'Kannada';
10233     |);
10234     $dbh->do(q|
10235 UPDATE language_rfc4646_to_iso639 SET rfc4646_subtag = 'kn' WHERE rfc4646_subtag = 'ka' AND iso639_2_code = 'kan';
10236     |);
10237     $dbh->do(q|
10238 UPDATE language_descriptions SET subtag = 'kn', lang = 'kn' WHERE subtag = 'ka' AND lang = 'ka' AND description = 'ಕನ್ನಡ';
10239     |);
10240     $dbh->do(q|
10241 UPDATE language_descriptions SET subtag = 'kn' WHERE subtag = 'ka' AND description = 'Kannada';
10242     |);
10243     $dbh->do(q|
10244 INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added) VALUES ( 'ka', 'language', 'Georgian','2015-04-20');
10245     |);
10246     $dbh->do(q|
10247 DELETE FROM language_subtag_registry
10248        WHERE NOT id IN
10249          (SELECT id FROM
10250            (SELECT MIN(id) as id,subtag,type,description,added
10251             FROM language_subtag_registry
10252             GROUP BY subtag,type,description,added)
10253            AS subtable);
10254     |);
10255     $dbh->do(q|
10256 INSERT IGNORE INTO language_rfc4646_to_iso639(rfc4646_subtag,iso639_2_code) VALUES ( 'ka', 'geo');
10257     |);
10258     $dbh->do(q|
10259 DELETE FROM language_rfc4646_to_iso639
10260        WHERE NOT id IN
10261          (SELECT id FROM
10262            (SELECT MIN(id) as id,rfc4646_subtag,iso639_2_code
10263             FROM language_rfc4646_to_iso639
10264             GROUP BY rfc4646_subtag,iso639_2_code)
10265            AS subtable);
10266     |);
10267     $dbh->do(q|
10268 INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ka', 'language', 'ka', 'ქართული');
10269     |);
10270     $dbh->do(q|
10271 INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ka', 'language', 'en', 'Georgian');
10272     |);
10273     $dbh->do(q|
10274 INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ka', 'language', 'fr', 'Géorgien');
10275     |);
10276     $dbh->do(q|
10277 INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ka', 'language', 'de', 'Georgisch');
10278     |);
10279     $dbh->do(q|
10280 INSERT IGNORE INTO language_descriptions(subtag, type, lang, description) VALUES ( 'ka', 'language', 'es', 'Georgiano');
10281     |);
10282     $dbh->do(q|
10283 DELETE FROM language_descriptions
10284        WHERE NOT id IN
10285          (SELECT id FROM
10286            (SELECT MIN(id) as id,subtag,type,lang,description
10287             FROM language_descriptions GROUP BY subtag,type,lang,description)
10288            AS subtable);
10289     |);
10290     print "Upgrade to $DBversion done (Bug 14030: Add Georgian language and fix Kannada language code)\n";
10291     SetVersion($DBversion);
10292 }
10293
10294 $DBversion = "3.19.00.031";
10295 if ( CheckVersion($DBversion) ) {
10296     $dbh->do(q{
10297         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
10298         VALUES('IdRef','0','Disable/enable the IdRef webservice from the OPAC detail page.',NULL,'YesNo')
10299     });
10300     print "Upgrade to $DBversion done (Bug 8992: Add system preference IdRef))\n";
10301     SetVersion($DBversion);
10302 }
10303
10304 $DBversion = "3.19.00.032";
10305 if ( CheckVersion($DBversion) ) {
10306     $dbh->do(q|
10307         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
10308         VALUES('AddressFormat','us','Choose format to display postal addresses','','Choice')
10309     |);
10310     print "Upgrade to $DBversion done (Bug 4041: Address Format as a I18N/L10N system preference\n";
10311     SetVersion ($DBversion);
10312 }
10313
10314 $DBversion = "3.19.00.033";
10315 if ( CheckVersion($DBversion) ) {
10316     $dbh->do(q|
10317         ALTER TABLE auth_header
10318         CHANGE COLUMN datemodified modification_time TIMESTAMP NOT NULL default CURRENT_TIMESTAMP
10319     |);
10320     $dbh->do(q|
10321         ALTER TABLE auth_header
10322         CHANGE COLUMN modification_time modification_time TIMESTAMP NOT NULL default CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP
10323     |);
10324     print "Upgrade to $DBversion done (Bug 11165: Update auth_header.datemodified when updated)\n";
10325     SetVersion ($DBversion);
10326 }
10327
10328 $DBversion = "3.19.00.034";
10329 if ( CheckVersion($DBversion) ) {
10330     $dbh->do(q|
10331         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
10332         VALUES('CardnumberLength', '', '', 'Set a length for card numbers.', 'Free')
10333     |);
10334     print "Upgrade to $DBversion done (Bug 13984: CardnumberLength syspref missing on some setups\n";
10335     SetVersion ($DBversion);
10336 }
10337
10338 $DBversion = "3.19.00.035";
10339 if ( CheckVersion($DBversion) ) {
10340     $dbh->do(q|
10341         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('useDischarge','','Allows librarians to discharge borrowers and borrowers to request a discharge','','YesNo')
10342     |);
10343     $dbh->do(q|
10344         INSERT IGNORE INTO letter (module, code, name, title, content) VALUES('members', 'DISCHARGE', 'Discharge', 'Discharge for <<borrowers.firstname>> <<borrowers.surname>>', '<h1>Discharge</h1>\r\n\r\nThe library <<borrowers.branchcode>> certifies that the following borrower :\r\n\r\n    <<borrowers.firstname>> <<borrowers.surname>>\r\n   Cardnumber : <<borrowers.cardnumber>>\r\n\r\nreturned all his documents.')
10345     |);
10346
10347     $dbh->do(q|
10348         ALTER TABLE borrower_debarments CHANGE type type ENUM('SUSPENSION','OVERDUES','MANUAL','DISCHARGE') NOT NULL DEFAULT 'MANUAL'
10349     |);
10350
10351     $dbh->do(q|
10352         CREATE TABLE discharges (
10353           borrower int(11) DEFAULT NULL,
10354           needed timestamp NULL DEFAULT NULL,
10355           validated timestamp NULL DEFAULT NULL,
10356           KEY borrower_discharges_ibfk1 (borrower),
10357           CONSTRAINT borrower_discharges_ibfk1 FOREIGN KEY (borrower) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE
10358         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
10359     |);
10360
10361     print "Upgrade to $DBversion done (Bug 8007: Add System Preferences useDischarge, the discharge notice and the new table discharges)\n";
10362     SetVersion($DBversion);
10363 }
10364
10365 $DBversion = "3.19.00.036";
10366 if ( CheckVersion($DBversion) ) {
10367     $dbh->do(q|
10368         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
10369         VALUES ('CronjobLog','0',NULL,'If ON, log information from cron jobs.','YesNo')
10370     |);
10371     print "Upgrade to $DBversion done (Bug 13889: Add cron jobs information to system log)\n";
10372     SetVersion ($DBversion);
10373 }
10374
10375 $DBversion = "3.19.00.037";
10376 if ( CheckVersion($DBversion) ) {
10377     $dbh->do(q|
10378         ALTER TABLE marc_subfield_structure
10379         MODIFY COLUMN tagsubfield varchar(1) COLLATE utf8_bin NOT NULL DEFAULT ''
10380     |);
10381     print "Upgrade to $DBversion done (Bug 13810: Change collate for tagsubfield (utf8_bin))\n";
10382     SetVersion ($DBversion);
10383 }
10384
10385 $DBversion = "3.19.00.038";
10386 if ( CheckVersion($DBversion) ) {
10387     $dbh->do(q|
10388         ALTER TABLE virtualshelves
10389         ADD COLUMN created_on DATETIME NOT NULL AFTER lastmodified
10390     |);
10391     # Set created_on = lastmodified
10392     # I would say it's better than 0000-00-00
10393     # Set modified to the existing value (do not get the current ts!)
10394     $dbh->do(q|
10395         UPDATE virtualshelves
10396         SET created_on = lastmodified, lastmodified = lastmodified
10397     |);
10398     print "Upgrade to $DBversion done (Bug 13421: Add DB field virtualshelves.created_on)\n";
10399     SetVersion ($DBversion);
10400 }
10401
10402 $DBversion = "3.19.00.039";
10403 if ( CheckVersion($DBversion) ) {
10404     print "Upgrade to $DBversion done (Koha 3.20 beta)\n";
10405     SetVersion ($DBversion);
10406 }
10407
10408 $DBversion = "3.19.00.040";
10409 if ( CheckVersion($DBversion) ) {
10410     $dbh->do(q|
10411         ALTER TABLE aqorders DROP COLUMN totalamount
10412     |);
10413     print "Upgrade to $DBversion done (Bug 11006: Drop column aqorders.totalamount)\n";
10414     SetVersion ($DBversion);
10415 }
10416
10417 $DBversion = "3.19.00.041";
10418 if ( CheckVersion($DBversion) ) {
10419     unless ( index_exists( 'suggestions', 'status' ) ) {
10420         $dbh->do(q|
10421             ALTER TABLE suggestions ADD KEY status (STATUS)
10422         |);
10423     }
10424     unless ( index_exists( 'suggestions', 'biblionumber' ) ) {
10425         $dbh->do(q|
10426             ALTER TABLE suggestions ADD KEY biblionumber (biblionumber)
10427         |);
10428     }
10429     unless ( index_exists( 'suggestions', 'branchcode' ) ) {
10430         $dbh->do(q|
10431             ALTER TABLE suggestions ADD KEY branchcode (branchcode)
10432         |);
10433     }
10434     print "Upgrade to $DBversion done (Bug 14132: suggestions table is missing indexes)\n";
10435     SetVersion ($DBversion);
10436 }
10437
10438 $DBversion = "3.19.00.042";
10439 if ( CheckVersion($DBversion) ) {
10440     $dbh->do(q{
10441         DELETE ass.*
10442         FROM auth_subfield_structure AS ass
10443         LEFT JOIN auth_types USING(authtypecode)
10444         WHERE auth_types.authtypecode IS NULL
10445     });
10446
10447     unless ( foreign_key_exists( 'auth_subfield_structure', 'auth_subfield_structure_ibfk_1' ) ) {
10448         $dbh->do(q{
10449             ALTER TABLE auth_subfield_structure
10450             ADD CONSTRAINT auth_subfield_structure_ibfk_1
10451             FOREIGN KEY (authtypecode) REFERENCES auth_types(authtypecode)
10452             ON DELETE CASCADE ON UPDATE CASCADE
10453         });
10454     }
10455
10456     print "Upgrade to $DBversion done (Bug 8480: Add foreign key on auth_subfield_structure.authtypecode)\n";
10457     SetVersion($DBversion);
10458 }
10459
10460 $DBversion = "3.19.00.043";
10461 if ( CheckVersion($DBversion) ) {
10462     $dbh->do(q|
10463         INSERT IGNORE INTO authorised_values (category, authorised_value, lib) VALUES
10464         ('REPORT_GROUP', 'SER', 'Serials')
10465     |);
10466
10467     print "Upgrade to $DBversion done (Bug 5338: Add Serial to the report groups if does not exist)\n";
10468     SetVersion ($DBversion);
10469 }
10470
10471 $DBversion = "3.20.00.000";
10472 if ( CheckVersion($DBversion) ) {
10473     print "Upgrade to $DBversion done (Koha 3.20)\n";
10474     SetVersion ($DBversion);
10475 }
10476
10477 $DBversion = "3.21.00.000";
10478 if ( CheckVersion($DBversion) ) {
10479     print "Upgrade to $DBversion done (El tiempo vuela, un nuevo ciclo comienza.)\n";
10480     SetVersion ($DBversion);
10481 }
10482
10483 $DBversion = "3.21.00.001";
10484 if ( CheckVersion($DBversion) ) {
10485     $dbh->do(q|
10486         UPDATE systempreferences SET variable='IntranetUserJS' where variable='intranetuserjs'
10487     |);
10488     print "Upgrade to $DBversion done (Bug 12160: Rename intranetuserjs to IntranetUserJS)\n";
10489     SetVersion ($DBversion);
10490 }
10491
10492 $DBversion = "3.21.00.002";
10493 if ( CheckVersion($DBversion) ) {
10494     $dbh->do(q|
10495         UPDATE systempreferences SET variable='OPACUserJS' where variable='opacuserjs'
10496     |);
10497     print "Upgrade to $DBversion done (Bug 12160: Rename opacuserjs to OPACUserJS)\n";
10498     SetVersion ($DBversion);
10499 }
10500
10501 $DBversion = "3.21.00.003";
10502 if ( CheckVersion($DBversion) ) {
10503     $dbh->do(q|
10504         INSERT IGNORE INTO language_subtag_registry( subtag, type, description, added)
10505         VALUES ( 'IN', 'region', 'India','2015-05-28');
10506     |);
10507     $dbh->do(q|
10508         INSERT IGNORE INTO language_descriptions(subtag, type, lang, description)
10509         VALUES ( 'IN', 'region', 'en', 'India');
10510     |);
10511     $dbh->do(q|
10512         INSERT IGNORE INTO language_descriptions(subtag, type, lang, description)
10513         VALUES ( 'IN', 'region', 'bn', 'ভারত');
10514     |);
10515     print "Upgrade to $DBversion done (Bug 14285: Add new region India)\n";
10516     SetVersion ($DBversion);
10517 }
10518
10519 $DBversion = '3.21.00.004';
10520 if ( CheckVersion($DBversion) ) {
10521     my $OPACBaseURL = C4::Context->preference('OPACBaseURL');
10522     if (defined($OPACBaseURL) && substr($OPACBaseURL,0,4) ne "http") {
10523         my $explanation = q{Specify the Base URL of the OPAC, e.g., http://opac.mylibrary.com, including the protocol (http:// or https://). Otherwise, the http:// will be added automatically by Koha upon saving.};
10524         $OPACBaseURL = 'http://' . $OPACBaseURL;
10525         my $sth_OPACBaseURL = $dbh->prepare( q{
10526             UPDATE systempreferences SET value=?,explanation=?
10527             WHERE variable='OPACBaseURL'; } );
10528         $sth_OPACBaseURL->execute($OPACBaseURL,$explanation);
10529     }
10530     if (defined($OPACBaseURL)) {
10531         $dbh->do( q{ UPDATE letter
10532                      SET content=replace(content,
10533                                          'http://<<OPACBaseURL>>',
10534                                          '<<OPACBaseURL>>')
10535                      WHERE content LIKE "%http://<<OPACBaseURL>>%"; } );
10536     }
10537
10538     print "Upgrade to $DBversion done (Bug 5010: Fix OPACBaseURL to include protocol)\n";
10539     SetVersion($DBversion);
10540 }
10541
10542 $DBversion = "3.21.00.005";
10543 if ( CheckVersion($DBversion) ) {
10544     $dbh->do(q|
10545         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
10546         VALUES ('ReportsLog','0',NULL,'If ON, log information about reports.','YesNo')
10547     |);
10548     print "Upgrade to $DBversion done (Bug 14024: Add reports to action logs)\n";
10549     SetVersion ($DBversion);
10550 }
10551
10552 $DBversion = "3.21.00.006";
10553 if ( CheckVersion($DBversion) ) {
10554     # Remove the borrow permission flag (bit 7)
10555     $dbh->do(q|
10556         UPDATE borrowers
10557         SET flags = flags - ( flags & (1<<7) )
10558         WHERE flags IS NOT NULL
10559             AND flags > 0
10560     |);
10561     $dbh->do(q|
10562         DELETE FROM userflags WHERE bit=7;
10563     |);
10564     print "Upgrade to $DBversion done (Bug 7976: Remove the 'borrow' permission)\n";
10565     SetVersion($DBversion);
10566 }
10567
10568 $DBversion = "3.21.00.007";
10569 if ( CheckVersion($DBversion) ) {
10570     unless ( index_exists( 'aqbasket', 'authorisedby' ) ) {
10571         $dbh->do(q|
10572             ALTER TABLE aqbasket
10573                 ADD KEY authorisedby (authorisedby)
10574         |);
10575     }
10576     unless ( index_exists( 'aqbooksellers', 'name' ) ) {
10577         $dbh->do(q|
10578             ALTER TABLE aqbooksellers
10579                 ADD KEY name (name(255))
10580         |);
10581     }
10582     unless ( index_exists( 'aqbudgets', 'budget_parent_id' ) ) {
10583         $dbh->do(q|
10584             ALTER TABLE aqbudgets
10585                 ADD KEY budget_parent_id (budget_parent_id)|);
10586         }
10587     unless ( index_exists( 'aqbudgets', 'budget_code' ) ) {
10588         $dbh->do(q|
10589             ALTER TABLE aqbudgets
10590                 ADD KEY budget_code (budget_code)|);
10591     }
10592     unless ( index_exists( 'aqbudgets', 'budget_branchcode' ) ) {
10593         $dbh->do(q|
10594             ALTER TABLE aqbudgets
10595                 ADD KEY budget_branchcode (budget_branchcode)|);
10596     }
10597     unless ( index_exists( 'aqbudgets', 'budget_period_id' ) ) {
10598         $dbh->do(q|
10599             ALTER TABLE aqbudgets
10600                 ADD KEY budget_period_id (budget_period_id)|);
10601     }
10602     unless ( index_exists( 'aqbudgets', 'budget_owner_id' ) ) {
10603         $dbh->do(q|
10604             ALTER TABLE aqbudgets
10605                 ADD KEY budget_owner_id (budget_owner_id)|);
10606     }
10607     unless ( index_exists( 'aqbudgets_planning', 'budget_period_id' ) ) {
10608         $dbh->do(q|
10609             ALTER TABLE aqbudgets_planning
10610                 ADD KEY budget_period_id (budget_period_id)|);
10611     }
10612     unless ( index_exists( 'aqorders', 'parent_ordernumber' ) ) {
10613         $dbh->do(q|
10614             ALTER TABLE aqorders
10615                 ADD KEY parent_ordernumber (parent_ordernumber)|);
10616     }
10617     unless ( index_exists( 'aqorders', 'orderstatus' ) ) {
10618         $dbh->do(q|
10619             ALTER TABLE aqorders
10620                 ADD KEY orderstatus (orderstatus)|);
10621     }
10622     print "Upgrade to $DBversion done (Bug 14053: Acquisition db tables are missing indexes)\n";
10623     SetVersion ($DBversion);
10624 }
10625
10626 $DBversion = "3.21.00.008";
10627 if ( CheckVersion($DBversion) ) {
10628     $dbh->do(q{
10629         DELETE IGNORE FROM systempreferences
10630         WHERE variable = 'HomeOrHoldingBranchReturn';
10631     });
10632     print "Upgrade to $DBversion done (Bug 7981: Transfer message on return. HomeOrHoldingBranchReturn syspref removed in favour of circulation rules.)\n";
10633     SetVersion($DBversion);
10634 }
10635
10636 $DBversion = "3.21.00.009";
10637 if ( CheckVersion($DBversion) ) {
10638     $dbh->do(q|
10639         UPDATE aqorders SET orderstatus='cancelled'
10640         WHERE (datecancellationprinted IS NOT NULL OR
10641                datecancellationprinted<>'0000-00-00');
10642     |);
10643     print "Upgrade to $DBversion done (Bug 13993: Correct orderstatus for transferred orders)\n";
10644     SetVersion($DBversion);
10645 }
10646
10647 $DBversion = "3.21.00.010";
10648 if ( CheckVersion($DBversion) ) {
10649     $dbh->do(q|
10650         ALTER TABLE message_queue
10651             DROP message_id
10652     |);
10653     $dbh->do(q|
10654         ALTER TABLE message_queue
10655             ADD message_id INT( 11 ) NOT NULL AUTO_INCREMENT PRIMARY KEY FIRST
10656     |);
10657     print "Upgrade to $DBversion done (Bug 7793: redefine the field message_id as PRIMARY KEY of message_queue)\n";
10658     SetVersion ($DBversion);
10659 }
10660
10661 $DBversion = "3.21.00.011";
10662 if ( CheckVersion($DBversion) ) {
10663     $dbh->do(q{
10664         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
10665         VALUES ('OpacLangSelectorMode','footer','top|both|footer','Select the location to display the language selector','Choice')
10666     });
10667     print "Upgrade to $DBversion done (Bug 14252: Make the OPAC language switcher available in the masthead navbar, footer, or both)\n";
10668     SetVersion ($DBversion);
10669 }
10670
10671 $DBversion = "3.21.00.012";
10672 if ( CheckVersion($DBversion) ) {
10673     $dbh->do(q|
10674         INSERT INTO letter (module, code, name, title, content, message_transport_type)
10675         VALUES
10676         ('suggestions','TO_PROCESS','Notify fund owner', 'A suggestion is ready to be processed','Dear <<borrowers.firstname>> <<borrowers.surname>>,\n\nA new suggestion is ready to be processed: <<suggestions.title>> by <<suggestions.autho    r>>.\n\nThank you,\n\n<<branches.branchname>>', 'email')
10677     |);
10678     print "Upgrade to $DBversion done (Bug 13014: Add the TO_PROCESS letter code)\n";
10679     SetVersion($DBversion);
10680 }
10681
10682 $DBversion = "3.21.00.013";
10683 if ( CheckVersion($DBversion) ) {
10684     my $msg;
10685     if ( C4::Context->preference('OPACPrivacy') ) {
10686         if ( my $anonymous_patron = C4::Context->preference('AnonymousPatron') ) {
10687             my $anonymous_patron_exists = $dbh->selectcol_arrayref(q|
10688                 SELECT COUNT(*)
10689                 FROM borrowers
10690                 WHERE borrowernumber=?
10691             |, {}, $anonymous_patron);
10692             unless ( $anonymous_patron_exists->[0] ) {
10693                 $msg = "Configuration WARNING: OPACPrivacy is set but AnonymousPatron is not linked to an existing patron";
10694             }
10695         }
10696         else {
10697             $msg = "Configuration WARNING: OPACPrivacy is set but AnonymousPatron is not";
10698         }
10699     }
10700     else {
10701         my $patrons_have_required_anonymity = $dbh->selectcol_arrayref(q|
10702             SELECT COUNT(*)
10703             FROM borrowers
10704             WHERE privacy = 2
10705         |, {} );
10706         if ( $patrons_have_required_anonymity->[0] ) {
10707             $msg = "Configuration WARNING: OPACPrivacy is not set but $patrons_have_required_anonymity->[0] patrons have required anonymity (perhaps in a previous configuration). You should fix that asap.";
10708         }
10709     }
10710
10711     $msg //= "Privacy is correctly set";
10712     print "Upgrade to $DBversion done (Bug 9942: $msg)\n";
10713     SetVersion ($DBversion);
10714 }
10715
10716 $DBversion = "3.21.00.014";
10717 if ( CheckVersion($DBversion) ) {
10718     $dbh->do(q{
10719         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
10720         VALUES ('OAI-PMH:DeletedRecord','persistent','Koha\'s deletedbiblio table will never be deleted (persistent) or might be deleted (transient)','transient|persistent','Choice')
10721     });
10722
10723     if ( foreign_key_exists( 'oai_sets_biblios', 'oai_sets_biblios_ibfk_1' ) ) {
10724         $dbh->do(q|
10725             ALTER TABLE oai_sets_biblios DROP FOREIGN KEY oai_sets_biblios_ibfk_1
10726         |);
10727     }
10728     print "Upgrade to $DBversion done (Bug 3206: OAI repository deleted record support)\n";
10729     SetVersion ($DBversion);
10730 }
10731
10732 $DBversion = "3.21.00.015";
10733 if ( CheckVersion($DBversion) ) {
10734     $dbh->do(q{
10735         UPDATE systempreferences SET value='0' WHERE variable='CalendarFirstDayOfWeek' AND value='Sunday';
10736     });
10737     $dbh->do(q{
10738         UPDATE systempreferences SET value='1' WHERE variable='CalendarFirstDayOfWeek' AND value='Monday';
10739     });
10740     $dbh->do(q{
10741         UPDATE systempreferences SET options='0|1|2|3|4|5|6' WHERE variable='CalendarFirstDayOfWeek';
10742     });
10743
10744     print "Upgrade to $DBversion done (Bug 12137: Extend functionality of CalendarFirstDayOfWeek to be any day)\n";
10745     SetVersion($DBversion);
10746 }
10747
10748 $DBversion = "3.21.00.016";
10749 if ( CheckVersion($DBversion) ) {
10750     my $rs = $schema->resultset('Systempreference');
10751     $rs->find_or_create(
10752         {
10753             variable => 'DumpTemplateVarsIntranet',
10754             value    => 0,
10755             explanation => 'If enabled, dump all Template Toolkit variable to a comment in the html source for the staff intranet.',
10756             type => 'YesNo',
10757         }
10758     );
10759     $rs->find_or_create(
10760         {
10761             variable => 'DumpTemplateVarsOpac',
10762             value    => 0,
10763             explanation => 'If enabled, dump all Template Toolkit variable to a comment in the html source for the opac.',
10764             type => 'YesNo',
10765         }
10766     );
10767     print "Upgrade to $DBversion done (Bug 13948: Add ability to dump template toolkit variables to html comment)\n";
10768     SetVersion($DBversion);
10769 }
10770
10771 $DBversion = "3.21.00.017";
10772 if ( CheckVersion($DBversion) ) {
10773     $dbh->do("
10774         CREATE TABLE uploaded_files (
10775             id int(11) NOT NULL AUTO_INCREMENT,
10776             hashvalue CHAR(40) NOT NULL,
10777             filename TEXT NOT NULL,
10778             dir TEXT NOT NULL,
10779             filesize int(11),
10780             dtcreated timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
10781             categorycode tinytext,
10782             owner int(11),
10783             PRIMARY KEY (id)
10784         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci
10785     ");
10786
10787     print "Upgrade to $DBversion done (Bug 6874: New cataloging plugin upload.pl)\n";
10788     print "This plugin comes with a new config variable (upload_path) and a new table (uploaded_files)\n";
10789     print "To use it, set 'upload_path' config variable and 'OPACBaseURL' system preference and link this plugin to a subfield (856\$u for instance)\n";
10790     SetVersion($DBversion);
10791 }
10792
10793 $DBversion = "3.21.00.018";
10794 if ( CheckVersion($DBversion) ) {
10795     $dbh->do(q{
10796         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
10797         VALUES
10798             ('RestrictedPageLocalIPs','',NULL,'Beginning of IP addresses considered as local (comma separated ex: \"127.0.0,127.0.2\")','Free'),
10799             ('RestrictedPageContent','',NULL,'HTML content of the restricted page','TextArea'),
10800             ('RestrictedPageTitle','',NULL,'Title of the restricted page (breadcrumb and header)','Free')
10801     });
10802     print "Upgrade to $DBversion done (Bug 13485: Add a page to display links to restricted sites)\n";
10803     SetVersion ($DBversion);
10804 }
10805
10806 $DBversion = "3.21.00.019";
10807 if ( CheckVersion($DBversion) ) {
10808     if ( column_exists( 'reserves', 'constrainttype' ) ) {
10809         $dbh->do(q{
10810             ALTER TABLE reserves DROP constrainttype
10811         });
10812         $dbh->do(q{
10813             ALTER TABLE old_reserves DROP constrainttype
10814         });
10815     }
10816     $dbh->do(q{
10817         DROP TABLE IF EXISTS reserveconstraints
10818     });
10819     print "Upgrade to $DBversion done (Bug 9809: Get rid of reserveconstraints)\n";
10820     SetVersion ($DBversion);
10821 }
10822
10823 $DBversion = "3.21.00.020";
10824 if ( CheckVersion($DBversion) ) {
10825     $dbh->do(q{
10826         INSERT IGNORE INTO `systempreferences` (`variable`, `value`, `options`, `explanation`, `type`)
10827         VALUES ('FeeOnChangePatronCategory','1','','If set, when a patron changes to a category with enrolment fee, a fee is charged','YesNo')
10828     });
10829     print "Upgrade to $DBversion done (Bug 13697: Option to don't charge a fee, if the patron changes to a category with enrolment fee)\n";
10830     SetVersion($DBversion);
10831 }
10832
10833 $DBversion = "3.21.00.021";
10834 if ( CheckVersion($DBversion) ) {
10835     $dbh->do(q{
10836         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
10837         VALUES ('UseWYSIWYGinSystemPreferences','0','','Show WYSIWYG editor when editing certain HTML system preferences.','YesNo')
10838     });
10839     print "Upgrade to $DBversion done (Bug 11584: Add wysiwyg editor to system preferences dealing with HTML)\n";
10840     SetVersion($DBversion);
10841 }
10842
10843 $DBversion = "3.21.00.022";
10844 if ( CheckVersion($DBversion) ) {
10845     $dbh->do(q{
10846         DELETE cr.*
10847         FROM course_reserves AS cr
10848         LEFT JOIN course_items USING(ci_id)
10849         WHERE course_items.ci_id IS NULL
10850     });
10851
10852     my ($print_error) = $dbh->{PrintError};
10853     $dbh->{RaiseError} = 0;
10854     $dbh->{PrintError} = 0;
10855     if ( foreign_key_exists('course_reserves', 'course_reserves_ibfk_2') ) {
10856         $dbh->do(q{ALTER TABLE course_reserves DROP FOREIGN KEY course_reserves_ibfk_2});
10857         $dbh->do(q{ALTER TABLE course_reserves DROP INDEX course_reserves_ibfk_2});
10858     }
10859     $dbh->{PrintError} = $print_error;
10860
10861     $dbh->do(q{
10862         ALTER TABLE course_reserves
10863             ADD CONSTRAINT course_reserves_ibfk_2
10864                 FOREIGN KEY (ci_id) REFERENCES course_items (ci_id)
10865                 ON DELETE CASCADE ON UPDATE CASCADE
10866     });
10867     print "Upgrade to $DBversion done (Bug 14205: Deleting an Item/Record does not remove link to course reserve)\n";
10868     SetVersion($DBversion);
10869 }
10870
10871 $DBversion = "3.21.00.023";
10872 if ( CheckVersion($DBversion) ) {
10873     $dbh->do(q{
10874         UPDATE borrowers SET debarred=NULL WHERE debarred='0000-00-00'
10875     });
10876     $dbh->do(q{
10877         UPDATE borrowers SET dateexpiry=NULL where dateexpiry='0000-00-00'
10878     });
10879     $dbh->do(q{
10880         UPDATE borrowers SET dateofbirth=NULL where dateofbirth='0000-00-00'
10881     });
10882     $dbh->do(q{
10883         UPDATE borrowers SET dateenrolled=NULL where dateenrolled='0000-00-00'
10884     });
10885     print "Upgrade to $DBversion done (Bug 14717: Prevent 0000-00-00 dates in patron data)\n";
10886     SetVersion($DBversion);
10887 }
10888
10889 $DBversion = "3.21.00.024";
10890 if ( CheckVersion($DBversion) ) {
10891     $dbh->do(q{
10892         ALTER TABLE marc_modification_template_actions
10893         MODIFY COLUMN action
10894             ENUM('delete_field','update_field','move_field','copy_field','copy_and_replace_field')
10895             NOT NULL
10896     });
10897     print "Upgrade to $DBversion done (Bug 14098: Regression in Marc Modification Templates)\n";
10898     SetVersion($DBversion);
10899 }
10900
10901 $DBversion = "3.21.00.025";
10902 if ( CheckVersion($DBversion) ) {
10903     $dbh->do(q{
10904         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
10905         VALUES ('RisExportAdditionalFields',  '', NULL ,  'Define additional RIS tags to export from MARC records in YAML format as an associative array with either a marc tag/subfield combination as the value, or a list of tag/subfield combinations.',  'textarea')
10906     });
10907     $dbh->do(q{
10908         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
10909         VALUES ('BibtexExportAdditionalFields',  '', NULL ,  'Define additional BibTex tags to export from MARC records in YAML format as an associative array with either a marc tag/subfield combination as the value, or a list of tag/subfield combinations.',  'textarea')
10910     });
10911     print "Upgrade to $DBversion done (Bug 12357: Enhancements to RIS and BibTeX exporting)\n";
10912     SetVersion($DBversion);
10913 }
10914
10915 $DBversion = "3.21.00.026";
10916 if ( CheckVersion($DBversion) ) {
10917     $dbh->do(q{
10918         UPDATE matchpoints
10919         SET search_index='issn'
10920         WHERE matcher_id IN (SELECT matcher_id FROM marc_matchers WHERE code = 'ISSN')
10921     });
10922     print "Upgrade to $DBversion done (Bug 14472: Wrong ISSN search index in record matching rules)\n";
10923     SetVersion($DBversion);
10924 }
10925
10926 $DBversion = "3.21.00.027";
10927 if ( CheckVersion($DBversion) ) {
10928     $dbh->do(q|
10929         INSERT IGNORE INTO permissions (module_bit, code, description)
10930         VALUES (1, 'self_checkout', 'Perform self checkout at the OPAC. It should be used for the patron matching the AutoSelfCheckID')
10931     |);
10932
10933     my $AutoSelfCheckID = C4::Context->preference('AutoSelfCheckID');
10934
10935     $dbh->do(q|
10936         UPDATE borrowers
10937         SET flags=0
10938         WHERE userid=?
10939     |, undef, $AutoSelfCheckID);
10940
10941     $dbh->do(q|
10942         DELETE FROM user_permissions
10943         WHERE borrowernumber=(SELECT borrowernumber FROM borrowers WHERE userid=?)
10944     |, undef, $AutoSelfCheckID);
10945
10946     $dbh->do(q|
10947         INSERT INTO user_permissions(borrowernumber, module_bit, code)
10948         SELECT borrowernumber, 1, 'self_checkout' FROM borrowers WHERE userid=?
10949     |, undef, $AutoSelfCheckID);
10950     print "Upgrade to $DBversion done (Bug 14298: AutoSelfCheckID user should only be able to access SCO)\n";
10951     SetVersion($DBversion);
10952 }
10953
10954 $DBversion = "3.21.00.028";
10955 if ( CheckVersion($DBversion) ) {
10956     unless ( column_exists('uploaded_files', 'public') ) {
10957         $dbh->do(q{
10958             ALTER TABLE uploaded_files
10959                 ADD COLUMN public tinyint,
10960                 ADD COLUMN permanent tinyint
10961         });
10962         $dbh->do(q{
10963             UPDATE uploaded_files SET public=1, permanent=1
10964         });
10965         $dbh->do(q{
10966             ALTER TABLE uploaded_files
10967                 CHANGE COLUMN categorycode uploadcategorycode tinytext
10968         });
10969     }
10970     print "Upgrade to $DBversion done (Bug 14321: Merge UploadedFile and UploadedFiles into Koha::Upload)\n";
10971     SetVersion($DBversion);
10972 }
10973
10974 $DBversion = "3.21.00.029";
10975 if ( CheckVersion($DBversion) ) {
10976     unless ( column_exists('discharges', 'discharge_id') ) {
10977         $dbh->do(q{
10978             ALTER TABLE discharges
10979                 ADD COLUMN discharge_id int(11) NOT NULL AUTO_INCREMENT PRIMARY KEY FIRST
10980         });
10981     }
10982     print "Upgrade to $DBversion done (Bug 14368: Add discharges history)\n";
10983     SetVersion($DBversion);
10984 }
10985
10986 $DBversion = "3.21.00.030";
10987 if ( CheckVersion($DBversion) ) {
10988     $dbh->do(q{
10989         UPDATE marc_subfield_structure
10990         SET value_builder='marc21_leader.pl'
10991         WHERE value_builder='marc21_leader_book.pl'
10992     });
10993     $dbh->do(q{
10994         UPDATE marc_subfield_structure
10995         SET value_builder='marc21_leader.pl'
10996         WHERE value_builder='marc21_leader_computerfile.pl'
10997     });
10998     $dbh->do(q{
10999         UPDATE marc_subfield_structure
11000         SET value_builder='marc21_leader.pl'
11001         WHERE value_builder='marc21_leader_video.pl'
11002     });
11003     print "Upgrade to $DBversion done (Bug 14201: Remove unused code or template from some MARC21 leader plugins )\n";
11004     SetVersion($DBversion);
11005 }
11006
11007 $DBversion = "3.21.00.031";
11008 if ( CheckVersion($DBversion) ) {
11009     $dbh->do(q{
11010         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
11011         VALUES
11012             ('SMSSendPassword', '', '', 'Password used to send SMS messages', 'free'),
11013             ('SMSSendUsername', '', '', 'Username/Login used to send SMS messages', 'free')
11014     });
11015     print "Upgrade to $DBversion done (Bug 14820: SMSSendUsername and SMSSendPassword are not listed in the system preferences)\n";
11016     SetVersion($DBversion);
11017 }
11018
11019 $DBversion = "3.21.00.032";
11020 if ( CheckVersion($DBversion) ) {
11021     $dbh->do(q{
11022         CREATE TABLE additional_fields (
11023             id int(11) NOT NULL AUTO_INCREMENT,
11024             tablename varchar(255) NOT NULL DEFAULT '',
11025             name varchar(255) NOT NULL DEFAULT '',
11026             authorised_value_category varchar(16) NOT NULL DEFAULT '',
11027             marcfield varchar(16) NOT NULL DEFAULT '',
11028             searchable tinyint(1) NOT NULL DEFAULT '0',
11029             PRIMARY KEY (id),
11030             UNIQUE KEY fields_uniq (tablename,name)
11031         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci
11032     });
11033     $dbh->do(q{
11034         CREATE TABLE additional_field_values (
11035             id int(11) NOT NULL AUTO_INCREMENT,
11036             field_id int(11) NOT NULL,
11037             record_id int(11) NOT NULL,
11038             value varchar(255) NOT NULL DEFAULT '',
11039             PRIMARY KEY (id),
11040             UNIQUE KEY field_record (field_id,record_id),
11041             CONSTRAINT afv_fk FOREIGN KEY (field_id) REFERENCES additional_fields (id) ON DELETE CASCADE ON UPDATE CASCADE
11042         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci
11043     });
11044     print "Upgrade to $DBversion done (Bug 10855: Additional fields for subscriptions)\n";
11045     SetVersion($DBversion);
11046 }
11047
11048 $DBversion = "3.21.00.033";
11049 if ( CheckVersion($DBversion) ) {
11050
11051     my $done = 0;
11052     my $count_ethnicity = $dbh->selectrow_arrayref(q|
11053         SELECT COUNT(*) FROM ethnicity
11054     |);
11055     my $count_borrower_modifications = $dbh->selectrow_arrayref(q|
11056         SELECT COUNT(*)
11057         FROM borrower_modifications
11058         WHERE ethnicity IS NOT NULL
11059             OR ethnotes IS NOT NULL
11060     |);
11061     my $count_borrowers = $dbh->selectrow_arrayref(q|
11062         SELECT COUNT(*)
11063         FROM borrowers
11064         WHERE ethnicity IS NOT NULL
11065             OR ethnotes IS NOT NULL
11066     |);
11067     # We don't care about the ethnicity of the deleted borrowers, right?
11068     if ( $count_ethnicity->[0] == 0
11069             and $count_borrower_modifications->[0] == 0
11070             and $count_borrowers->[0] == 0
11071     ) {
11072         $dbh->do(q|
11073             DROP TABLE ethnicity
11074         |);
11075         $dbh->do(q|
11076             ALTER TABLE borrower_modifications
11077             DROP COLUMN ethnicity,
11078             DROP COLUMN ethnotes
11079         |);
11080         $dbh->do(q|
11081             ALTER TABLE borrowers
11082             DROP COLUMN ethnicity,
11083             DROP COLUMN ethnotes
11084         |);
11085         $dbh->do(q|
11086             ALTER TABLE deletedborrowers
11087             DROP COLUMN ethnicity,
11088             DROP COLUMN ethnotes
11089         |);
11090         $done = 1;
11091     }
11092     if ( $done ) {
11093         print "Upgrade to $DBversion done (Bug 10020: Drop table ethnicity and columns ethnicity and ethnotes)\n";
11094     }
11095     else {
11096         print "Upgrade to $DBversion done (Bug 10020: This database contains data related to 'ethnicity'. No change will be done on the DB structure but note that the Koha codebase does not use it)\n";
11097     }
11098
11099     SetVersion ($DBversion);
11100 }
11101
11102 $DBversion = "3.21.00.034";
11103 if ( CheckVersion($DBversion) ) {
11104     $dbh->do(q{
11105         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
11106         VALUES('MembershipExpiryDaysNotice',NULL,'Send an account expiration notice that a patron''s card is about to expire after',NULL,'Integer')
11107     });
11108     $dbh->do(q{
11109         INSERT IGNORE INTO letter (module, code, branchcode, name, title, content, message_transport_type)
11110         VALUES('members','MEMBERSHIP_EXPIRY','','Account expiration','Account expiration','Dear <<borrowers.title>> <<borrowers.firstname>> <<borrowers.surname>>,\r\n\r\nYour library card will expire soon, on:\r\n\r\n<<borrowers.dateexpiry>>\r\n\r\nThank you,\r\n\r\nLibrarian\r\n\r\n<<branches.branchname>>', 'email')
11111     });
11112     print "Upgrade to $DBversion done (Bug 6810: Send membership expiry reminder notices)\n";
11113     SetVersion($DBversion);
11114 }
11115
11116 $DBversion = "3.21.00.035";
11117 if ( CheckVersion($DBversion) ) {
11118     $dbh->do(q|
11119         ALTER TABLE branch_borrower_circ_rules ADD COLUMN maxonsiteissueqty int(4) DEFAULT NULL AFTER maxissueqty;
11120     |);
11121     $dbh->do(q|
11122         UPDATE branch_borrower_circ_rules SET maxonsiteissueqty = maxissueqty;
11123     |);
11124     $dbh->do(q|
11125         ALTER TABLE default_borrower_circ_rules ADD COLUMN maxonsiteissueqty int(4) DEFAULT NULL AFTER maxissueqty;
11126     |);
11127     $dbh->do(q|
11128         UPDATE default_borrower_circ_rules SET maxonsiteissueqty = maxissueqty;
11129     |);
11130     $dbh->do(q|
11131         ALTER TABLE default_branch_circ_rules ADD COLUMN maxonsiteissueqty int(4) DEFAULT NULL AFTER maxissueqty;
11132     |);
11133     $dbh->do(q|
11134         UPDATE default_branch_circ_rules SET maxonsiteissueqty = maxissueqty;
11135     |);
11136     $dbh->do(q|
11137         ALTER TABLE default_circ_rules ADD COLUMN maxonsiteissueqty int(4) DEFAULT NULL AFTER maxissueqty;
11138     |);
11139     $dbh->do(q|
11140         UPDATE default_circ_rules SET maxonsiteissueqty = maxissueqty;
11141     |);
11142     $dbh->do(q|
11143         ALTER TABLE issuingrules ADD COLUMN maxonsiteissueqty int(4) DEFAULT NULL AFTER maxissueqty;
11144     |);
11145     $dbh->do(q|
11146         UPDATE issuingrules SET maxonsiteissueqty = maxissueqty;
11147     |);
11148     $dbh->do(q|
11149         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
11150         VALUES ('ConsiderOnSiteCheckoutsAsNormalCheckouts','1',NULL,'Consider on-site checkouts as normal checkouts','YesNo');
11151     |);
11152
11153     print "Upgrade to $DBversion done (Bug 14045: Add DB fields maxonsiteissueqty and pref ConsiderOnSiteCheckoutsAsNormalCheckouts)\n";
11154     SetVersion ($DBversion);
11155 }
11156
11157 $DBversion = "3.21.00.036";
11158 if ( CheckVersion($DBversion) ) {
11159    $dbh->do(q{
11160         ALTER TABLE authorised_values_branches
11161         DROP FOREIGN KEY authorised_values_branches_ibfk_1,
11162         DROP FOREIGN KEY authorised_values_branches_ibfk_2
11163     });
11164     $dbh->do(q{
11165         ALTER TABLE authorised_values_branches
11166         MODIFY av_id INT( 11 ) NOT NULL,
11167         MODIFY branchcode VARCHAR( 10 ) NOT NULL,
11168         ADD FOREIGN KEY (`av_id`) REFERENCES `authorised_values` (`id`) ON DELETE CASCADE,
11169         ADD FOREIGN KEY (`branchcode`) REFERENCES `branches` (`branchcode`) ON DELETE CASCADE
11170    });
11171    print "Upgrade to $DBversion done (Bug 10363: There is no package for authorised values)\n";
11172    SetVersion($DBversion);
11173 }
11174
11175 $DBversion = "3.21.00.037";
11176 if ( CheckVersion($DBversion) ) {
11177    $dbh->do(q{
11178        INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
11179        VALUES ('OverduesBlockRenewing','allow','If any of a patron checked out documents is late, should renewal be allowed, blocked only on overdue items or blocked on whatever checked out document','allow|blockitem|block','Choice')
11180    });
11181    $dbh->do(q{
11182        INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
11183        VALUES ('RestrictionBlockRenewing','0','If patron is restricted, should renewal be allowed or blocked',NULL,'YesNo')
11184     });
11185    print "Upgrade to $DBversion done (Bug 8236: Prevent renewing if overdue or restriction)\n";
11186    SetVersion($DBversion);
11187 }
11188
11189 $DBversion = "3.21.00.038";
11190 if ( CheckVersion($DBversion) ) {
11191     $dbh->do(q|
11192         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type )
11193         VALUES ('BatchCheckouts','0','','Enable or disable batch checkouts','YesNo')
11194     |);
11195     $dbh->do(q|
11196         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type )
11197         VALUES ('BatchCheckoutsValidCategories','',NULL,'Patron categories allowed to checkout in a batch','Free')
11198     |);
11199     print "Upgrade to $DBversion done (Bug 11759: Add the batch checkout feature)\n";
11200     SetVersion($DBversion);
11201 }
11202
11203 $DBversion = "3.21.00.039";
11204 if ( CheckVersion($DBversion) ) {
11205     $dbh->do(q|
11206         ALTER TABLE creator_layouts ADD COLUMN oblique_title INT(1) NULL DEFAULT 1 AFTER guidebox
11207     |);
11208     print "Upgrade to $DBversion done (Bug 12194: Add column oblique_title to layouts)\n";
11209     SetVersion($DBversion);
11210 }
11211
11212 $DBversion = "3.21.00.040";
11213 if ( CheckVersion($DBversion) ) {
11214     $dbh->do(q{
11215         ALTER TABLE itemtypes
11216             ADD hideinopac TINYINT(1) NOT NULL DEFAULT 0
11217               AFTER sip_media_type,
11218             ADD searchcategory VARCHAR(80) DEFAULT NULL
11219               AFTER hideinopac;
11220     });
11221     print "Upgrade to $DBversion done (Bug 10937: Option to hide and group itemtypes from advanced search)\n";
11222     SetVersion($DBversion);
11223 }
11224
11225 $DBversion = "3.21.00.041";
11226 if ( CheckVersion($DBversion) ) {
11227     $dbh->do(q|
11228         ALTER TABLE issuingrules
11229             ADD chargeperiod_charge_at BOOLEAN NOT NULL DEFAULT  '0' AFTER chargeperiod
11230     |);
11231     print "Upgrade to $DBversion done (Bug 13590: Add ability to charge fines at start of charge period)\n";
11232     SetVersion($DBversion);
11233 }
11234
11235 $DBversion = "3.21.00.042";
11236 if ( CheckVersion($DBversion) ) {
11237     $dbh->do(q|
11238         ALTER TABLE items_search_fields
11239             MODIFY COLUMN authorised_values_category VARCHAR(32) DEFAULT NULL
11240     |);
11241     print "Upgrade to $DBversion done (Bug 15069: items_search_fields.authorised_values_category is still a varchar(32))\n";
11242     SetVersion($DBversion);
11243 }
11244
11245 $DBversion = "3.21.00.043";
11246 if ( CheckVersion($DBversion) ) {
11247     $dbh->do(q|
11248         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type )
11249         VALUES ('EnableAdvancedCatalogingEditor','0','','Enable the Rancor advanced cataloging editor','YesNo')
11250     |);
11251     print "Upgrade to $DBversion done (Bug 11559: Professional cataloger's interface)\n";
11252     SetVersion($DBversion);
11253 }
11254
11255 $DBversion = "3.21.00.044";
11256 if ( CheckVersion($DBversion) ) {
11257     $dbh->do(q|
11258         CREATE TABLE localization (
11259             localization_id int(11) NOT NULL AUTO_INCREMENT,
11260             entity varchar(16) COLLATE utf8_unicode_ci NOT NULL,
11261             code varchar(64) COLLATE utf8_unicode_ci NOT NULL,
11262             lang varchar(25) COLLATE utf8_unicode_ci NOT NULL,
11263             translation text COLLATE utf8_unicode_ci,
11264             PRIMARY KEY (localization_id),
11265             UNIQUE KEY entity_code_lang (entity,code,lang)
11266         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci
11267     |);
11268     print "Upgrade to $DBversion done (Bug 14100: Generic solution for language overlay)\n";
11269     SetVersion($DBversion);
11270 }
11271
11272 $DBversion = "3.21.00.045";
11273 if ( CheckVersion($DBversion) ) {
11274     $dbh->do(q|
11275         ALTER TABLE opac_news
11276             ADD borrowernumber int(11) default NULL
11277                 AFTER number
11278     |);
11279     $dbh->do(q|
11280         ALTER TABLE opac_news
11281             ADD CONSTRAINT borrowernumber_fk
11282                 FOREIGN KEY (borrowernumber)
11283                 REFERENCES borrowers (borrowernumber)
11284                 ON DELETE SET NULL ON UPDATE CASCADE
11285     |);
11286     print "Upgrade to $DBversion done (Bug 14246: (newsauthor) Add borrowernumber to koha_news)\n";
11287     SetVersion($DBversion);
11288 }
11289
11290 $DBversion = "3.21.00.046";
11291 if ( CheckVersion($DBversion) ) {
11292     $dbh->do(q{
11293         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type )
11294         VALUES ('NewsAuthorDisplay','none','none|opac|staff|both','Display the author name for news items.','Choice')
11295     });
11296     print "Upgrade to $DBversion done (Bug 14247: (newsauthor) System preference for news author display)\n";
11297     SetVersion($DBversion);
11298 }
11299
11300 $DBversion = "3.21.00.047";
11301 if(CheckVersion($DBversion)) {
11302     $dbh->do(q{
11303         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
11304         VALUES ('IndependentBranchesPatronModifications','0','Show only modification request for the logged in branch','','YesNo')
11305     });
11306     print "Upgrade to $DBversion done (Bug 10904: Limit patron update request management by branch)\n";
11307     SetVersion($DBversion);
11308 }
11309
11310 $DBversion = '3.21.00.048';
11311 if ( CheckVersion($DBversion) ) {
11312     my $create_table_issues = @{ $dbh->selectall_arrayref(q|SHOW CREATE TABLE issues|) }[0]->[1];
11313     if ($create_table_issues !~ m|UNIQUE KEY.*itemnumber| ) {
11314         $dbh->do(q|ALTER TABLE issues ADD CONSTRAINT UNIQUE KEY (itemnumber)|);
11315     }
11316     print "Upgrade to $DBversion done (Bug 14978: Make sure issues.itemnumber is a unique key)\n";
11317     SetVersion($DBversion);
11318 }
11319
11320 $DBversion = "3.21.00.049";
11321 if ( CheckVersion($DBversion) ) {
11322     $dbh->do(q{UPDATE systempreferences SET variable = 'AudioAlerts' WHERE variable = 'soundon'});
11323
11324     $dbh->do(q{
11325         CREATE TABLE audio_alerts (
11326             id int(11) NOT NULL AUTO_INCREMENT,
11327             precedence smallint(5) unsigned NOT NULL,
11328             selector varchar(255) NOT NULL,
11329             sound varchar(255) NOT NULL,
11330             PRIMARY KEY (id),
11331             KEY precedence (precedence)
11332         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
11333     });
11334
11335     $dbh->do(q{
11336         INSERT IGNORE INTO audio_alerts VALUES
11337         (1, 1, '.audio-alert-action', 'opening.ogg'),
11338         (2, 2, '.audio-alert-warning', 'critical.ogg'),
11339         (3, 3, '.audio-alert-success', 'beep.ogg');
11340     });
11341
11342     print "Upgrade to $DBversion done (Bug 11431: Add additional sound options for warnings)\n";
11343     SetVersion($DBversion);
11344 }
11345
11346 $DBversion = "3.21.00.050";
11347 if(CheckVersion($DBversion)) {
11348     $dbh->do(q{
11349         INSERT INTO letter ( module, code, branchcode, name, is_html, title, content, message_transport_type )
11350         VALUES ( 'circulation', 'OVERDUES_SLIP', '', 'Overdues Slip', '0', 'OVERDUES_SLIP', 'The following item(s) is/are currently overdue:
11351
11352 <item>"<<biblio.title>>" by <<biblio.author>>, <<items.itemcallnumber>>, Barcode: <<items.barcode>> Fine: <<items.fine>></item>
11353 ', 'print' )
11354     });
11355     print "Upgrade to $DBversion done (Bug 12933: Add ability to print overdue slip from staff intranet)\n";
11356     SetVersion($DBversion);
11357 }
11358
11359 $DBversion = "3.21.00.051";
11360 if ( CheckVersion($DBversion) ) {
11361     $dbh->do(q{
11362         ALTER TABLE virtualshelves
11363             CHANGE COLUMN sortfield sortfield VARCHAR(16) DEFAULT 'title'
11364     });
11365     $dbh->do(q{
11366         UPDATE virtualshelves
11367         SET sortfield='title'
11368             WHERE sortfield IS NULL;
11369     });
11370     print "Upgrade to $DBversion done (Bug 14544: Move the list related code to Koha::Virtualshelves)\n";
11371     SetVersion($DBversion);
11372 }
11373
11374 $DBversion = "3.21.00.052";
11375 if ( CheckVersion($DBversion) ) {
11376     $dbh->do(q{
11377         ALTER TABLE serial
11378             ADD COLUMN publisheddatetext VARCHAR(100) DEFAULT NULL AFTER publisheddate
11379     });
11380     print "Upgrade to $DBversion done (Bug 8296: Add descriptive (text) published date field for serials)\n";
11381     SetVersion($DBversion);
11382 }
11383
11384 $DBversion = "3.21.00.053";
11385 if ( CheckVersion($DBversion) ) {
11386     my $query = q{ SELECT * FROM itemtypes ORDER BY description };
11387     my $sth   = C4::Context->dbh->prepare($query);
11388     $sth->execute;
11389     my $suggestion_formats = $sth->fetchall_arrayref( {} );
11390
11391     foreach my $format (@$suggestion_formats) {
11392         $dbh->do(
11393             q|
11394             INSERT IGNORE INTO authorised_values (category, authorised_value, lib, lib_opac, imageurl)
11395             VALUES (?, ?, ?, ?, ?)
11396         |, {},
11397             'SUGGEST_FORMAT', $format->{itemtype}, $format->{description}, $format->{description},
11398             $format->{imageurl}
11399         );
11400     }
11401     print "Upgrade to $DBversion done (Bug 9468: create new SUGGEST_FORMAT authorised_value list)\n";
11402     SetVersion($DBversion);
11403 }
11404
11405 $DBversion = "3.21.00.054";
11406 if(CheckVersion($DBversion)) {
11407     $dbh->do(q{
11408         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
11409         VALUES('MergeReportFields','','Displayed fields for deleted MARC records after merge',NULL,'Free')
11410     });
11411     print "Upgrade to $DBversion done (Bug 8064: Merge several biblio records)\n";
11412     SetVersion($DBversion);
11413 }
11414
11415 $DBversion = "3.21.00.055";
11416 if ( CheckVersion($DBversion) ) {
11417     print "Upgrade to $DBversion done (Koha 3.22 beta)\n";
11418     SetVersion($DBversion);
11419 }
11420
11421 $DBversion = "3.21.00.056";
11422 if(CheckVersion($DBversion)) {
11423     $dbh->do(q{
11424         UPDATE systempreferences
11425         SET
11426             options='metric|us|iso|dmydot',
11427             explanation='Define global date format (us mm/dd/yyyy, metric dd/mm/yyy, ISO yyyy-mm-dd, DMY separated by dots dd.mm.yyyy)'
11428         WHERE variable='dateformat'
11429     });
11430     print "Upgrade to $DBversion done (Bug 12072: New dateformat dd.mm.yyyy)\n";
11431     SetVersion($DBversion);
11432 }
11433
11434 $DBversion = "3.22.00.000";
11435 if ( CheckVersion($DBversion) ) {
11436     print "Upgrade to $DBversion done (Koha 3.22)\n";
11437     SetVersion($DBversion);
11438 }
11439
11440 $DBversion = "3.23.00.000";
11441 if ( CheckVersion($DBversion) ) {
11442     print "Upgrade to $DBversion done (The year of the monkey will be here soon.)\n";
11443     SetVersion ($DBversion);
11444 }
11445
11446 $DBversion = "3.23.00.001";
11447 if(CheckVersion($DBversion)) {
11448     $dbh->do(q{
11449         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type )
11450         VALUES (
11451             'DefaultToLoggedInLibraryCircRules',  '0', NULL ,  'If enabled, circ rules editor will default to the logged in library''s rules, rather than the ''all libraries'' rules.',  'YesNo'
11452         ), (
11453             'DefaultToLoggedInLibraryNoticesSlips',  '0', NULL ,  'If enabled,slips and notices editor will default to the logged in library''s rules, rather than the ''all libraries'' rules.',  'YesNo'
11454         )
11455     });
11456
11457     print "Upgrade to $DBversion done (Bug 11625 - Add pref DefaultToLoggedInLibraryCircRules and DefaultToLoggedInLibraryNoticesSlips)\n";
11458     SetVersion($DBversion);
11459 }
11460
11461 $DBversion = "3.23.00.002";
11462 if(CheckVersion($DBversion)) {
11463     $dbh->do(q{
11464         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type )
11465         VALUES ('DefaultToLoggedInLibraryOverdueTriggers',  '0', NULL,  'If enabled, overdue status triggers editor will default to the logged in library''s rules, rather than the ''default'' rules.',  'YesNo')
11466     });
11467
11468     print "Upgrade to $DBversion done (Bug 11747 - add pref DefaultToLoggedInLibraryOverdueTriggers)\n";
11469     SetVersion($DBversion);
11470 }
11471
11472 $DBversion = "3.23.00.003";
11473 if(CheckVersion($DBversion)) {
11474     $dbh->do(q{
11475         UPDATE letter SET name = "Hold Slip" WHERE name = "Reserve Slip"
11476     });
11477     $dbh->do(q{
11478         UPDATE letter SET title = "Hold Slip" WHERE title = "Reserve Slip";
11479     });
11480
11481     print "Upgrade to $DBversion done (Bug 8085 - Rename 'Reserve slip' to 'Hold slip')\n";
11482     SetVersion($DBversion);
11483 }
11484
11485 $DBversion = "3.23.00.004";
11486 if ( CheckVersion($DBversion) ) {
11487     $dbh->do(q{
11488         DROP TABLE IF EXISTS `stopwords`;
11489     });
11490     print "Upgrade to $DBversion done (Bug 9819 - stopwords related code should be removed)\n";
11491     SetVersion($DBversion);
11492 }
11493
11494 $DBversion = "3.23.00.005";
11495 if ( CheckVersion($DBversion) ) {
11496     $dbh->do(q{
11497         UPDATE permissions SET description = 'Manage circulation rules' WHERE description = 'manage circulation rules'
11498     });
11499     $dbh->do(q{
11500         UPDATE permissions SET description = 'Manage staged MARC records, including completing and reversing imports' WHERE description = 'Managed staged MARC records, including completing and reversing imports'
11501     });
11502     print "Upgrade to $DBversion done (Bug 11569 - Typo in userpermissions.sql)\n";
11503     SetVersion($DBversion);
11504 }
11505 $DBversion = "3.23.00.006";
11506 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
11507    $dbh->do("
11508        ALTER TABLE serial
11509         ADD serialseq_x VARCHAR( 100 ) NULL DEFAULT NULL AFTER serialseq,
11510         ADD serialseq_y VARCHAR( 100 ) NULL DEFAULT NULL AFTER serialseq_x,
11511         ADD serialseq_z VARCHAR( 100 ) NULL DEFAULT NULL AFTER serialseq_y
11512    ");
11513
11514     my $sth = $dbh->prepare("SELECT * FROM subscription");
11515     $sth->execute();
11516
11517     my $sth2 = $dbh->prepare("SELECT * FROM subscription_numberpatterns WHERE id = ?");
11518
11519     my $sth3 = $dbh->prepare("UPDATE serial SET serialseq_x = ?, serialseq_y = ?, serialseq_z = ? WHERE serialid = ?");
11520
11521     foreach my $subscription ( $sth->fetchrow_hashref() ) {
11522         next if !defined($subscription);
11523         $sth2->execute( $subscription->{numberpattern} );
11524         my $number_pattern = $sth2->fetchrow_hashref();
11525
11526         my $numbering_method = $number_pattern->{numberingmethod};
11527         # Get all the data between the enumeration values, we need
11528         # to split each enumeration string based on these values.
11529         my @splits = split( /\{[XYZ]\}/, $numbering_method );
11530         # Get the order in which the X Y and Z values are used
11531         my %indexes;
11532         foreach my $i (qw(X Y Z)) {
11533             $indexes{$i} = index( $numbering_method, "{$i}" );
11534             delete $indexes{$i} if $indexes{$i} == -1;
11535         }
11536         my @indexes = sort { $indexes{$a} <=> $indexes{$b} } keys(%indexes);
11537
11538         my @serials = @{
11539             $dbh->selectall_arrayref(
11540                 "SELECT * FROM serial WHERE subscriptionid = $subscription->{subscriptionid}",
11541                 { Slice => {} }
11542             )
11543         };
11544
11545         foreach my $serial (@serials) {
11546             my $serialseq = $serial->{serialseq};
11547             my %enumeration_data;
11548
11549             ## We cannot split on multiple values at once,
11550             ## so let's replace each of those values with __SPLIT__
11551             if (@splits) {
11552                 for my $split_item (@splits) {
11553                     my $quoted_split = quotemeta($split_item);
11554                     $serialseq =~ s/$quoted_split/__SPLIT__/;
11555                 }
11556                 (
11557                     undef,
11558                     $enumeration_data{ $indexes[0] // q{} },
11559                     $enumeration_data{ $indexes[1] // q{} },
11560                     $enumeration_data{ $indexes[2] // q{} }
11561                 ) = split( /__SPLIT__/, $serialseq );
11562             }
11563             else
11564             {    ## Nothing to split on means the only thing in serialseq is a single placeholder e.g. {X}
11565                 $enumeration_data{ $indexes[0] } = $serialseq;
11566             }
11567
11568             $sth3->execute(
11569                     $enumeration_data{'X'},
11570                     $enumeration_data{'Y'},
11571                     $enumeration_data{'Z'},
11572                     $serial->{serialid},
11573             );
11574         }
11575     }
11576
11577     print "Upgrade to $DBversion done ( Bug 8956 - Split serials enumeration data into separate fields )\n";
11578     SetVersion($DBversion);
11579 }
11580
11581 $DBversion = "3.23.00.007";
11582 if ( CheckVersion($DBversion) ) {
11583     $dbh->do("SET FOREIGN_KEY_CHECKS=0");
11584     $dbh->do("ALTER TABLE overduerules RENAME old_overduerules");
11585     $dbh->do("CREATE TABLE overduerules (
11586         `overduerules_id` int(11) NOT NULL AUTO_INCREMENT,
11587         `branchcode` varchar(10) NOT NULL DEFAULT '',
11588         `categorycode` varchar(10) NOT NULL DEFAULT '',
11589         `delay1` int(4) DEFAULT NULL,
11590         `letter1` varchar(20) DEFAULT NULL,
11591         `debarred1` varchar(1) DEFAULT '0',
11592         `delay2` int(4) DEFAULT NULL,
11593         `debarred2` varchar(1) DEFAULT '0',
11594         `letter2` varchar(20) DEFAULT NULL,
11595         `delay3` int(4) DEFAULT NULL,
11596         `letter3` varchar(20) DEFAULT NULL,
11597         `debarred3` int(1) DEFAULT '0',
11598         PRIMARY KEY (`overduerules_id`),
11599         UNIQUE KEY `overduerules_branch_cat` (`branchcode`,`categorycode`)
11600         ) ENGINE=InnoDB DEFAULT CHARSET=utf8;");
11601     $dbh->do("INSERT INTO overduerules(branchcode, categorycode, delay1, letter1, debarred1, delay2, debarred2, letter2, delay3, letter3, debarred3) SELECT * FROM old_overduerules");
11602     $dbh->do("DROP TABLE old_overduerules");
11603     $dbh->do("ALTER TABLE overduerules_transport_types
11604               ADD COLUMN overduerules_id int(11) NOT NULL");
11605     my $mtts = $dbh->selectall_arrayref("SELECT * FROM overduerules_transport_types", { Slice => {} });
11606     $dbh->do("DELETE FROM overduerules_transport_types");
11607     $dbh->do("ALTER TABLE overduerules_transport_types
11608               DROP FOREIGN KEY overduerules_fk,
11609               ADD FOREIGN KEY overduerules_transport_types_fk (overduerules_id) REFERENCES overduerules (overduerules_id) ON DELETE CASCADE ON UPDATE CASCADE,
11610               DROP COLUMN branchcode,
11611               DROP COLUMN categorycode");
11612     my $s = $dbh->prepare("INSERT INTO overduerules_transport_types (overduerules_id, id, letternumber, message_transport_type) "
11613                          ." VALUES((SELECT overduerules_id FROM overduerules WHERE branchcode = ? AND categorycode = ?),?,?,?)");
11614     foreach my $mtt(@$mtts){
11615         $s->execute($mtt->{branchcode}, $mtt->{categorycode}, $mtt->{id}, $mtt->{letternumber}, $mtt->{message_transport_type} );
11616     }
11617     $dbh->do("SET FOREIGN_KEY_CHECKS=1");
11618
11619     print "Upgrade to $DBversion done (Bug 13624 - Remove columns branchcode, categorytype from table overduerules_transport_types)\n";
11620     SetVersion($DBversion);
11621 }
11622
11623 $DBversion = "3.23.00.008";
11624 if ( CheckVersion($DBversion) ) {
11625
11626     $dbh->do(q{ALTER TABLE borrowers ADD privacy_guarantor_checkouts BOOLEAN NOT NULL DEFAULT '0' AFTER privacy});
11627
11628     $dbh->do(q{ALTER TABLE deletedborrowers ADD privacy_guarantor_checkouts BOOLEAN NOT NULL DEFAULT '0' AFTER privacy});
11629
11630     $dbh->do(q{
11631         INSERT IGNORE INTO systempreferences (variable, value, options, explanation, type )
11632         VALUES (
11633             'AllowStaffToSetCheckoutsVisibilityForGuarantor',  '0', NULL,
11634             'If enabled, library staff can set a patron''s checkouts to be visible to linked patrons from the opac.',  'YesNo'
11635         ), (
11636             'AllowPatronToSetCheckoutsVisibilityForGuarantor',  '0', NULL,
11637             'If enabled, the patron can set checkouts to be visible to  his or her guarantor',  'YesNo'
11638         )
11639     });
11640
11641     print "Upgrade to $DBversion done (Bug 9303 - relative's checkouts in the opac)\n";
11642     SetVersion($DBversion);
11643 }
11644
11645 $DBversion = "3.23.00.009";
11646 if ( CheckVersion($DBversion) ) {
11647     $dbh->do(q{
11648         INSERT IGNORE INTO systempreferences (variable, value, options, explanation, type ) VALUES
11649         ( 'EnablePayPalOpacPayments',  '0', NULL ,  'Enables the ability to pay fees and fines from  the OPAC via PayPal',  'YesNo' ),
11650         ( 'PayPalChargeDescription',  'Koha fee payment', NULL ,  'This preference defines what the user will see the charge listed as in PayPal',  'Free' ),
11651         ( 'PayPalPwd',  '', NULL ,  'Your PayPal API password',  'Free' ),
11652         ( 'PayPalSandboxMode',  '1', NULL ,  'If enabled, the system will use PayPal''s sandbox server for testing, rather than the production server.',  'YesNo' ),
11653         ( 'PayPalSignature',  '', NULL ,  'Your PayPal API signature',  'Free' ),
11654         ( 'PayPalUser',  '', NULL ,  'Your PayPal API username ( email address )',  'Free' )
11655     });
11656
11657     print "Upgrade to $DBversion done (Bug 11622 - Add ability to pay fees and fines from OPAC via PayPal)\n";
11658     SetVersion($DBversion);
11659 }
11660
11661 $DBversion = "3.23.00.010";
11662 if ( CheckVersion($DBversion) ) {
11663     $dbh->do(q{
11664         ALTER TABLE issuingrules ADD cap_fine_to_replacement_price BOOLEAN NOT NULL DEFAULT '0' AFTER overduefinescap
11665     });
11666
11667     print "Upgrade to $DBversion done (Bug 9129 - Add the ability to set the maximum fine for an item to its replacement price)\n";
11668     SetVersion($DBversion);
11669 }
11670
11671 $DBversion = "3.23.00.011";
11672 if ( CheckVersion($DBversion) ) {
11673     $dbh->do(q{
11674         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES ('HoldFeeMode','not_always','always|not_always','Set the hold fee mode','Choice')
11675     });
11676
11677     print "Upgrade to $DBversion done (Bug 13592 - Hold fee not being applied on placing a hold)\n";
11678     SetVersion($DBversion);
11679 }
11680
11681 $DBversion = "3.23.00.012";
11682 if ( CheckVersion($DBversion) ) {
11683     $dbh->do(q{
11684         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `explanation`, `options`, `type` ) VALUES('MaxSearchResultsItemsPerRecordStatusCheck','20','Max number of items per record for which to check transit and hold status','','Integer')
11685     });
11686
11687     print "Upgrade to $DBversion done (Bug 15380 - Move the authority types related code to Koha::Authority::Type[s] - part 1)\n";
11688     SetVersion($DBversion);
11689 }
11690
11691 $DBversion = "3.23.00.013";
11692 if ( CheckVersion($DBversion) ) {
11693     $dbh->do(q{
11694         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES ('StoreLastBorrower','0','','If ON, the last borrower to return an item will be stored in items.last_returned_by','YesNo')
11695     });
11696     $dbh->do(q{
11697         CREATE TABLE IF NOT EXISTS `items_last_borrower` (
11698   `id` int(11) NOT NULL AUTO_INCREMENT,
11699   `itemnumber` int(11) NOT NULL,
11700   `borrowernumber` int(11) NOT NULL,
11701   `created_on` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
11702   PRIMARY KEY (`id`),
11703   UNIQUE KEY `itemnumber` (`itemnumber`),
11704   KEY `borrowernumber` (`borrowernumber`),
11705   CONSTRAINT `items_last_borrower_ibfk_2` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE CASCADE ON UPDATE CASCADE,
11706   CONSTRAINT `items_last_borrower_ibfk_1` FOREIGN KEY (`itemnumber`) REFERENCES `items` (`itemnumber`) ON DELETE CASCADE ON UPDATE CASCADE
11707 ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci
11708     });
11709
11710     print "Upgrade to $DBversion done (Bug 14945 - Add the ability to store the last patron to return an item)\n";
11711     SetVersion($DBversion);
11712
11713 }
11714
11715 $DBversion = "3.23.00.014";
11716 if ( CheckVersion($DBversion) ) {
11717     $dbh->do(q{
11718         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` )
11719 VALUES ('ClaimsBccCopy','0','','Bcc the ClaimAcquisition and ClaimIssues alerts','YesNo')
11720     });
11721
11722     print "Upgrade to $DBversion done (Bug 10076 - Add Bcc syspref for claimacquisition and clamissues)\n";
11723     SetVersion($DBversion);
11724 }
11725
11726 $DBversion = "3.23.00.015";
11727 if ( CheckVersion($DBversion) ) {
11728     $dbh->do(q{
11729         UPDATE letter SET code = "HOLD_SLIP" WHERE code = "RESERVESLIP";
11730     });
11731
11732     print "Upgrade to $DBversion done (Bug 15443 - Re-code RESERVESLIP as HOLD_SLIP)\n";
11733     SetVersion($DBversion);
11734 }
11735
11736 $DBversion = "3.23.00.016";
11737 if ( CheckVersion($DBversion) ) {
11738     $dbh->do(q{
11739     INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
11740     VALUES ('OpacResetPassword',  '0','','Shows the ''Forgot your password?'' link in the OPAC','YesNo');
11741 });
11742     $dbh->do(q{
11743     CREATE TABLE IF NOT EXISTS borrower_password_recovery (
11744       borrowernumber int(11) NOT NULL,
11745       uuid varchar(128) NOT NULL,
11746       valid_until timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP,
11747       PRIMARY KEY (borrowernumber),
11748       KEY borrowernumber (borrowernumber)
11749     ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
11750 });
11751     $dbh->do(q{
11752     INSERT IGNORE INTO `letter` (module, code, branchcode, name, is_html, title, content, message_transport_type)
11753     VALUES ('members','PASSWORD_RESET','','Online password reset',1,'Koha password recovery','<html>\r\n<p>This email has been sent in response to your password recovery request for the account <strong><<user>></strong>.\r\n</p>\r\n<p>\r\nYou can now create your new password using the following link:\r\n<br/><a href=\"<<passwordreseturl>>\"><<passwordreseturl>></a>\r\n</p>\r\n<p>This link will be valid for 2 days from this email\'s reception, then you must reapply if you do not change your password.</p>\r\n<p>Thank you.</p>\r\n</html>\r\n','email');
11754
11755     });
11756
11757     print "Upgrade to $DBversion done (Bug 8753 - Add forgot password link to OPAC)\n";
11758     SetVersion($DBversion);
11759 }
11760
11761 $DBversion = "3.23.00.017";
11762 if ( CheckVersion($DBversion) ) {
11763
11764 $dbh->do(q{
11765     DELETE FROM uploaded_files
11766     WHERE COALESCE(permanent,0)=0 AND dir='koha_upload'
11767 });
11768
11769 my $tmp = C4::Context->temporary_directory . '/koha_upload';
11770 remove_tree( $tmp ) if -d $tmp;
11771
11772     print "Upgrade to $DBversion done (Bug 14893 - Separate temporary storage per instance in Upload.pm)\n";
11773     SetVersion($DBversion);
11774
11775 }
11776
11777 $DBversion = "3.23.00.018";
11778 if ( CheckVersion($DBversion) ) {
11779     $dbh->do(q{
11780         UPDATE systempreferences SET value="0" where type="YesNo" and value="";
11781     });
11782
11783     print "Upgrade to $DBversion done (Bug 15446 - Fix systempreferences rows where type=YesNo and value='')\n";
11784     SetVersion($DBversion);
11785 }
11786
11787 $DBversion = "3.23.00.019";
11788 if ( CheckVersion($DBversion) ) {
11789     $dbh->do(q{
11790         UPDATE `authorised_values` SET `lib`='Non-fiction' WHERE `lib`='Non Fiction';
11791     });
11792
11793     print "Upgrade to $DBversion done (Bug 15411 - Change Non Fiction to Non-fiction in authorised_values)\n";
11794     SetVersion($DBversion);
11795 }
11796
11797 $DBversion = "3.23.00.020";
11798 if ( CheckVersion($DBversion) ) {
11799     $dbh->do(q{
11800         CREATE TABLE  sms_providers (
11801            id INT( 11 ) NOT NULL AUTO_INCREMENT PRIMARY KEY ,
11802            name VARCHAR( 255 ) NOT NULL ,
11803            domain VARCHAR( 255 ) NOT NULL ,
11804            UNIQUE (
11805                name
11806            )
11807         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
11808     });
11809
11810     $dbh->do(q{
11811         ALTER TABLE borrowers ADD sms_provider_id INT( 11 ) NULL DEFAULT NULL AFTER smsalertnumber;
11812     });
11813     $dbh->do(q{
11814         ALTER TABLE borrowers ADD FOREIGN KEY ( sms_provider_id ) REFERENCES sms_providers ( id ) ON UPDATE CASCADE ON DELETE SET NULL;
11815     });
11816     $dbh->do(q{
11817         ALTER TABLE deletedborrowers ADD sms_provider_id INT( 11 ) NULL DEFAULT NULL AFTER smsalertnumber;
11818     });
11819
11820     print "Upgrade to $DBversion done (Bug 9021 - Add SMS via email as an alternative to SMS services via SMS::Send drivers)\n";
11821     SetVersion($DBversion);
11822 }
11823
11824 $DBversion = "3.23.00.021";
11825 if ( CheckVersion($DBversion) ) {
11826     $dbh->do(q{
11827         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES ('ShowAllCheckins', '0', '', 'Show all checkins', 'YesNo');
11828     });
11829
11830     print "Upgrade to $DBversion done (Bug 15736 - Add a preference to control whether all items should be shown in checked-in items list)\n";
11831     SetVersion($DBversion);
11832 }
11833
11834 $DBversion = "3.23.00.022";
11835 if ( CheckVersion($DBversion) ) {
11836     $dbh->do(q{ ALTER TABLE tags_all MODIFY COLUMN borrowernumber INT(11) });
11837     $dbh->do(q{ ALTER TABLE tags_all drop FOREIGN KEY tags_borrowers_fk_1 });
11838     $dbh->do(q{ ALTER TABLE tags_all ADD CONSTRAINT `tags_borrowers_fk_1` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE CASCADE });
11839     $dbh->do(q{ ALTER TABLE tags_approval DROP FOREIGN KEY tags_approval_borrowers_fk_1 });
11840     $dbh->do(q{ ALTER TABLE tags_approval ADD CONSTRAINT `tags_approval_borrowers_fk_1` FOREIGN KEY (`approved_by`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE CASCADE });
11841
11842     print "Upgrade to $DBversion done (Bug 13534 - Deleting staff patron will delete tags approved by this patron)\n";
11843     SetVersion($DBversion);
11844 }
11845
11846 $DBversion = "3.23.00.023";
11847 if ( CheckVersion($DBversion) ) {
11848     $dbh->do(q{
11849         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
11850         VALUES('OpenLibrarySearch','0','If Yes Open Library search results will show in OPAC',NULL,'YesNo');
11851     });
11852
11853     print "Upgrade to $DBversion done (Bug 6624 - Allow Koha to use the new read API from OpenLibrary)\n";
11854     SetVersion($DBversion);
11855 }
11856
11857 $DBversion = "3.23.00.024";
11858 if ( CheckVersion($DBversion) ) {
11859     $dbh->do(q{
11860         ALTER TABLE deletedborrowers MODIFY COLUMN userid VARCHAR(75) DEFAULT NULL;
11861     });
11862
11863     $dbh->do(q{
11864         ALTER TABLE deletedborrowers MODIFY COLUMN password VARCHAR(60) DEFAULT NULL;
11865     });
11866
11867     print "Upgrade to $DBversion done (Bug 15517 - Tables borrowers and deletedborrowers differ again)\n";
11868     SetVersion($DBversion);
11869 }
11870
11871 $DBversion = "3.23.00.025";
11872 if ( CheckVersion($DBversion) ) {
11873     $dbh->do(q{
11874         DROP TABLE IF EXISTS nozebra;
11875     });
11876
11877     print "Upgrade to $DBversion done (Bug 15526 - Drop nozebra database table)\n";
11878     SetVersion($DBversion);
11879 }
11880
11881 $DBversion = "3.23.00.026";
11882 if ( CheckVersion($DBversion) ) {
11883     $dbh->do(q{
11884         UPDATE systempreferences SET value = CONCAT_WS('|', IF(value='', NULL, value), "password") WHERE variable="PatronSelfRegistrationBorrowerUnwantedField" AND value NOT LIKE "%password%";
11885     });
11886
11887     print "Upgrade to $DBversion done (Bug 15343 - Allow patrons to choose their own password on self registration)\n";
11888     SetVersion($DBversion);
11889 }
11890
11891 $DBversion = "3.23.00.027";
11892 if ( CheckVersion($DBversion) ) {
11893     my ( $db_value ) = $dbh->selectrow_array(q|SELECT count(*) FROM branches|);
11894     my $pref_value = C4::Context->preference("singleBranchMode") || 0;
11895     if ( $db_value > 1 and $pref_value == 1 ) {
11896         warn "WARNING: You have more than 1 libraries in your branches tables but the singleBranchMode system preference is on.\n";
11897         warn "This configuration does not make sense. The system preference is going to be deleted,\n";
11898         warn "and this parameter will be based on the number of libraries defined.\n";
11899     }
11900     $dbh->do(q|DELETE FROM systempreferences WHERE variable="singleBranchMode"|);
11901
11902     print "Upgrade to $DBversion done (Bug 4941 - Can't set branch in staff client when singleBranchMode is enabled)\n";
11903     SetVersion($DBversion);
11904 }
11905
11906 $DBversion = "3.23.00.028";
11907 if ( CheckVersion($DBversion) ) {
11908     $dbh->do(q{
11909         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) SELECT 'PatronSelfModificationBorrowerUnwantedField',value,NULL,'Name the fields you don\'t want to display when a patron is editing their information via the OPAC.','free' FROM systempreferences WHERE variable = 'PatronSelfRegistrationBorrowerUnwantedField';
11910     });
11911
11912     print "Upgrade to $DBversion done (Bug 14658 - Split PatronSelfRegistrationBorrowerUnwantedField into two preferences for creating and editing)\n";
11913     SetVersion($DBversion);
11914 }
11915
11916 $DBversion = "3.23.00.029";
11917 if ( CheckVersion($DBversion) ) {
11918
11919     # move marc21_field_003.pl 040c and 040d to marc21_orgcode.pl
11920     $dbh->do(q{
11921         update marc_subfield_structure set value_builder='marc21_orgcode.pl' where value_builder IN ( 'marc21_field_003.pl', 'marc21_field_040c.pl', 'marc21_field_040d.pl' );
11922     });
11923     $dbh->do(q{
11924         update auth_subfield_structure set value_builder='marc21_orgcode.pl' where value_builder IN ( 'marc21_field_003.pl', 'marc21_field_040c.pl', 'marc21_field_040d.pl' );
11925     });
11926
11927     print "Upgrade to $DBversion done (Bug 14199 - Unify all organization code plugins)\n";
11928     SetVersion($DBversion);
11929 }
11930
11931 $DBversion = "3.23.00.030";
11932 if(CheckVersion($DBversion)) {
11933     $dbh->do(q{
11934         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
11935         VALUES ('OpacMaintenanceNotice','','','A user-defined block of HTML to appear on screen when OpacMaintenace is enabled','Textarea')
11936     });
11937
11938     print "Upgrade to $DBversion done (Bug 15311: Let libraries set text to display when OpacMaintenance = on)\n";
11939     SetVersion($DBversion);
11940 }
11941
11942 $DBversion = "3.23.00.031";
11943 if(CheckVersion($DBversion)) {
11944     $dbh->do(q{
11945         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
11946         VALUES ('NoRenewalBeforePrecision', 'date', 'Calculate "No renewal before" based on date or exact time. Only relevant for loans calculated in days, hourly loans are not affected.', 'date|exact_time', 'Choice')
11947     });
11948
11949     print "Upgrade to $DBversion done (Bug 14395 - Two different ways to calculate 'No renewal before')\n";
11950     SetVersion($DBversion);
11951 }
11952
11953 $DBversion = "3.23.00.032";
11954 if ( CheckVersion($DBversion) ) {
11955     $dbh->do(q{
11956    -- Add issue_id to accountlines table
11957     ALTER TABLE accountlines ADD issue_id INT(11) NULL DEFAULT NULL AFTER accountlines_id;
11958     });
11959
11960 ## Close out any accruing fines with no current issue
11961     $dbh->do(q{
11962     UPDATE accountlines LEFT JOIN issues USING ( itemnumber, borrowernumber ) SET accounttype = 'F' WHERE accounttype = 'FU' and issues.issue_id IS NULL;
11963     });
11964
11965 ## Close out any extra not really accruing fines, keep only the latest accring fine
11966     $dbh->do(q{
11967     UPDATE accountlines a1
11968     LEFT JOIN (SELECT MAX(accountlines_id) AS keeper,
11969                       borrowernumber,
11970                       itemnumber
11971                FROM   accountlines
11972                WHERE  accounttype = 'FU'
11973                GROUP BY borrowernumber, itemnumber
11974               ) a2 USING ( borrowernumber, itemnumber )
11975     SET    a1.accounttype = 'F'
11976     WHERE  a1.accounttype = 'FU'
11977     AND  a1.accountlines_id != a2.keeper;
11978     });
11979
11980 ## Update the unclosed fines to add the current issue_id to them
11981     $dbh->do(q{
11982     UPDATE accountlines LEFT JOIN issues USING ( itemnumber ) SET accountlines.issue_id = issues.issue_id WHERE accounttype = 'FU';
11983     });
11984
11985     print "Upgrade to $DBversion done (Bug 15675 - Add issue_id column to accountlines and use it for updating fines)\n";
11986     SetVersion($DBversion);
11987 }
11988
11989 $DBversion = "3.23.00.033";
11990 if ( CheckVersion($DBversion) ) {
11991     $dbh->do(q{
11992     UPDATE systempreferences SET value = CONCAT_WS('|', IF(value = '', NULL, value), 'cardnumber') WHERE variable = 'PatronSelfRegistrationBorrowerUnwantedField' AND value NOT LIKE '%cardnumber%';
11993     });
11994
11995     $dbh->do(q{
11996     UPDATE systempreferences SET value = CONCAT_WS('|', IF(value = '', NULL, value), 'categorycode') WHERE variable = 'PatronSelfRegistrationBorrowerUnwantedField' AND value NOT LIKE '%categorycode%';
11997     });
11998
11999     print "Upgrade to $DBversion done (Bug 14659 - Allow patrons to enter card number and patron category on OPAC registration page)\n";
12000     SetVersion($DBversion);
12001 }
12002
12003 $DBversion = "3.23.00.034";
12004 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12005     $dbh->do(q{
12006         ALTER TABLE `items` ADD `new` VARCHAR(32) NULL AFTER `stocknumber`;
12007     });
12008     $dbh->do(q{
12009         ALTER TABLE `deleteditems` ADD `new` VARCHAR(32) NULL AFTER `stocknumber`;
12010     });
12011     print "Upgrade to $DBversion done (Bug 11023: Adds field 'new' in items and deleteditems tables)\n";
12012     SetVersion($DBversion);
12013 }
12014
12015 $DBversion = "3.23.00.035";
12016 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12017     $dbh->do(q{
12018         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('HTML5MediaYouTube',0,'Embed|Don\'t embed','YouTube links as videos','YesNo');
12019     });
12020     print "Upgrade to $DBversion done (Bug 14168 - enhance streaming cataloging to include youtube)\n";
12021
12022     SetVersion($DBversion);
12023     }
12024
12025 $DBversion = "3.23.00.036";
12026 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12027     $dbh->do(q{
12028     INSERT IGNORE INTO systempreferences (variable,value,explanation,type) VALUES ('HoldsQueueSkipClosed', '0', 'If enabled, any libraries that are closed when the holds queue is built will be ignored for the purpose of filling holds.', 'YesNo');
12029     });
12030     print "Upgrade to $DBversion done (Bug 12803 - Add ability to skip closed libraries when generating the holds queue)\n";
12031     SetVersion($DBversion);
12032     }
12033
12034 $DBversion = "3.23.00.037";
12035 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12036 ## Add the new currency.archived column
12037     $dbh->do(q{
12038     ALTER TABLE currency ADD column archived tinyint(1) DEFAULT 0;
12039     });
12040 ## Set currency=NULL if empty (just in case)
12041     $dbh->do(q{
12042     UPDATE aqorders SET currency=NULL WHERE currency="";
12043     });
12044 ## Insert the missing currency and mark them as archived before adding the FK
12045     $dbh->do(q{
12046     INSERT INTO currency(currency, archived) SELECT distinct currency, 1 FROM aqorders WHERE currency NOT IN (SELECT currency FROM currency);
12047     });
12048 ## Correct the field length in aqorders before adding FK too
12049     $dbh->do(q{ ALTER TABLE aqorders MODIFY COLUMN currency varchar(10) default NULL; });
12050 ## And finally add the FK
12051     $dbh->do(q{
12052     ALTER TABLE aqorders ADD FOREIGN KEY (currency) REFERENCES currency(currency) ON DELETE SET NULL ON UPDATE SET null;
12053     });
12054
12055     print "Upgrade to $DBversion done (Bug 15084 - Move the currency related code to Koha::Acquisition::Currenc[y|ies])\n";
12056     SetVersion($DBversion);
12057 }
12058
12059 $DBversion = "3.23.00.038";
12060 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12061     $dbh->do(q{
12062     INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES ('decreaseLoanHighHoldsControl', 'static', 'static|dynamic', "Chooses between static and dynamic high holds checking", 'Choice'), ('decreaseLoanHighHoldsIgnoreStatuses', '', 'damaged|itemlost|notforloan|withdrawn', "Ignore items with these statuses for dynamic high holds checking", 'Choice');
12063     });
12064     print "Upgrade to $DBversion done (Bug 14694 - Make decreaseloanHighHolds more flexible)\n";
12065     SetVersion($DBversion);
12066 }
12067
12068 $DBversion = "3.23.00.039";
12069 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12070
12071     $dbh->do(q{
12072     ALTER TABLE suggestions
12073     MODIFY COLUMN currency varchar(10) default NULL;
12074     });
12075     $dbh->do(q{
12076     ALTER TABLE aqbooksellers
12077     MODIFY COLUMN currency varchar(10) default NULL;
12078     });
12079     print "Upgrade to $DBversion done (Bug 15084 - Move the currency related code to Koha::Acquisition::Currenc[y|ies])\n";
12080     SetVersion($DBversion);
12081 }
12082
12083
12084 $DBversion = "3.23.00.040";
12085 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12086
12087     my $c = $dbh->selectrow_array('SELECT COUNT(*) FROM systempreferences WHERE variable="intranetcolorstylesheet" AND value="blue.css"');
12088
12089     if ( $c ) {
12090         print "WARNING: You are using a stylesheeet which has been removed from the Koha codebase.\n";
12091         print "Update your intranetcolorstylesheet.\n";
12092     }
12093     print "Upgrade to $DBversion done (Bug 16019 - Check intranetcolorstylesheet for blue.css)\n";
12094     SetVersion($DBversion);
12095 }
12096
12097 $DBversion = "3.23.00.041";
12098 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12099
12100     my $dbh = C4::Context->dbh;
12101     my ($print_error) = $dbh->{PrintError};
12102     $dbh->{RaiseError} = 0;
12103     $dbh->{PrintError} = 0;
12104     $dbh->do("ALTER TABLE overduerules_transport_types ADD COLUMN letternumber INT(1) NOT NULL DEFAULT 1 AFTER id");
12105     $dbh->{PrintError} = $print_error;
12106
12107     print "Upgrade to $DBversion done (Bug 16007: Make sure overduerules_transport_types.letternumber exists)\n";
12108     SetVersion($DBversion);
12109 }
12110
12111 $DBversion = "3.23.00.042";
12112 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12113
12114     $dbh->do(q{
12115             ALTER TABLE items CHANGE new new_status VARCHAR(32) NULL;
12116             });
12117     $dbh->do(q{
12118             ALTER TABLE deleteditems CHANGE new new_status VARCHAR(32) NULL;
12119             });
12120     $dbh->do(q{
12121             UPDATE systempreferences SET value=REPLACE(value, '"items.new"', '"items.new_status"') WHERE variable="automatic_item_modification_by_age_configuration";
12122             });
12123
12124     print "Upgrade to $DBversion done (Bug 16004 - Replace items.new with items.new_status)\n";
12125     SetVersion($DBversion);
12126 }
12127
12128 $DBversion = "3.23.00.043";
12129 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12130     $dbh->do(q{
12131             UPDATE systempreferences SET value="" WHERE value IS NULL;
12132             });
12133
12134     print "Upgrade to $DBversion done (Bug 16070 - Empty (undef) system preferences may cause some issues in combination with memcache)\n";
12135     SetVersion($DBversion);
12136 }
12137
12138 $DBversion = "3.23.00.044";
12139 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12140     $dbh->do(q{
12141             INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES
12142             ('GoogleOpenIDConnect', '0', NULL, 'if ON, allows the use of Google OpenID Connect for login', 'YesNo'),
12143             ('GoogleOAuth2ClientID', '', NULL, 'Client ID for the web app registered with Google', 'Free'),
12144             ('GoogleOAuth2ClientSecret', '', NULL, 'Client Secret for the web app registered with Google', 'Free'),
12145             ('GoogleOpenIDConnectDomain', '', NULL, 'Restrict OpenID Connect to this domain (or subdomains of this domain). Leave blank for all Google domains', 'Free');
12146             });
12147
12148     print "Upgrade to $DBversion done (Bug 10988 - Allow login via Google OAuth2 (OpenID Connect))\n";
12149     SetVersion($DBversion);
12150 }
12151
12152 $DBversion = "3.23.00.045";
12153 if ( CheckVersion($DBversion) ) {
12154 ## Holds details for vendors supplying goods by EDI
12155    $dbh->do(q{
12156            CREATE TABLE IF NOT EXISTS vendor_edi_accounts (
12157                    id INT(11) NOT NULL auto_increment,
12158                    description TEXT NOT NULL,
12159                    host VARCHAR(40),
12160                    username VARCHAR(40),
12161                    password VARCHAR(40),
12162                    last_activity DATE,
12163                    vendor_id INT(11) REFERENCES aqbooksellers( id ),
12164                    download_directory TEXT,
12165                    upload_directory TEXT,
12166                    san VARCHAR(20),
12167                    id_code_qualifier VARCHAR(3) default '14',
12168                    transport VARCHAR(6) default 'FTP',
12169                    quotes_enabled TINYINT(1) not null default 0,
12170                    invoices_enabled TINYINT(1) not null default 0,
12171                    orders_enabled TINYINT(1) not null default 0,
12172                    responses_enabled TINYINT(1) not null default 0,
12173                    auto_orders TINYINT(1) not null default 0,
12174                    shipment_budget INTEGER(11) REFERENCES aqbudgets( budget_id ),
12175                    PRIMARY KEY  (id),
12176                    KEY vendorid (vendor_id),
12177                    KEY shipmentbudget (shipment_budget),
12178                    CONSTRAINT vfk_vendor_id FOREIGN KEY ( vendor_id ) REFERENCES aqbooksellers ( id ),
12179                    CONSTRAINT vfk_shipment_budget FOREIGN KEY ( shipment_budget ) REFERENCES aqbudgets ( budget_id )
12180                        ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
12181    });
12182
12183 ## Hold the actual edifact messages with links to associated baskets
12184    $dbh->do(q{
12185            CREATE TABLE IF NOT EXISTS edifact_messages (
12186                    id INT(11) NOT NULL auto_increment,
12187                    message_type VARCHAR(10) NOT NULL,
12188                    transfer_date DATE,
12189                    vendor_id INT(11) REFERENCES aqbooksellers( id ),
12190                    edi_acct  INTEGER REFERENCES vendor_edi_accounts( id ),
12191                    status TEXT,
12192                    basketno INT(11) REFERENCES aqbasket( basketno),
12193                    raw_msg MEDIUMTEXT,
12194                    filename TEXT,
12195                    deleted BOOLEAN NOT NULL DEFAULT 0,
12196                    PRIMARY KEY  (id),
12197                    KEY vendorid ( vendor_id),
12198                    KEY ediacct (edi_acct),
12199                    KEY basketno ( basketno),
12200                    CONSTRAINT emfk_vendor FOREIGN KEY ( vendor_id ) REFERENCES aqbooksellers ( id ),
12201                    CONSTRAINT emfk_edi_acct FOREIGN KEY ( edi_acct ) REFERENCES vendor_edi_accounts ( id ),
12202                    CONSTRAINT emfk_basketno FOREIGN KEY ( basketno ) REFERENCES aqbasket ( basketno )
12203                        ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
12204             });
12205
12206 ## invoices link back to the edifact message it was generated from
12207    $dbh->do(q{
12208            ALTER TABLE aqinvoices ADD COLUMN message_id INT(11) REFERENCES edifact_messages( id );
12209            });
12210
12211 ## clean up link on deletes
12212    $dbh->do(q{
12213            ALTER TABLE aqinvoices ADD CONSTRAINT edifact_msg_fk FOREIGN KEY ( message_id ) REFERENCES edifact_messages ( id ) ON DELETE SET NULL;
12214            });
12215
12216 ## Hold the supplier ids from quotes for ordering
12217 ## although this is an EAN-13 article number the standard says 35 characters ???
12218    $dbh->do(q{
12219            ALTER TABLE aqorders ADD COLUMN line_item_id VARCHAR(35);
12220            });
12221
12222 ## The suppliers unique reference usually a quotation line number ('QLI')
12223 ## Otherwise Suppliers unique orderline reference ('SLI')
12224    $dbh->do(q{
12225            ALTER TABLE aqorders ADD COLUMN suppliers_reference_number VARCHAR(35);
12226            });
12227    $dbh->do(q{
12228            ALTER TABLE aqorders ADD COLUMN suppliers_reference_qualifier VARCHAR(3);
12229            });
12230    $dbh->do(q{
12231            ALTER TABLE aqorders ADD COLUMN suppliers_report text;
12232            });
12233
12234 ## hold the EAN/SAN used in ordering
12235    $dbh->do(q{
12236            CREATE TABLE IF NOT EXISTS edifact_ean (
12237                    ee_id int(11) NOT NULL AUTO_INCREMENT PRIMARY KEY,
12238                    description VARCHAR(128) NULL DEFAULT NULL,
12239                    branchcode VARCHAR(10) NOT NULL REFERENCES branches (branchcode),
12240                    ean VARCHAR(15) NOT NULL,
12241                    id_code_qualifier VARCHAR(3) NOT NULL DEFAULT '14',
12242                    CONSTRAINT efk_branchcode FOREIGN KEY ( branchcode ) REFERENCES branches ( branchcode )
12243                    ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
12244            });
12245
12246 ## Add a permission for managing EDI
12247    $dbh->do(q{
12248            INSERT INTO permissions (module_bit, code, description) values (11, 'edi_manage', 'Manage EDIFACT transmissions');
12249            });
12250
12251    print "Upgrade to $DBversion done (Bug 7736 - Edifact QUOTE and ORDER functionality))\n";
12252    SetVersion($DBversion);
12253 }
12254
12255 $DBversion = "3.23.00.046";
12256 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12257
12258     $dbh->do(q{
12259     ALTER TABLE vendor_edi_accounts ADD COLUMN plugin VARCHAR(256) NOT NULL DEFAULT "";
12260     });
12261
12262     print "Upgrade to $DBversion done (Bug 15630 - Make Edifact module pluggable))\n";
12263     SetVersion($DBversion);
12264 }
12265
12266 $DBversion = "3.23.00.047";
12267 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12268
12269     $dbh->do(q{
12270          INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('IntranetReportsHomeHTML', '', 'Show the following HTML in a div on the bottom of the reports home page', NULL, 'Free');
12271          });
12272     $dbh->do(q{
12273          INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('IntranetCirculationHomeHTML', '', 'Show the following HTML in a div on the bottom of the reports home page', NULL, 'Free');
12274          });
12275
12276     print "Upgrade to $DBversion done (Bug 15008 - Add custom HTML areas to circulation and reports home pages)\n";
12277     SetVersion($DBversion);
12278 }
12279
12280 $DBversion = "3.23.00.048";
12281 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12282     $dbh->do(q{
12283     INSERT IGNORE INTO `systempreferences` (variable,value,options,explanation,type)  SELECT 'OPACISBD', value, '70|10', 'Allows to define ISBD view in OPAC', 'Textarea' FROM `systempreferences` WHERE variable = 'ISBD';
12284     });
12285
12286     print "Upgrade to $DBversion done (Bug 5979 - Add separate OPACISBD system preference)\n";
12287     SetVersion($DBversion);
12288 }
12289
12290
12291
12292 $DBversion = "3.23.00.049";
12293 if ( C4::Context->preference("Version") < TransformToNum($DBversion) ) {
12294 my $dbh = C4::Context->dbh;
12295 my ( $column_has_been_used ) = $dbh->selectrow_array(q|
12296             SELECT COUNT(*)
12297                 FROM borrower_attributes
12298                     WHERE password IS NOT NULL
12299                     |);
12300
12301 if ( $column_has_been_used ) {
12302         print q|WARNING: The columns borrower_attribute_types.password_allowed and borrower_attributes.password have been removed from the Koha codebase. They were not used. However your installation has at least one borrower_attributes.password defined. In order not to alter your data, the columns have been kept, please save the information elsewhere and remove these columns manually.|;
12303 } else {
12304         $dbh->do(q|
12305         ALTER TABLE borrower_attribute_types DROP column password_allowed
12306         |);
12307         $dbh->do(q|
12308         ALTER TABLE borrower_attributes DROP column password;
12309         |);
12310     }
12311     print "Upgrade to $DBversion done (Bug 12267 - Allow password option in Patron Attribute non functional)\n";
12312         SetVersion($DBversion);
12313 }
12314
12315
12316 $DBversion = "3.23.00.050";
12317 if ( CheckVersion($DBversion) ) {
12318
12319     $dbh->do(q|INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
12320                     VALUES('SearchEngine','Zebra','Choose Search Engine','','Choice')|);
12321
12322
12323     $dbh->do(q|DROP TABLE IF EXISTS search_marc_to_field|);
12324     $dbh->do(q|DROP TABLE IF EXISTS search_marc_map|);
12325     $dbh->do(q|DROP TABLE IF EXISTS search_field|);
12326
12327 # This specifies the fields that will be stored in the search engine.
12328  $dbh->do(q|
12329          CREATE TABLE `search_field` (
12330              `id` int(11) NOT NULL AUTO_INCREMENT,
12331              `name` varchar(255) NOT NULL COMMENT 'the name of the field as it will be stored in the search engine',
12332              `label` varchar(255) NOT NULL COMMENT 'the human readable name of the field, for display',
12333              `type` ENUM('', 'string', 'date', 'number', 'boolean', 'sum') NOT NULL COMMENT 'what type of data this holds, relevant when storing it in the search engine',
12334              PRIMARY KEY (`id`),
12335              UNIQUE KEY (`name`)
12336              ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci
12337          |);
12338 # This contains a MARC field specifier for a given index, marc type, and marc
12339 # field.
12340 $dbh->do(q|
12341         CREATE TABLE `search_marc_map` (
12342             id int(11) NOT NULL AUTO_INCREMENT,
12343             index_name ENUM('biblios','authorities') NOT NULL COMMENT 'what storage index this map is for',
12344             marc_type ENUM('marc21', 'unimarc', 'normarc') NOT NULL COMMENT 'what MARC type this map is for',
12345             marc_field VARCHAR(255) NOT NULL COMMENT 'the MARC specifier for this field',
12346             PRIMARY KEY(`id`),
12347             unique key( index_name, marc_field, marc_type),
12348             INDEX (`index_name`)
12349             ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci
12350         |);
12351
12352 # This joins the two search tables together. We can have any combination:
12353 # one marc field could have many search fields (maybe you want one value
12354 # to go to 'author' and 'corporate-author) and many marc fields could go
12355 # to one search field (e.g. all the various author fields going into
12356 # 'author'.)
12357 #
12358 # a note about the sort field:
12359 # * if all the entries for a mapping are 'null', nothing special is done with that mapping.
12360 # * if any of the entries are not null, then a __sort field is created in ES for this mapping. In this case:
12361 #   * any mapping with sort == false WILL NOT get copied into a __sort field
12362 #   * any mapping with sort == true or is null WILL get copied into a __sort field
12363 #   * any sorts on the field name will be applied to $fieldname.'__sort' instead.
12364 # this means that we can have search for author that includes 1xx, 245$c, and 7xx, but the sort only applies to 1xx.
12365
12366 $dbh->do(q|
12367         CREATE TABLE `search_marc_to_field` (
12368             search_marc_map_id int(11) NOT NULL,
12369             search_field_id int(11) NOT NULL,
12370             facet boolean DEFAULT FALSE COMMENT 'true if a facet field should be generated for this',
12371             suggestible boolean DEFAULT FALSE COMMENT 'true if this field can be used to generate suggestions for browse',
12372             sort boolean DEFAULT NULL COMMENT 'true/false creates special sort handling, null doesn''t',
12373             PRIMARY KEY(search_marc_map_id, search_field_id),
12374             FOREIGN KEY(search_marc_map_id) REFERENCES search_marc_map(id) ON DELETE CASCADE ON UPDATE CASCADE,
12375             FOREIGN KEY(search_field_id) REFERENCES search_field(id) ON DELETE CASCADE ON UPDATE CASCADE
12376             ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci
12377         |);
12378
12379     print "WARNING: If you plan to use Elasticsearch you should go to 'Home › Administration › Search engine configuration' and reset the mappings\n";
12380     print "Upgrade to $DBversion done (Bug 12478 - Elasticsearch support for Koha)\n";
12381     SetVersion($DBversion);
12382 }
12383
12384
12385 $DBversion = "3.23.00.051";
12386 if ( CheckVersion($DBversion) ) {
12387 $dbh->do(q{
12388         ALTER TABLE edifact_messages
12389         DROP FOREIGN KEY emfk_vendor,
12390         DROP FOREIGN KEY emfk_edi_acct,
12391         DROP FOREIGN KEY emfk_basketno;
12392         });
12393
12394 $dbh->do(q{
12395         ALTER TABLE edifact_messages
12396         ADD CONSTRAINT emfk_vendor FOREIGN KEY ( vendor_id ) REFERENCES aqbooksellers ( id ) ON DELETE CASCADE ON UPDATE CASCADE,
12397         ADD CONSTRAINT emfk_edi_acct FOREIGN KEY ( edi_acct ) REFERENCES vendor_edi_accounts ( id ) ON DELETE CASCADE ON UPDATE CASCADE,
12398         ADD CONSTRAINT emfk_basketno FOREIGN KEY ( basketno ) REFERENCES aqbasket ( basketno ) ON DELETE CASCADE ON UPDATE CASCADE;
12399         });
12400
12401     print "Upgrade to $DBversion done (Bug 16354 - Fix FK constraints for edifact_messages table)\n";
12402     SetVersion($DBversion);
12403 }
12404
12405
12406 $DBversion = "3.23.00.052";
12407 if ( CheckVersion($DBversion) ) {
12408 ## Insert permission
12409
12410     $dbh->do(q{
12411         INSERT IGNORE INTO permissions (module_bit, code, description) VALUES
12412         (13, 'upload_general_files', 'Upload any file'),
12413         (13, 'upload_manage', 'Manage uploaded files');
12414         });
12415 ## Update user_permissions for current users (check count in uploaded_files)
12416 ## Note 9 == edit_catalogue and 13 == tools
12417 ## We do not insert if someone is superlibrarian, does not have edit_catalogue,
12418 ## or already has all tools
12419
12420         $dbh->do(q{
12421                 INSERT IGNORE INTO user_permissions (borrowernumber, module_bit, code)
12422                 SELECT borrowernumber, 13, 'upload_general_files'
12423                 FROM borrowers bo
12424                 WHERE flags<>1 AND flags & POW(2,13) = 0 AND
12425                 ( flags & POW(2,9) > 0 OR
12426                   (SELECT COUNT(*) FROM user_permissions
12427                    WHERE borrowernumber=bo.borrowernumber AND module_bit=9 ) > 0 )
12428                 AND ( SELECT COUNT(*) FROM uploaded_files ) > 0
12429                 });
12430
12431     print "Upgrade to $DBversion done (Bug 14686 - New menu option and permission for file uploading)\n";
12432     SetVersion($DBversion);
12433 }
12434
12435 $DBversion = "3.23.00.053";
12436 if ( CheckVersion($DBversion) ) {
12437     my $letters = $dbh->selectall_arrayref(
12438         q|
12439         SELECT code, name
12440         FROM letter
12441         WHERE message_transport_type="email"
12442         |, { Slice => {} }
12443     );
12444     for my $letter (@$letters) {
12445         $dbh->do(
12446             q|
12447                 UPDATE letter
12448                 SET name = ?
12449                 WHERE code = ?
12450                 AND message_transport_type <> "email"
12451                 |, undef, $letter->{name}, $letter->{code}
12452         );
12453     }
12454
12455     print "Upgrade to $DBversion done (Bug 16217 - Notice' names may have diverged)\n";
12456     SetVersion($DBversion);
12457 }
12458
12459 $DBversion = "3.23.00.054";
12460 if ( CheckVersion($DBversion) ) {
12461     $dbh->do(q{
12462         ALTER TABLE branch_item_rules ADD COLUMN hold_fulfillment_policy ENUM('any', 'homebranch', 'holdingbranch') NOT NULL DEFAULT 'any' AFTER holdallowed;
12463     });
12464     $dbh->do(q{
12465         ALTER TABLE default_branch_circ_rules ADD COLUMN hold_fulfillment_policy ENUM('any', 'homebranch', 'holdingbranch') NOT NULL DEFAULT 'any' AFTER holdallowed;
12466     });
12467     $dbh->do(q{
12468         ALTER TABLE default_branch_item_rules ADD COLUMN hold_fulfillment_policy ENUM('any', 'homebranch', 'holdingbranch') NOT NULL DEFAULT 'any' AFTER holdallowed;
12469     });
12470     $dbh->do(q{
12471         ALTER TABLE default_circ_rules ADD COLUMN hold_fulfillment_policy ENUM('any', 'homebranch', 'holdingbranch') NOT NULL DEFAULT 'any' AFTER holdallowed;
12472     });
12473
12474     print "Upgrade to $DBversion done (Bug 15532 - Add ability to allow only items whose home/holding branch matches the hold's pickup branch to fill a given hold)\n";
12475     SetVersion($DBversion);
12476 }
12477
12478 $DBversion = "3.23.00.055";
12479 if ( CheckVersion($DBversion) ) {
12480     $dbh->do(q{
12481         ALTER TABLE reserves ADD COLUMN itemtype VARCHAR(10) NULL DEFAULT NULL AFTER suspend_until;
12482     });
12483     $dbh->do(q{
12484         ALTER TABLE reserves ADD KEY `itemtype` (`itemtype`);
12485     });
12486     $dbh->do(q{
12487         ALTER TABLE reserves ADD CONSTRAINT `reserves_ibfk_5` FOREIGN KEY (`itemtype`) REFERENCES `itemtypes` (`itemtype`) ON DELETE CASCADE ON UPDATE CASCADE;
12488     });
12489     $dbh->do(q{
12490         ALTER TABLE old_reserves ADD COLUMN itemtype VARCHAR(10) NULL DEFAULT NULL AFTER suspend_until;
12491     });
12492     $dbh->do(q{
12493         ALTER TABLE old_reserves ADD KEY `itemtype` (`itemtype`);
12494     });
12495     $dbh->do(q{
12496         ALTER TABLE old_reserves ADD CONSTRAINT `old_reserves_ibfk_4` FOREIGN KEY (`itemtype`) REFERENCES `itemtypes` (`itemtype`) ON DELETE CASCADE ON UPDATE CASCADE;
12497     });
12498
12499     $dbh->do(q{
12500         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
12501         ('AllowHoldItemTypeSelection','0','','If enabled, patrons and staff will be able to select the itemtype when placing a hold','YesNo');
12502     });
12503
12504     print "Upgrade to $DBversion done (Bug 15533 - Allow patrons and librarians to select itemtype when placing hold)\n";
12505     SetVersion($DBversion);
12506 }
12507
12508 $DBversion = "3.23.00.056";
12509 if ( CheckVersion($DBversion) ) {
12510     $dbh->do(q{
12511         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
12512         ('NoIssuesChargeGuarantees','','','Define maximum amount withstanding before check outs are blocked','Integer');
12513     });
12514
12515     print "Upgrade to $DBversion done (Bug 14577 - Allow restriction of checkouts based on fines of guarantor/guarantee)\n";
12516     SetVersion($DBversion);
12517 }
12518
12519 $DBversion = "3.23.00.057";
12520 if ( CheckVersion($DBversion) ) {
12521     $dbh->do(q{
12522         ALTER TABLE aqbasket ADD COLUMN is_standing TINYINT(1) NOT NULL DEFAULT 0 AFTER branch;
12523     });
12524
12525     print "Upgrade to $DBversion done (Bug 15531 - Add support for standing orders)\n";
12526     SetVersion($DBversion);
12527 }
12528
12529 $DBversion = "3.23.00.058";
12530 if ( CheckVersion($DBversion) ) {
12531
12532     my ($count_imageurl) = $dbh->selectrow_array(q|
12533         SELECT COUNT(*)
12534         FROM authorised_values
12535         WHERE imageurl IS NOT NULL
12536             AND imageurl <> ""
12537     |);
12538
12539     unless ($count_imageurl) {
12540         if (   C4::Context->preference('AuthorisedValueImages')
12541             or C4::Context->preference('StaffAuthorisedValueImages') )
12542         {
12543             $dbh->do(q|
12544                 UPDATE systempreferences
12545                 SET value = 0
12546                 WHERE variable = "AuthorisedValueImages"
12547                    or variable = "StaffAuthorisedValueImages"
12548             |);
12549             warn "The system preferences AuthorisedValueImages and StaffAuthorisedValueImages have been turned off\n";
12550             warn "authorised_values.imageurl is not populated, that means you are not using this feature\n";
12551         }
12552     }
12553     else {
12554         warn "At least one authorised value has an icon defined (imageurl)\n";
12555         warn "The system preference AuthorisedValueImages or StaffAuthorisedValueImages could be turned off if you are not aware of this feature\n";
12556     }
12557
12558     print "Upgrade to $DBversion done (Bug 16041 - StaffAuthorisedValueImages & AuthorisedValueImages preferences - impact on search performance)\n";
12559     SetVersion($DBversion);
12560 }
12561
12562 $DBversion = "3.23.00.059";
12563 if ( CheckVersion($DBversion) ) {
12564     $dbh->do(q{
12565         DELETE FROM systempreferences WHERE variable="AuthorisedValueImages" OR variable="StaffAuthorisedValueImages";
12566     });
12567
12568     print "Upgrade to $DBversion done (Bug 16167 - Remove prefs to drive authorised value images)\n";
12569     SetVersion($DBversion);
12570 }
12571
12572 $DBversion = "3.23.00.060";
12573 if ( CheckVersion($DBversion) ) {
12574     $dbh->do(q{
12575         INSERT IGNORE INTO systempreferences ( value, variable, options, explanation,type )
12576         SELECT value ,'EnhancedMessagingPreferencesOPAC', NULL, 'If ON, allows patrons to select to receive additional messages about items due or nearly due.', 'YesNo' FROM systempreferences WHERE variable = 'EnhancedMessagingPreferences';
12577     });
12578
12579     print "Upgrade to $DBversion done (Bug 12528 - Enable staff to deny message setting access to patrons on the OPAC)\n";
12580     SetVersion($DBversion);
12581 }
12582
12583 $DBversion = "3.23.00.061";
12584 if ( CheckVersion($DBversion) ) {
12585     my ( $cnt ) = $dbh->selectrow_array( q|
12586         SELECT COUNT(*) FROM items it
12587         LEFT JOIN biblio bi ON bi.biblionumber=it.biblionumber
12588         LEFT JOIN biblioitems bii USING (biblioitemnumber)
12589         WHERE bi.biblionumber IS NULL
12590     |);
12591     if( $cnt ) {
12592         print "WARNING: You have corrupted data in your items table!! The table contains $cnt references to biblio records that do not exist.\nPlease correct your data IMMEDIATELY after this upgrade and manually add the foreign key constraint for biblionumber in the items table.\n";
12593     } else {
12594         # now add FK
12595         $dbh->do( q|
12596             ALTER TABLE items
12597             ADD FOREIGN KEY (`biblionumber`) REFERENCES `biblio` (`biblionumber`) ON DELETE CASCADE ON UPDATE CASCADE
12598         |);
12599         print "Upgrade to $DBversion done (Bug 16170 - Add FK for biblionumber in items)\n";
12600     }
12601     SetVersion($DBversion);
12602 }
12603
12604 $DBversion = "3.23.00.062";
12605 if ( CheckVersion($DBversion) ) {
12606     $dbh->do( q|
12607             ALTER TABLE aqorders DROP COLUMN budgetgroup_id;
12608             |);
12609     print "Upgrade to $DBversion done (Bug 16414 - aqorders.budgetgroup_id has never been used and can be removed)\n";
12610 SetVersion($DBversion);
12611 }
12612
12613 $DBversion = "3.23.00.063";
12614 if ( CheckVersion($DBversion) ) {
12615     $dbh->do(q{
12616         UPDATE letter SET branchcode='' WHERE branchcode IS NULL;
12617     });
12618     $dbh->do(q{
12619         ALTER TABLE letter MODIFY COLUMN branchcode varchar(10) NOT NULL DEFAULT ''
12620     });
12621     $dbh->do(q{
12622         ALTER TABLE permissions MODIFY COLUMN code varchar(64) NOT NULL DEFAULT '';
12623     });
12624     print "Upgrade to $DBversion done (Bug 16402: Fix DB structure to work on MySQL 5.7)\n";
12625     SetVersion($DBversion);
12626 }
12627
12628 $DBversion = "3.23.00.064";
12629 if ( CheckVersion($DBversion) ) {
12630     $dbh->do(q{
12631         ALTER TABLE creator_layouts MODIFY layout_name char(25) NOT NULL DEFAULT 'DEFAULT';
12632     });
12633     print "Upgrade to $DBversion done (Bug 15086 - Creators layout and template sql has warnings)\n";
12634     SetVersion($DBversion);
12635 }
12636
12637 $DBversion = "16.05.00.000";
12638 if ( CheckVersion($DBversion) ) {
12639     print "Upgrade to $DBversion done (Koha 16.05)\n";
12640     SetVersion($DBversion);
12641 }
12642
12643 $DBversion = "16.06.00.000";
12644 if ( CheckVersion($DBversion) ) {
12645     print "Upgrade to $DBversion done (Koha 16.06 - starting a new dev line at KohaCon16 in Thessaloniki, Greece! Koha is great!)\n";
12646     SetVersion($DBversion);
12647 }
12648
12649 $DBversion = "16.06.00.001";
12650 if ( CheckVersion($DBversion) ) {
12651     $dbh->do(q{
12652         UPDATE accountlines SET accounttype='HE', description=itemnumber WHERE (description REGEXP '^Hold waiting too long [0-9]+') AND accounttype='F';
12653     });
12654
12655     print "Upgrade to $DBversion done (Bug 16200 - 'Hold waiting too long' fee has a translation problem)\n";
12656     SetVersion($DBversion);
12657 }
12658
12659 $DBversion = "16.06.00.002";
12660 if ( CheckVersion($DBversion) ) {
12661     unless ( column_exists('borrowers', 'updated_on') ) {
12662         $dbh->do(q{
12663             ALTER TABLE borrowers
12664                 ADD COLUMN updated_on timestamp NULL DEFAULT CURRENT_TIMESTAMP
12665                 ON UPDATE CURRENT_TIMESTAMP
12666                 AFTER privacy_guarantor_checkouts;
12667         });
12668         $dbh->do(q{
12669             ALTER TABLE deletedborrowers
12670                 ADD COLUMN updated_on timestamp NULL DEFAULT CURRENT_TIMESTAMP
12671                 ON UPDATE CURRENT_TIMESTAMP
12672                 AFTER privacy_guarantor_checkouts;
12673         });
12674     }
12675
12676     print "Upgrade to $DBversion done (Bug 10459 - borrowers should have a timestamp)\n";
12677     SetVersion($DBversion);
12678 }
12679
12680 $DBversion = "16.06.00.003";
12681 if ( CheckVersion($DBversion) ) {
12682     $dbh->do(q{
12683         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type )
12684         SELECT 'MaxItemsToProcessForBatchMod', value, NULL, 'Process up to a given number of items in a single item modification batch.', 'Integer' FROM systempreferences WHERE variable='MaxItemsForBatch';
12685     });
12686     $dbh->do(q{
12687         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type )
12688         SELECT 'MaxItemsToDisplayForBatchDel', value, NULL, 'Display up to a given number of items in a single item deletionbatch.', 'Integer' FROM systempreferences WHERE variable='MaxItemsForBatch';
12689     });
12690     $dbh->do(q{
12691         DELETE FROM systempreferences WHERE variable="MaxItemsForBatch";
12692     });
12693
12694     print "Upgrade to $DBversion done (Bug 11490 - MaxItemsForBatch should be split into two new prefs)\n";
12695     SetVersion($DBversion);
12696 }
12697
12698 $DBversion = '16.06.00.004';
12699 if ( CheckVersion($DBversion) ) {
12700     $dbh->do(q{
12701         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type )
12702          SELECT 'OPACXSLTListsDisplay', COALESCE(value,''), '', 'Enable XSLT stylesheet control over lists pages display on OPAC', 'Free'
12703          FROM systempreferences WHERE variable='OPACXSLTResultsDisplay';
12704     });
12705
12706     $dbh->do(q{
12707         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type )
12708          SELECT 'XSLTListsDisplay', COALESCE(value,''), '', 'Enable XSLT stylesheet control over lists pages display on intranet', 'Free'
12709          FROM systempreferences WHERE variable='XSLTResultsDisplay';
12710     });
12711
12712     print "Upgrade to $DBversion done (Bug 15485: Allow choosing different XSLTs for lists)\n";
12713     SetVersion($DBversion);
12714 }
12715
12716 $DBversion = '16.06.00.005';
12717 if ( CheckVersion($DBversion) ) {
12718     $dbh->do(q{
12719         UPDATE `systempreferences` set options = 'US|FR|CH' where variable = 'CurrencyFormat';
12720     });
12721
12722     print "Upgrade to $DBversion done (Bug 16768 - Add official number format for Switzerland: 1'234'567.89)\n";
12723     SetVersion($DBversion);
12724 }
12725
12726 $DBversion = "16.06.00.006";
12727 if ( CheckVersion($DBversion) ) {
12728     $dbh->do(q{
12729         CREATE TABLE `refund_lost_item_fee_rules` (
12730           `branchcode` varchar(10) NOT NULL default '',
12731           `refund` tinyint(1) NOT NULL default 0,
12732           PRIMARY KEY  (`branchcode`)
12733         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
12734     });
12735     $dbh->do(q{
12736         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
12737         VALUES( 'RefundLostOnReturnControl',
12738                 'CheckinLibrary',
12739                 'If a lost item is returned, choose which branch to pick rules for refunding.',
12740                 'CheckinLibrary|PatronLibrary|ItemHomeBranch|ItemHoldingbranch',
12741                 'Choice')
12742     });
12743     # Pick the old syspref as the default rule
12744     $dbh->do(q{
12745         INSERT INTO refund_lost_item_fee_rules (branchcode,refund)
12746             SELECT '*', COALESCE(value,'1') FROM systempreferences WHERE variable='RefundLostItemFeeOnReturn'
12747     });
12748     # Delete the old syspref
12749     $dbh->do(q{
12750         DELETE IGNORE FROM systempreferences
12751         WHERE variable='RefundLostItemFeeOnReturn'
12752     });
12753
12754     print "Upgrade to $DBversion done (Bug 14048: Change RefundLostItemFeeOnReturn to be branch specific)\n";
12755     SetVersion($DBversion);
12756 }
12757
12758 $DBversion = '16.06.00.007';
12759 if ( CheckVersion($DBversion) ) {
12760     $dbh->do(q{
12761         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
12762         VALUES ('PatronQuickAddFields', '', 'A list of fields separated by "|" to be displayed along with mandatory fields in the patron quick add form if chosen at patron entry', NULL, 'Free');
12763     });
12764
12765     print "Upgrade to $DBversion done (Bug 3534 - Patron quick add form)\n";
12766     SetVersion($DBversion);
12767 }
12768
12769 $DBversion = '16.06.00.008';
12770 if ( CheckVersion($DBversion) ) {
12771     $dbh->do(q{
12772         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
12773         VALUES('CheckPrevCheckout','hardno','hardyes|softyes|softno|hardno','By default, for every item checked out, should we warn if the patron has checked out that item in the past?','Choice');
12774     });
12775     $dbh->do(q{
12776         ALTER TABLE categories
12777         ADD COLUMN `checkprevcheckout` varchar(7) NOT NULL default 'inherit'
12778         AFTER `default_privacy`;
12779     });
12780     $dbh->do(q{
12781         ALTER TABLE borrowers
12782         ADD COLUMN `checkprevcheckout` varchar(7) NOT NULL default 'inherit'
12783         AFTER `privacy_guarantor_checkouts`;
12784     });
12785     $dbh->do(q{
12786         ALTER TABLE deletedborrowers
12787         ADD COLUMN `checkprevcheckout` varchar(7) NOT NULL default 'inherit'
12788         AFTER `privacy_guarantor_checkouts`;
12789     });
12790
12791     print "Upgrade to $DBversion done (Bug 6906 - show 'Borrower has previously issued \$ITEM' alert on checkout)\n";
12792     SetVersion($DBversion);
12793 }
12794
12795 $DBversion = '16.06.00.009';
12796 if ( CheckVersion($DBversion) ) {
12797     $dbh->do(q{
12798         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
12799         VALUES ('IntranetCatalogSearchPulldown','0',NULL,'Show a search field pulldown for \"Search the catalog\" boxes. ','YesNo');
12800     });
12801
12802     print "Upgrade to $DBversion done (Bug 14902 - Add qualifier menu to staff side 'Search the Catalog')\n";
12803     SetVersion($DBversion);
12804 }
12805
12806 $DBversion = '16.06.00.010';
12807 if ( CheckVersion($DBversion) ) {
12808     $dbh->do(q{
12809         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
12810         VALUES ('MaxOpenSuggestions','',NULL,'Limit the number of open suggestions a patron can have at once, unlimited if blank','Integer')
12811     });
12812
12813     print "Upgrade to $DBversion done (Bug 15128 - Add ability to limit the number of open purchase suggestions a patron can make)\n";
12814     SetVersion($DBversion);
12815 }
12816
12817 $DBversion = '16.06.00.011';
12818 if ( CheckVersion($DBversion) ) {
12819     $dbh->do(q{
12820         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES
12821         ('NovelistSelectStaffEnabled','0',NULL,'Enable  Novelist Select content to the Staff Interface (requires that you have entered in a user profile and password, which can be seen in image links)','YesNo'),
12822         ('NovelistSelectStaffView','tab','tab|above|below','Where to display Novelist Select content','Choice');
12823     });
12824
12825     print "Upgrade to $DBversion done (Bug 11606 - Novelist Select in Staff Client)\n";
12826     SetVersion($DBversion);
12827 }
12828
12829 $DBversion = '16.06.00.012';
12830 if ( CheckVersion($DBversion) ) {
12831     $dbh->do(q{
12832         ALTER TABLE virtualshelves MODIFY COLUMN created_on DATETIME not NULL;
12833     });
12834
12835     print "Upgrade to $DBversion done (Bug 16573 - Web installer fails to load structure and sample data on MySQL 5.7)\n";
12836     SetVersion($DBversion);
12837 }
12838
12839 $DBversion = '16.06.00.013';
12840 if ( CheckVersion($DBversion) ) {
12841     $dbh->do(q{
12842         INSERT IGNORE INTO systempreferences (variable, value, options, explanation, type) VALUES
12843         ('OPACResultsLibrary', 'homebranch', 'homebranch|holdingbranch', 'Defines whether the OPAC displays the holding or home branch in search results when using XSLT', 'Choice');
12844     });
12845
12846     print "Upgrade to $DBversion done (Bug 7441 - Search results showing wrong branch)\n";
12847     SetVersion($DBversion);
12848 }
12849
12850 $DBversion = "16.06.00.014";
12851 if ( CheckVersion($DBversion) ) {
12852     $dbh->do(q{
12853         ALTER TABLE `action_logs` ADD COLUMN `interface` VARCHAR(30) DEFAULT NULL AFTER `info`;
12854     });
12855
12856     $dbh->do(q{
12857         ALTER TABLE `action_logs` ADD KEY `interface` (`interface`);
12858     });
12859
12860     print "Upgrade to $DBversion done (Bug 16829: action_logs should have an 'interface' column)\n";
12861     SetVersion($DBversion);
12862 }
12863
12864 $DBversion = "16.06.00.015";
12865 if ( CheckVersion($DBversion) ) {
12866     $dbh->do(q{
12867         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type ) VALUES
12868         ('HoldsLog','0',NULL,'If ON, log create/cancel/suspend/resume actions on holds.','YesNo');
12869     });
12870
12871     print "Upgrade to $DBversion done (Bug 14642: Add logging of hold modifications)\n";
12872     SetVersion($DBversion);
12873 }
12874
12875 $DBversion = "16.06.00.016";
12876 if ( CheckVersion($DBversion) ) {
12877     $dbh->do(q{
12878         update marc_subfield_structure set defaultvalue=REPLACE(defaultvalue, 'YYYY', '<<YYYY>>') where defaultvalue like "%YYYY%" and defaultvalue not like "%<<YYYY>>%";
12879     });
12880     $dbh->do(q{
12881         update marc_subfield_structure set defaultvalue=REPLACE(defaultvalue, 'MM', '<<MM>>') where defaultvalue like "%MM%" and defaultvalue not like "%<<MM>>%";
12882     });
12883     $dbh->do(q{
12884         update marc_subfield_structure set defaultvalue=REPLACE(defaultvalue, 'DD', '<<DD>>') where defaultvalue like "%DD%" and defaultvalue not like "%<<DD>>%";
12885     });
12886     $dbh->do(q{
12887         update marc_subfield_structure set defaultvalue=REPLACE(defaultvalue, 'user', '<<USER>>') where defaultvalue like "%user%" and defaultvalue not like "%<<USER>>%";
12888     });
12889
12890     print "Upgrade to $DBversion done (Bug 7045 - Default-value substitution inconsistent)\n";
12891     SetVersion($DBversion);
12892 }
12893
12894 $DBversion = "16.06.00.017";
12895 if ( CheckVersion($DBversion) ) {
12896     $dbh->do(q{
12897         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`) VALUES ('OPACSuggestionMandatoryFields','title','','Define the mandatory fields for a patron purchase suggestions made via OPAC.','multiple');
12898     });
12899
12900     print "Upgrade to $DBversion done (Bug 10848 - Allow configuration of mandatory/required fields on the suggestion form in OPAC)\n";
12901     SetVersion($DBversion);
12902 }
12903
12904 $DBversion = "16.06.00.018";
12905 if ( CheckVersion($DBversion) ) {
12906     $dbh->do(q{
12907         ALTER TABLE issuingrules ADD COLUMN holds_per_record SMALLINT(6) NOT NULL DEFAULT 1 AFTER reservesallowed;
12908     });
12909
12910     print "Upgrade to $DBversion done (Bug 14695 - Add ability to place multiple item holds on a given record per patron)\n";
12911     SetVersion($DBversion);
12912 }
12913
12914 $DBversion = "16.06.00.019";
12915 if ( CheckVersion($DBversion) ) {
12916     $dbh->do(q{
12917         ALTER TABLE reviews CHANGE COLUMN approved approved tinyint(4) DEFAULT 0;
12918     });
12919     $dbh->do(q{
12920         UPDATE reviews SET approved=0 WHERE approved IS NULL;
12921     });
12922
12923     print "Upgrade to $DBversion done (Bug 15839 - Move the reviews related code to Koha::Reviews)\n";
12924     SetVersion($DBversion);
12925 }
12926
12927 $DBversion = "16.06.00.020";
12928 if ( CheckVersion($DBversion) ) {
12929     $dbh->do(q{
12930         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('SwitchOnSiteCheckouts', '0', 'Automatically switch an on-site checkout to a normal checkout', NULL, 'YesNo');
12931     });
12932
12933     print "Upgrade to $DBversion done (Bug 16272 - Transform checkout from on-site checkout to regular checkout)\n";
12934     SetVersion($DBversion);
12935 }
12936
12937 $DBversion = "16.06.00.021";
12938 if ( CheckVersion($DBversion) ) {
12939     $dbh->do(q{
12940         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('PatronSelfRegistrationEmailMustBeUnique', '0', 'If set, the field borrowers.email will be considered as a unique field on self registering', NULL, 'YesNo');
12941     });
12942
12943     print "Upgrade to $DBversion done (Bug 16275 - Prevent patron self registration if the email already filled in borrowers.email)\n";
12944     SetVersion($DBversion);
12945 }
12946
12947 $DBversion = "16.06.00.022";
12948 if ( CheckVersion($DBversion) ) {
12949     $dbh->do(q{
12950         INSERT IGNORE INTO `permissions`
12951         (module_bit, code,             description) VALUES
12952         (16,         'delete_reports', 'Delete SQL reports');
12953     });
12954     $dbh->do(q{
12955         INSERT IGNORE INTO user_permissions
12956         (borrowernumber,      module_bit,code)
12957         SELECT borrowernumber,module_bit,'delete_reports'
12958             FROM user_permissions
12959             WHERE module_bit=16 AND code='create_reports';
12960     });
12961
12962     print "Upgrade to $DBversion done (Bug 16978 - Add delete reports user permission)\n";
12963     SetVersion($DBversion);
12964 }
12965
12966 $DBversion = "16.06.00.023";
12967 if ( CheckVersion($DBversion) ) {
12968     my $pref = C4::Context->preference('timeout');
12969     if( !$pref || $pref eq '12000000' ) {
12970         # update if pref is null or equals old default value
12971         $dbh->do(q|
12972             UPDATE systempreferences SET value = '1d', type = 'Free'
12973             WHERE variable = 'timeout'
12974         |);
12975         print "Upgrade to $DBversion done (Bug 17187)\nNote: Pref value for timeout has been adjusted.\n";
12976     } else {
12977         # only update pref type
12978         $dbh->do(q|
12979             UPDATE systempreferences SET type = 'Free'
12980             WHERE variable = 'timeout'
12981         |);
12982         print "Upgrade to $DBversion done (Bug 17187)\nNote: Pref value for timeout has not been adjusted.\n";
12983     }
12984     SetVersion($DBversion);
12985 }
12986
12987 $DBversion = "16.06.00.024";
12988 if ( CheckVersion($DBversion) ) {
12989     $dbh->do(q{
12990         UPDATE language_descriptions SET description = 'Română' WHERE subtag = 'ro' AND type = 'language' AND lang = 'ro';
12991     });
12992
12993     print "Upgrade to $DBversion done (Bug 16311 - Advanced search language limit typo for Romanian)\n";
12994     SetVersion($DBversion);
12995 }
12996
12997 $DBversion = "16.06.00.025";
12998 if ( CheckVersion($DBversion) ) {
12999     $dbh->do(q{
13000         ALTER TABLE `subscription` ADD `itemtype` VARCHAR( 10 ) NULL AFTER reneweddate, ADD `previousitemtype` VARCHAR( 10 ) NULL AFTER itemtype;
13001     });
13002     $dbh->do(q{
13003         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES
13004         ('makePreviousSerialAvailable','0','make previous serial automatically available when collecting a new serial. Please note that the item-level_itypes syspref must be set to specific item.','','YesNo');
13005     });
13006
13007     print "Upgrade to $DBversion done (Bug 7677 - Subscriptions: Ability to define default itemtype and automatically change itemtype of older issues on receive of next issue)\n";
13008     SetVersion($DBversion);
13009 }
13010
13011 $DBversion = "16.06.00.026";
13012 if ( CheckVersion($DBversion) ) {
13013     $dbh->do(q{
13014         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('PatronSelfRegistrationLibraryList', '', 'Only display libraries listed. If empty, all libraries are displayed.', NULL, 'Free');
13015     });
13016
13017     print "Upgrade to $DBversion done (Bug 16274 - Make the selfregistration branchcode selection configurable)\n";
13018     SetVersion($DBversion);
13019 }
13020
13021 $DBversion = "16.06.00.027";
13022 if ( CheckVersion($DBversion) ) {
13023     unless ( column_exists('borrowers', 'lastseen') ) {
13024         $dbh->do(q{
13025             ALTER TABLE borrowers ADD COLUMN lastseen datetime default NULL AFTER updated_on;
13026         });
13027         $dbh->do(q{
13028             ALTER TABLE deletedborrowers ADD COLUMN lastseen datetime default NULL AFTER updated_on;
13029         });
13030     }
13031     $dbh->do(q{
13032         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('TrackLastPatronActivity', '0', 'If set, the field borrowers.lastseen will be updated everytime a patron is seen', NULL, 'YesNo');
13033     });
13034
13035     print "Upgrade to $DBversion done (Bug 16276: Add a new pref TrackLastPatronActivity and new column borrowers.lastseen)\n";
13036     SetVersion($DBversion);
13037 }
13038
13039 $DBversion = '16.06.00.028';
13040 if (C4::Context->preference("Version") < TransformToNum($DBversion)) {
13041     {
13042         print "Attempting upgrade to $DBversion (Bug 17135) ...\n";
13043         my $maintenance_script = C4::Context->config("intranetdir") . "/installer/data/mysql/fix_unclosed_nonaccruing_fines_bug17135.pl";
13044         system("perl $maintenance_script --confirm");
13045
13046         print "Upgrade to $DBversion done (Bug 17135 - Fine for the previous overdue may get overwritten by the next one)\n";
13047
13048         unless ($original_version < TransformToNum("3.23.00.032")) { ## Bug 15675
13049             print "WARNING: There is a possibility (= just a possibility, it's configuration dependent etc.) that - due to regression introduced by Bug 15675 - some old fine records for overdued items (items which got renewed 1+ time while being overdue) may have been overwritten in your production 16.05+ database. See Bugzilla reports for Bug 14390 and Bug 17135 for more details.\n";
13050             print "WARNING: Please note that this upgrade does not try to recover such overwitten old fine records (if any) - it's just an follow-up for Bug 14390, its sole purpose is preventing eventual further-on overwrites from happening in the future. Optional recovery of the overwritten fines (again, if any) is like, totally outside of the scope of this particular upgrade!\n";
13051         }
13052         SetVersion ($DBversion);
13053     }
13054 }
13055
13056 $DBversion = "16.06.00.029";
13057 if ( CheckVersion($DBversion) ) {
13058     $dbh->do(q{
13059         UPDATE systempreferences SET type="Choice" WHERE variable="UsageStatsLibraryType";
13060     });
13061     $dbh->do(q{
13062         UPDATE systempreferences SET value="Canada" WHERE variable="UsageStatsCountry" AND value="CANADA";
13063     });
13064     $dbh->do(q{
13065         UPDATE systempreferences SET value="Czech Republic" WHERE variable="UsageStatsCountry" AND value="CZ";
13066     });
13067     $dbh->do(q{
13068         UPDATE systempreferences SET value="United Kingdom" WHERE variable="UsageStatsCountry" AND (value="England" OR value="UK");
13069     });
13070     $dbh->do(q{
13071         UPDATE systempreferences SET value="Spain" WHERE variable="UsageStatsCountry" AND value="España";
13072     });
13073     $dbh->do(q{
13074         UPDATE systempreferences SET value="Greece" WHERE variable="UsageStatsCountry" AND value="GR";
13075     });
13076     $dbh->do(q{
13077         UPDATE systempreferences SET value="Ireland" WHERE variable="UsageStatsCountry" AND value="Irelanbd";
13078     });
13079     $dbh->do(q{
13080         UPDATE systempreferences SET value="Mexico" WHERE variable="UsageStatsCountry" AND value="México";
13081     });
13082     $dbh->do(q{
13083         UPDATE systempreferences SET value="Peru" WHERE variable="UsageStatsCountry" AND value="Perú";
13084     });
13085     $dbh->do(q{
13086         UPDATE systempreferences SET value="Dominican Rep." WHERE variable="UsageStatsCountry" AND value="República Dominicana";
13087     });
13088     $dbh->do(q{
13089         UPDATE systempreferences SET value="Trinidad & Tob." WHERE variable="UsageStatsCountry" AND value="Trinidad";
13090     });
13091     $dbh->do(q{
13092         UPDATE systempreferences SET value="Turkey" WHERE variable="UsageStatsCountry" AND value="Türkiye";
13093     });
13094     $dbh->do(q{
13095         UPDATE systempreferences SET value="USA" WHERE variable="UsageStatsCountry" AND (value="United States" OR value="United States of America" OR value="US");
13096     });
13097     $dbh->do(q{
13098         UPDATE systempreferences SET value="Zimbabwe" WHERE variable="UsageStatsCountry" AND value="Zimbabbwe";
13099     });
13100
13101     print "Upgrade to $DBversion done (Bug 14707 - Change UsageStatsCountry from free text to a dropdown list)\n";
13102     SetVersion($DBversion);
13103 }
13104
13105 $DBversion = "16.06.00.030";
13106 if ( CheckVersion($DBversion) ) {
13107     $dbh->do(q{
13108         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
13109         ('OPACHoldingsDefaultSortField','first_column','first_column|homebranch|holdingbranch','Default sort field for the holdings table at the OPAC','choice');
13110     });
13111
13112     print "Upgrade to $DBversion done (Bug 16552 - Add the ability to change the default holdings sort)\n";
13113     SetVersion($DBversion);
13114 }
13115
13116 $DBversion = "16.06.00.031";
13117 if ( CheckVersion($DBversion) ) {
13118     $dbh->do(q{
13119         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('PatronSelfRegistrationPrefillForm', '1', 'Display password and prefill login form after a patron has self registered', NULL, 'YesNo');
13120     });
13121
13122     print "Upgrade to $DBversion done (Bug 16273 - Prevent selfregistration from printing the borrower password and filling the logging form)\n";
13123     SetVersion($DBversion);
13124 }
13125
13126 $DBversion = "16.06.00.032";
13127 if ( CheckVersion($DBversion) ) {
13128     $dbh->do(q{
13129         UPDATE marc_subfield_structure SET authorised_value="WITHDRAWN" WHERE authorised_value="WTHDRAWN";
13130     });
13131
13132     print "Upgrade to $DBversion done (Bug 17357 - WTHDRAWN is still used in installer files)\n";
13133     SetVersion($DBversion);
13134 }
13135
13136
13137 $DBversion = "16.06.00.033";
13138 if ( CheckVersion($DBversion) ) {
13139     $dbh->do(q{
13140         CREATE TABLE authorised_value_categories (
13141         category_name VARCHAR(32) NOT NULL,
13142         primary key (category_name)
13143         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
13144         });
13145 ## Add authorised value categories
13146     $dbh->do(q{
13147     INSERT INTO authorised_value_categories (category_name )
13148     SELECT DISTINCT category FROM authorised_values;
13149     });
13150
13151 ## Add special categories
13152     $dbh->do(q{
13153     INSERT IGNORE INTO authorised_value_categories( category_name )
13154     VALUES
13155     ('Asort1'),
13156     ('Asort2'),
13157     ('Bsort1'),
13158     ('Bsort2'),
13159     ('SUGGEST'),
13160     ('DAMAGED'),
13161     ('LOST'),
13162     ('REPORT_GROUP'),
13163     ('REPORT_SUBGROUP'),
13164     ('DEPARTMENT'),
13165     ('TERM'),
13166     ('SUGGEST_STATUS'),
13167     ('ITEMTYPECAT');
13168     });
13169
13170 ## Add very special categories
13171     $dbh->do(q{
13172     INSERT IGNORE INTO authorised_value_categories( category_name )
13173     VALUES
13174     ('branches'),
13175     ('itemtypes'),
13176     ('cn_source');
13177     });
13178
13179     $dbh->do(q{
13180     INSERT IGNORE INTO authorised_value_categories( category_name )
13181     VALUES
13182     ('WITHDRAWN'),
13183     ('RESTRICTED'),
13184     ('NOT_LOAN'),
13185     ('CCODE'),
13186     ('LOC'),
13187     ('STACK');
13188     });
13189
13190 ## Update the FK
13191     $dbh->do(q{
13192     ALTER TABLE items_search_fields
13193     DROP FOREIGN KEY items_search_fields_authorised_values_category;
13194     });
13195
13196     $dbh->do(q{
13197     ALTER TABLE items_search_fields
13198     ADD CONSTRAINT `items_search_fields_authorised_values_category` FOREIGN KEY (`authorised_values_category`) REFERENCES `authorised_value_categories` (`category_name`) ON DELETE SET NULL ON UPDATE CASCADE;
13199     });
13200
13201     $dbh->do(q{
13202     ALTER TABLE authorised_values
13203     ADD CONSTRAINT `authorised_values_authorised_values_category` FOREIGN KEY (`category`) REFERENCES `authorised_value_categories` (`category_name`) ON DELETE CASCADE ON UPDATE CASCADE;
13204     });
13205
13206     $dbh->do(q{
13207             INSERT IGNORE INTO authorised_value_categories( category_name ) SELECT DISTINCT(authorised_value) FROM marc_subfield_structure;
13208             });
13209
13210     $dbh->do(q{
13211             UPDATE marc_subfield_structure SET authorised_value = NULL WHERE authorised_value = '';
13212             });
13213
13214     # If the DB has been created before 3.19.00.006, the default collate for marc_subfield_structure if not set to utf8_unicode_ci and the new FK will not be create (MariaDB or MySQL will raise err 150)
13215     my $table_sth = $dbh->prepare(qq|SHOW CREATE TABLE marc_subfield_structure|);
13216     $table_sth->execute;
13217     my @table = $table_sth->fetchrow_array;
13218     if ( $table[1] !~ /COLLATE=utf8_unicode_ci/ and $table[1] !~ /COLLATE=utf8mb4_unicode_ci/ ) { #catches utf8mb4 collated tables
13219         $dbh->do(qq|ALTER TABLE marc_subfield_structure CHARACTER SET utf8 COLLATE utf8_unicode_ci|);
13220     }
13221     $dbh->do(q{
13222             ALTER TABLE marc_subfield_structure
13223             MODIFY COLUMN authorised_value VARCHAR(32) DEFAULT NULL,
13224             ADD CONSTRAINT marc_subfield_structure_ibfk_1 FOREIGN KEY (authorised_value) REFERENCES authorised_value_categories (category_name) ON UPDATE CASCADE ON DELETE SET NULL;
13225             });
13226
13227       print "Upgrade to $DBversion done (Bug 17216 - Add a new table to store authorized value categories)\n";
13228       SetVersion($DBversion);
13229 }
13230
13231 $DBversion = "16.06.00.034";
13232 if ( CheckVersion($DBversion) ) {
13233     $dbh->do(q{
13234         ALTER TABLE biblioitems DROP COLUMN marc;
13235     });
13236     $dbh->do(q{
13237         ALTER TABLE deletedbiblioitems DROP COLUMN marc;
13238     });
13239
13240     print "Upgrade to $DBversion done (Bug 10455 - remove redundant 'biblioitems.marc' field)\n";
13241     SetVersion($DBversion);
13242 }
13243
13244 $DBversion = '16.06.00.035';
13245 if ( CheckVersion($DBversion) ) {
13246     $dbh->do(q{
13247         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type )
13248          SELECT 'AllowItemsOnHoldCheckoutSCO',COALESCE(value,0),'','Do not generate RESERVE_WAITING and RESERVED warning in the SCO module when checking out items reserved to someone else. This allows self checkouts for those items.','YesNo'
13249          FROM systempreferences WHERE variable='AllowItemsOnHoldCheckout';
13250     });
13251
13252     print "Upgrade to $DBversion done (Bug 15131: Give SCO separate control for AllowItemsOnHoldCheckout)\n";
13253     SetVersion($DBversion);
13254 }
13255
13256 $DBversion = '16.06.00.036';
13257 if ( CheckVersion($DBversion) ) {
13258     $dbh->do(q{
13259         CREATE TABLE IF NOT EXISTS `housebound_profile` (
13260           `borrowernumber` int(11) NOT NULL, -- Number of the borrower associated with this profile.
13261           `day` text NOT NULL,  -- The preferred day of the week for delivery.
13262           `frequency` text NOT NULL, -- The Authorised_Value definining the pattern for delivery.
13263           `fav_itemtypes` text default NULL, -- Free text describing preferred itemtypes.
13264           `fav_subjects` text default NULL, -- Free text describing preferred subjects.
13265           `fav_authors` text default NULL, -- Free text describing preferred authors.
13266           `referral` text default NULL, -- Free text indicating how the borrower was added to the service.
13267           `notes` text default NULL, -- Free text for additional notes.
13268           PRIMARY KEY  (`borrowernumber`),
13269           CONSTRAINT `housebound_profile_bnfk`
13270             FOREIGN KEY (`borrowernumber`)
13271             REFERENCES `borrowers` (`borrowernumber`)
13272             ON UPDATE CASCADE ON DELETE CASCADE
13273         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
13274     });
13275     $dbh->do(q{
13276         CREATE TABLE IF NOT EXISTS `housebound_visit` (
13277           `id` int(11) NOT NULL auto_increment, -- ID of the visit.
13278           `borrowernumber` int(11) NOT NULL, -- Number of the borrower, & the profile, linked to this visit.
13279           `appointment_date` date default NULL, -- Date of visit.
13280           `day_segment` varchar(10),  -- Rough time frame: 'morning', 'afternoon' 'evening'
13281           `chooser_brwnumber` int(11) default NULL, -- Number of the borrower to choose items  for delivery.
13282           `deliverer_brwnumber` int(11) default NULL, -- Number of the borrower to deliver items.
13283           PRIMARY KEY  (`id`),
13284           CONSTRAINT `houseboundvisit_bnfk`
13285             FOREIGN KEY (`borrowernumber`)
13286             REFERENCES `housebound_profile` (`borrowernumber`)
13287             ON UPDATE CASCADE ON DELETE CASCADE,
13288           CONSTRAINT `houseboundvisit_bnfk_1`
13289             FOREIGN KEY (`chooser_brwnumber`)
13290             REFERENCES `borrowers` (`borrowernumber`)
13291             ON UPDATE CASCADE ON DELETE CASCADE,
13292           CONSTRAINT `houseboundvisit_bnfk_2`
13293             FOREIGN KEY (`deliverer_brwnumber`)
13294             REFERENCES `borrowers` (`borrowernumber`)
13295             ON UPDATE CASCADE ON DELETE CASCADE
13296         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
13297     });
13298     $dbh->do(q{
13299         CREATE TABLE IF NOT EXISTS `housebound_role` (
13300           `borrowernumber_id` int(11) NOT NULL, -- borrowernumber link
13301           `housebound_chooser` tinyint(1) NOT NULL DEFAULT 0, -- set to 1 to indicate this patron is a housebound chooser volunteer
13302           `housebound_deliverer` tinyint(1) NOT NULL DEFAULT 0, -- set to 1 to indicate this patron is a housebound deliverer volunteer
13303           PRIMARY KEY (`borrowernumber_id`),
13304           CONSTRAINT `houseboundrole_bnfk`
13305             FOREIGN KEY (`borrowernumber_id`)
13306             REFERENCES `borrowers` (`borrowernumber`)
13307             ON UPDATE CASCADE ON DELETE CASCADE
13308         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
13309     });
13310     $dbh->do(q{
13311         INSERT IGNORE INTO systempreferences
13312                (variable,value,options,explanation,type) VALUES
13313                ('HouseboundModule',0,'',
13314                'If ON, enable housebound module functionality.','YesNo');
13315     });
13316     $dbh->do(q{
13317         INSERT IGNORE INTO authorised_value_categories( category_name ) VALUES
13318             ('HSBND_FREQ');
13319     });
13320     $dbh->do(q{
13321         INSERT IGNORE INTO authorised_values (category, authorised_value, lib) VALUES
13322                ('HSBND_FREQ','EW','Every week');
13323     });
13324
13325     print "Upgrade to $DBversion done (Bug 5670 - Housebound Readers Module)\n";
13326     SetVersion($DBversion);
13327 }
13328
13329 $DBversion = "16.06.00.037";
13330 if ( CheckVersion($DBversion) ) {
13331     $dbh->do(q{
13332         ALTER TABLE `issuingrules` ADD `article_requests` ENUM( 'no', 'yes', 'bib_only', 'item_only' ) NOT NULL DEFAULT 'no' AFTER `opacitemholds`;
13333     });
13334     $dbh->do(q{
13335         INSERT INTO `systempreferences` (`variable`, `value`, `options`, `explanation`, `type`) VALUES
13336             ('ArticleRequests', '0', NULL, 'Enables the article request feature', 'YesNo'),
13337             ('ArticleRequestsMandatoryFields', '', NULL, 'Comma delimited list of required fields for bibs where article requests rule = ''yes''', 'multiple'),
13338             ('ArticleRequestsMandatoryFieldsItemsOnly', '', NULL, 'Comma delimited list of required fields for bibs where article requests rule = ''item_only''', 'multiple'),
13339             ('ArticleRequestsMandatoryFieldsRecordOnly', '', NULL, 'Comma delimited list of required fields for bibs where article requests rule = ''bib_only''', 'multiple');
13340     });
13341     $dbh->do(q{
13342         CREATE TABLE IF NOT EXISTS `article_requests` (
13343           `id` int(11) NOT NULL AUTO_INCREMENT,
13344           `borrowernumber` int(11) NOT NULL,
13345           `biblionumber` int(11) NOT NULL,
13346           `itemnumber` int(11) DEFAULT NULL,
13347           `branchcode` varchar(10) CHARACTER SET utf8 COLLATE utf8_unicode_ci DEFAULT NULL,
13348           `title` text,
13349           `author` text,
13350           `volume` text,
13351           `issue` text,
13352           `date` text,
13353           `pages` text,
13354           `chapters` text,
13355           `patron_notes` text,
13356           `status` enum('PENDING','PROCESSING','COMPLETED','CANCELED') NOT NULL DEFAULT 'PENDING',
13357           `notes` text,
13358           `created_on` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
13359           `updated_on` timestamp NULL DEFAULT NULL,
13360           PRIMARY KEY (`id`),
13361           KEY `borrowernumber` (`borrowernumber`),
13362           KEY `biblionumber` (`biblionumber`),
13363           KEY `itemnumber` (`itemnumber`),
13364           KEY `branchcode` (`branchcode`),
13365           CONSTRAINT `article_requests_ibfk_1` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE CASCADE ON UPDATE CASCADE,
13366           CONSTRAINT `article_requests_ibfk_2` FOREIGN KEY (`biblionumber`) REFERENCES `biblio` (`biblionumber`) ON DELETE CASCADE ON UPDATE CASCADE,
13367           CONSTRAINT `article_requests_ibfk_3` FOREIGN KEY (`itemnumber`) REFERENCES `items` (`itemnumber`) ON DELETE SET NULL ON UPDATE CASCADE,
13368           CONSTRAINT `article_requests_ibfk_4` FOREIGN KEY (`branchcode`) REFERENCES `branches` (`branchcode`) ON DELETE SET NULL ON UPDATE CASCADE
13369         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
13370     });
13371     $dbh->do(q{
13372         INSERT INTO `letter` (`module`, `code`, `branchcode`, `name`, `is_html`, `title`, `content`, `message_transport_type`) VALUES
13373         ('circulation', 'AR_CANCELED', '', 'Article Request - Email - Canceled', 0, 'Article Request Canceled', '<<borrowers.firstname>> <<borrowers.surname>> (<<borrowers.cardnumber>>)\r\n\r\nYour request for an article from <<biblio.title>> (<<items.barcode>>) has been canceled for the following reason:\r\n\r\n<<article_requests.notes>>\r\n\r\nArticle requested:\r\nTitle: <<article_requests.title>>\r\nAuthor: <<article_requests.author>>\r\nVolume: <<article_requests.volume>>\r\nIssue: <<article_requests.issue>>\r\nDate: <<article_requests.date>>\r\nPages: <<article_requests.pages>>\r\nChapters: <<article_requests.chapters>>\r\nNotes: <<article_requests.patron_notes>>\r\n', 'email'),
13374         ('circulation', 'AR_COMPLETED', '', 'Article Request - Email - Completed', 0, 'Article Request Completed', '<<borrowers.firstname>> <<borrowers.surname>> (<<borrowers.cardnumber>>)\r\n\r\nWe are have completed your request for an article from <<biblio.title>> (<<items.barcode>>).\r\n\r\nArticle requested:\r\nTitle: <<article_requests.title>>\r\nAuthor: <<article_requests.author>>\r\nVolume: <<article_requests.volume>>\r\nIssue: <<article_requests.issue>>\r\nDate: <<article_requests.date>>\r\nPages: <<article_requests.pages>>\r\nChapters: <<article_requests.chapters>>\r\nNotes: <<article_requests.patron_notes>>\r\n\r\nYou may pick your article up at <<branches.branchname>>.\r\n\r\nThank you!', 'email'),
13375         ('circulation', 'AR_PENDING', '', 'Article Request - Email - Open', 0, 'Article Request Received', '<<borrowers.firstname>> <<borrowers.surname>> (<<borrowers.cardnumber>>)\r\n\r\nWe have received your request for an article from <<biblio.title>> (<<items.barcode>>).\r\n\r\nArticle requested:\r\nTitle: <<article_requests.title>>\r\nAuthor: <<article_requests.author>>\r\nVolume: <<article_requests.volume>>\r\nIssue: <<article_requests.issue>>\r\nDate: <<article_requests.date>>\r\nPages: <<article_requests.pages>>\r\nChapters: <<article_requests.chapters>>\r\nNotes: <<article_requests.patron_notes>>\r\n\r\n\r\nThank you!', 'email'),
13376         ('circulation', 'AR_SLIP', '', 'Article Request - Print Slip', 0, 'Test', 'Article Request:\r\n\r\n<<borrowers.firstname>> <<borrowers.surname>> (<<borrowers.cardnumber>>)\r\n\r\nTitle: <<biblio.title>>\r\nBarcode: <<items.barcode>>\r\n\r\nArticle requested:\r\nTitle: <<article_requests.title>>\r\nAuthor: <<article_requests.author>>\r\nVolume: <<article_requests.volume>>\r\nIssue: <<article_requests.issue>>\r\nDate: <<article_requests.date>>\r\nPages: <<article_requests.pages>>\r\nChapters: <<article_requests.chapters>>\r\nNotes: <<article_requests.patron_notes>>\r\n', 'print'),
13377         ('circulation', 'AR_PROCESSING', '', 'Article Request - Email - Processing', 0, 'Article Request Processing', '<<borrowers.firstname>> <<borrowers.surname>> (<<borrowers.cardnumber>>)\r\n\r\nWe are now processing your request for an article from <<biblio.title>> (<<items.barcode>>).\r\n\r\nArticle requested:\r\nTitle: <<article_requests.title>>\r\nAuthor: <<article_requests.author>>\r\nVolume: <<article_requests.volume>>\r\nIssue: <<article_requests.issue>>\r\nDate: <<article_requests.date>>\r\nPages: <<article_requests.pages>>\r\nChapters: <<article_requests.chapters>>\r\nNotes: <<article_requests.patron_notes>>\r\n\r\nThank you!', 'email');
13378     });
13379
13380     print "Upgrade to $DBversion done (Bug 14610 - Add ability to place article requests in Koha)\n";
13381     SetVersion($DBversion);
13382 }
13383
13384 $DBversion = '16.06.00.038';
13385 if ( CheckVersion($DBversion) ) {
13386     $dbh->do(q{
13387         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES ('DefaultPatronSearchFields','surname,firstname,othernames,cardnumber,userid',NULL,'Comma separated list defining the default fields to be used during a patron search','free');
13388     });
13389
13390     print "Upgrade to $DBversion done (Bug 14874 - Add ability to search for patrons by date of birth from checkout and patron quick searches)\n";
13391     SetVersion($DBversion);
13392 }
13393
13394 $DBversion = "16.06.00.039";
13395 if ( CheckVersion($DBversion) ) {
13396
13397     my $sth = $dbh->prepare(q{
13398         SELECT s.itemnumber, i.itype, b.itemtype
13399         FROM
13400          ( SELECT DISTINCT itemnumber
13401            FROM statistics
13402            WHERE ( type = "return" OR type = "localuse" ) AND
13403                  itemtype IS NULL
13404          ) s
13405         LEFT JOIN
13406          ( SELECT itemnumber,biblionumber, itype
13407              FROM items
13408            UNION
13409            SELECT itemnumber,biblionumber, itype
13410              FROM deleteditems
13411          ) i
13412         ON (s.itemnumber=i.itemnumber)
13413         LEFT JOIN
13414          ( SELECT biblionumber, itemtype
13415              FROM biblioitems
13416            UNION
13417            SELECT biblionumber, itemtype
13418              FROM deletedbiblioitems
13419          ) b
13420         ON (i.biblionumber=b.biblionumber);
13421     });
13422     $sth->execute();
13423
13424     my $update_sth = $dbh->prepare(q{
13425         UPDATE statistics
13426         SET itemtype=?
13427         WHERE itemnumber=? AND itemtype IS NULL
13428     });
13429     my $ilevel_itypes = C4::Context->preference('item-level_itypes');
13430
13431     while ( my ($itemnumber,$item_itype,$biblio_itype) = $sth->fetchrow_array ) {
13432
13433         my $effective_itemtype = $ilevel_itypes
13434                                     ? $item_itype // $biblio_itype
13435                                     : $biblio_itype;
13436         warn "item-level_itypes set but no itype defined for item ($itemnumber)"
13437             if $ilevel_itypes and !defined $item_itype;
13438         $update_sth->execute( $effective_itemtype, $itemnumber );
13439     }
13440
13441     print "Upgrade to $DBversion done (Bug 14598: itemtype is not set on statistics by C4::Circulation::AddReturn)\n";
13442     SetVersion($DBversion);
13443 }
13444
13445 $DBversion = '16.06.00.040';
13446 if ( CheckVersion($DBversion) ) {
13447     $dbh->do(q{
13448         ALTER TABLE `aqcontacts` ADD `orderacquisition` BOOLEAN NOT NULL DEFAULT 0 AFTER `notes`;
13449     });
13450     $dbh->do(q{
13451         INSERT IGNORE INTO `letter` (module, code, name, title, content, message_transport_type) VALUES
13452         ('orderacquisition','ACQORDER','Acquisition order','Order','<<aqbooksellers.name>>\r\n<<aqbooksellers.address1>>\r\n<<aqbooksellers.address2>>\r\n<<aqbooksellers.address3>>\r\n<<aqbooksellers.address4>>\r\n<<aqbooksellers.phone>>\r\n\r\nPlease order for the library:\r\n\r\n<order>Ordernumber <<aqorders.ordernumber>> (<<biblio.title>>) (quantity: <<aqorders.quantity>>) ($<<aqorders.listprice>> each).</order>\r\n\r\nThank you,\n\n<<branches.branchname>>', 'email');
13453     });
13454
13455     print "Upgrade to $DBversion done (Bug 5260 - Add option to send an order by e-mail to the acquisition module)\n";
13456     SetVersion($DBversion);
13457 }
13458
13459 $DBversion = '16.06.00.041';
13460 if ( CheckVersion($DBversion) ) {
13461     $dbh->do(q{
13462         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('AggressiveMatchOnISSN','0','If enabled, attempt to match aggressively by trying all variations of the ISSNs in the imported record as a phrase in the ISSN fields of already cataloged records when matching on ISSN with the record import tool','','YesNo')
13463     });
13464
13465     print "Upgrade to $DBversion done (Bug 14629 - Add aggressive ISSN matching feature equivalent to the aggressive ISBN matcher)\n";
13466     SetVersion($DBversion);
13467 }
13468
13469 $DBversion = '16.06.00.042';
13470 if ( CheckVersion($DBversion) ) {
13471     $dbh->do(q|
13472         ALTER TABLE aqorders
13473             ADD COLUMN unitprice_tax_excluded decimal(28,6) default NULL AFTER unitprice,
13474             ADD COLUMN unitprice_tax_included decimal(28,6) default NULL AFTER unitprice_tax_excluded,
13475             ADD COLUMN rrp_tax_excluded decimal(28,6) default NULL AFTER rrp,
13476             ADD COLUMN rrp_tax_included decimal(28,6) default NULL AFTER rrp_tax_excluded,
13477             ADD COLUMN ecost_tax_excluded decimal(28,6) default NULL AFTER ecost,
13478             ADD COLUMN ecost_tax_included decimal(28,6) default NULL AFTER ecost_tax_excluded,
13479             ADD COLUMN tax_value decimal(6,4) default NULL AFTER gstrate
13480     |);
13481
13482     # rename gstrate with tax_rate
13483     $dbh->do(q|ALTER TABLE aqorders CHANGE COLUMN gstrate tax_rate decimal(6,4) DEFAULT NULL|);
13484     $dbh->do(q|ALTER TABLE aqbooksellers CHANGE COLUMN gstrate tax_rate decimal(6,4) DEFAULT NULL|);
13485
13486     # Fill the new columns
13487     my $orders = $dbh->selectall_arrayref(q|
13488         SELECT * FROM aqorders
13489     |, { Slice => {} } );
13490
13491     my $sth_update_order = $dbh->prepare(q|
13492         UPDATE aqorders
13493         SET unitprice_tax_excluded = ?,
13494             unitprice_tax_included = ?,
13495             rrp_tax_excluded = ?,
13496             rrp_tax_included = ?,
13497             ecost_tax_excluded = ?,
13498             ecost_tax_included = ?,
13499             tax_value = ?
13500         WHERE ordernumber = ?
13501     |);
13502
13503     my $sth_get_bookseller = $dbh->prepare(q|
13504         SELECT aqbooksellers.*
13505         FROM aqbooksellers
13506         LEFT JOIN aqbasket ON aqbasket.booksellerid = aqbooksellers.id
13507         LEFT JOIN aqorders ON aqorders.basketno = aqbasket.basketno
13508         WHERE ordernumber = ?
13509     |);
13510
13511     require Number::Format;
13512     my $format = Number::Format->new;
13513     my $precision = 2;
13514     for my $order ( @$orders ) {
13515         $sth_get_bookseller->execute( $order->{ordernumber} );
13516         my ( $bookseller ) = $sth_get_bookseller->fetchrow_hashref;
13517         $order->{rrp}   = $format->round( $order->{rrp}, $precision );
13518         $order->{ecost} = $format->round( $order->{ecost}, $precision );
13519         $order->{tax_rate} ||= 0 ; # tax_rate can be NULL in DB
13520         # Ordering
13521         if ( $bookseller->{listincgst} ) {
13522             $order->{rrp_tax_included} = $order->{rrp};
13523             $order->{rrp_tax_excluded} = $format->round(
13524                 $order->{rrp_tax_included} / ( 1 + $order->{tax_rate} ), $precision );
13525             $order->{ecost_tax_included} = $order->{ecost};
13526             $order->{ecost_tax_excluded} = $format->round(
13527                 $order->{ecost} / ( 1 + $order->{tax_rate} ), $precision );
13528         }
13529         else {
13530             $order->{rrp_tax_excluded} = $order->{rrp};
13531             $order->{rrp_tax_included} = $format->round(
13532                 $order->{rrp} * ( 1 + $order->{tax_rate} ), $precision );
13533             $order->{ecost_tax_excluded} = $order->{ecost};
13534             $order->{ecost_tax_included} = $format->round(
13535                 $order->{ecost} * ( 1 + $order->{tax_rate} ), $precision );
13536         }
13537
13538         #receiving
13539         if ( $bookseller->{listincgst} ) {
13540             $order->{unitprice_tax_included} = $format->round( $order->{unitprice}, $precision );
13541             $order->{unitprice_tax_excluded} = $format->round(
13542               $order->{unitprice_tax_included} / ( 1 + $order->{tax_rate} ), $precision );
13543         }
13544         else {
13545             $order->{unitprice_tax_excluded} = $format->round( $order->{unitprice}, $precision );
13546             $order->{unitprice_tax_included} = $format->round(
13547               $order->{unitprice_tax_excluded} * ( 1 + $order->{tax_rate} ), $precision );
13548         }
13549
13550         # If the order is received, the tax is calculated from the unit price
13551         if ( $order->{orderstatus} eq 'complete' ) {
13552             $order->{tax_value} = $format->round(
13553               ( $order->{unitprice_tax_included} - $order->{unitprice_tax_excluded} )
13554               * $order->{quantity}, $precision );
13555         } else {
13556             # otherwise the ecost is used
13557             $order->{tax_value} = $format->round(
13558                 ( $order->{ecost_tax_included} - $order->{ecost_tax_excluded} ) *
13559                   $order->{quantity}, $precision );
13560         }
13561
13562         $sth_update_order->execute(
13563             $order->{unitprice_tax_excluded},
13564             $order->{unitprice_tax_included},
13565             $order->{rrp_tax_excluded},
13566             $order->{rrp_tax_included},
13567             $order->{ecost_tax_excluded},
13568             $order->{ecost_tax_included},
13569             $order->{tax_value},
13570             $order->{ordernumber},
13571         );
13572     }
13573
13574     print "Upgrade to $DBversion done (Bug 13321 - Tax and prices calculation need to be fixed)\n";
13575     SetVersion($DBversion);
13576 }
13577
13578 $DBversion = '16.06.00.043';
13579 if ( CheckVersion($DBversion) ) {
13580     # Add the new columns
13581     $dbh->do(q|
13582         ALTER TABLE aqorders
13583             ADD COLUMN tax_rate_on_ordering   decimal(6,4) default NULL AFTER tax_rate,
13584             ADD COLUMN tax_rate_on_receiving  decimal(6,4) default NULL AFTER tax_rate_on_ordering,
13585             ADD COLUMN tax_value_on_ordering  decimal(28,6) default NULL AFTER tax_value,
13586             ADD COLUMN tax_value_on_receiving decimal(28,6) default NULL AFTER tax_value_on_ordering
13587     |);
13588
13589     my $orders = $dbh->selectall_arrayref(q|
13590         SELECT * FROM aqorders
13591     |, { Slice => {} } );
13592
13593     my $sth_update_order = $dbh->prepare(q|
13594         UPDATE aqorders
13595         SET tax_rate_on_ordering = tax_rate,
13596             tax_rate_on_receiving = tax_rate,
13597             tax_value_on_ordering = ?,
13598             tax_value_on_receiving = ?
13599         WHERE ordernumber = ?
13600     |);
13601
13602     for my $order (@$orders) {
13603         my $tax_value_on_ordering =
13604           $order->{quantity} *
13605           $order->{ecost_tax_excluded} *
13606           $order->{tax_rate};
13607
13608         my $tax_value_on_receiving =
13609           ( defined $order->{unitprice_tax_excluded} )
13610           ? $order->{quantity} * $order->{unitprice_tax_excluded} * $order->{tax_rate}
13611           : undef;
13612
13613         $sth_update_order->execute( $tax_value_on_ordering,
13614             $tax_value_on_receiving, $order->{ordernumber} );
13615     }
13616
13617     # Remove the old columns
13618     $dbh->do(q|
13619         ALTER TABLE aqorders
13620             CHANGE COLUMN tax_value tax_value_bak  decimal(28,6) default NULL,
13621             CHANGE COLUMN tax_rate tax_rate_bak decimal(6,4) default NULL
13622     |);
13623
13624     print "Upgrade to $DBversion done (Bug 13323 - Change the tax rate on receiving)\n";
13625     SetVersion($DBversion);
13626 }
13627
13628 $DBversion = '16.06.00.044';
13629 if ( CheckVersion($DBversion) ) {
13630     $dbh->do(q{
13631         ALTER TABLE `messages`
13632         ADD `manager_id` int(11) NULL,
13633         ADD FOREIGN KEY (`manager_id`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL;
13634     });
13635
13636     print "Upgrade to $DBversion done (Bug 17397 - Show name of librarian who created circulation message)\n";
13637     SetVersion($DBversion);
13638 }
13639
13640 $DBversion = '16.06.00.045';
13641 if ( CheckVersion($DBversion) ) {
13642     $dbh->do(q{
13643         UPDATE systempreferences SET options = "now|dateexpiry|combination", explanation = "Set whether the borrower renewal date should be counted from the dateexpiry, from the current date or by combination: if the dateexpiry is in future use dateexpiry, else use current date " WHERE variable = "BorrowerRenewalPeriodBase";
13644     });
13645
13646     print "Upgrade to $DBversion done (Bug 17443 - Make possible to renew patron by later of expiry and current date)\n";
13647     SetVersion($DBversion);
13648 }
13649
13650 $DBversion = '16.06.00.046';
13651 if ( CheckVersion($DBversion) ) {
13652     $dbh->do(q{
13653         ALTER TABLE issuingrules ADD COLUMN no_auto_renewal_after INT(4) DEFAULT NULL AFTER auto_renew;
13654     });
13655
13656     print "Upgrade to $DBversion done (Bug 15581 - Add a circ rule to not allow auto-renewals after defined loan period)\n";
13657     SetVersion($DBversion);
13658 }
13659
13660 $DBversion = '16.06.00.047';
13661 if ( CheckVersion($DBversion) ) {
13662     $dbh->do(q{
13663         UPDATE language_descriptions SET description = 'Čeština' WHERE subtag = 'cs' AND type = 'language' AND lang = 'cs'
13664     });
13665
13666     print "Upgrade to $DBversion done (Bug 17518: Displayed language name for Czech is wrong)\n";
13667     SetVersion($DBversion);
13668 }
13669
13670 $DBversion = '16.06.00.048';
13671 if( CheckVersion( $DBversion ) ) {
13672     $dbh->do(q|
13673         INSERT IGNORE INTO permissions (module_bit, code, description) VALUES
13674         (13, 'upload_general_files', 'Upload any file'),
13675         (13, 'upload_manage', 'Manage uploaded files');
13676     |);
13677
13678     # Update user_permissions for current users (check count in uploaded_files)
13679     # Note 9 == edit_catalogue and 13 == tools
13680     # We do not insert if someone is superlibrarian, does not have edit_catalogue,
13681     # or already has all tools
13682     $dbh->do(q|
13683         INSERT IGNORE INTO user_permissions (borrowernumber, module_bit, code)
13684         SELECT borrowernumber, 13, 'upload_general_files'
13685         FROM borrowers bo
13686         WHERE flags<>1 AND flags & POW(2,13) = 0 AND
13687             ( flags & POW(2,9) > 0 OR (
13688                 SELECT COUNT(*) FROM user_permissions
13689                 WHERE borrowernumber=bo.borrowernumber AND module_bit=9 ) > 0 )
13690             AND ( SELECT COUNT(*) FROM uploaded_files ) > 0;
13691     |);
13692
13693     SetVersion( $DBversion );
13694     print "Upgrade to $DBversion done (Bug 17663 - Forgotten userpermissions)\n";
13695 }
13696
13697 $DBversion = '16.06.00.049';
13698 if( CheckVersion( $DBversion ) ) {
13699     $dbh->do(q|
13700         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
13701         VALUES ('ReplytoDefault',  '',  NULL,  'The default email address to be set as replyto.',  'Free');
13702     |);
13703
13704     $dbh->do(q|
13705         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
13706         VALUES ('ReturnpathDefault',  '',  NULL,  'The default email address to be set as return-path',  'Free');
13707     |);
13708
13709     SetVersion( $DBversion );
13710     print "Upgrade to $DBversion done (Bug 17391 - ReturnpathDefault and ReplyToDefault missing from syspref.sql)\n";
13711 }
13712
13713 $DBversion = "16.06.00.050";
13714 if ( CheckVersion($DBversion) ) {
13715
13716     # If index issn_idx still exists, we assume that dbrev 3.15.00.049 failed,
13717     # and we repeat it (partially).
13718     # Note: the db rev only pertains to biblioitems and is not needed for
13719     # deletedbiblioitems.
13720
13721     my $temp = $dbh->selectall_arrayref( "SHOW INDEXES FROM biblioitems WHERE key_name = 'issn_idx'" );
13722
13723     if( @$temp > 0 ) {
13724         $dbh->do( "ALTER TABLE biblioitems DROP INDEX isbn" );
13725         $dbh->do( "ALTER TABLE biblioitems DROP INDEX issn" );
13726         $dbh->do( "ALTER TABLE biblioitems DROP INDEX issn_idx" );
13727         $dbh->do( "ALTER TABLE biblioitems CHANGE isbn isbn MEDIUMTEXT NULL DEFAULT NULL, CHANGE issn issn MEDIUMTEXT NULL DEFAULT NULL" );
13728         $dbh->do( "ALTER TABLE biblioitems ADD INDEX isbn ( isbn ( 255 ) ), ADD INDEX issn ( issn ( 255 ) )" );
13729         print "Upgrade to $DBversion done (Bug 8835). Removed issn_idx.\n";
13730     } else {
13731         print "Upgrade to $DBversion done (Bug 8835). Everything is fine.\n";
13732     }
13733
13734     SetVersion($DBversion);
13735 }
13736
13737 $DBversion = "16.11.00.000";
13738 if ( CheckVersion($DBversion) ) {
13739     print "Upgrade to $DBversion done (Koha 16.11)\n";
13740     SetVersion($DBversion);
13741 }
13742
13743 $DBversion = "16.12.00.000";
13744 if ( CheckVersion($DBversion) ) {
13745     print "Upgrade to $DBversion done (Koha 16.12 - Our battered suitcases were piled on the sidewalk again; we had longer ways to go. But no matter, the road is life.)\n";
13746     SetVersion($DBversion);
13747 }
13748
13749 $DBversion = "16.12.00.001";
13750 if ( CheckVersion($DBversion) ) {
13751     $dbh->do(q{
13752         ALTER TABLE borrower_modifications
13753         ADD COLUMN extended_attributes text DEFAULT NULL
13754         AFTER privacy
13755     });
13756
13757     print "Upgrade to $DBversion done (Bug 17767 - Let Koha::Patron::Modification handle extended attributes)\n";
13758     SetVersion($DBversion);
13759 }
13760
13761 $DBversion = '16.12.00.002';
13762 if ( CheckVersion($DBversion) ) {
13763     unless (column_exists( 'branchtransfers', 'branchtransfer_id' )
13764         and index_exists( 'branchtransfers', 'PRIMARY' ) )
13765     {
13766         $dbh->do(
13767             "ALTER TABLE branchtransfers
13768                  ADD COLUMN branchtransfer_id int(12) NOT NULL auto_increment FIRST, ADD CONSTRAINT PRIMARY KEY (branchtransfer_id);"
13769         );
13770     }
13771
13772     SetVersion($DBversion);
13773     print "Upgrade to $DBversion done (Bug 14187 - branchtransfer needs a primary key (id) for DBIx and common sense.)\n";
13774 }
13775
13776 $DBversion = '16.12.00.003';
13777 if ( CheckVersion($DBversion) ) {
13778     $dbh->do(q{DELETE FROM systempreferences WHERE variable="Persona"});
13779     SetVersion($DBversion);
13780     print "Upgrade to $DBversion done (Bug 17486 - Remove 'Mozilla Persona' as an authentication method)\n";
13781 }
13782
13783 $DBversion = '16.12.00.004';
13784 if ( CheckVersion($DBversion) ) {
13785     $dbh->do(q{
13786         CREATE TABLE biblio_metadata (
13787             `id` INT(11) NOT NULL AUTO_INCREMENT,
13788             `biblionumber` INT(11) NOT NULL,
13789             `format` VARCHAR(16) NOT NULL,
13790             `marcflavour` VARCHAR(16) NOT NULL,
13791             `metadata` LONGTEXT NOT NULL,
13792             PRIMARY KEY(id),
13793             UNIQUE KEY `biblio_metadata_uniq_key` (`biblionumber`,`format`,`marcflavour`),
13794             CONSTRAINT `biblio_metadata_fk_1` FOREIGN KEY (biblionumber) REFERENCES biblio (biblionumber) ON DELETE CASCADE ON UPDATE CASCADE
13795         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
13796     });
13797     $dbh->do(q{
13798         CREATE TABLE deletedbiblio_metadata (
13799             `id` INT(11) NOT NULL AUTO_INCREMENT,
13800             `biblionumber` INT(11) NOT NULL,
13801             `format` VARCHAR(16) NOT NULL,
13802             `marcflavour` VARCHAR(16) NOT NULL,
13803             `metadata` LONGTEXT NOT NULL,
13804             PRIMARY KEY(id),
13805             UNIQUE KEY `deletedbiblio_metadata_uniq_key` (`biblionumber`,`format`,`marcflavour`),
13806             CONSTRAINT `deletedbiblio_metadata_fk_1` FOREIGN KEY (biblionumber) REFERENCES deletedbiblio (biblionumber) ON DELETE CASCADE ON UPDATE CASCADE
13807         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
13808     });
13809     $dbh->do(q{
13810         INSERT INTO biblio_metadata ( biblionumber, format, marcflavour, metadata ) SELECT biblionumber, 'marcxml', 'CHANGEME', marcxml FROM biblioitems;
13811     });
13812     $dbh->do(q{
13813         INSERT INTO deletedbiblio_metadata ( biblionumber, format, marcflavour, metadata ) SELECT biblionumber, 'marcxml', 'CHANGEME', marcxml FROM deletedbiblioitems;
13814     });
13815     $dbh->do(q{
13816         UPDATE biblio_metadata SET marcflavour = (SELECT value FROM systempreferences WHERE variable="marcflavour");
13817     });
13818     $dbh->do(q{
13819         UPDATE deletedbiblio_metadata SET marcflavour = (SELECT value FROM systempreferences WHERE variable="marcflavour");
13820     });
13821     $dbh->do(q{
13822         ALTER TABLE biblioitems DROP COLUMN marcxml;
13823     });
13824     $dbh->do(q{
13825         ALTER TABLE deletedbiblioitems DROP COLUMN marcxml;
13826     });
13827     SetVersion($DBversion);
13828     print "Upgrade to $DBversion done (Bug 17196 - Move marcxml out of the biblioitems table)\n";
13829 }
13830
13831 $DBversion = '16.12.00.005';
13832 if( CheckVersion( $DBversion ) ) {
13833     $dbh->do( "INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES('AuthorityMergeMode','loose','loose|strict','Authority merge mode','Choice')");
13834
13835     SetVersion( $DBversion );
13836     print "Upgrade to $DBversion done (Bug 17913 - AuthorityMergeMode)\n";
13837 }
13838
13839 $DBversion = "16.12.00.006";
13840 if ( CheckVersion($DBversion) ) {
13841     unless (     column_exists( 'borrower_attributes', 'id' )
13842              and index_exists( 'borrower_attributes', 'PRIMARY' ) )
13843     {
13844         $dbh->do(q{
13845             ALTER TABLE `borrower_attributes`
13846                 ADD `id` int(11) NOT NULL AUTO_INCREMENT PRIMARY KEY FIRST
13847         });
13848     }
13849
13850     print "Upgrade to $DBversion done (Bug 17813: Table borrower_attributes needs a primary key\n";
13851     SetVersion($DBversion);
13852 }
13853
13854 $DBversion = "16.12.00.007";
13855 if( CheckVersion( $DBversion ) ) {
13856
13857     if ( column_exists('opac_news', 'new' ) ) {
13858         $dbh->do(q|ALTER TABLE opac_news CHANGE COLUMN new content text NOT NULL|);
13859     }
13860
13861     $dbh->do(q|
13862         UPDATE letter SET content = REPLACE(content, "<<opac_news.new>>", "<<opac_news.content>>") WHERE content LIKE "%<<opac_news.new>>%"
13863     |);
13864
13865     SetVersion( $DBversion );
13866     print "Upgrade to $DBversion done (Bug 17960 - Rename opac_news with opac_news.content (template notices have been updated!))\n";
13867 }
13868
13869 $DBversion = "16.12.00.008";
13870 if( CheckVersion( $DBversion ) ) {
13871     $dbh->do(q{
13872         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES
13873         ('MarcItemFieldsToOrder','','Set the mapping values for new item records created from a MARC record in a staged file. In a YAML format.', NULL, 'textarea');
13874     });
13875
13876     SetVersion( $DBversion );
13877     print "Upgrade to $DBversion done (Bug 15503 - Grab Item Information from Order Files)\n";
13878 }
13879
13880 $DBversion = "16.12.00.009";
13881 if( CheckVersion( $DBversion ) ) {
13882     $dbh->do(q{
13883         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES
13884         ('OPACHoldsIfAvailableAtPickup','1','','Allow to pickup up holds at libraries where the item is available','YesNo');
13885     });
13886
13887     $dbh->do(q{
13888         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES
13889         ('OPACHoldsIfAvailableAtPickupExceptions','','','List the patron categories not affected by OPACHoldsIfAvailableAtPickup if off','Free');
13890     });
13891
13892     SetVersion( $DBversion );
13893     print "Upgrade to $DBversion done (Bug 17453 - Inter-site holds improvement)\n";
13894 }
13895
13896 $DBversion = "16.12.00.010";
13897 if( CheckVersion( $DBversion ) ) {
13898     $dbh->do(q{
13899         ALTER TABLE borrowers ADD overdrive_auth_token text default NULL AFTER lastseen;
13900     });
13901
13902     $dbh->do(q{
13903         ALTER TABLE deletedborrowers ADD overdrive_auth_token text default NULL AFTER lastseen;
13904     });
13905
13906     $dbh->do(q{
13907         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
13908         VALUES ('OverDriveCirculation','0','Enable client to see their OverDrive account','','YesNo');
13909     });
13910
13911     SetVersion( $DBversion );
13912     print "Upgrade to $DBversion done (Bug 16034 - Integration with OverDrive Patron API)\n";
13913 }
13914
13915 $DBversion = "16.12.00.011";
13916 if( CheckVersion( $DBversion ) ) {
13917     $dbh->do(q{
13918         ALTER TABLE search_field CHANGE COLUMN type type ENUM('', 'string', 'date', 'number', 'boolean', 'sum') NOT NULL
13919         COMMENT 'what type of data this holds, relevant when storing it in the search engine';
13920     });
13921
13922     SetVersion( $DBversion );
13923     print "Upgrade to $DBversion done (Bug 17260 - updatedatabase.pl fails on invalid entries in ENUM and BOOLEAN columns)\n";
13924 }
13925
13926 $DBversion = "16.12.00.012";
13927 if( CheckVersion( $DBversion ) ) {
13928     $dbh->do(q{
13929         INSERT IGNORE INTO `systempreferences` (`variable`, `value`, `options`, `explanation`, `type`)
13930         VALUES ('OpacNewsLibrarySelect', '0', '', 'Show selector for branches on OPAC news page', 'YesNo');
13931     });
13932
13933     SetVersion( $DBversion );
13934     print "Upgrade to $DBversion done (Bug 14764 - Add OPAC News branch selector)\n";
13935 }
13936
13937 $DBversion = "16.12.00.013";
13938 if( CheckVersion( $DBversion ) ) {
13939     $dbh->do(q{
13940         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`)
13941         VALUES ('CircSidebar','0','','Activate or deactivate the navigation sidebar on all Circulation pages','YesNo');
13942     });
13943
13944     SetVersion( $DBversion );
13945     print "Upgrade to $DBversion done (Bug 16530 - Add a circ sidebar navigation menu)\n";
13946 }
13947
13948 $DBversion = "16.12.00.014";
13949 if( CheckVersion( $DBversion ) ) {
13950     $dbh->do(q{
13951             INSERT INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
13952             ('LoadSearchHistoryToTheFirstLoggedUser', '1', NULL, 'If ON, the next user will automatically get the last searches in his history', 'YesNo');
13953             });
13954             SetVersion( $DBversion );
13955             print "Upgrade to $DBversion done (Bug 8010 - Search history can be added to the wrong patron)\n";
13956             }
13957
13958 $DBversion = "16.12.00.015";
13959 if( CheckVersion( $DBversion ) ) {
13960     unless( column_exists( 'branches', 'geolocation' ) ) {
13961         $dbh->do(q|
13962                 ALTER TABLE branches ADD COLUMN geolocation VARCHAR(255) DEFAULT NULL after opac_info
13963                 |);
13964     }
13965
13966     $dbh->do(q|
13967             INSERT IGNORE INTO systempreferences (variable, value, options, explanation, type ) VALUES ('UsageStatsGeolocation', '', NULL, 'Geolocation of the main library', 'Free');
13968             |);
13969     $dbh->do(q|
13970             INSERT IGNORE INTO systempreferences (variable, value, options, explanation, type ) VALUES ('UsageStatsLibrariesInfo', '', NULL, 'Share libraries information', 'YesNo');
13971             |);
13972     $dbh->do(q|
13973             INSERT IGNORE INTO systempreferences (variable, value, options, explanation, type ) VALUES ('UsageStatsPublicID', '', NULL, 'Public ID for Hea website', 'Free');
13974             |);
13975
13976         SetVersion( $DBversion );
13977     print "Upgrade to $DBversion done (Bug 18066 - Hea version 2)\n";
13978 }
13979
13980 $DBversion = "16.12.00.016";
13981 if ( CheckVersion($DBversion) ) {
13982     unless ( column_exists( 'borrower_attribute_types', 'opac_editable' ) )
13983     {
13984         $dbh->do(q{
13985             ALTER TABLE borrower_attribute_types
13986                 ADD COLUMN `opac_editable` tinyint(1) NOT NULL default 0 AFTER `opac_display`
13987         });
13988     }
13989
13990     print "Upgrade to $DBversion done (Bug 13757: Make patron attributes editable in the opac if set to 'editable in OPAC)'\n";
13991     SetVersion($DBversion);
13992 }
13993
13994 $DBversion = "16.12.00.017";
13995 if ( CheckVersion($DBversion) ) {
13996     $dbh->do(q{
13997         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
13998         VALUES ('CumulativeRestrictionPeriods',  0,  NULL,  'Cumulate the restriction periods instead of keeping the highest',  'YesNo')
13999     });
14000
14001     print "Upgrade to $DBversion done (Bug 14146 - Additional days are not added to restriction period when checking-in several overdues for same patron)'\n";
14002     SetVersion($DBversion);
14003 }
14004
14005 $DBversion = "16.12.00.018";
14006 if ( CheckVersion($DBversion) ) {
14007     $dbh->do(q{
14008         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type )
14009             SELECT 'ExportCircHistory', COUNT(*), NULL, "Display the export circulation options",  'YesNo'
14010             FROM systempreferences
14011             WHERE ( variable = 'ExportRemoveFields' AND value != "" AND value IS NOT NULL )
14012                 OR ( variable = 'ExportWithCsvProfile' AND value != "" AND value IS NOT NULL );
14013     });
14014
14015     $dbh->do(q{
14016         DELETE FROM systempreferences WHERE variable="ExportWithCsvProfile";
14017     });
14018
14019     print "Upgrade to $DBversion done (Bug 15498 - Replace ExportWithCsvProfile with ExportCircHistory)'\n";
14020     SetVersion($DBversion);
14021 }
14022
14023 $DBversion = "16.12.00.019";
14024 if( CheckVersion( $DBversion ) ) {
14025     if ( column_exists( 'issues', 'return' ) ) {
14026         $dbh->do(q|ALTER TABLE issues DROP column `return`|);
14027     }
14028
14029     if ( column_exists( 'old_issues', 'return' ) ) {
14030         $dbh->do(q|ALTER TABLE old_issues DROP column `return`|);
14031     }
14032
14033     SetVersion( $DBversion );
14034     print "Upgrade to $DBversion done (Bug 18173 - Remove issues.return DB field)\n";
14035 }
14036
14037 $DBversion = "16.12.00.020";
14038 if( CheckVersion( $DBversion ) ) {
14039     $dbh->do(q{
14040         UPDATE systempreferences SET options="any_time_is_placed|not_always|any_time_is_collected" WHERE variable="HoldFeeMode";
14041     });
14042
14043     $dbh->do(q{
14044         UPDATE systempreferences SET value="any_time_is_placed" WHERE variable="HoldFeeMode" AND value="always";
14045     });
14046
14047     SetVersion( $DBversion );
14048     print "Upgrade to $DBversion done (Bug 17560 - Hold fee placement at point of checkout)\n";
14049 }
14050
14051 $DBversion = "16.12.00.021";
14052 if( CheckVersion( $DBversion ) ) {
14053     $dbh->do(q{
14054         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
14055         ('RenewalLog','0','','If ON, log information about renewals','YesNo');
14056     });
14057
14058     SetVersion( $DBversion );
14059     print "Upgrade to $DBversion done (Bug 17708 - Renewal log seems empty)\n";
14060 }
14061
14062 $DBversion = "16.12.00.022";
14063 if( CheckVersion( $DBversion ) ) {
14064     print "NOTE: The sender for claim notifications has been corrected. The email address of the staff member is no longer used. We will use the branch email address or KohaAdminEmailAddress, as is done for other notices.\n";
14065     SetVersion( $DBversion );
14066     print "Upgrade to $DBversion done (Bug 17866 - Change sender for serial claim notifications)\n";
14067 }
14068
14069 $DBversion = '16.12.00.023';
14070 if( CheckVersion( $DBversion ) ) {
14071     my $oldval = C4::Context->preference('dontmerge');
14072     my $newval = $oldval ? 0 : 50;
14073
14074     # Remove dontmerge, add AuthorityMergeLimit
14075     $dbh->do(q{
14076         DELETE FROM systempreferences WHERE variable = 'dontmerge';
14077     });
14078     $dbh->do(qq{
14079         INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type ) VALUES ('AuthorityMergeLimit','$newval',NULL,'Maximum number of biblio records updated immediately when an authority record has been modified.','integer');
14080     });
14081
14082     $dbh->do(q{
14083         ALTER TABLE need_merge_authorities
14084             ADD COLUMN authid_new BIGINT AFTER authid,
14085             ADD COLUMN reportxml text AFTER authid_new,
14086             ADD COLUMN timestamp timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP;
14087     });
14088
14089     $dbh->do(q{
14090         UPDATE need_merge_authorities SET authid_new=authid WHERE done <> 1
14091     });
14092
14093     SetVersion( $DBversion );
14094     if( $newval == 0 ) {
14095         print "NOTE: Since dontmerge was enabled, we have initialized AuthorityMergeLimit to 0 records. Please consider raising this value. This will allow for performing smaller merges directly and only postponing larger merges.\n";
14096     }
14097     print "IMPORTANT NOTE: If you are not using a Debian package install, please verify that you no longer use misc/migration_tools/merge_authority.pl in your cron files AND add misc/cronjobs/merge_authorities.pl to cron now. This job is no longer optional! You need it to perform larger authority merges.\n";
14098     print "Upgrade to $DBversion done (Bug 9988 - Add AuthorityMergeLimit)\n";
14099 }
14100
14101 $DBversion = '16.12.00.024';
14102 if( CheckVersion( $DBversion ) ) {
14103     $dbh->do(q{
14104         UPDATE systempreferences SET variable="NoticeBcc" WHERE variable="OverdueNoticeBcc";
14105     });
14106
14107     SetVersion( $DBversion );
14108     print "Upgrade to $DBversion done (Bug 14537 - The system preference 'OverdueNoticeBcc' is mis-named.)\n";
14109 }
14110
14111 $DBversion = '16.12.00.025';
14112 if( CheckVersion( $DBversion ) ) {
14113     $dbh->do(q|
14114         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` )
14115         VALUES ('UploadPurgeTemporaryFilesDays','',NULL,'If not empty, number of days used when automatically deleting temporary uploads','integer');
14116     |);
14117
14118     my ( $cnt ) = $dbh->selectrow_array( "SELECT COUNT(*) FROM uploaded_files WHERE permanent IS NULL or permanent=0" );
14119     if( $cnt ) {
14120         print "NOTE: You have $cnt temporary uploads. You could benefit from setting pref UploadPurgeTemporaryFilesDays now to automatically delete them.\n";
14121     }
14122
14123     SetVersion( $DBversion );
14124     print "Upgrade to $DBversion done (Bug 17669 - Introduce preference for deleting temporary uploads)\n";
14125 }
14126
14127 $DBversion = '16.12.00.026';
14128 if( CheckVersion( $DBversion ) ) {
14129
14130     # In order to be overcomplete, we check if the situation is what we expect
14131     if( !index_exists( 'serialitems', 'PRIMARY' ) ) {
14132         if( index_exists( 'serialitems', 'serialitemsidx' ) ) {
14133             $dbh->do(q|
14134                 ALTER TABLE serialitems ADD PRIMARY KEY (itemnumber), DROP INDEX serialitemsidx;
14135             |);
14136         } else {
14137             $dbh->do(q|ALTER TABLE serialitems ADD PRIMARY KEY (itemnumber)|);
14138         }
14139     }
14140
14141     SetVersion( $DBversion );
14142     print "Upgrade to $DBversion done (Bug 18427 - Add a primary key to serialitems)\n";
14143 }
14144
14145 $DBversion = '16.12.00.027';
14146 if( CheckVersion( $DBversion ) ) {
14147
14148     $dbh->do(q{
14149         CREATE TABLE IF NOT EXISTS club_templates (
14150           id int(11) NOT NULL AUTO_INCREMENT,
14151           `name` tinytext NOT NULL,
14152           description text,
14153           is_enrollable_from_opac tinyint(1) NOT NULL DEFAULT '0',
14154           is_email_required tinyint(1) NOT NULL DEFAULT '0',
14155           branchcode varchar(10) NULL DEFAULT NULL,
14156           date_created timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP,
14157           date_updated timestamp NULL DEFAULT NULL,
14158           is_deletable tinyint(1) NOT NULL DEFAULT '1',
14159           PRIMARY KEY (id),
14160           KEY ct_branchcode (branchcode),
14161           CONSTRAINT `club_templates_ibfk_1` FOREIGN KEY (branchcode) REFERENCES `branches` (branchcode) ON DELETE CASCADE ON UPDATE CASCADE
14162         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
14163     });
14164
14165     $dbh->do(q{
14166         CREATE TABLE IF NOT EXISTS clubs (
14167           id int(11) NOT NULL AUTO_INCREMENT,
14168           club_template_id int(11) NOT NULL,
14169           `name` tinytext NOT NULL,
14170           description text,
14171           date_start date DEFAULT NULL,
14172           date_end date DEFAULT NULL,
14173           branchcode varchar(10) NULL DEFAULT NULL,
14174           date_created timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP,
14175           date_updated timestamp NULL DEFAULT NULL,
14176           PRIMARY KEY (id),
14177           KEY club_template_id (club_template_id),
14178           KEY branchcode (branchcode),
14179           CONSTRAINT clubs_ibfk_1 FOREIGN KEY (club_template_id) REFERENCES club_templates (id) ON DELETE CASCADE ON UPDATE CASCADE,
14180           CONSTRAINT clubs_ibfk_2 FOREIGN KEY (branchcode) REFERENCES branches (branchcode)
14181         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
14182     });
14183
14184     $dbh->do(q{
14185         CREATE TABLE IF NOT EXISTS club_enrollments (
14186           id int(11) NOT NULL AUTO_INCREMENT,
14187           club_id int(11) NOT NULL,
14188           borrowernumber int(11) NOT NULL,
14189           date_enrolled timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP,
14190           date_canceled timestamp NULL DEFAULT NULL,
14191           date_created timestamp NULL DEFAULT NULL,
14192           date_updated timestamp NULL DEFAULT NULL,
14193           branchcode varchar(10) NULL DEFAULT NULL,
14194           PRIMARY KEY (id),
14195           KEY club_id (club_id),
14196           KEY borrowernumber (borrowernumber),
14197           KEY branchcode (branchcode),
14198           CONSTRAINT club_enrollments_ibfk_1 FOREIGN KEY (club_id) REFERENCES clubs (id) ON DELETE CASCADE ON UPDATE CASCADE,
14199           CONSTRAINT club_enrollments_ibfk_2 FOREIGN KEY (borrowernumber) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE,
14200           CONSTRAINT club_enrollments_ibfk_3 FOREIGN KEY (branchcode) REFERENCES branches (branchcode) ON DELETE SET NULL ON UPDATE CASCADE
14201         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
14202     });
14203
14204     $dbh->do(q{
14205         CREATE TABLE IF NOT EXISTS club_template_enrollment_fields (
14206           id int(11) NOT NULL AUTO_INCREMENT,
14207           club_template_id int(11) NOT NULL,
14208           `name` tinytext NOT NULL,
14209           description text,
14210           authorised_value_category varchar(16) DEFAULT NULL,
14211           PRIMARY KEY (id),
14212           KEY club_template_id (club_template_id),
14213           CONSTRAINT club_template_enrollment_fields_ibfk_1 FOREIGN KEY (club_template_id) REFERENCES club_templates (id) ON DELETE CASCADE ON UPDATE CASCADE
14214         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
14215     });
14216
14217     $dbh->do(q{
14218         CREATE TABLE IF NOT EXISTS club_enrollment_fields (
14219           id int(11) NOT NULL AUTO_INCREMENT,
14220           club_enrollment_id int(11) NOT NULL,
14221           club_template_enrollment_field_id int(11) NOT NULL,
14222           `value` text NOT NULL,
14223           PRIMARY KEY (id),
14224           KEY club_enrollment_id (club_enrollment_id),
14225           KEY club_template_enrollment_field_id (club_template_enrollment_field_id),
14226           CONSTRAINT club_enrollment_fields_ibfk_1 FOREIGN KEY (club_enrollment_id) REFERENCES club_enrollments (id) ON DELETE CASCADE ON UPDATE CASCADE,
14227           CONSTRAINT club_enrollment_fields_ibfk_2 FOREIGN KEY (club_template_enrollment_field_id) REFERENCES club_template_enrollment_fields (id) ON DELETE CASCADE ON UPDATE CASCADE
14228         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
14229     });
14230
14231     $dbh->do(q{
14232         CREATE TABLE IF NOT EXISTS club_template_fields (
14233           id int(11) NOT NULL AUTO_INCREMENT,
14234           club_template_id int(11) NOT NULL,
14235           `name` tinytext NOT NULL,
14236           description text,
14237           authorised_value_category varchar(16) DEFAULT NULL,
14238           PRIMARY KEY (id),
14239           KEY club_template_id (club_template_id),
14240           CONSTRAINT club_template_fields_ibfk_1 FOREIGN KEY (club_template_id) REFERENCES club_templates (id) ON DELETE CASCADE ON UPDATE CASCADE
14241         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
14242     });
14243
14244     $dbh->do(q{
14245         CREATE TABLE IF NOT EXISTS club_fields (
14246           id int(11) NOT NULL AUTO_INCREMENT,
14247           club_template_field_id int(11) NOT NULL,
14248           club_id int(11) NOT NULL,
14249           `value` text,
14250           PRIMARY KEY (id),
14251           KEY club_template_field_id (club_template_field_id),
14252           KEY club_id (club_id),
14253           CONSTRAINT club_fields_ibfk_3 FOREIGN KEY (club_template_field_id) REFERENCES club_template_fields (id) ON DELETE CASCADE ON UPDATE CASCADE,
14254           CONSTRAINT club_fields_ibfk_4 FOREIGN KEY (club_id) REFERENCES clubs (id) ON DELETE CASCADE ON UPDATE CASCADE
14255         ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
14256     });
14257
14258     $dbh->do(q{
14259         INSERT IGNORE INTO userflags (bit, flag, flagdesc, defaulton) VALUES (21, 'clubs', 'Patron clubs', '0');
14260     });
14261
14262     $dbh->do(q{
14263         INSERT IGNORE INTO permissions (module_bit, code, description) VALUES
14264            (21, 'edit_templates', 'Create and update club templates'),
14265            (21, 'edit_clubs', 'Create and update clubs'),
14266            (21, 'enroll', 'Enroll patrons in clubs')
14267         ;
14268     });
14269
14270     SetVersion( $DBversion );
14271     print "Upgrade to $DBversion done (Bug 12461 - Add patron clubs feature)\n";
14272 }
14273
14274 $DBversion = '16.12.00.028';
14275 if( CheckVersion( $DBversion ) ) {
14276     $dbh->do(q{
14277         UPDATE systempreferences  SET options = 'us|de|fr' WHERE variable = 'AddressFormat';
14278     });
14279
14280     SetVersion( $DBversion );
14281     print "Upgrade to $DBversion done (Bug 18110 - Adds FR to the syspref AddressFormat)\n";
14282 }
14283
14284 $DBversion = '16.12.00.029';
14285 if( CheckVersion( $DBversion ) ) {
14286     unless( column_exists( 'issues', 'note' ) ) {
14287         $dbh->do(q|ALTER TABLE issues ADD note mediumtext default NULL AFTER onsite_checkout|);
14288     }
14289     unless( column_exists( 'issues', 'notedate' ) ) {
14290         $dbh->do(q|ALTER TABLE issues ADD notedate datetime default NULL AFTER note|);
14291     }
14292     unless( column_exists( 'old_issues', 'note' ) ) {
14293         $dbh->do(q|ALTER TABLE old_issues ADD note mediumtext default NULL AFTER onsite_checkout|);
14294     }
14295     unless( column_exists( 'old_issues', 'notedate' ) ) {
14296         $dbh->do(q|ALTER TABLE old_issues ADD notedate datetime default NULL AFTER note|);
14297     }
14298
14299     $dbh->do(q|
14300         INSERT IGNORE INTO letter (`module`, `code`, `branchcode`, `name`, `is_html`, `title`, `content`, `message_transport_type`)
14301         VALUES ('circulation', 'CHECKOUT_NOTE', '', 'Checkout note on item set by patron', '0', 'Checkout note', '<<borrowers.firstname>> <<borrowers.surname>> has added a note to the item <<biblio.title>> - <<biblio.author>> (<<biblio.biblionumber>>).','email');
14302     |);
14303
14304     $dbh->do(q|
14305         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`,`type`)
14306         VALUES ('AllowCheckoutNotes', '0', NULL, 'Allow patrons to submit notes about checked out items.','YesNo');
14307     |);
14308
14309     SetVersion( $DBversion );
14310     print "Upgrade to $DBversion done (Bug 14224: Add column issues.note and issues.notedate)\n";
14311 }
14312
14313 $DBversion = '16.12.00.030';
14314 if( CheckVersion( $DBversion ) ) {
14315     unless( column_exists( 'issuingrules', 'no_auto_renewal_after_hard_limit' ) ) {
14316         $dbh->do(q{
14317             ALTER TABLE issuingrules ADD COLUMN no_auto_renewal_after_hard_limit DATE DEFAULT NULL AFTER no_auto_renewal_after;
14318         });
14319     }
14320
14321     SetVersion( $DBversion );
14322     print "Upgrade to $DBversion done (Bug 16344 - Add a circ rule to limit the auto renewals given a specific date)\n";
14323 }
14324
14325 $DBversion = '16.12.00.031';
14326 if( CheckVersion( $DBversion ) ) {
14327     if ( !index_exists( 'biblioitems', 'timestamp' ) ) {
14328         $dbh->do("ALTER TABLE biblioitems ADD KEY `timestamp` (`timestamp`);");
14329     }
14330     if ( !index_exists( 'deletedbiblioitems', 'timestamp' ) ) {
14331         $dbh->do("ALTER TABLE deletedbiblioitems ADD KEY `timestamp` (`timestamp`);");
14332     }
14333     if ( !index_exists( 'items', 'timestamp' ) ) {
14334         $dbh->do("ALTER TABLE items ADD KEY `timestamp` (`timestamp`);");
14335     }
14336     if ( !index_exists( 'deleteditems', 'timestamp' ) ) {
14337         $dbh->do("ALTER TABLE deleteditems ADD KEY `timestamp` (`timestamp`);");
14338     }
14339
14340     SetVersion( $DBversion );
14341     print "Upgrade to $DBversion done (Bug 15108: OAI-PMH provider improvements)\n";
14342 }
14343
14344 $DBversion = '16.12.00.032';
14345 if( CheckVersion( $DBversion ) ) {
14346     require Koha::Calendar;
14347
14348     $dbh->do(q{
14349         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
14350         VALUES ('ExcludeHolidaysFromMaxPickUpDelay', '0', 'If ON, reserves max pickup delay takes into account the closed days.', NULL, 'Integer');
14351     });
14352
14353     my $waiting_holds = $dbh->selectall_arrayref(q|
14354         SELECT expirationdate, waitingdate, branchcode
14355         FROM reserves
14356         WHERE found = 'W' AND priority = 0
14357     |, { Slice => {} });
14358     my $update_sth = $dbh->prepare(q|
14359         UPDATE reserves
14360         SET expirationdate = ?
14361         WHERE reserve_id = ?
14362     |);
14363     my $max_pickup_delay = C4::Context->preference("ReservesMaxPickUpDelay");
14364     for my $hold ( @$waiting_holds ) {
14365
14366         my $requested_expiration;
14367         if ($hold->{expirationdate}) {
14368             $requested_expiration = dt_from_string($hold->{expirationdate});
14369         }
14370
14371         my $expirationdate = dt_from_string($hold->{waitingdate});
14372         if ( C4::Context->preference("ExcludeHolidaysFromMaxPickUpDelay") ) {
14373             my $calendar = Koha::Calendar->new( branchcode => $hold->{branchcode}, days_mode => C4::Context->preference('useDaysMode') );
14374             $expirationdate = $calendar->days_forward( $expirationdate, $max_pickup_delay );
14375         } else {
14376             $expirationdate->add( days => $max_pickup_delay );
14377         }
14378
14379         my $cmp = $requested_expiration ? DateTime->compare($requested_expiration, $expirationdate) : 0;
14380         $update_sth->execute($cmp == -1 ? $requested_expiration->ymd : $expirationdate->ymd, $hold->{reserve_id});
14381     }
14382
14383     SetVersion( $DBversion );
14384     print "Upgrade to $DBversion done (Bug 12063 - Update reserves.expirationdate)\n";
14385 }
14386
14387 $DBversion = '16.12.00.033';
14388 if( CheckVersion( $DBversion ) ) {
14389
14390     if( !column_exists( 'letter', 'lang' ) ) {
14391         $dbh->do( "ALTER TABLE letter ADD COLUMN lang VARCHAR(25) NOT NULL DEFAULT 'default' AFTER message_transport_type" );
14392     }
14393
14394     if( !column_exists( 'borrowers', 'lang' ) ) {
14395         $dbh->do( "ALTER TABLE borrowers ADD COLUMN lang VARCHAR(25) NOT NULL DEFAULT 'default' AFTER lastseen" );
14396         $dbh->do( "ALTER TABLE deletedborrowers ADD COLUMN lang VARCHAR(25) NOT NULL DEFAULT 'default' AFTER lastseen" );
14397     }
14398
14399     # Add test on existene of this key
14400     $dbh->do( "ALTER TABLE message_transports DROP FOREIGN KEY message_transports_ibfk_3 ");
14401     $dbh->do( "ALTER TABLE letter DROP PRIMARY KEY ");
14402     $dbh->do( "ALTER TABLE letter ADD PRIMARY KEY (`module`, `code`, `branchcode`, `message_transport_type`, `lang`) ");
14403
14404     $dbh->do( "INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
14405         VALUES ('TranslateNotices',  '0',  NULL,  'Allow notices to be translated',  'YesNo') ");
14406
14407     SetVersion( $DBversion );
14408     print "Upgrade to $DBversion done (Bug 17762 - Add columns letter.lang and borrowers.lang to allow translation of notices)\n";
14409 }
14410
14411 $DBversion = '16.12.00.034';
14412 if( CheckVersion( $DBversion ) ) {
14413     $dbh->do(q{
14414         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` )
14415         VALUES ('OPACFineNoRenewalsBlockAutoRenew','0','','Block/Allow auto renewals if the patron owe more than OPACFineNoRenewals','YesNo')
14416     });
14417
14418     SetVersion( $DBversion );
14419     print "Upgrade to $DBversion done (Bug 15582 - Ability to block auto renewals if the OPACFineNoRenewals amount is reached)\n";
14420 }
14421
14422 $DBversion = '16.12.00.035';
14423 if( CheckVersion( $DBversion ) ) {
14424     if( !column_exists( 'issues', 'auto_renew_error' ) ) {
14425         $dbh->do(q{
14426            ALTER TABLE issues ADD COLUMN auto_renew_error VARCHAR(32) DEFAULT NULL AFTER auto_renew;
14427         });
14428     }
14429
14430     if( !column_exists( 'old_issues', 'auto_renew_error' ) ) {
14431         $dbh->do(q{
14432             ALTER TABLE old_issues ADD COLUMN auto_renew_error VARCHAR(32) DEFAULT NULL AFTER auto_renew;
14433         });
14434     }
14435
14436     $dbh->do(q{
14437             INSERT INTO letter (module, code, name, title, content, message_transport_type) VALUES ('circulation', 'AUTO_RENEWALS', 'Notification of automatic renewal', 'Automatic renewal notice',
14438         "Dear [% borrower.firstname %] [% borrower.surname %],
14439 [% IF checkout.auto_renew_error %]
14440 The following item, [% biblio.title %], has not been renewed because:
14441 [% IF checkout.auto_renew_error == 'too_many' %]
14442 You have reached the maximum number of checkouts possible.
14443 [% ELSIF checkout.auto_renew_error == 'on_reserve' %]
14444 This item is on hold for another patron.
14445 [% ELSIF checkout.auto_renew_error == 'restriction' %]
14446 You are currently restricted.
14447 [% ELSIF checkout.auto_renew_error == 'overdue' %]
14448 You have overdue items.
14449 [% ELSIF checkout.auto_renew_error == 'auto_too_late' %]
14450 It\'s too late to renew this item.
14451 [% ELSIF checkout.auto_renew_error == 'auto_too_much_oweing' %]
14452 Your total unpaid fines are too high.
14453 [% END %]
14454 [% ELSE %]
14455 The following item, [% biblio.title %], has correctly been renewed and is now due on [% checkout.date_due | $KohaDates as_due_date => 1 %]
14456 [% END %]", 'email');
14457     });
14458
14459     SetVersion( $DBversion );
14460     print "Upgrade to $DBversion done (Bug 15705 - Notify the user on auto renewing)\n";
14461 }
14462
14463 $DBversion = '16.12.00.036';
14464 if( CheckVersion( $DBversion ) ) {
14465     $dbh->do(q{
14466         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`)
14467         VALUES ('NumSavedReports', '20', NULL, 'By default, show this number of saved reports.', 'Integer');
14468     });
14469
14470     SetVersion( $DBversion );
14471     print "Upgrade to $DBversion done (Bug 17465 - Add a System Preference to control number of Saved Reports displayed)\n";
14472 }
14473
14474 $DBversion = '16.12.00.037';
14475 if( CheckVersion( $DBversion ) ) {
14476     $dbh->do( q|
14477         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`)
14478         VALUES ('FailedLoginAttempts','','','Number of login attempts before lockout the patron account','Integer');
14479     |);
14480
14481     unless( column_exists( 'borrowers', 'login_attempts' ) ) {
14482         $dbh->do(q|
14483             ALTER TABLE borrowers ADD COLUMN login_attempts INT(4) DEFAULT 0 AFTER lastseen
14484         |);
14485         $dbh->do(q|
14486             ALTER TABLE deletedborrowers ADD COLUMN login_attempts INT(4) DEFAULT 0 AFTER lastseen
14487         |);
14488     }
14489
14490     SetVersion( $DBversion );
14491     print "Upgrade to $DBversion done (Bug 18314 - Add FailedLoginAttempts and borrowers.login_attempts)\n";
14492 }
14493
14494 $DBversion = '16.12.00.038';
14495 if( CheckVersion( $DBversion ) ) {
14496     $dbh->do(q{
14497         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
14498         ('ExportRemoveFields','',NULL,'List of fields for non export in circulation.pl (separated by a space)','Free');
14499     });
14500
14501     SetVersion( $DBversion );
14502     print "Upgrade to $DBversion done (Bug 18663 - Missing db update for ExportRemoveFields)\n";
14503 }
14504
14505 $DBversion = '16.12.00.039';
14506 if( CheckVersion( $DBversion ) ) {
14507     $dbh->do(q{
14508         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
14509         ('TalkingTechItivaPhoneNotification','0',NULL,'If ON, enables Talking Tech I-tiva phone notifications','YesNo');
14510     });
14511
14512     SetVersion( $DBversion );
14513     print "Upgrade to $DBversion done (Bug 18600 - Missing db update for TalkingTechItivaPhoneNotification)\n";
14514 }
14515
14516 $DBversion = '17.05.00.000';
14517 if( CheckVersion( $DBversion ) ) {
14518
14519     SetVersion( $DBversion );
14520     print "Upgrade to $DBversion done (Koha 17.05)\n";
14521 }
14522
14523 $DBversion = '17.06.00.000';
14524 if( CheckVersion( $DBversion ) ) {
14525     SetVersion( $DBversion );
14526     print "Upgrade to $DBversion done (He pai ake te iti i te kore)\n";
14527 }
14528
14529 $DBversion = '17.06.00.001';
14530 if( CheckVersion( $DBversion ) ) {
14531
14532     unless ( column_exists( 'export_format', 'used_for' ) ) {
14533         $dbh->do(q|ALTER TABLE export_format ADD used_for varchar(255) DEFAULT 'export_records' AFTER type|);
14534
14535         $dbh->do(q|UPDATE export_format SET used_for = 'late_issues' WHERE type = 'sql'|);
14536         $dbh->do(q|UPDATE export_format SET used_for = 'export_records' WHERE type = 'marc'|);
14537     }
14538     SetVersion( $DBversion );
14539     print "Upgrade to $DBversion done (Bug 8612 - Add new column export_format.used_for)\n";
14540 }
14541
14542 $DBversion = '17.06.00.002';
14543 if ( CheckVersion($DBversion) ) {
14544
14545     unless ( column_exists('virtualshelves', 'allow_change_from_owner' ) ) {
14546         $dbh->do(q|
14547             ALTER TABLE virtualshelves
14548             ADD COLUMN allow_change_from_owner tinyint(1) default 1,
14549             ADD COLUMN allow_change_from_others tinyint(1) default 0
14550         |);
14551
14552         # Conversion:
14553         # Since we had no readonly lists, change_from_owner is set to true.
14554         # When adding or delete_other was granted, change_from_others is true.
14555         # Note: In my opinion the best choice; there is no exact match.
14556         $dbh->do(q|
14557             UPDATE virtualshelves
14558             SET allow_change_from_owner = 1,
14559                 allow_change_from_others = CASE WHEN allow_add=1 OR allow_delete_other=1 THEN 1 ELSE 0 END
14560         |);
14561
14562         # Remove the old columns
14563         $dbh->do(q|
14564             ALTER TABLE virtualshelves
14565             DROP COLUMN allow_add,
14566             DROP COLUMN allow_delete_own,
14567             DROP COLUMN allow_delete_other
14568         |);
14569     }
14570
14571     SetVersion($DBversion);
14572     print "Upgrade to $DBversion done (Bug 18228 - Alter table virtualshelves to simplify permissions)\n";
14573 }
14574
14575 $DBversion = '17.06.00.003';
14576 if ( CheckVersion($DBversion) ) {
14577
14578     # Fetch all auth types
14579     my $authtypes = $dbh->selectcol_arrayref(q|SELECT authtypecode FROM auth_types|);
14580
14581     if ( grep { $_ eq 'Default' } @$authtypes ) {
14582
14583         # If this exists as an authtypecode, we don't do anything
14584     }
14585     else {
14586         # Replace the incorrect Default by empty string
14587         $dbh->do(q|
14588             UPDATE auth_header SET authtypecode='' WHERE authtypecode='Default'
14589         |);
14590     }
14591
14592     SetVersion($DBversion);
14593     print "Upgrade to $DBversion done (Bug 18801 - Update incorrect Default auth type codes)\n";
14594 }
14595
14596 $DBversion = '17.06.00.004';
14597 if( CheckVersion( $DBversion ) ) {
14598     $dbh->do(q{
14599         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
14600         ('GoogleOpenIDConnectAutoRegister',   '0',NULL,' Google OpenID Connect logins to auto-register patrons.','YesNo'),
14601         ('GoogleOpenIDConnectDefaultCategory','','','This category code will be used to create Google OpenID Connect patrons.','Textarea'),
14602         ('GoogleOpenIDConnectDefaultBranch',  '','','This branch code will be used to create Google OpenID Connect patrons.','Textarea');
14603     });
14604
14605     SetVersion( $DBversion );
14606     print "Upgrade to $DBversion done (Bug 16892: Add automatic patron registration via OAuth2 login)\n";
14607 }
14608
14609 $DBversion = '17.06.00.005';
14610 if( CheckVersion( $DBversion ) ) {
14611     $dbh->do(q{
14612         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`) VALUES  ('StaffLangSelectorMode','footer','top|both|footer','Select the location to display the language selector in staff client','Choice')
14613         });
14614
14615     SetVersion( $DBversion );
14616     print "Upgrade to $DBversion done (Bug 18718 - Language selector in staff header menu similar to OPAC )\n";
14617 }
14618
14619 $DBversion = '17.06.00.006';
14620 if( CheckVersion( $DBversion ) ) {
14621     print q{WARNING: Bug 18811 fixed an inconsistency in the visibility settings for authority frameworks. It is recommended that you run script misc/maintenance/auth_show_hidden_data.pl to check if you have data in hidden fields and adjust your frameworks accordingly to prevent data loss when editing such records.};
14622     print "\n";
14623
14624     SetVersion( $DBversion );
14625     print "Upgrade to $DBversion done (Bug 18811 - Visibility settings inconsistent between framework and authority editor)\n";
14626 }
14627
14628 $DBversion = '17.06.00.007';
14629 if( CheckVersion( $DBversion ) ) {
14630     if( !column_exists( 'branches', 'marcorgcode' ) ) {
14631         $dbh->do( "ALTER TABLE branches ADD COLUMN marcorgcode VARCHAR(16) default NULL AFTER geolocation" );
14632     }
14633
14634     SetVersion( $DBversion );
14635     print "Upgrade to $DBversion done (Bug 10132 - MARCOrgCode on branch level (branches.marcorgcode))\n";
14636 }
14637
14638 $DBversion = '17.06.00.008';
14639 if( CheckVersion( $DBversion ) ) {
14640     unless ( column_exists( 'borrowers', 'date_renewed' ) ) {
14641         $dbh->do(q{
14642             ALTER TABLE borrowers ADD COLUMN date_renewed DATE NULL DEFAULT NULL AFTER dateexpiry;
14643         });
14644     }
14645
14646     unless ( column_exists( 'deletedborrowers', 'date_renewed' ) ) {
14647         $dbh->do(q{
14648             ALTER TABLE deletedborrowers ADD COLUMN date_renewed DATE NULL DEFAULT NULL AFTER dateexpiry;
14649         });
14650     }
14651
14652     unless ( column_exists( 'borrower_modifications', 'date_renewed' ) ) {
14653         $dbh->do(q{
14654             ALTER TABLE borrower_modifications ADD COLUMN date_renewed DATE NULL DEFAULT NULL AFTER dateexpiry;
14655         });
14656     }
14657
14658     SetVersion( $DBversion );
14659     print "Upgrade to $DBversion done (Bug 6758 - Capture membership renewal date for reporting purposes (borrowers.date_renewed))\n";
14660 }
14661
14662 $DBversion = '17.06.00.009';
14663 if( CheckVersion( $DBversion ) ) {
14664     $dbh->do(q{
14665         ALTER TABLE borrowers MODIFY COLUMN login_attempts int(4) DEFAULT 0 AFTER lang;
14666     });
14667     $dbh->do(q{
14668         ALTER TABLE deletedborrowers MODIFY COLUMN login_attempts int(4) DEFAULT 0 AFTER lang;
14669     });
14670
14671     SetVersion( $DBversion );
14672     print "Upgrade to $DBversion done (Bug 19344 -  Reorder lang and login_attempts in the [deleted]borrowers tables)\n";
14673 }
14674
14675 $DBversion = '17.06.00.010';
14676 if ( CheckVersion($DBversion) ) {
14677     $dbh->do(q{
14678         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` )
14679         VALUES (
14680             'DefaultCountryField008','','',
14681             'Fill in the default country code for field 008 Range 15-17 of MARC21 - Place of publication, production, or execution. See <a href=\"http://www.loc.gov/marc/countries/countries_code.html\">MARC Code List for Countries</a>','Free')
14682     });
14683     SetVersion($DBversion);
14684     print "Upgrade to $DBversion done (Bug 13912 - System preference for default place of publication (country code) for field 008, range 15-17)\n";
14685 }
14686
14687 $DBversion = '17.06.00.011';
14688 if ( CheckVersion($DBversion) ) {
14689     # Drop index that might exist because of bug 5337
14690     if( index_exists('biblioitems', 'ean')) {
14691         $dbh->do(q{ ALTER TABLE biblioitems DROP INDEX ean });
14692     }
14693     if( index_exists('deletedbiblioitems', 'ean')) {
14694         $dbh->do(q{ ALTER TABLE deletedbiblioitems DROP INDEX ean });
14695     }
14696
14697     # Change data type of column
14698     $dbh->do(q{ ALTER TABLE biblioitems MODIFY COLUMN ean MEDIUMTEXT default NULL });
14699     $dbh->do(q{ ALTER TABLE deletedbiblioitems MODIFY COLUMN ean MEDIUMTEXT default NULL });
14700
14701     # Add indexes
14702     $dbh->do(q{ ALTER TABLE biblioitems ADD INDEX ean ( ean(255) )});
14703     $dbh->do(q{ ALTER TABLE deletedbiblioitems ADD INDEX ean ( ean(255 ) )});
14704
14705     SetVersion($DBversion);
14706     print "Upgrade to $DBversion done (Bug 13766 - Make ean mediumtext and add ean indexes)\n";
14707 }
14708
14709 $DBversion = '17.06.00.012';
14710 if( CheckVersion( $DBversion ) ) {
14711     my $where = q|host='clio-db.cc.columbia.edu' AND port=7090|;
14712     my $sql = "SELECT COUNT(*) FROM z3950servers WHERE $where";
14713     my ( $cnt ) = $dbh->selectrow_array( $sql );
14714     if( $cnt ) {
14715         $dbh->do( "DELETE FROM z3950servers WHERE $where" );
14716         print "Removed $cnt Z39.50 target(s) for Columbia University\n";
14717     }
14718
14719     SetVersion( $DBversion );
14720     print "Upgrade to $DBversion done (Bug 19043 - Z39.50 target for Columbia University is no longer publicly available.)\n";
14721 }
14722
14723 $DBversion = '17.06.00.013';
14724 if( CheckVersion( $DBversion ) ) {
14725     $dbh->do( "UPDATE systempreferences SET value = CONCAT('http://', value) WHERE variable = 'staffClientBaseURL' AND value <> '' AND value NOT LIKE 'http%'" );
14726
14727     my ( $staffClientBaseURL_used_in_notices ) = $dbh->selectrow_array(q|
14728         SELECT COUNT(*) FROM letter where content like "%staffClientBaseURL%"
14729     |);
14730     if ( $staffClientBaseURL_used_in_notices ) {
14731         warn "\tYou may need to update one or more notice templates if they contain 'staffClientBaseURL'\n";
14732     }
14733
14734     SetVersion( $DBversion );
14735     print "Upgrade to $DBversion done (Bug 16401 - fix potentialy bad set staffClientBaseURL preference)\n";
14736 }
14737
14738 $DBversion = '17.06.00.014';
14739 if( CheckVersion( $DBversion ) ) {
14740     unless( column_exists('aqbasket','create_items') ){
14741         $dbh->do(q{
14742             ALTER TABLE aqbasket
14743                 ADD COLUMN create_items ENUM('ordering', 'receiving', 'cataloguing') default NULL AFTER is_standing
14744         });
14745     }
14746
14747     SetVersion( $DBversion );
14748     print "Upgrade to $DBversion done (Bug 15685 - Allow creation of items (AcqCreateItem) to be customizable per-basket)\n";
14749 }
14750
14751 $DBversion = '17.06.00.015';
14752 if( CheckVersion( $DBversion ) ) {
14753     $dbh->do(q{
14754         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`) VALUES
14755         ('SelfCheckoutByLogin','0',NULL,'Have patrons login into the web-based self checkout system with their username/password or their cardnumber','YesNo')
14756     });
14757
14758     SetVersion( $DBversion );
14759     print "Upgrade to $DBversion done (Bug 19186 - Insert system preference SelfCheckoutByLogin if missing)\n";
14760 }
14761
14762 $DBversion = '17.06.00.016';
14763 if( CheckVersion( $DBversion ) ) {
14764     $dbh->do(q{
14765         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`)
14766         VALUES ('RequireStrongPassword','0','','Require a strong login password for staff and patrons','YesNo');
14767     });
14768
14769     SetVersion( $DBversion );
14770     print "Upgrade to $DBversion done (Bug 18298 - Allow enforcing password complexity (system preference RequireStrongPassword))\n";
14771 }
14772
14773 $DBversion = '17.06.00.017';
14774 if( CheckVersion( $DBversion ) ) {
14775     unless (TableExists('account_offsets')) {
14776         $dbh->do(q{
14777             DROP TABLE IF EXISTS `accountoffsets`;
14778         });
14779
14780         $dbh->do(q{
14781             CREATE TABLE IF NOT EXISTS `account_offset_types` (
14782               `type` varchar(16) NOT NULL, -- The type of offset this is
14783               PRIMARY KEY (`type`)
14784             ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
14785         });
14786
14787         $dbh->do(q{
14788             CREATE TABLE IF NOT EXISTS `account_offsets` (
14789               `id` int(11) NOT NULL auto_increment, -- unique identifier for each offset
14790               `credit_id` int(11) NULL DEFAULT NULL, -- The id of the accountline the increased the patron's balance
14791               `debit_id` int(11) NULL DEFAULT NULL, -- The id of the accountline that decreased the patron's balance
14792               `type` varchar(16) NOT NULL, -- The type of offset this is
14793               `amount` decimal(26,6) NOT NULL, -- The amount of the change
14794               `created_on` timestamp NOT NULL default CURRENT_TIMESTAMP,
14795               PRIMARY KEY (`id`),
14796               CONSTRAINT `account_offsets_ibfk_p` FOREIGN KEY (`credit_id`) REFERENCES `accountlines` (`accountlines_id`) ON DELETE CASCADE ON UPDATE CASCADE,
14797               CONSTRAINT `account_offsets_ibfk_f` FOREIGN KEY (`debit_id`) REFERENCES `accountlines` (`accountlines_id`) ON DELETE CASCADE ON UPDATE CASCADE,
14798               CONSTRAINT `account_offsets_ibfk_t` FOREIGN KEY (`type`) REFERENCES `account_offset_types` (`type`) ON DELETE CASCADE ON UPDATE CASCADE
14799             ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
14800         });
14801
14802         $dbh->do(q{
14803             INSERT IGNORE INTO account_offset_types ( type ) VALUES
14804             ('Writeoff'),
14805             ('Payment'),
14806             ('Lost Item'),
14807             ('Processing Fee'),
14808             ('Manual Debit'),
14809             ('Reverse Payment'),
14810             ('Forgiven'),
14811             ('Dropbox'),
14812             ('Rental Fee'),
14813             ('Fine Update'),
14814             ('Fine');
14815         });
14816     }
14817
14818     SetVersion( $DBversion );
14819     print "Upgrade to $DBversion done (Bug 14826 - Resurrect account offsets table (Add new tables account_offsets and account_offset_types))\n";
14820 }
14821
14822 $DBversion = '17.06.00.018';
14823 if( CheckVersion( $DBversion ) ) {
14824     $dbh->do(q{
14825         INSERT IGNORE INTO systempreferences (variable,value,explanation,type) VALUES ('useDefaultReplacementCost',0,'default replacement cost defined in item type','YesNo');
14826     });
14827     $dbh->do(q{
14828         INSERT IGNORE INTO systempreferences (variable,value,explanation,type) VALUES ('ProcessingFeeNote','','Set the text to be recorded in the column note, table accountlines when the processing fee (defined in item type) is applied','textarea');
14829     });
14830     $dbh->do(q{
14831         ALTER TABLE `itemtypes` MODIFY COLUMN `rentalcharge` DECIMAL(28,6) NULL DEFAULT NULL;
14832     });
14833     unless ( column_exists( 'itemtypes', 'defaultreplacecost' ) ) {
14834         $dbh->do(q{
14835             ALTER TABLE `itemtypes` ADD `defaultreplacecost` DECIMAL(28,6) NULL DEFAULT NULL AFTER `rentalcharge`;
14836         });
14837     }
14838     unless ( column_exists( 'itemtypes', 'processfee' ) ) {
14839         $dbh->do(q{
14840             ALTER TABLE `itemtypes` ADD `processfee` DECIMAL(28,6) NULL DEFAULT NULL AFTER `defaultreplacecost`;
14841         });
14842
14843     }
14844     SetVersion( $DBversion );
14845     print "Upgrade to $DBversion done (Bug 12768 - Insert system preferences useDefaultReplacementCost and ProcessingFeeNote + Add new columns defaultreplacecost and processfee to the itemtypes table)\n";
14846 }
14847
14848 $DBversion = '17.06.00.019';
14849 if( CheckVersion( $DBversion ) ) {
14850     $dbh->do(q{
14851         INSERT IGNORE INTO account_offset_types ( type ) VALUES ( 'Processing Fee' );
14852     });
14853
14854     SetVersion( $DBversion );
14855     print "Upgrade to $DBversion done (Bug 12768 - Add 'Processing Fee' to the account_offset_types table if missing)\n";
14856 }
14857
14858 $DBversion = '17.06.00.020';
14859 if( CheckVersion( $DBversion ) ) {
14860     $dbh->do(q{
14861         UPDATE systempreferences
14862         SET
14863             variable='OpacLocationOnDetail',
14864             options='holding|home|both|column',
14865             explanation='In the OPAC detail, display the shelving location on its own column or under a library columns.'
14866         WHERE
14867             variable='OpacLocationBranchToDisplayShelving'
14868     });
14869
14870     SetVersion( $DBversion );
14871     print "Upgrade to $DBversion done (Bug 19028: Add 'shelving location' to holdings table in detail page (Rename syspref OpacLocationBranchToDisplayShelving with OpacLocationOnDetail))\n";
14872 }
14873
14874 $DBversion = '17.06.00.021';
14875 if( CheckVersion( $DBversion ) ) {
14876     $dbh->do(q{
14877         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type` ) VALUES ('SCOMainUserBlock','','70|10','Add a block of HTML that will display on the self checkout screen','Textarea')
14878     });
14879
14880     SetVersion( $DBversion );
14881     print "Upgrade to $DBversion done (Bug 17381 - Add system preference SCOMainUserBlock)\n";
14882 }
14883
14884 $DBversion = '17.06.00.022';
14885 if( CheckVersion( $DBversion ) ) {
14886     my $hide_barcode = C4::Context->preference('OPACShowBarcode') ? 0 : 1;
14887     $dbh->do(q{
14888         DELETE FROM systempreferences
14889         WHERE
14890             variable='OPACShowBarcode'
14891     });
14892
14893     # Configure column visibility if it isn't
14894     $dbh->do(q{
14895         INSERT IGNORE INTO columns_settings
14896             (module,page,tablename,columnname,cannot_be_toggled,is_hidden)
14897         VALUES
14898             ('opac','biblio-detail','holdingst','item_barcode',0,?)
14899     }, undef, $hide_barcode);
14900
14901     SetVersion( $DBversion );
14902     print "Upgrade to $DBversion done (Bug 19038: Remove OPACShowBarcode syspref)\n";
14903 }
14904
14905 $DBversion = '17.06.00.023';
14906 if( CheckVersion( $DBversion ) ) {
14907     $dbh->do(q{
14908         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
14909         ('MarkLostItemsAsReturned','1','','Mark items as returned when flagged as lost','YesNo');
14910     });
14911
14912     SetVersion( $DBversion );
14913     print "Upgrade to $DBversion done (Bug 12363 - Add system preference MarkLostItemsAsReturned)\n";
14914 }
14915
14916 $DBversion = '17.06.00.024';
14917 if( CheckVersion( $DBversion ) ) {
14918     $dbh->do(q{
14919         INSERT IGNORE INTO systempreferences (`variable`,`value`,`options`,`explanation`,`type`) VALUES
14920         ('OPACUserSummary', 1, NULL, "Show the summary of a logged in user's checkouts, overdues, holds and fines on the mainpage", 'YesNo');
14921     });
14922
14923     SetVersion( $DBversion );
14924     print "Upgrade to $DBversion done (Bug 2093 - Add system preference OPACUserSummary)\n";
14925 }
14926
14927 $DBversion = '17.06.00.025';
14928 if( CheckVersion( $DBversion ) ) {
14929     $dbh->do(q{
14930         ALTER TABLE borrowers MODIFY cardnumber varchar(32);
14931     });
14932     $dbh->do(q{
14933         ALTER TABLE borrower_modifications MODIFY cardnumber varchar(32);
14934     });
14935     $dbh->do(q{
14936         ALTER TABLE deletedborrowers MODIFY cardnumber varchar(32);
14937     });
14938     $dbh->do(q{
14939         ALTER TABLE pending_offline_operations MODIFY cardnumber varchar(32);
14940     });
14941     $dbh->do(q{
14942         ALTER TABLE tmp_holdsqueue MODIFY cardnumber varchar(32);
14943     });
14944
14945     SetVersion( $DBversion );
14946     print "Upgrade to $DBversion done (Bug 13178 - Increase cardnumber fields to VARCHAR(32))\n";
14947 }
14948
14949 $DBversion = '17.06.00.026';
14950 if( CheckVersion( $DBversion ) ) {
14951     $dbh->do(q{
14952         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
14953         ('BlockReturnOfLostItems','0','0','If enabled, items that are marked as lost cannot be returned.','YesNo');
14954     });
14955
14956     SetVersion( $DBversion );
14957     print "Upgrade to $DBversion done (Bug 10748 - Add system preference BlockReturnOfLostItems)\n";
14958 }
14959
14960 $DBversion = '17.06.00.027';
14961 if( CheckVersion( $DBversion ) ) {
14962     if ( !column_exists( 'statistics', 'location' ) ) {
14963         $dbh->do('ALTER TABLE statistics ADD COLUMN location VARCHAR(80) default NULL AFTER itemtype');
14964     }
14965
14966     SetVersion($DBversion);
14967     print "Upgrade to $DBversion done (Bug 18882 - Add location code to statistics table for checkouts and renewals)\n";
14968 }
14969
14970 $DBversion = '17.06.00.028';
14971 if( CheckVersion( $DBversion ) ) {
14972     if ( !TableExists( 'illrequests' ) ) {
14973         $dbh->do(q{
14974             CREATE TABLE illrequests (
14975                illrequest_id serial PRIMARY KEY,           -- ILL request number
14976                borrowernumber integer DEFAULT NULL,        -- Patron associated with request
14977                biblio_id integer DEFAULT NULL,             -- Potential bib linked to request
14978                branchcode varchar(50) NOT NULL,            -- The branch associated with the request
14979                status varchar(50) DEFAULT NULL,            -- Current Koha status of request
14980                placed date DEFAULT NULL,                   -- Date the request was placed
14981                replied date DEFAULT NULL,                  -- Last API response
14982                updated timestamp DEFAULT CURRENT_TIMESTAMP -- Last modification to request
14983                  ON UPDATE CURRENT_TIMESTAMP,
14984                completed date DEFAULT NULL,                -- Date the request was completed
14985                medium varchar(30) DEFAULT NULL,            -- The Koha request type
14986                accessurl varchar(500) DEFAULT NULL,        -- Potential URL for accessing item
14987                cost varchar(20) DEFAULT NULL,              -- Cost of request
14988                notesopac text DEFAULT NULL,                -- Patron notes attached to request
14989                notesstaff text DEFAULT NULL,               -- Staff notes attached to request
14990                orderid varchar(50) DEFAULT NULL,           -- Backend id attached to request
14991                backend varchar(20) DEFAULT NULL,           -- The backend used to create request
14992                CONSTRAINT `illrequests_bnfk`
14993                  FOREIGN KEY (`borrowernumber`)
14994                  REFERENCES `borrowers` (`borrowernumber`)
14995                  ON UPDATE CASCADE ON DELETE CASCADE,
14996                CONSTRAINT `illrequests_bcfk_2`
14997                  FOREIGN KEY (`branchcode`)
14998                  REFERENCES `branches` (`branchcode`)
14999                  ON UPDATE CASCADE ON DELETE CASCADE
15000            ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
15001         });
15002     }
15003
15004     if ( !TableExists( 'illrequestattributes' ) ) {
15005         $dbh->do(q{
15006             CREATE TABLE illrequestattributes (
15007                 illrequest_id bigint(20) unsigned NOT NULL, -- ILL request number
15008                 type varchar(200) NOT NULL,                 -- API ILL property name
15009                 value text NOT NULL,                        -- API ILL property value
15010                 PRIMARY KEY  (`illrequest_id`,`type`),
15011                 CONSTRAINT `illrequestattributes_ifk`
15012                   FOREIGN KEY (illrequest_id)
15013                   REFERENCES `illrequests` (`illrequest_id`)
15014                   ON UPDATE CASCADE ON DELETE CASCADE
15015             ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
15016         });
15017     }
15018
15019     # System preferences
15020     $dbh->do(q{
15021         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES
15022             ('ILLModule','0','If ON, enables the interlibrary loans module.','','YesNo');
15023     });
15024
15025     $dbh->do(q{
15026         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES
15027             ('ILLModuleCopyrightClearance','','70|10','Enter text to enable the copyright clearance stage of request creation. Text will be displayed','Textarea');
15028     });
15029     # userflags
15030     $dbh->do(q{
15031         INSERT IGNORE INTO userflags (bit,flag,flagdesc,defaulton) VALUES
15032             (22,'ill','The Interlibrary Loans Module',0);
15033     });
15034
15035     SetVersion( $DBversion );
15036     print "Upgrade to $DBversion done (Bug 7317 - Add an Interlibrary Loan Module to Circulation and OPAC)\n";
15037 }
15038
15039 $DBversion = '17.11.00.000';
15040 if( CheckVersion( $DBversion ) ) {
15041     SetVersion( $DBversion );
15042     print "Upgrade to $DBversion done (Koha 17.11)\n";
15043 }
15044
15045 $DBversion = '17.12.00.000';
15046 if( CheckVersion( $DBversion ) ) {
15047     SetVersion( $DBversion );
15048     print "Upgrade to $DBversion done (Tē tōia, tē haumatia)\n";
15049 }
15050
15051 $DBversion = '17.12.00.001';
15052 if( CheckVersion( $DBversion ) ) {
15053     foreach my $table (qw(biblio_metadata deletedbiblio_metadata)) {
15054         if (!column_exists($table, 'timestamp')) {
15055             $dbh->do(qq{
15056                 ALTER TABLE `$table`
15057                 ADD COLUMN `timestamp` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP AFTER `metadata`,
15058                 ADD KEY `timestamp` (`timestamp`)
15059             });
15060             $dbh->do(qq{
15061                 UPDATE $table metadata
15062                     LEFT JOIN biblioitems ON (biblioitems.biblionumber = metadata.biblionumber)
15063                     LEFT JOIN biblio ON (biblio.biblionumber = metadata.biblionumber)
15064                 SET metadata.timestamp = GREATEST(biblioitems.timestamp, biblio.timestamp);
15065             });
15066         }
15067     }
15068
15069     SetVersion( $DBversion );
15070     print "Upgrade to $DBversion done (Bug 19724 - Add [deleted]biblio_metadata.timestamp)\n";
15071 }
15072
15073 $DBversion = '17.12.00.002';
15074 if( CheckVersion( $DBversion ) ) {
15075
15076     my $msss = $dbh->selectall_arrayref(q|
15077         SELECT kohafield, tagfield, tagsubfield, frameworkcode
15078         FROM marc_subfield_structure
15079         WHERE   frameworkcode != ''
15080     |, { Slice => {} });
15081
15082
15083     my $sth = $dbh->prepare(q|
15084         SELECT kohafield
15085         FROM marc_subfield_structure
15086         WHERE frameworkcode = ''
15087         AND tagfield = ?
15088         AND tagsubfield = ?
15089     |);
15090
15091     my @exceptions;
15092     for my $mss ( @$msss ) {
15093         $sth->execute($mss->{tagfield}, $mss->{tagsubfield} );
15094         my ( $default_kohafield ) = $sth->fetchrow_array();
15095         if( $mss->{kohafield} ) {
15096             push @exceptions, { frameworkcode => $mss->{frameworkcode}, tagfield => $mss->{tagfield}, tagsubfield => $mss->{tagsubfield}, kohafield => $mss->{kohafield} } if not $default_kohafield or $default_kohafield ne $mss->{kohafield};
15097         } else {
15098             push @exceptions, { frameworkcode => $mss->{frameworkcode}, tagfield => $mss->{tagfield}, tagsubfield => $mss->{tagsubfield}, kohafield => q{} } if $default_kohafield;
15099         }
15100     }
15101
15102     if (@exceptions) {
15103         print "WARNING: The Default framework is now considered as authoritative for Koha to MARC mappings. We have found that your additional frameworks contained "
15104           . scalar(@exceptions)
15105           . " mapping(s) that deviate from the standard mappings. Please look at the following list and consider if you need to add them again in Default (possibly as a second mapping).\n";
15106         for my $exception (@exceptions) {
15107             print "Field "
15108               . $exception->{tagfield} . '$'
15109               . $exception->{tagsubfield}
15110               . " in framework "
15111               . $exception->{frameworkcode} . ': ';
15112             if ( $exception->{kohafield} ) {
15113                 print "Mapping to "
15114                   . $exception->{kohafield}
15115                   . " has been adjusted.\n";
15116             }
15117             else {
15118                 print "Mapping has been reset.\n";
15119             }
15120         }
15121
15122         # Sync kohafield
15123
15124         # Clear the destination frameworks first
15125         $dbh->do(q|
15126             UPDATE marc_subfield_structure
15127             SET kohafield = NULL
15128             WHERE   frameworkcode > ''
15129                 AND     Kohafield > ''
15130         |);
15131
15132         # Now copy from Default
15133         my $msss = $dbh->selectall_arrayref(q|
15134             SELECT kohafield, tagfield, tagsubfield
15135             FROM marc_subfield_structure
15136             WHERE   frameworkcode = ''
15137                 AND     kohafield > ''
15138         |, { Slice => {} });
15139         my $sth = $dbh->prepare(q|
15140             UPDATE marc_subfield_structure
15141             SET kohafield = ?
15142             WHERE frameworkcode > ''
15143             AND tagfield = ?
15144             AND tagsubfield = ?
15145         |);
15146         for my $mss (@$msss) {
15147             $sth->execute( $mss->{kohafield}, $mss->{tagfield},
15148                 $mss->{tagsubfield} );
15149         }
15150
15151         # Clear the cache
15152         my @frameworkcodes = $dbh->selectall_arrayref(q|
15153             SELECT frameworkcode FROM biblio_framework WHERE frameworkcode > ''
15154         |);
15155         for my $frameworkcode (@frameworkcodes) {
15156             Koha::Caches->get_instance->clear_from_cache("MarcSubfieldStructure-$frameworkcode");
15157         }
15158         Koha::Caches->get_instance->clear_from_cache("default_value_for_mod_marc-");
15159     }
15160
15161     SetVersion( $DBversion );
15162     print "Upgrade to $DBversion done (Bug 19096 - Make Default authoritative for Koha to MARC mappings)\n";
15163 }
15164
15165 $DBversion = '17.12.00.003';
15166 if( CheckVersion( $DBversion ) ) {
15167     $dbh->do(q|DROP TABLE IF EXISTS notifys|);
15168
15169     if( column_exists( 'accountlines', 'notify_id' ) ) {
15170         $dbh->do(q|ALTER TABLE accountlines DROP COLUMN notify_id|);
15171         $dbh->do(q|ALTER TABLE accountlines DROP COLUMN notify_level|);
15172     }
15173
15174     SetVersion( $DBversion );
15175     print "Upgrade to $DBversion done (Bug 10021 - Drop notifys-related table and columns)\n";
15176 }
15177
15178 $DBversion = '17.12.00.004';
15179 if( CheckVersion( $DBversion ) ) {
15180     $dbh->do(q{
15181         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` )
15182         VALUES
15183             ('RESTdefaultPageSize','20','','Set the default number of results returned by the REST API endpoints','Integer')
15184     });
15185
15186     SetVersion( $DBversion );
15187     print "Upgrade to $DBversion done (Bug 19278 - Add a configurable default page size for REST endpoints)\n";
15188 }
15189
15190 $DBversion = '17.12.00.005';
15191 if( CheckVersion( $DBversion ) ) {
15192     # For installations having the note already
15193     $dbh->do(q{
15194         UPDATE letter
15195         SET code    = 'CHECKOUT_NOTE',
15196             name    = 'Checkout note on item set by patron',
15197             title   = 'Checkout note',
15198             content = REPLACE(content, "<<biblio.item>>", "<<biblio.title>>")
15199         WHERE code = 'PATRON_NOTE'
15200     });
15201     # For installations coming from 17.11
15202     $dbh->do(q{
15203         INSERT IGNORE INTO `letter` (`module`, `code`, `branchcode`, `name`, `is_html`, `title`, `content`, `message_transport_type`)
15204         VALUES ('circulation', 'CHECKOUT_NOTE', '', 'Checkout note on item set by patron', '0', 'Checkout note', '<<borrowers.firstname>> <<borrowers.surname>> has added a note to the item <<biblio.title>> - <<biblio.author>> (<<biblio.biblionumber>>).','email')
15205     });
15206
15207     SetVersion( $DBversion );
15208     print "Upgrade to $DBversion done (Bug 18915 - Correct CHECKOUT_NOTE notice template)\n";
15209 }
15210
15211 $DBversion = '17.12.00.006';
15212 if( CheckVersion( $DBversion ) ) {
15213     $dbh->do(q{
15214         UPDATE systempreferences SET value=replace(value, "http://www.scholar", "https://scholar") WHERE variable='OPACSearchForTitleIn';
15215     });
15216
15217     SetVersion( $DBversion );
15218     print "Upgrade to $DBversion done (Bug 17682 - Update URL for Google Scholar in OPACSearchForTitleIn)\n";
15219 }
15220
15221 $DBversion = '17.12.00.007';
15222 if( CheckVersion( $DBversion ) ) {
15223
15224     unless ( TableExists( 'library_groups' ) ) {
15225         $dbh->do(q{
15226             CREATE TABLE library_groups (
15227                 id INT(11) NOT NULL auto_increment,    -- unique id for each group
15228                 parent_id INT(11) NULL DEFAULT NULL,   -- if this is a child group, the id of the parent group
15229                 branchcode VARCHAR(10) NULL DEFAULT NULL, -- The branchcode of a branch belonging to the parent group
15230                 title VARCHAR(100) NULL DEFAULT NULL,     -- Short description of the goup
15231                 description TEXT NULL DEFAULT NULL,    -- Longer explanation of the group, if necessary
15232                 created_on TIMESTAMP NULL,             -- Date and time of creation
15233                 updated_on TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP, -- Date and time of last
15234                 PRIMARY KEY id ( id ),
15235                 FOREIGN KEY (parent_id) REFERENCES library_groups(id) ON UPDATE CASCADE ON DELETE CASCADE,
15236                 FOREIGN KEY (branchcode) REFERENCES branches(branchcode) ON UPDATE CASCADE ON DELETE CASCADE,
15237                 UNIQUE KEY title ( title )
15238             ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
15239         });
15240     }
15241
15242     SetVersion( $DBversion );
15243     print "Upgrade to $DBversion done (Bug 15707 - Add new table library_groups)\n";
15244 }
15245
15246 $DBversion = '17.12.00.008';
15247 if ( CheckVersion($DBversion) ) {
15248
15249     if ( TableExists( 'branchcategories' ) and TableExists('branchrelations' )) {
15250         $dbh->do(q{
15251             INSERT INTO library_groups ( title, description, created_on ) VALUES ( '__SEARCH_GROUPS__', 'Library search groups', NOW() )
15252         });
15253         my $search_groups_root_id = $dbh->last_insert_id(undef, undef, 'library_groups', undef);
15254
15255         my $sth = $dbh->prepare("SELECT * FROM branchcategories");
15256
15257         my $sth2 = $dbh->prepare("INSERT INTO library_groups ( parent_id, title, description, created_on ) VALUES ( ?, ?, ?, NOW() )");
15258
15259         my $sth3 = $dbh->prepare("SELECT * FROM branchrelations WHERE categorycode = ?");
15260
15261         my $sth4 = $dbh->prepare("INSERT INTO library_groups ( parent_id, branchcode, created_on ) VALUES ( ?, ?, NOW() )");
15262
15263         $sth->execute();
15264         while ( my $lc = $sth->fetchrow_hashref ) {
15265             my $description = $lc->{categorycode};
15266             $description .= " - " . $lc->{codedescription} if $lc->{codedescription};
15267
15268             $sth2->execute($search_groups_root_id, $lc->{categoryname}, $description);
15269
15270             my $subgroup_id = $dbh->last_insert_id(undef, undef, 'library_groups', undef);
15271
15272             $sth3->execute( $lc->{categorycode} );
15273
15274             while ( my $l = $sth3->fetchrow_hashref ) {
15275                 $sth4->execute( $subgroup_id, $l->{branchcode} );
15276             }
15277         }
15278
15279         $dbh->do("DROP TABLE branchrelations");
15280         $dbh->do("DROP TABLE branchcategories");
15281     }
15282
15283     print "Upgrade to $DBversion done (Bug 16735 - Migrate library search groups into the new hierarchical groups)\n";
15284     SetVersion($DBversion);
15285 }
15286
15287 $DBversion = '17.12.00.009';
15288 if ( CheckVersion($DBversion) ) {
15289     $dbh->do(q|
15290         INSERT IGNORE INTO permissions (module_bit, code, description) VALUES
15291         (4, 'edit_borrowers', 'Add, modify and view patron information'),
15292         (4, 'view_borrower_infos_from_any_libraries', 'View patron infos from any libraries');
15293     |);
15294
15295     # We are lucky here, there is nothing else to do: flags 4-borrowers did not contain sub permissions
15296
15297     SetVersion( $DBversion );
15298     print "Upgrade to $DBversion done (Bug 18403 - Add the view_borrower_infos_from_any_libraries permission )\n";
15299 }
15300
15301 $DBversion = '17.12.00.010';
15302 if( CheckVersion( $DBversion ) ) {
15303
15304     if( !column_exists( 'library_groups', 'ft_hide_patron_info' ) ) {
15305         $dbh->do( "ALTER TABLE library_groups ADD COLUMN ft_hide_patron_info tinyint(1) NOT NULL DEFAULT 0 AFTER description" );
15306     }
15307
15308     SetVersion( $DBversion );
15309     print "Upgrade to $DBversion done (Bug 20133 - Add library_groups.ft_hide_patron_info)\n";
15310 }
15311
15312 $DBversion = '17.12.00.011';
15313 if( CheckVersion( $DBversion ) ) {
15314
15315     if( !column_exists( 'library_groups', 'ft_search_groups_opac' ) ) {
15316         $dbh->do( "ALTER TABLE library_groups ADD COLUMN ft_search_groups_opac tinyint(1) NOT NULL DEFAULT 0 AFTER ft_hide_patron_info" );
15317         $dbh->do( "ALTER TABLE library_groups ADD COLUMN ft_search_groups_staff tinyint(1) NOT NULL DEFAULT 0 AFTER ft_search_groups_opac" );
15318         $dbh->do( "UPDATE library_groups SET ft_search_groups_staff = 1 AND ft_search_groups_opac = 1 WHERE title = '__SEARCH_GROUPS__'" );
15319     }
15320
15321     SetVersion( $DBversion );
15322     print "Upgrade to $DBversion done (Bug 20157 - Use group 'features' to decide which groups to use for group searching functionality)\n";
15323 }
15324
15325 $DBversion = '17.12.00.012';
15326 if( CheckVersion( $DBversion ) ) {
15327
15328     $dbh->do( q|
15329         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
15330         VALUES ('AutoSwitchPatron', '0', '', 'Auto switch to patron', 'YesNo');
15331     |);
15332
15333     SetVersion( $DBversion );
15334     print "Upgrade to $DBversion done (Bug 15752 - Add system preference AutoSwitchPatron)\n";
15335 }
15336
15337 $DBversion = '17.12.00.013';
15338 if( CheckVersion( $DBversion ) ) {
15339
15340     $dbh->do(q|
15341         ALTER TABLE club_enrollments MODIFY date_created timestamp NULL DEFAULT NULL;
15342     |);
15343
15344     SetVersion( $DBversion );
15345     print "Upgrade to $DBversion done (Bug 20175 - Set DEFAULT NULL value for club_enrollments.date_created)\n";
15346 }
15347
15348 $DBversion = '17.12.00.014';
15349 if( CheckVersion( $DBversion ) ) {
15350     $dbh->do( "UPDATE marc_subfield_structure SET kohafield=NULL where kohafield='additionalauthors.author'" );
15351     SetVersion( $DBversion );
15352     print "Upgrade to $DBversion done (Bug 19790 - Remove additionalauthors.author from installer files)\n";
15353 }
15354
15355 $DBversion = '17.12.00.015';
15356 if( CheckVersion( $DBversion ) ) {
15357     $dbh->do(q|
15358         ALTER TABLE borrowers
15359         MODIFY surname MEDIUMTEXT,
15360         MODIFY address MEDIUMTEXT,
15361         MODIFY city MEDIUMTEXT
15362     |);
15363     $dbh->do(q|
15364         ALTER TABLE deletedborrowers
15365         MODIFY surname MEDIUMTEXT,
15366         MODIFY address MEDIUMTEXT,
15367         MODIFY city MEDIUMTEXT
15368     |);
15369
15370     $dbh->do(q|
15371         ALTER TABLE export_format
15372         MODIFY csv_separator VARCHAR(2) NOT NULL DEFAULT ',',
15373         MODIFY field_separator VARCHAR(2),
15374         MODIFY subfield_separator VARCHAR(2)
15375     |);
15376     $dbh->do(q|
15377         ALTER TABLE export_format MODIFY encoding VARCHAR(255) NOT NULL DEFAULT 'utf8'
15378     |);
15379
15380     $dbh->do(q|
15381         ALTER TABLE reserves MODIFY lowestPriority tinyint(1) NOT NULL DEFAULT 0
15382     |);
15383     $dbh->do(q|
15384         ALTER TABLE old_reserves MODIFY lowestPriority tinyint(1) NOT NULL DEFAULT 0
15385     |);
15386
15387     SetVersion( $DBversion );
15388     print "Upgrade to $DBversion done (Bug 20144 - Adapt DB structure to work with new SQL modes)\n";
15389 }
15390
15391 $DBversion = '17.12.00.016';
15392 if( CheckVersion( $DBversion ) ) {
15393     $dbh->do(q|SET foreign_key_checks = 0|);
15394     my $sth = $dbh->table_info( '','','','TABLE' );
15395
15396     while ( my ( $cat, $schema, $name, $type, $remarks ) = $sth->fetchrow_array ) {
15397         my $table_sth = $dbh->prepare(qq|SHOW CREATE TABLE $name|);
15398         $table_sth->execute;
15399         my @table = $table_sth->fetchrow_array;
15400         unless ( $table[1] =~ /COLLATE=utf8mb4_unicode_ci/ ) {
15401             # Some users might have done the upgrade to utf8mb4 on their own
15402             # to support supplemental chars (japanese, chinese, etc)
15403             if ( $name eq 'additional_fields' ) {
15404                 $dbh->do(qq|
15405                     ALTER TABLE $name
15406                         DROP KEY `fields_uniq`,
15407                         ADD UNIQUE KEY `fields_uniq` (`tablename` (191), `name` (191))
15408                 |);
15409                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15410             }
15411             elsif ( $name eq 'authorised_values' ) {
15412                 $dbh->do(qq|
15413                     ALTER TABLE $name
15414                         DROP KEY `lib`,
15415                         ADD KEY `lib` (`lib` (191))
15416                 |);
15417                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15418             }
15419             elsif ( $name eq 'borrower_modifications' ) {
15420                 $dbh->do(qq|
15421                     ALTER TABLE $name
15422                         DROP PRIMARY KEY,
15423                         DROP KEY `verification_token`,
15424                         ADD PRIMARY KEY (`verification_token` (191),`borrowernumber`),
15425                         ADD KEY `verification_token` (`verification_token` (191))
15426                 |);
15427                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15428             }
15429             elsif ( $name eq 'columns_settings' ) {
15430                 $dbh->do(qq|
15431                     ALTER TABLE $name
15432                         DROP PRIMARY KEY,
15433                         ADD PRIMARY KEY (`module` (191), `page` (191), `tablename` (191), `columnname` (191))
15434                 |);
15435                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15436             }
15437             elsif ( $name eq 'illrequestattributes' ) {
15438                 $dbh->do(qq|
15439                     ALTER TABLE $name
15440                         DROP PRIMARY KEY,
15441                         ADD PRIMARY KEY  (`illrequest_id`, `type` (191))
15442                 |);
15443                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15444             }
15445             elsif ( $name eq 'items_search_fields' ) {
15446                 $dbh->do(qq|
15447                     ALTER TABLE $name
15448                         DROP PRIMARY KEY,
15449                         ADD PRIMARY KEY (`name` (191))
15450                 |);
15451                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15452             }
15453             elsif ( $name eq 'marc_subfield_structure' ) {
15454                 # In this case we convert each column explicitly
15455                 # to preserve 'tagsubield' collation (utf8mb4_bin)
15456                 $dbh->do(qq|
15457                     ALTER TABLE $name
15458                         MODIFY COLUMN tagfield
15459                             VARCHAR(3) COLLATE utf8mb4_unicode_ci NOT NULL DEFAULT '',
15460                         MODIFY COLUMN tagsubfield
15461                             VARCHAR(1) COLLATE utf8mb4_bin NOT NULL DEFAULT '',
15462                         MODIFY COLUMN liblibrarian
15463                             VARCHAR(255) COLLATE utf8mb4_unicode_ci NOT NULL DEFAULT '',
15464                         MODIFY COLUMN libopac
15465                             VARCHAR(255) COLLATE utf8mb4_unicode_ci NOT NULL DEFAULT '',
15466                         MODIFY COLUMN kohafield
15467                             VARCHAR(40) COLLATE utf8mb4_unicode_ci DEFAULT NULL,
15468                         MODIFY COLUMN authorised_value
15469                             VARCHAR(32) COLLATE utf8mb4_unicode_ci DEFAULT NULL,
15470                         MODIFY COLUMN authtypecode
15471                             VARCHAR(20) COLLATE utf8mb4_unicode_ci DEFAULT NULL,
15472                         MODIFY COLUMN value_builder
15473                             VARCHAR(80) COLLATE utf8mb4_unicode_ci DEFAULT NULL,
15474                         MODIFY COLUMN frameworkcode
15475                             VARCHAR(4) COLLATE utf8mb4_unicode_ci NOT NULL DEFAULT '',
15476                         MODIFY COLUMN seealso
15477                             VARCHAR(1100) COLLATE utf8mb4_unicode_ci DEFAULT NULL,
15478                         MODIFY COLUMN link
15479                             VARCHAR(80) COLLATE utf8mb4_unicode_ci DEFAULT NULL,
15480                         MODIFY COLUMN defaultvalue
15481                             MEDIUMTEXT COLLATE utf8mb4_unicode_ci default NULL
15482                 |);
15483                 $dbh->do(qq|ALTER TABLE $name CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15484             }
15485             elsif ( $name eq 'plugin_data' ) {
15486                 $dbh->do(qq|
15487                     ALTER TABLE $name
15488                         DROP PRIMARY KEY,
15489                         ADD PRIMARY KEY (`plugin_class` (191), `plugin_key` (191))
15490                 |);
15491                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15492             }
15493             elsif ( $name eq 'search_field' ) {
15494                 $dbh->do(qq|
15495                     ALTER TABLE $name
15496                         DROP KEY `name`,
15497                         ADD UNIQUE KEY `name` (`name` (191))
15498                 |);
15499                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15500             }
15501             elsif ( $name eq 'search_marc_map' ) {
15502                 $dbh->do(qq|
15503                     ALTER TABLE $name
15504                         DROP KEY `index_name`,
15505                         ADD UNIQUE KEY `index_name` (`index_name`, `marc_field` (191), `marc_type`)
15506                 |);
15507                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15508             }
15509             elsif ( $name eq 'sms_providers' ) {
15510                 $dbh->do(qq|
15511                     ALTER TABLE $name
15512                         DROP KEY `name`,
15513                         ADD UNIQUE KEY `name` (`name` (191))
15514                 |);
15515                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15516             }
15517             elsif ( $name eq 'tags' ) {
15518                 $dbh->do(qq|
15519                     ALTER TABLE $name
15520                         DROP PRIMARY KEY,
15521                         ADD PRIMARY KEY (`entry` (191))
15522                 |);
15523                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15524             }
15525             elsif ( $name eq 'tags_approval' ) {
15526                 $dbh->do(qq|
15527                     ALTER TABLE $name
15528                         MODIFY COLUMN `term` VARCHAR(191) NOT NULL
15529                 |);
15530                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15531             }
15532             elsif ( $name eq 'tags_index' ) {
15533                 $dbh->do(qq|
15534                     ALTER TABLE $name
15535                         MODIFY COLUMN `term` VARCHAR(191) NOT NULL
15536                 |);
15537                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15538             }
15539             else {
15540                 $dbh->do(qq|ALTER TABLE $name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci|);
15541             }
15542         }
15543     }
15544     $dbh->do(q|SET foreign_key_checks = 1|);
15545
15546     print "Upgrade to $DBversion done (Bug 18336 - Convert DB tables to utf8mb4 🎁)\n";
15547     SetVersion($DBversion);
15548 }
15549
15550
15551 $DBversion = '17.12.00.017';
15552 if( CheckVersion( $DBversion ) ) {
15553
15554     if( !column_exists( 'items', 'damaged_on' ) ) {
15555         $dbh->do( "ALTER TABLE items ADD COLUMN damaged_on DATETIME NULL AFTER damaged");
15556     }
15557     if( !column_exists( 'deleteditems', 'damaged_on' ) ) {
15558         $dbh->do( "ALTER TABLE deleteditems ADD COLUMN damaged_on DATETIME NULL AFTER damaged");
15559     }
15560
15561     SetVersion( $DBversion );
15562     print "Upgrade to $DBversion done (Bug 17672 - Add damaged_on to items and deleteditems tables)\n";
15563 }
15564
15565 $DBversion = '17.12.00.018';
15566 if( CheckVersion( $DBversion ) ) {
15567
15568     $dbh->do( q|
15569         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`) VALUES  ('BrowseResultSelection','0',NULL,'Enable/Disable browsing search results fromt the bibliographic record detail page in staff client','YesNo')
15570     |);
15571
15572     SetVersion( $DBversion );
15573     print "Upgrade to $DBversion done (Bug 19290 - Add system preference BrowseResultSelection)\n";
15574 }
15575
15576 $DBversion = '17.12.00.019';
15577 if( CheckVersion( $DBversion ) ) {
15578
15579     $dbh->do(q|UPDATE auth_subfield_structure SET hidden=1 WHERE hidden<>0|);
15580
15581     SetVersion( $DBversion );
15582     print "Upgrade to $DBversion done (Bug 20074 - Auth_subfield_structure changes hidden attribute)\n";
15583 }
15584
15585 $DBversion = '17.12.00.020';
15586 if( CheckVersion( $DBversion ) ) {
15587
15588     $dbh->do(q|
15589         INSERT IGNORE INTO language_descriptions(subtag, type, lang, description)
15590         VALUES ('vi', 'language', 'de', 'Vietnamesisch')
15591     |);
15592
15593     $dbh->do(q|
15594         UPDATE language_descriptions SET description = 'Tiếng Việt'
15595         WHERE subtag = 'vi' and type = 'language' and lang = 'vi'
15596     |);
15597
15598     SetVersion( $DBversion );
15599     print "Upgrade to $DBversion done (Bug 20082 - Update descriptions of Vietnamese language)\n";
15600 }
15601
15602 $DBversion = '17.12.00.021';
15603 if( CheckVersion( $DBversion ) ) {
15604
15605     $dbh->do(q|
15606         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
15607         ('PurgeSuggestionsOlderThan', '', NULL, 'Default value for cronjob purge_suggestions.pl', 'Integer');
15608     |);
15609
15610     SetVersion( $DBversion );
15611     print "Upgrade to $DBversion done (Bug 13287 - Add system preference PurgeSuggestionsOlderThan)\n";
15612 }
15613
15614 $DBversion = '17.12.00.022';
15615 if( CheckVersion( $DBversion ) ) {
15616
15617     if( !column_exists( 'currency', 'p_sep_by_space' ) ) {
15618         $dbh->do(q|
15619             ALTER TABLE currency ADD COLUMN p_sep_by_space tinyint(1) default 0 after archived
15620         |);
15621     }
15622
15623     SetVersion( $DBversion );
15624     print "Upgrade to $DBversion done (Bug 4078 - Add column currency.p_sep_by_space)\n";
15625 }
15626
15627 $DBversion = '17.12.00.023';
15628 if( CheckVersion( $DBversion ) ) {
15629     $dbh->do(q{
15630         DELETE FROM systempreferences
15631         WHERE variable='checkdigit'
15632     });
15633
15634     SetVersion( $DBversion );
15635     print "Upgrade to $DBversion done (Bug 20264 - Remove system preference 'checkdigit')\n";
15636 }
15637
15638 $DBversion = '17.12.00.024';
15639 if( CheckVersion( $DBversion ) ) {
15640
15641     $dbh->do(q{
15642         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
15643         VALUES ('SelfCheckInMainUserBlock', '', '70|10', 'Add a block of HTML that will display on the self check-in screen.', 'Textarea');
15644     });
15645
15646     $dbh->do(q{
15647         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
15648         VALUES ('SelfCheckInModule', 0, NULL, 'Enable the standalone self-checkin module.', 'YesNo');
15649     });
15650
15651     $dbh->do(q{
15652         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
15653         VALUES ('SelfCheckInModuleUserID', NULL, NULL, 'Patron ID (borrowernumber) to be allowed on the self-checkin module.', 'Integer');
15654     });
15655
15656     $dbh->do(q{
15657         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
15658         VALUES ('SelfCheckInTimeout', 120, NULL, 'Define the number of seconds before the self check-in module times out.', 'Integer');
15659     });
15660
15661     $dbh->do(q{
15662         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
15663         VALUES ('SelfCheckInUserCSS', '', NULL, 'Add CSS to be included in the self check-in module in an embedded <style> tag.', 'free');
15664     });
15665
15666     $dbh->do(q{
15667         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
15668         VALUES ('SelfCheckInUserJS', '', NULL, 'Define custom javascript for inclusion in the self check-in module.', 'free');
15669     });
15670
15671     # Add new userflag for self check
15672     $dbh->do(q{
15673         INSERT IGNORE INTO userflags (bit,flag,flagdesc,defaulton) VALUES
15674             (23,'self_check','Self check modules',0);
15675     });
15676
15677     # Add self check-in module subpermission
15678     $dbh->do(q{
15679         INSERT IGNORE INTO permissions (module_bit,code,description)
15680         VALUES (23, 'self_checkin_module', 'Log into the self check-in module');
15681     });
15682
15683     # Add self check-in module subpermission
15684     $dbh->do(q{
15685         INSERT IGNORE INTO permissions (module_bit,code,description)
15686         VALUES (23, 'self_checkout_module', 'Perform self checkout at the OPAC. It should be used for the patron matching the AutoSelfCheckID');
15687     });
15688
15689     # Update patrons with self_checkout permission
15690     # IMPORTANT: Needs to happen before removing the old subpermission
15691     $dbh->do(q{
15692         UPDATE user_permissions
15693         SET module_bit = 23,
15694                   code = 'self_checkout_module'
15695         WHERE module_bit = 1 AND code = 'self_checkout';
15696     });
15697
15698     # Remove old self_checkout permission
15699     $dbh->do(q{
15700         DELETE IGNORE FROM permissions
15701         WHERE  code='self_checkout';
15702     });
15703
15704     SetVersion( $DBversion );
15705     print "Upgrade to $DBversion done (Bug 15492 - Add a standalone self-checkin module)\n";
15706 }
15707
15708 $DBversion = '17.12.00.025';
15709 if( CheckVersion( $DBversion ) ) {
15710     $dbh->do(q|
15711         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
15712         VALUES ('StaffLoginInstructions','','HTML to go into the login box for the staff client',NULL,'Free')
15713     |);
15714     $dbh->do(q|
15715         UPDATE systempreferences
15716         SET variable = 'OpacLoginInstructions'
15717         WHERE variable = 'NoLoginInstructions'
15718     |);
15719
15720     SetVersion( $DBversion );
15721     print "Upgrade to $DBversion done (Bug 20291 - Add StaffLoginInstructions system preference and rename NoLoginInstructions with OpacLoginInstructions)\n";
15722 }
15723
15724 $DBversion = '17.12.00.026';
15725 if( CheckVersion( $DBversion ) ) {
15726     if( !column_exists( 'issuingrules', 'suspension_chargeperiod' ) ) {
15727         $dbh->do(q|
15728             ALTER TABLE issuingrules ADD COLUMN suspension_chargeperiod int(11) DEFAULT '1' AFTER maxsuspensiondays;
15729         |);
15730     }
15731
15732     SetVersion( $DBversion );
15733     print "Upgrade to $DBversion done (Bug 19804 - Add issuingrules.suspension_chargeperiod)\n";
15734 }
15735
15736 $DBversion = '17.12.00.027';
15737 if( CheckVersion( $DBversion ) ) {
15738     $dbh->do(q|
15739         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`)
15740         VALUES ('UseACQFrameworkForBiblioRecords','0','','Use the ACQ framework for the catalog details','YesNo')
15741     |);
15742
15743     SetVersion( $DBversion );
15744     print "Upgrade to $DBversion done (Bug 19289 - Add system preference UseACQFrameworkForBiblioRecords)\n";
15745 }
15746
15747 $DBversion = '17.12.00.028';
15748 if( CheckVersion( $DBversion ) ) {
15749     if( !column_exists( 'marc_tag_structure', 'ind1_defaultvalue' ) ) {
15750         $dbh->do(q|
15751             ALTER TABLE marc_tag_structure
15752             ADD COLUMN ind2_defaultvalue VARCHAR(1) NOT NULL DEFAULT '' AFTER authorised_value,
15753             ADD COLUMN ind1_defaultvalue VARCHAR(1) NOT NULL DEFAULT '' AFTER authorised_value;
15754         |);
15755     }
15756
15757     SetVersion( $DBversion );
15758     print "Upgrade to $DBversion done (Bug 9701 - Add default indicators (marc_tag_structure.indX_defaultvalue))\n";
15759 }
15760
15761 $DBversion = '17.12.00.029';
15762 if( CheckVersion( $DBversion ) ) {
15763     my $pref =
15764 q|# PERSO_NAME  100 600 696 700 796 800 896
15765 marc21, 100, ind1:auth1
15766 marc21, 600, ind1:auth1, ind2:thesaurus
15767 marc21, 696, ind1:auth1
15768 marc21, 700, ind1:auth1
15769 marc21, 796, ind1:auth1
15770 marc21, 800, ind1:auth1
15771 marc21, 896, ind1:auth1
15772 # CORPO_NAME  110 610 697 710 797 810 897
15773 marc21, 110, ind1:auth1
15774 marc21, 610, ind1:auth1, ind2:thesaurus
15775 marc21, 697, ind1:auth1
15776 marc21, 710, ind1:auth1
15777 marc21, 797, ind1:auth1
15778 marc21, 810, ind1:auth1
15779 marc21, 897, ind1:auth1
15780 # MEETI_NAME    111 611 698 711 798 811 898
15781 marc21, 111, ind1:auth1
15782 marc21, 611, ind1:auth1, ind2:thesaurus
15783 marc21, 698, ind1:auth1
15784 marc21, 711, ind1:auth1
15785 marc21, 798, ind1:auth1
15786 marc21, 811, ind1:auth1
15787 marc21, 898, ind1:auth1
15788 # UNIF_TITLE        130 440 630 699 730 799 830 899 / 240
15789 marc21, 130, ind1:auth2
15790 marc21, 240, , ind2:auth2
15791 marc21, 440, , ind2:auth2
15792 marc21, 630, ind1:auth2, ind2:thesaurus
15793 marc21, 699, ind1:auth2
15794 marc21, 730, ind1:auth2
15795 marc21, 799, ind1:auth2
15796 marc21, 830, , ind2:auth2
15797 marc21, 899, ind1:auth2
15798 # CHRON_TERM    648
15799 marc21, 648, , ind2:thesaurus
15800 # TOPIC_TERM      650 654 656 657 658 690
15801 marc21, 650, , ind2:thesaurus
15802 # GEOGR_NAME   651 662 691 / 751
15803 marc21, 651, , ind2:thesaurus
15804 # GENRE/FORM    655
15805 marc21, 655, , ind2:thesaurus
15806
15807 # UNIMARC: Always copy the indicators from the authority
15808 unimarc, *, ind1:auth1, ind2:auth2|;
15809
15810     $dbh->do( q|
15811         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
15812         VALUES ( 'AuthorityControlledIndicators', ?, 'Authority controlled indicators per biblio field', NULL, 'Free' );
15813     |, undef, $pref );
15814
15815     SetVersion( $DBversion );
15816     print "Upgrade to $DBversion done (Bug 14769 - Authorities merge: Set correct indicators in biblio field (new system preference AuthorityControlledIndicators))\n";
15817 }
15818
15819 $DBversion = '17.12.00.030';
15820 if( CheckVersion( $DBversion ) ) {
15821     $dbh->do(q|
15822         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
15823         VALUES ('NovelistSelectStaffProfile',NULL,'Novelist staff client user Profile',NULL,'free')
15824     |);
15825
15826     SetVersion( $DBversion );
15827     print "Upgrade to $DBversion done (Bug 19882 - Add system preference NovelistSelectStaffProfile)\n";
15828 }
15829
15830 $DBversion = '17.12.00.031';
15831 if( CheckVersion( $DBversion ) ) {
15832     $dbh->do(q|
15833         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`)
15834         VALUES ('MarcFieldDocURL', NULL, NULL, 'URL used for MARC field documentation. Following substitutions are available: {MARC} = marc flavour, eg. \"MARC21\" or \"UNIMARC\". {FIELD} = field number, eg. \"000\" or \"048\". {LANG} = user language, eg. \"en\" or \"fi-FI\"', 'free')
15835     |);
15836
15837     SetVersion( $DBversion );
15838     print "Upgrade to $DBversion done (Bug 11674 - Add system preference MarcFieldDocURL)\n";
15839 }
15840
15841 $DBversion = '17.12.00.032';
15842 if( CheckVersion( $DBversion ) ) {
15843     $dbh->do(q|
15844         UPDATE letter SET code = "SERIAL_ALERT" WHERE code = "RLIST";
15845     |);
15846     $dbh->do(q|
15847         UPDATE letter SET name = "New serial issue" WHERE name = "Routing List";
15848     |);
15849     $dbh->do(q|
15850         UPDATE subscription SET letter = "SERIAL_ALERT" WHERE letter = "RLIST";
15851     |);
15852
15853     SetVersion( $DBversion );
15854     print "Upgrade to $DBversion done (Bug 19794 - Rename RLIST notice to SERIAL_ALERT)\n";
15855 }
15856
15857 $DBversion = '17.12.00.033';
15858 if( CheckVersion( $DBversion ) ) {
15859     if ( !column_exists( 'accountlines', 'payment_type' ) ) {
15860         $dbh->do(q{
15861             ALTER TABLE accountlines ADD payment_type varchar(80) default NULL AFTER accounttype
15862         });
15863     }
15864
15865     $dbh->do(q{
15866         INSERT IGNORE INTO authorised_value_categories( category_name ) VALUES ('PAYMENT_TYPE')
15867     });
15868
15869     SetVersion( $DBversion );
15870     print "Upgrade to $DBversion done (Bug 18786 - Add ability to create custom payment types)\n";
15871 }
15872
15873 $DBversion = '17.12.00.034';
15874 if( CheckVersion( $DBversion ) ) {
15875
15876     $dbh->do( q{
15877         INSERT IGNORE INTO account_offset_types ( type ) VALUES ('Void Payment')
15878     } );
15879
15880     SetVersion( $DBversion );
15881     print "Upgrade to $DBversion done (Bug 18790 - Add ability to void payment)\n";
15882 }
15883
15884 $DBversion = '17.12.00.035';
15885 if( CheckVersion( $DBversion ) ) {
15886     my ( $original_value ) = $dbh->selectrow_array(q|
15887         SELECT value FROM systempreferences WHERE variable="MarkLostItemsAsReturned"
15888     |);
15889     if ( $original_value and $original_value eq '1' ) {
15890         $dbh->do(q{
15891             UPDATE systempreferences
15892             SET type="multiple",
15893                 options="batchmod|moredetail|cronjob|additem",
15894                 value="batchmod,moredetail,cronjob,additem"
15895             WHERE variable="MarkLostItemsAsReturned"
15896         });
15897     } else {
15898         $dbh->do(q{
15899             UPDATE systempreferences
15900             SET type="multiple",
15901                 options="batchmod|moredetail|cronjob|additem",
15902                 value=""
15903             WHERE variable="MarkLostItemsAsReturned"
15904         });
15905     }
15906
15907     SetVersion( $DBversion );
15908     print "Upgrade to $DBversion done (Bug 19974 - Make MarkLostItemsAsReturned multiple)\n";
15909 }
15910
15911 $DBversion = '17.12.00.036';
15912 if( CheckVersion( $DBversion ) ) {
15913
15914     $dbh->do( q{
15915         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES ('CanMarkHoldsToPullAsLost','do_not_allow','do_not_allow|allow|allow_and_notify','Add a button to the "Holds to pull" screen to mark an item as lost and notify the patron.','Choice');
15916     } );
15917     $dbh->do( q{
15918         INSERT IGNORE INTO letter(module, code, branchcode, name, is_html, title, content, message_transport_type, lang) VALUES ('reserves', 'CANCEL_HOLD_ON_LOST', '', 'Hold has been cancelled', 0, "Hold has been cancelled", "Dear [% borrower.firstname %] [% borrower.surname %],\n\nWe regret to inform you, that the following item can not be provided due to it being missing. Your hold was cancelled.\n\nTitle: [% biblio.title %]\nAuthor: [% biblio.author %]\nCopy: [% item.copynumber %]\nLocation: [% branch.branchname %]", 'email', 'default');
15919     } );
15920     $dbh->do( q{
15921         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES ('UpdateItemWhenLostFromHoldList','',NULL,'This is a list of values to update an item when it is marked as lost from the holds to pull screen','Free');
15922     } );
15923     $dbh->do( q{
15924         UPDATE systempreferences SET options="batchmod|moredetail|cronjob|additem|pendingreserves" WHERE variable="MarkLostItemsAsReturned";
15925     } );
15926
15927     SetVersion( $DBversion );
15928     print "Upgrade to $DBversion done (Bug 19287 - Add ability to mark an item 'Lost' from 'Holds to pull' list (CanMarkHoldsToPullAsLost, UpdateItemWhenLostFromHoldList and CANCEL_HOLD_ON_LOST))\n";
15929 }
15930
15931 $DBversion = '17.12.00.037';
15932 if( CheckVersion( $DBversion ) ) {
15933
15934     SetVersion( $DBversion );
15935     print "Upgrade to $DBversion done (This change has been reverted, nothing done!)\n";
15936 }
15937
15938 $DBversion = '17.12.00.038';
15939 if( CheckVersion( $DBversion ) ) {
15940
15941     $dbh->do( q{
15942         UPDATE language_rfc4646_to_iso639 SET iso639_2_code = 'slo' WHERE iso639_2_code = 'slk' AND rfc4646_subtag = 'sk';
15943     } );
15944
15945     SetVersion( $DBversion );
15946     print "Upgrade to $DBversion done (Bug 20245 - Use Bibliographic code value for Slovak language)\n";
15947 }
15948
15949 $DBversion = '17.12.00.039';
15950 if( CheckVersion( $DBversion ) ) {
15951
15952     $dbh->do( q{
15953         UPDATE language_rfc4646_to_iso639 SET iso639_2_code = 'baq' WHERE iso639_2_code = 'eus' AND rfc4646_subtag = 'eu';
15954     } );
15955     $dbh->do( q{
15956         UPDATE language_rfc4646_to_iso639 SET iso639_2_code = 'mao' WHERE iso639_2_code = 'mri' AND rfc4646_subtag = 'mi';
15957     } );
15958     $dbh->do( q{
15959         UPDATE language_rfc4646_to_iso639 SET iso639_2_code = 'alb' WHERE iso639_2_code = 'sqi' AND rfc4646_subtag = 'sq';
15960     } );
15961
15962     SetVersion( $DBversion );
15963     print "Upgrade to $DBversion done (Bug 20482 - Use Bibliographic code value for Basque, Maori and Albanian languages)\n";
15964 }
15965
15966 $DBversion = '17.12.00.040';
15967 if( CheckVersion( $DBversion ) ) {
15968
15969     $dbh->do( q{
15970         INSERT IGNORE INTO systempreferences ( value, variable, options, explanation, type )
15971         VALUES ( '0', 'ProtectSuperlibrarianPrivileges', NULL, 'If enabled, non-superlibrarians cannot set superlibrarian privileges', 'YesNo' )
15972     } );
15973
15974     SetVersion( $DBversion );
15975     print "Upgrade to $DBversion done (Bug 20100 - Add new system preference ProtectSuperlibrarianPrivileges)\n";
15976 }
15977
15978 $DBversion = '17.12.00.041';
15979 if( CheckVersion( $DBversion ) ) {
15980
15981     $dbh->do( q{
15982         INSERT IGNORE INTO permissions (module_bit, code, description) VALUES (13, 'access_files', 'Access to the files stored on the server');
15983     } );
15984
15985     SetVersion( $DBversion );
15986     print "Upgrade to $DBversion done (Bug 11317 - Add a new permission to access files stored on the server)\n";
15987 }
15988
15989 $DBversion = '17.12.00.042';
15990 if( CheckVersion( $DBversion ) ) {
15991
15992     if (!TableExists('oauth_access_tokens')) {
15993         $dbh->do(q{
15994             CREATE TABLE oauth_access_tokens (
15995                 `access_token` VARCHAR(191) NOT NULL,
15996                 `client_id`    VARCHAR(191) NOT NULL,
15997                 `expires`      INT NOT NULL,
15998                 PRIMARY KEY (`access_token`)
15999             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci
16000         });
16001     }
16002
16003     SetVersion( $DBversion );
16004     print "Upgrade to $DBversion done (Bug 20402 - Implement OAuth2 authentication for REST API)\n";
16005 }
16006
16007 $DBversion = '17.12.00.043';
16008 if(CheckVersion($DBversion)) {
16009
16010     if (!TableExists('api_keys')) {
16011         $dbh->do(q{
16012             CREATE TABLE `api_keys` (
16013                 `client_id`   VARCHAR(191) NOT NULL,
16014                 `secret`      VARCHAR(191) NOT NULL,
16015                 `description` VARCHAR(255) NOT NULL,
16016                 `patron_id`   INT(11) NOT NULL,
16017                 `active`      TINYINT(1) DEFAULT 1 NOT NULL,
16018                 PRIMARY KEY `client_id` (`client_id`),
16019                 UNIQUE KEY `secret` (`secret`),
16020                 KEY `patron_id` (`patron_id`),
16021                 CONSTRAINT `api_keys_fk_patron_id`
16022                   FOREIGN KEY (`patron_id`)
16023                   REFERENCES `borrowers` (`borrowernumber`)
16024                   ON DELETE CASCADE ON UPDATE CASCADE
16025             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
16026         });
16027     }
16028
16029     print "Upgrade to $DBversion done (Bug 20568 - Add API key management interface for patrons)\n";
16030     SetVersion($DBversion);
16031 }
16032
16033 $DBversion = '17.12.00.044';
16034 if(CheckVersion($DBversion)) {
16035
16036     $dbh->do(q{
16037         INSERT IGNORE INTO systempreferences (`variable`,`value`,`options`,`explanation`,`type`)
16038         VALUES
16039             ('RESTOAuth2ClientCredentials','0',NULL,'If enabled, the OAuth2 client credentials flow is enabled for the REST API.','YesNo');
16040     });
16041
16042     print "Upgrade to $DBversion done (Bug 20624 - Disable OAuth2 client credentials grant by default)\n";
16043     SetVersion($DBversion);
16044 }
16045
16046 $DBversion = '18.05.00.000';
16047 if( CheckVersion( $DBversion ) ) {
16048     SetVersion( $DBversion );
16049     print "Upgrade to $DBversion done (Koha 18.05)\n";
16050 }
16051
16052 $DBversion = '18.06.00.000';
16053 if( CheckVersion( $DBversion ) ) {
16054     SetVersion( $DBversion );
16055     print "Upgrade to $DBversion done (Koha 18.06 - It's Adventure time!)\n";
16056 }
16057
16058 $DBversion = '18.06.00.001';
16059 if( CheckVersion( $DBversion ) ) {
16060     $dbh->do(q{UPDATE permissions SET description = 'Manage budgets' WHERE code = 'period_manage';});
16061     $dbh->do(q{UPDATE permissions SET description = 'Manage funds' WHERE code = 'budget_manage';});
16062     $dbh->do(q{UPDATE permissions SET description = 'Modify funds (can''t create lines, but can modify existing ones)' WHERE code = 'budget_modify';});
16063     $dbh->do(q{UPDATE permissions SET description = 'Manage baskets and order lines' WHERE code = 'order_manage';});
16064     $dbh->do(q{UPDATE permissions SET description = 'Manage all baskets and order lines, regardless of restrictions on them' WHERE code = 'order_manage_all';});
16065     $dbh->do(q{UPDATE permissions SET description = 'Manage basket groups' WHERE code = 'group_manage';});
16066     $dbh->do(q{UPDATE permissions SET description = 'Receive orders and manage shipments' WHERE code = 'order_receive';});
16067     $dbh->do(q{UPDATE permissions SET description = 'Add and delete funds (but can''t modify funds)' WHERE code = 'budget_add_del';});
16068     $dbh->do(q{UPDATE permissions SET description = 'Manage all funds' WHERE code = 'budget_manage_all';});
16069     SetVersion( $DBversion );
16070     print "Upgrade to $DBversion done (Bug 3849- Improve descriptions of granular acquisition permissions)\n";
16071 }
16072
16073 $DBversion = '18.06.00.002';
16074 if( CheckVersion( $DBversion ) ) {
16075     $dbh->do(q{DELETE FROM userflags WHERE bit = 12 AND flag = 'management';});
16076     $dbh->do(q{UPDATE borrowers SET flags = flags - ( flags & (1<<12) ) WHERE flags & (1 << 12);});
16077     SetVersion( $DBversion );
16078     print "Upgrade to $DBversion done (Bug 2426 - Remove deprecated management permission)\n";
16079 }
16080
16081 $DBversion = '18.06.00.003';
16082 if( CheckVersion( $DBversion ) ) {
16083     $dbh->do( "ALTER TABLE search_field CHANGE COLUMN type type ENUM('', 'string', 'date', 'number', 'boolean', 'sum', 'isbn', 'stdno') NOT NULL COMMENT 'what type of data this holds, relevant when storing it in the search engine'" );
16084     SetVersion( $DBversion );
16085     print "Upgrade to $DBversion done (Bug 20073 - Add new types for Elasticsearch fields)\n";
16086 }
16087
16088 $DBversion = '18.06.00.004';
16089 if( CheckVersion( $DBversion ) ) {
16090
16091     # Add 'Manual Credit' offset type
16092     $dbh->do(q{
16093         INSERT IGNORE INTO `account_offset_types` (`type`) VALUES ('Manual Credit');
16094     });
16095
16096     # Fix wrong account offsets / Manual credits
16097     $dbh->do(q{
16098         UPDATE account_offsets
16099         SET credit_id=debit_id,
16100             debit_id=NULL,
16101             type='Manual Credit'
16102         WHERE amount < 0 AND
16103               type='Manual Debit' AND
16104               debit_id IN
16105                 (SELECT accountlines_id AS debit_id
16106                  FROM accountlines
16107                  WHERE accounttype='C');
16108     });
16109
16110     # Fix wrong account offsets / Manually forgiven amounts
16111     $dbh->do(q{
16112         UPDATE account_offsets
16113         SET credit_id=debit_id,
16114             debit_id=NULL,
16115             type='Writeoff'
16116         WHERE amount < 0 AND
16117               type='Manual Debit' AND
16118               debit_id IN
16119                 (SELECT accountlines_id AS debit_id
16120                  FROM accountlines
16121                  WHERE accounttype='FOR');
16122     });
16123
16124     SetVersion( $DBversion );
16125     print "Upgrade to $DBversion done (Bug 20980 - Manual credit offsets are stored as debits)\n";
16126 }
16127
16128 $DBversion = '18.06.00.005';
16129 if( CheckVersion( $DBversion ) ) {
16130     unless ( column_exists('aqorders', 'created_by') ) {
16131         $dbh->do( "ALTER TABLE aqorders ADD COLUMN created_by int(11) NULL DEFAULT NULL AFTER quantityreceived;" );
16132         unless ( foreign_key_exists('aqorders', 'aqorders_created_by') ) {
16133             $dbh->do( "ALTER TABLE aqorders ADD CONSTRAINT aqorders_created_by FOREIGN KEY (created_by) REFERENCES borrowers (borrowernumber) ON DELETE SET NULL ON UPDATE CASCADE;" );
16134         }
16135         $dbh->do( "UPDATE aqbasket LEFT JOIN borrowers ON ( aqbasket.authorisedby = borrowers.borrowernumber ) SET aqbasket.authorisedby = NULL WHERE borrowers.borrowernumber IS NULL;" );
16136         $dbh->do( "UPDATE aqorders LEFT JOIN aqbasket ON ( aqorders.basketno = aqbasket.basketno ) SET aqorders.created_by = aqbasket.authorisedby WHERE aqorders.created_by IS NULL;" );
16137     }
16138     SetVersion( $DBversion );
16139     print "Upgrade to $DBversion done (Bug 12395 - Save order line's creator)\n";
16140 }
16141
16142 $DBversion = '18.06.00.006';
16143 if( CheckVersion( $DBversion ) ) {
16144     unless ( column_exists('patron_lists', 'shared') ) {
16145         $dbh->do( "ALTER TABLE patron_lists ADD COLUMN shared tinyint(1) default 0 AFTER owner;" );
16146     }
16147     SetVersion( $DBversion );
16148     print "Upgrade to $DBversion done (Bug 19524 - Share patron lists between staff)\n";
16149 }
16150
16151 $DBversion = '18.06.00.007';
16152 if( CheckVersion( $DBversion ) ) {
16153     $dbh->do( "INSERT IGNORE INTO permissions (module_bit, code, description) VALUES (11, 'currencies_manage', 'Manage currencies and exchange rates');" );
16154     $dbh->do(q{
16155         INSERT IGNORE INTO user_permissions (borrowernumber, module_bit, code)
16156             SELECT borrowernumber, 11, 'currencies_manage' FROM borrowers WHERE flags & (1 << 3) OR borrowernumber IN
16157             (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16158     });
16159     SetVersion( $DBversion );
16160     print "Upgrade to $DBversion done (Bug 7651 - Add separate permission for managing currencies and exchange rates)\n";
16161 }
16162
16163 $DBversion = '18.06.00.008';
16164 if( CheckVersion( $DBversion ) ) {
16165     $dbh->do( "ALTER TABLE marc_modification_template_actions CHANGE action action ENUM('delete_field','add_field','update_field','move_field','copy_field','copy_and_replace_field')" );
16166     SetVersion( $DBversion );
16167     print "Upgrade to $DBversion done (Bug 13560 - need an add option in marc modification templates)\n";
16168 }
16169
16170 $DBversion = '18.06.00.009';
16171 if( CheckVersion( $DBversion ) ) {
16172     $dbh->do( "
16173         CREATE TABLE IF NOT EXISTS aqinvoice_adjustments (
16174             adjustment_id int(11) NOT NULL AUTO_INCREMENT,
16175             invoiceid int(11) NOT NULL,
16176             adjustment decimal(28,6),
16177             reason varchar(80) default NULL,
16178             note mediumtext default NULL,
16179             budget_id int(11) default NULL,
16180             encumber_open smallint(1) NOT NULL default 1,
16181             timestamp timestamp NOT NULL default CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP,
16182             PRIMARY KEY (adjustment_id),
16183             CONSTRAINT aqinvoice_adjustments_fk_invoiceid FOREIGN KEY (invoiceid) REFERENCES aqinvoices (invoiceid) ON DELETE CASCADE ON UPDATE CASCADE,
16184             CONSTRAINT aqinvoice_adjustments_fk_budget_id FOREIGN KEY (budget_id) REFERENCES aqbudgets (budget_id) ON DELETE SET NULL ON UPDATE CASCADE
16185         ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci
16186         " );
16187     $dbh->do("INSERT IGNORE INTO authorised_value_categories (category_name) VALUES ('ADJ_REASON')");
16188     SetVersion( $DBversion );
16189     print "Upgrade to $DBversion done (Bug 19166 - Add the ability to add adjustments to an invoice)\n";
16190 }
16191
16192 $DBversion = '18.06.00.010';
16193 if( CheckVersion( $DBversion ) ) {
16194     $dbh->do(q{
16195         INSERT IGNORE INTO `letter` (`module`, `code`, `branchcode`, `name`, `is_html`, `title`, `content`, `message_transport_type`, `lang`)
16196         VALUES
16197             ('circulation', 'ACCOUNT_PAYMENT', '', 'Account payment', 0, 'Account payment', '[%- USE Price -%]\r\nA payment of [% credit.amount * -1 | $Price %] has been applied to your account.\r\n\r\nThis payment affected the following fees:\r\n[%- FOREACH o IN offsets %]\r\nDescription: [% o.debit.description %]\r\nAmount paid: [% o.amount * -1 | $Price %]\r\nAmount remaining: [% o.debit.amountoutstanding | $Price %]\r\n[% END %]', 'email', 'default'),
16198                 ('circulation', 'ACCOUNT_WRITEOFF', '', 'Account writeoff', 0, 'Account writeoff', '[%- USE Price -%]\r\nAn account writeoff of [% credit.amount * -1 | $Price %] has been applied to your account.\r\n\r\nThis writeoff affected the following fees:\r\n[%- FOREACH o IN offsets %]\r\nDescription: [% o.debit.description %]\r\nAmount paid: [% o.amount * -1 | $Price %]\r\nAmount remaining: [% o.debit.amountoutstanding | $Price %]\r\n[% END %]', 'email', 'default');
16199     });
16200     $dbh->do(q{
16201         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`)
16202         VALUES ('UseEmailReceipts','0','','Send email receipts for payments and write-offs','YesNo')
16203     });
16204     SetVersion( $DBversion );
16205     print "Upgrade to $DBversion done (Bug 19191 - Add ability to email receipts for account payments and write-offs)\n";
16206 }
16207
16208 $DBversion = '18.06.00.011';
16209 if( CheckVersion( $DBversion ) ) {
16210     unless( column_exists( 'issues', 'noteseen' ) ) {
16211         $dbh->do(q|ALTER TABLE issues ADD COLUMN noteseen int(1) default NULL AFTER notedate|);
16212     }
16213
16214     unless( column_exists( 'old_issues', 'noteseen' ) ) {
16215         $dbh->do(q|ALTER TABLE old_issues ADD COLUMN noteseen int(1) default NULL AFTER notedate|);
16216     }
16217     $dbh->do(q|INSERT IGNORE INTO permissions (module_bit, code, description) VALUES ( 1, 'manage_checkout_notes', 'Mark checkout notes as seen/not seen');|);
16218     SetVersion( $DBversion );
16219     print "Upgrade to $DBversion done (Bug 17698: Add column issues.noteseen and old_issues.noteseen)\n";
16220 }
16221
16222 $DBversion = '18.06.00.012';
16223 if( CheckVersion( $DBversion ) ) {
16224     $dbh->do(q|INSERT IGNORE INTO permissions (module_bit, code, description) VALUES (11, 'suggestions_manage', 'Manage purchase suggestions');|);
16225     $dbh->do(q|INSERT IGNORE INTO user_permissions (borrowernumber, module_bit, code) SELECT borrowernumber, 11, 'suggestions_manage' FROM borrowers WHERE flags & (1 << 2);|);
16226     SetVersion( $DBversion );
16227     print "Upgrade to $DBversion done (Bug 11911 - Add separate permission for managing suggestions)\n";
16228 }
16229
16230 $DBversion = '18.06.00.013';
16231 if( CheckVersion( $DBversion ) ) {
16232     $dbh->do(q{
16233         INSERT IGNORE INTO `account_offset_types` (`type`) VALUES ('Credit Applied');
16234     });
16235     SetVersion( $DBversion );
16236     print "Upgrade to $DBversion done (Bug 20997 - Add Koha::Account::Line::apply)\n";
16237 }
16238
16239 $DBversion = '18.06.00.014';
16240 if( CheckVersion( $DBversion ) ) {
16241     $dbh->do(q{
16242             INSERT IGNORE INTO  systempreferences (variable, value, options, explanation) VALUES ('HidePersonalPatronDetailOnCirculation', 0, 'YesNo', 'Hide patrons phone number, email address, street address and city in the circulation page');
16243     });
16244     SetVersion( $DBversion );
16245     print "Upgrade to $DBversion done (Bug 21121 - New syspref to allow hiding of private patron data in circulation page)\n";
16246 }
16247
16248 $DBversion = '18.06.00.015';
16249 if( CheckVersion( $DBversion ) ) {
16250     $dbh->do(q{DELETE FROM systempreferences where variable="OCLCAffiliateID";});
16251     $dbh->do(q{DELETE FROM systempreferences where variable="XISBN";});
16252     $dbh->do(q{DELETE FROM systempreferences where variable="XISBNDailyLimit";});
16253     SetVersion( $DBversion );
16254     print "Upgrade to $DBversion done (Bug 21226 - Remove prefs OCLCAffiliateID, XISBN and XISBNDailyLimit)\n";
16255 }
16256
16257 $DBversion = '18.06.00.016';
16258 if( CheckVersion( $DBversion ) ) {
16259     my $dtf  = Koha::Database->new->schema->storage->datetime_parser;
16260     my $days = C4::Context->preference('MaxPickupDelay') || 7;
16261     my $date = dt_from_string()->add( days => $days );
16262     my $sql  = q|UPDATE reserves SET expirationdate = ? WHERE expirationdate IS NULL AND waitingdate IS NOT NULL|;
16263     $dbh->do( $sql, undef, $dtf->format_datetime($date) );
16264     SetVersion( $DBversion );
16265     print "Upgrade to $DBversion done (Bug 20773 - expirationdate filled for waiting holds)\n";
16266 }
16267
16268 $DBversion = '18.06.00.017';
16269 if( CheckVersion( $DBversion ) ) {
16270     $dbh->do(q|INSERT IGNORE INTO authorised_value_categories (category_name) VALUES ('ROADTYPE');|);
16271     SetVersion( $DBversion );
16272     print "Upgrade to $DBversion done (Bug 21144: Add ROADTYPE to default authorised values categories)\n";
16273 }
16274
16275 $DBversion = '18.06.00.018';
16276 if( CheckVersion( $DBversion ) ) {
16277     $dbh->do( q|
16278 UPDATE items LEFT JOIN issues USING (itemnumber)
16279 SET items.onloan = NULL
16280 WHERE issues.itemnumber IS NULL
16281     |);
16282     SetVersion( $DBversion );
16283     print "Upgrade to $DBversion done (Bug 20487: Clear items.onloan for unissued items)\n";
16284 }
16285
16286 $DBversion = '18.06.00.019';
16287 if( CheckVersion( $DBversion ) ) {
16288     $dbh->do( q|
16289 INSERT IGNORE INTO columns_settings (module, page, tablename, columnname, cannot_be_toggled, is_hidden) VALUES
16290 ("circ", "circulation", "issues-table", "collection", 0, 1),
16291 ("members", "moremember", "issues-table", "collection", 0, 1);
16292     |);
16293     SetVersion( $DBversion );
16294     print "Upgrade to $DBversion done (Bug 19719: Default to hiding collection code column)\n";
16295 }
16296
16297 $DBversion = '18.06.00.020';
16298 if( CheckVersion( $DBversion ) ) {
16299     if( !column_exists( 'branch_borrower_circ_rules', 'max_holds' ) ) {
16300         $dbh->do(q{
16301             ALTER TABLE branch_borrower_circ_rules ADD COLUMN max_holds INT(4) NULL DEFAULT NULL AFTER maxonsiteissueqty
16302         });
16303     }
16304     if( !column_exists( 'default_borrower_circ_rules', 'max_holds' ) ) {
16305         $dbh->do(q{
16306             ALTER TABLE default_borrower_circ_rules ADD COLUMN max_holds INT(4) NULL DEFAULT NULL AFTER maxonsiteissueqty
16307         });
16308     }
16309     SetVersion( $DBversion );
16310     print "Upgrade to $DBversion done (Bug 15524 - Set limit on maximum possible holds per patron by category)\n";
16311 }
16312
16313 $DBversion = '18.06.00.021';
16314 if( CheckVersion( $DBversion ) ) {
16315     my $dbh = C4::Context->dbh;
16316     unless ( C4::Context->preference('NorwegianPatronDBEnable') ) {
16317         $dbh->do(q|
16318             DELETE FROM systempreferences
16319             WHERE variable IN ('NorwegianPatronDBEnable', 'NorwegianPatronDBEndpoint', 'NorwegianPatronDBUsername', 'NorwegianPatronDBPassword', 'NorwegianPatronDBSearchNLAfterLocalHit')
16320         |);
16321         if ( TableExists('borrower_sync') ) {
16322             $dbh->do(q|DROP TABLE borrower_sync|);
16323         }
16324     }
16325     SetVersion( $DBversion );
16326     print "Upgrade to $DBversion done (Bug 21068 - Remove system preferences NorwegianPatronDB*)\n";
16327 }
16328
16329 $DBversion = '18.06.00.022';
16330 if( CheckVersion( $DBversion ) ) {
16331     my $dbh = C4::Context->dbh;
16332     $dbh->do(q|
16333         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
16334         ('HoldsAutoFill','0',NULL,'If on, librarian will not be asked if hold should be filled, it will be filled automatically','YesNo'),
16335         ('HoldsAutoFillPrintSlip','0',NULL,'If on, hold slip print dialog will be displayed automatically','YesNo')
16336     |);
16337     SetVersion( $DBversion );
16338     print "Upgrade to $DBversion done (Bug 19383 - Add ability to print hold receipts automatically)\n";
16339 }
16340
16341 $DBversion = '18.06.00.023';
16342 if( CheckVersion( $DBversion ) ) {
16343     if( !column_exists( 'aqorders', 'replacementprice' ) ){
16344         $dbh->do( "ALTER TABLE aqorders ADD COLUMN replacementprice DECIMAL(28,6)" );
16345         $dbh->do( "UPDATE aqorders set replacementprice = rrp WHERE replacementprice IS NULL" );
16346     }
16347     SetVersion( $DBversion );
16348     print "Upgrade to $DBversion done (Bug 18639 - Add replacementprice field to aqorders table)\n";
16349 }
16350
16351 $DBversion = '18.06.00.024';
16352 if( CheckVersion( $DBversion ) ) {
16353     if( !column_exists( 'branches', 'pickup_location' ) ){
16354         $dbh->do( "ALTER TABLE branches ADD COLUMN pickup_location TINYINT(1) not null default 1" );
16355     }
16356     SetVersion( $DBversion );
16357     print "Upgrade to $DBversion done (Bug 7534 - Let libraries have configuration for pickup locations)\n";
16358 }
16359
16360 $DBversion = '18.06.00.025';
16361 if( CheckVersion( $DBversion ) ) {
16362     $dbh->do(q{
16363         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
16364         ('KohaManualBaseURL','https://koha-community.org/manual/','','Where is the Koha manual/documentation located?','Free'),
16365         ('KohaManualLanguage','en','en|ar|cs|es|de|fr|it|pt_BR|tr|zh_TW','What is the language of the online manual you want to use?','Choice')
16366     });
16367     SetVersion( $DBversion );
16368     print "Upgrade to $DBversion done (Bug 19817: Add pref KohaManualLanguage and KohaManualBaseURL)\n";
16369 }
16370
16371 $DBversion = '18.06.00.026';
16372 if( CheckVersion( $DBversion ) ) {
16373     $dbh->do(q|
16374 INSERT IGNORE INTO  systempreferences (variable, value, options, explanation, type) VALUES ('ArticleRequestsLinkControl', 'always', 'always\|calc', 'Control display of article request link on search results', 'Choice')
16375     |);
16376     SetVersion( $DBversion );
16377     print "Upgrade to $DBversion done (Bug 17530 - Add pref ArticleRequestsLinkControl)\n";
16378 }
16379
16380 $DBversion = '18.06.00.027';
16381 if( CheckVersion( $DBversion ) ) {
16382     $dbh->do( "DROP TABLE IF EXISTS services_throttle" );
16383     SetVersion( $DBversion );
16384     print "Upgrade to $DBversion done (Bug 21235: Remove table services_throttle)\n";
16385 }
16386
16387 $DBversion = '18.06.00.028';
16388 if( CheckVersion( $DBversion ) ) {
16389     $dbh->do(q{
16390 INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
16391 ('HoldsSplitQueue','nothing','nothing|branch|itemtype|branch_itemtype','In the staff client, split the holds view by the given criteria','Choice'),
16392 ('HoldsSplitQueueNumbering', 'actual', 'actual|virtual', 'If the holds queue is split, decide if the acual priorities should be displayed', 'Choice');
16393 });
16394     SetVersion( $DBversion );
16395     print "Upgrade to $DBversion done (Bug 19469 - Add ability to split view of holds view on record by pickup library and/or itemtype)\n";
16396 }
16397
16398 $DBversion = '18.06.00.029';
16399 if( CheckVersion( $DBversion ) ) {
16400     unless ( index_exists( 'subscription', 'by_biblionumber' ) ) {
16401         $dbh->do(q{
16402             CREATE INDEX `by_biblionumber` ON `subscription` (`biblionumber`)
16403         });
16404     }
16405     SetVersion( $DBversion );
16406     print "Upgrade to $DBversion done (Bug 21288: Slowness in acquisition caused by GetInvoices\n";
16407 }
16408
16409 $DBversion = '18.06.00.030';
16410 if( CheckVersion( $DBversion ) ) {
16411     if ( column_exists( 'accountlines', 'dispute' ) ) {
16412         $dbh->do(q{
16413             ALTER TABLE `accountlines`
16414                 DROP COLUMN `dispute`
16415         });
16416     }
16417     SetVersion( $DBversion );
16418     print "Upgrade to $DBversion done (Bug 20777 - Remove unused field accountlines.dispute)\n";
16419 }
16420
16421 $DBversion = '18.06.00.031';
16422 if( CheckVersion( $DBversion ) ) {
16423     # Add table and add column
16424     unless (TableExists('patron_consent')) {
16425         $dbh->do(q|
16426     CREATE TABLE patron_consent (id int AUTO_INCREMENT, borrowernumber int NOT NULL, type enum('GDPR_PROCESSING' ), given_on datetime, refused_on datetime, PRIMARY KEY (id), FOREIGN KEY (borrowernumber) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE )
16427         |);
16428     }
16429     unless ( column_exists( 'borrower_modifications', 'gdpr_proc_consent' ) ) {
16430         $dbh->do(q|
16431     ALTER TABLE borrower_modifications ADD COLUMN gdpr_proc_consent datetime
16432         |);
16433     }
16434     # Add two sysprefs too
16435     $dbh->do(q|
16436 INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type ) VALUES ('PrivacyPolicyURL','',NULL,'This URL is used in messages about GDPR consents.', 'Free')
16437     |);
16438     $dbh->do(q|
16439 INSERT IGNORE INTO systempreferences ( variable, value, options, explanation, type ) VALUES ('GDPR_Policy','','Enforced\|Permissive\|Disabled','General Data Protection Regulation - policy', 'Choice')
16440     |);
16441     SetVersion( $DBversion );
16442     print "Upgrade to $DBversion done (Bug 20819: Add patron_consent)\n";
16443 }
16444
16445 $DBversion = '18.06.00.032';
16446 if( CheckVersion( $DBversion ) ) {
16447     $dbh->do(q|ALTER TABLE items                   CHANGE COLUMN ccode ccode varchar(80) default NULL|);
16448     $dbh->do(q|ALTER TABLE deleteditems            CHANGE COLUMN ccode ccode varchar(80) default NULL|);
16449     $dbh->do(q|ALTER TABLE branch_transfer_limits  CHANGE COLUMN ccode ccode varchar(80) default NULL|);
16450     $dbh->do(q|ALTER TABLE course_items            CHANGE COLUMN ccode ccode varchar(80) default NULL|);
16451     SetVersion( $DBversion );
16452     print "Upgrade to $DBversion done (Bug 5458: length of items.ccode disagrees with authorised_values.authorised_value)\n";
16453 }
16454
16455 $DBversion = '18.06.00.033';
16456 if( CheckVersion( $DBversion ) ) {
16457     $dbh->do(q|
16458         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES ('AdditionalFieldsInZ3950ResultSearch', '', 'NULL', 'Determines which MARC field/subfields are displayed in -Additional field- column in the result of a search Z3950', 'Free')
16459     |);
16460     SetVersion( $DBversion );
16461     print "Upgrade to $DBversion done (Bug 12747 - Add AdditionalFieldsInZ3950ResultSearch system preference)\n";
16462 }
16463
16464 $DBversion = '18.06.00.034';
16465 if( CheckVersion( $DBversion ) ) {
16466     $dbh->do(q|
16467         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
16468         VALUES ('RecordedBooksClientSecret','','30','Client key for RecordedBooks integration','YesNo'),
16469                ('RecordedBooksLibraryID','','','Library ID for RecordedBooks integration','Integer'),
16470                ('RecordedBooksDomain','','','RecordedBooks domain','Free');
16471     |);
16472     SetVersion( $DBversion );
16473     print "Upgrade to $DBversion done (Bug 17602 - Integrate support for OneClickdigital/Recorded Books API)\n";
16474 }
16475
16476 $DBversion = '18.06.00.035';
16477 if( CheckVersion( $DBversion ) ) {
16478     $dbh->do(q{
16479         UPDATE `systempreferences` SET options = 'US|CA|DE|FR|IN|JP|UK' WHERE variable = 'AmazonLocale' AND options='US|CA|DE|FR|JP|UK';
16480     });
16481     SetVersion( $DBversion );
16482     print "Upgrade to $DBversion done (Bug 21403 - Add Indian Amazon Affiliate option to AmazonLocale setting)\n";
16483 }
16484
16485
16486 $DBversion = '18.06.00.036';
16487 if( CheckVersion( $DBversion ) ) {
16488     unless (TableExists('circulation_rules')){
16489         $dbh->do(q{
16490             CREATE TABLE `circulation_rules` (
16491               `id` int(11) NOT NULL auto_increment,
16492               `branchcode` varchar(10) NULL default NULL,
16493               `categorycode` varchar(10) NULL default NULL,
16494               `itemtype` varchar(10) NULL default NULL,
16495               `rule_name` varchar(32) NOT NULL,
16496               `rule_value` varchar(32) NOT NULL,
16497               PRIMARY KEY (`id`),
16498               CONSTRAINT `circ_rules_ibfk_1` FOREIGN KEY (`branchcode`) REFERENCES `branches` (`branchcode`) ON DELETE CASCADE ON UPDATE CASCADE,
16499               CONSTRAINT `circ_rules_ibfk_2` FOREIGN KEY (`categorycode`) REFERENCES `categories` (`categorycode`) ON DELETE CASCADE ON UPDATE CASCADE,
16500               CONSTRAINT `circ_rules_ibfk_3` FOREIGN KEY (`itemtype`) REFERENCES `itemtypes` (`itemtype`) ON DELETE CASCADE ON UPDATE CASCADE,
16501               KEY `rule_name` (`rule_name`),
16502               UNIQUE (`branchcode`,`categorycode`,`itemtype`,`rule_name`)
16503             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
16504         });
16505     }
16506     if (column_exists('branch_borrower_circ_rules', 'max_holds') ){
16507         $dbh->do(q{
16508             INSERT IGNORE INTO circulation_rules ( branchcode, categorycode, itemtype, rule_name, rule_value )
16509             SELECT branchcode, categorycode, NULL, 'max_holds', COALESCE( max_holds, '' ) FROM branch_borrower_circ_rules
16510         });
16511         $dbh->do(q{
16512             ALTER TABLE branch_borrower_circ_rules DROP COLUMN max_holds
16513         });
16514     }
16515     if (column_exists('default_borrower_circ_rules', 'max_holds') ){
16516         $dbh->do(q{
16517             INSERT IGNORE INTO circulation_rules ( branchcode, categorycode, itemtype, rule_name, rule_value )
16518             SELECT NULL, categorycode, NULL, 'max_holds', COALESCE( max_holds, '' ) FROM default_borrower_circ_rules
16519         });
16520         $dbh->do(q{
16521             ALTER TABLE default_borrower_circ_rules DROP COLUMN max_holds
16522         });
16523     }
16524     SetVersion( $DBversion );
16525     print "Upgrade to $DBversion done (Bug 18887 - Introduce new table 'circulation_rules', use for 'max_holds' rules)\n";
16526 }
16527
16528 $DBversion = '18.06.00.037';
16529 if( CheckVersion( $DBversion ) ) {
16530     unless (TableExists('branches_overdrive')){
16531         $dbh->do( q|
16532             CREATE TABLE branches_overdrive (
16533                 `branchcode` VARCHAR( 10 ) NOT NULL ,
16534                 `authname` VARCHAR( 255 ) NOT NULL ,
16535                 PRIMARY KEY (`branchcode`) ,
16536                 CONSTRAINT `branches_overdrive_ibfk_1` FOREIGN KEY (`branchcode`) REFERENCES `branches` (`branchcode`) ON DELETE CASCADE ON UPDATE CASCADE
16537             ) ENGINE = INNODB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci |
16538         );
16539     }
16540     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('OverDriveAuthname', '', 'Authname for OverDrive Patron Authentication, will be used as fallback if individual branch authname not set', NULL, 'Free');");
16541     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('OverDriveWebsiteID','', 'WebsiteID provided by OverDrive', NULL, 'Free');");
16542     $dbh->do("INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('OverDrivePasswordRequired','', 'Does the library require passwords for OverDrive SIP authentication', NULL, 'YesNo');");
16543     SetVersion( $DBversion );
16544     print "Upgrade to $DBversion done (Bug 21082 - Add overdrive patron auth method)\n";
16545 }
16546
16547 $DBversion = '18.06.00.038';
16548 if( CheckVersion( $DBversion ) ) {
16549     $dbh->do( "ALTER TABLE edifact_ean MODIFY branchcode VARCHAR(10) NULL DEFAULT NULL" );
16550     SetVersion( $DBversion );
16551     print "Upgrade to $DBversion done (Bug 21417 - EDI ordering fails when basket and EAN libraries do not match)\n";
16552 }
16553
16554 $DBversion = '18.06.00.039';
16555 if( CheckVersion( $DBversion ) ) {
16556     $dbh->do(q{
16557         INSERT IGNORE INTO `permissions` (module_bit, code, description) VALUES(3, 'manage_circ_rules_from_any_libraries', 'Manage circ rules for any libraries');
16558     });
16559     SetVersion( $DBversion );
16560     print "Upgrade to $DBversion done (Bug 15520 - Add more granular permission for only editing own library's circ rules)\n";
16561 }
16562
16563 $DBversion = '18.06.00.040';
16564 if( CheckVersion( $DBversion ) ) {
16565     # Stock Rotation Rotas
16566     unless (TableExists('stockrotationrotas')){
16567         $dbh->do(q{
16568           CREATE TABLE `stockrotationrotas` (
16569             `rota_id` int(11) auto_increment,         -- Stockrotation rota ID
16570             `title` varchar(100) NOT NULL,            -- Title for this rota
16571             `description` text NOT NULL,              -- Description for this rota
16572             `cyclical` tinyint(1) NOT NULL default 0, -- Should items on this rota keep cycling?
16573             `active` tinyint(1) NOT NULL default 0,   -- Is this rota currently active?
16574             PRIMARY KEY (`rota_id`),
16575             CONSTRAINT `stockrotationrotas_title`
16576             UNIQUE (`title`)
16577           ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
16578         });
16579     }
16580     # Stock Rotation Stages
16581     unless (TableExists('stockrotationstages')){
16582         $dbh->do(q{
16583           CREATE TABLE `stockrotationstages` (
16584               `stage_id` int(11) auto_increment,     -- Unique stage ID
16585               `position` int(11) NOT NULL,           -- The position of this stage within its rota
16586               `rota_id` int(11) NOT NULL,            -- The rota this stage belongs to
16587               `branchcode_id` varchar(10) NOT NULL,  -- Branch this stage relates to
16588               `duration` int(11) NOT NULL default 4, -- The number of days items shoud occupy this stage
16589               PRIMARY KEY (`stage_id`),
16590               CONSTRAINT `stockrotationstages_rifk`
16591                 FOREIGN KEY (`rota_id`)
16592                 REFERENCES `stockrotationrotas` (`rota_id`)
16593                 ON UPDATE CASCADE ON DELETE CASCADE,
16594               CONSTRAINT `stockrotationstages_bifk`
16595                 FOREIGN KEY (`branchcode_id`)
16596                 REFERENCES `branches` (`branchcode`)
16597                 ON UPDATE CASCADE ON DELETE CASCADE
16598           ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
16599         });
16600     }
16601     # Stock Rotation Items
16602     unless (TableExists('stockrotationitems')){
16603         $dbh->do(q{
16604           CREATE TABLE `stockrotationitems` (
16605               `itemnumber_id` int(11) NOT NULL,         -- Itemnumber to link to a stage & rota
16606               `stage_id` int(11) NOT NULL,              -- stage ID to link the item to
16607               `indemand` tinyint(1) NOT NULL default 0, -- Should this item be skipped for rotation?
16608               `fresh` tinyint(1) NOT NULL default 0,    -- Flag showing item is only just added to rota
16609               PRIMARY KEY (itemnumber_id),
16610               CONSTRAINT `stockrotationitems_iifk`
16611                 FOREIGN KEY (`itemnumber_id`)
16612                 REFERENCES `items` (`itemnumber`)
16613                 ON UPDATE CASCADE ON DELETE CASCADE,
16614               CONSTRAINT `stockrotationitems_sifk`
16615                 FOREIGN KEY (`stage_id`)
16616                 REFERENCES `stockrotationstages` (`stage_id`)
16617                 ON UPDATE CASCADE ON DELETE CASCADE
16618           ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
16619         });
16620     }
16621     # System preferences
16622     $dbh->do(q{
16623         INSERT IGNORE INTO `systempreferences` (`variable`,`value`,`explanation`,`options`,`type`)
16624         VALUES ('StockRotation','0','If ON, enables the stock rotation module','','YesNo'),
16625                ('RotationPreventTransfers','0','If ON, prevent any transfers for items on stock rotation rotas, except for stock rotation transfers','','YesNo');
16626     });
16627     # Permissions
16628     $dbh->do(q{
16629         INSERT IGNORE INTO `userflags` (`bit`, `flag`, `flagdesc`, `defaulton`)
16630         VALUES (24, 'stockrotation', 'Manage stockrotation operations', 0);
16631     });
16632     $dbh->do(q{
16633         INSERT IGNORE INTO `permissions` (`module_bit`, `code`, `description`)
16634         VALUES (24, 'manage_rotas', 'Create, edit and delete rotas'),
16635                (24, 'manage_rota_items', 'Add and remove items from rotas');
16636     });
16637     # Notices
16638     $dbh->do(q{
16639         INSERT IGNORE INTO `letter` (`module`, `code`, `branchcode`, `name`, `is_html`, `title`, `content`, `message_transport_type`)
16640         VALUES ('circulation', 'SR_SLIP', '', 'Stock Rotation Slip', 0, 'Stockrotation Report', 'Stockrotation report for [% branch.name %]:\r\n\r\n[% IF branch.items.size %][% branch.items.size %] items to be processed for this branch.\r\n[% ELSE %]No items to be processed for this branch\r\n[% END %][% FOREACH item IN branch.items %][% IF item.reason ne \'in-demand\' %]Title: [% item.title %]\r\nAuthor: [% item.author %]\r\nCallnumber: [% item.callnumber %]\r\nLocation: [% item.location %]\r\nBarcode: [% item.barcode %]\r\nOn loan?: [% item.onloan %]\r\nStatus: [% item.reason %]\r\nCurrent Library: [% item.branch.branchname %] [% item.branch.branchcode %]\r\n\r\n[% END %][% END %]', 'email');
16641     });
16642     print "Upgrade to $DBversion done (Bug 11897 - Add Stock Rotation Feature)\n";
16643     SetVersion( $DBversion );
16644 }
16645
16646 $DBversion = '18.06.00.041';
16647 if( CheckVersion( $DBversion ) ) {
16648
16649      if( !column_exists( 'illrequests', 'price_paid' ) ) {
16650         $dbh->do(q{
16651             ALTER TABLE illrequests
16652                 ADD COLUMN price_paid varchar(20) DEFAULT NULL
16653                 AFTER cost
16654         });
16655      }
16656
16657      if( !column_exists( 'illrequestattributes', 'readonly' ) ) {
16658         $dbh->do(q{
16659             ALTER TABLE illrequestattributes
16660                 ADD COLUMN readonly tinyint(1) NOT NULL DEFAULT 1
16661                 AFTER value
16662         });
16663         $dbh->do(q{
16664             UPDATE illrequestattributes SET readonly = 1
16665         });
16666      }
16667
16668     SetVersion( $DBversion );
16669     print "Upgrade to $DBversion done (Bug 20772 - Add illrequestattributes.readonly and illrequest.price_paid columns)\n";
16670 }
16671
16672 $DBversion = '18.06.00.042';
16673 if( CheckVersion( $DBversion ) ) {
16674     $dbh->do( "alter table statistics change column ccode ccode varchar(80) default NULL" );
16675
16676     SetVersion( $DBversion );
16677     print "Upgrade to $DBversion done (Bug 21617: Make statistics.ccode longer)\n";
16678 }
16679
16680 $DBversion = "18.06.00.043";
16681 if ( CheckVersion($DBversion) ) {
16682     if ( !column_exists( 'issuingrules', 'holds_per_day' ) ) {
16683         $dbh->do(q{
16684             ALTER TABLE `issuingrules`
16685                 ADD COLUMN `holds_per_day` SMALLINT(6) DEFAULT NULL
16686                 AFTER `holds_per_record`
16687         });
16688     }
16689     print "Upgrade to $DBversion done (Bug 15486: Restrict number of holds placed by day)\n";
16690     SetVersion($DBversion);
16691 }
16692
16693 $DBversion = '18.06.00.044';
16694 if( CheckVersion( $DBversion ) ) {
16695     unless( column_exists( 'creator_batches', 'description' ) ) {
16696         $dbh->do(q|ALTER TABLE creator_batches ADD description mediumtext default NULL AFTER batch_id|);
16697     }
16698     SetVersion( $DBversion );
16699     print "Upgrade to $DBversion done (Bug 15766: Add column creator_batches.description)\n";
16700 }
16701
16702 $DBversion = '18.06.00.045';
16703 if( CheckVersion( $DBversion ) ) {
16704     $dbh->do(q(
16705         INSERT IGNORE INTO message_transports
16706         (message_attribute_id,message_transport_type,is_digest,letter_module,letter_code)
16707         VALUES
16708         (2, 'phone', 0, 'circulation', 'PREDUE'),
16709         (2, 'phone', 1, 'circulation', 'PREDUEDGST'),
16710         (4, 'phone', 0, 'reserves',    'HOLD')
16711         ));
16712     SetVersion( $DBversion );
16713     print "Upgrade to $DBversion done (Bug 21639 - Add phone transports by default)\n";
16714 }
16715
16716 $DBversion = '18.06.00.046';
16717 if( CheckVersion( $DBversion ) ) {
16718     unless (TableExists('illcomments')) {
16719         $dbh->do(q{
16720             CREATE TABLE illcomments (
16721                 illcomment_id int(11) NOT NULL AUTO_INCREMENT, -- Unique ID of the comment
16722                 illrequest_id bigint(20) unsigned NOT NULL,    -- ILL request number
16723                 borrowernumber integer DEFAULT NULL,           -- Link to the user who made the comment (could be librarian, patron or ILL partner library)
16724                 comment text DEFAULT NULL,                     -- The text of the comment
16725                 timestamp timestamp DEFAULT CURRENT_TIMESTAMP, -- Date and time when the comment was made
16726                 PRIMARY KEY  ( illcomment_id ),
16727                 CONSTRAINT illcomments_bnfk
16728                   FOREIGN KEY ( borrowernumber )
16729                   REFERENCES  borrowers  ( borrowernumber )
16730                   ON UPDATE CASCADE ON DELETE CASCADE,
16731                 CONSTRAINT illcomments_ifk
16732                   FOREIGN KEY (illrequest_id)
16733                   REFERENCES illrequests ( illrequest_id )
16734                   ON UPDATE CASCADE ON DELETE CASCADE
16735             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
16736         });
16737     }
16738
16739     SetVersion( $DBversion );
16740     print "Upgrade to $DBversion done (Bug 18591 - Add comments to ILL requests)\n";
16741 }
16742
16743 $DBversion = '18.06.00.047';
16744 if( CheckVersion( $DBversion ) ) {
16745     # insert the authorized_value_category for CONTROL_NUM_SEQUENCE
16746     $dbh->do( "INSERT IGNORE INTO authorised_value_categories values ('CONTROL_NUM_SEQUENCE');" );
16747     SetVersion( $DBversion );
16748     print "Upgrade to $DBversion done (Bug 19263 - Advanced Editor - Rancor - Add auto control number (001) widget)\n";
16749 }
16750
16751 $DBversion = '18.06.00.048';
16752 if( CheckVersion( $DBversion ) ) {
16753     $dbh->do( "ALTER TABLE stockrotationrotas CHANGE COLUMN description description text" );
16754     SetVersion( $DBversion );
16755     print "Upgrade to $DBversion done (Bug 21682 - Remove default on stockrotationrotas.description)\n";
16756 }
16757
16758 $DBversion = '18.06.00.049';
16759 if( CheckVersion( $DBversion ) ) {
16760     $dbh->do(q{
16761         UPDATE letter SET content = REPLACE(content,"item.reason ne \'in-demand\'","item.reason != \'in-demand\'")
16762         WHERE code="SR_SLIP";
16763     });
16764     print "Upgrade to $DBversion done (Bug 21656 - Stock Rotation Notice, Template Toolkit Syntax Correction)\n";
16765     SetVersion( $DBversion );
16766 }
16767
16768 $DBversion = '18.06.00.050';
16769 if( CheckVersion( $DBversion ) ) {
16770     $dbh->do(q{
16771         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`) VALUES ('OpacHiddenItemsExceptions','',NULL,'List of borrower categories, separated by |, that can see items otherwise hidden by OpacHiddenItems','Textarea');
16772     });
16773     print "Upgrade to $DBversion done (Bug 14385 - Add OpacHiddenItemExceptions)\n";
16774     SetVersion( $DBversion );
16775 }
16776
16777 $DBversion = '18.06.00.051';
16778 if( CheckVersion( $DBversion ) ) {
16779     $dbh->do(q{
16780         INSERT IGNORE INTO `systempreferences` (`variable`, `value`, `options`, `explanation`, `type`) VALUES
16781         ('AdlibrisCoversEnabled', '0', NULL, 'Display cover images in OPAC results and detail listing from Swedish retailer Adlibris.','YesNo'),
16782         ('AdlibrisCoversURL', 'http://www.adlibris.com/se/organisationer/showimagesafe.aspx', NULL, 'Base URL for Adlibris cover image web service.', 'Free');
16783     });
16784     print "Upgrade to $DBversion done (Bug 8630 - Add covers from AdLibris to the OPAC and Intranet)\n";
16785     SetVersion( $DBversion );
16786 }
16787
16788 $DBversion = '18.06.00.052';
16789 if( CheckVersion( $DBversion ) ) {
16790     $dbh->do(q{
16791         INSERT IGNORE INTO permissions (module_bit, code, description) VALUES
16792            ( 3, 'manage_sysprefs', 'Manage global system preferences'),
16793            ( 3, 'manage_libraries', 'Manage libraries and library groups'),
16794            ( 3, 'manage_itemtypes', 'Manage item types'),
16795            ( 3, 'manage_auth_values', 'Manage authorized values'),
16796            ( 3, 'manage_patron_categories', 'Manage patron categories'),
16797            ( 3, 'manage_patron_attributes', 'Manage extended patron attributes'),
16798            ( 3, 'manage_transfers', 'Manage library transfer limits and transport cost matrix'),
16799            ( 3, 'manage_item_circ_alerts', 'Manage item circulation alerts'),
16800            ( 3, 'manage_cities', 'Manage cities and towns'),
16801            ( 3, 'manage_marc_frameworks', 'Manage MARC bibliographic and authority frameworks'),
16802            ( 3, 'manage_keywords2koha_mappings', 'Manage keywords to Koha mappings'),
16803            ( 3, 'manage_classifications', 'Manage classification sources'),
16804            ( 3, 'manage_matching_rules', 'Manage record matching rules'),
16805            ( 3, 'manage_oai_sets', 'Manage OAI sets'),
16806            ( 3, 'manage_item_search_fields', 'Manage item search fields'),
16807            ( 3, 'manage_search_engine_config', 'Manage search engine configuration'),
16808            ( 3, 'manage_search_targets', 'Manage Z39.50 and SRU server configuration'),
16809            ( 3, 'manage_didyoumean', 'Manage Did you mean? configuration'),
16810            ( 3, 'manage_column_config', 'Manage column configuration'),
16811            ( 3, 'manage_sms_providers', 'Manage SMS cellular providers'),
16812            ( 3, 'manage_audio_alerts', 'Manage audio alerts'),
16813            ( 3, 'manage_usage_stats', 'Manage usage statistics settings');
16814     });
16815     $dbh->do(q{
16816         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16817             SELECT borrowernumber, 3, 'manage_sysprefs' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16818     });
16819     $dbh->do(q{
16820         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16821             SELECT borrowernumber, 3, 'manage_libraries' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16822     });
16823     $dbh->do(q{
16824         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16825             SELECT borrowernumber, 3, 'manage_itemtypes' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16826     });
16827     $dbh->do(q{
16828         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16829             SELECT borrowernumber, 3, 'manage_auth_values' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16830     });
16831     $dbh->do(q{
16832         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16833             SELECT borrowernumber, 3, 'manage_patron_categories' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16834     });
16835     $dbh->do(q{
16836         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16837             SELECT borrowernumber, 3, 'manage_patron_attributes' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16838     });
16839     $dbh->do(q{
16840         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16841             SELECT borrowernumber, 3, 'manage_transfers' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16842     });
16843     $dbh->do(q{
16844         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16845             SELECT borrowernumber, 3, 'manage_item_circ_alerts' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16846     });
16847     $dbh->do(q{
16848         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16849             SELECT borrowernumber, 3, 'manage_cities' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16850     });
16851     $dbh->do(q{
16852         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16853             SELECT borrowernumber, 3, 'manage_marc_frameworks' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16854     });
16855     $dbh->do(q{
16856         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16857             SELECT borrowernumber, 3, 'manage_keywords2koha_mappings' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16858     });
16859     $dbh->do(q{
16860         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16861             SELECT borrowernumber, 3, 'manage_classifications' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16862     });
16863     $dbh->do(q{
16864         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16865             SELECT borrowernumber, 3, 'manage_matching_rules' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16866     });
16867     $dbh->do(q{
16868         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16869             SELECT borrowernumber, 3, 'manage_oai_sets' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16870     });
16871     $dbh->do(q{
16872         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16873             SELECT borrowernumber, 3, 'manage_item_search_fields' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16874     });
16875     $dbh->do(q{
16876         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16877             SELECT borrowernumber, 3, 'manage_search_engine_config' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16878     });
16879     $dbh->do(q{
16880         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16881             SELECT borrowernumber, 3, 'manage_search_targets' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16882     });
16883     $dbh->do(q{
16884         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16885             SELECT borrowernumber, 3, 'manage_didyoumean' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16886     });
16887     $dbh->do(q{
16888         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16889             SELECT borrowernumber, 3, 'manage_column_config' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16890     });
16891     $dbh->do(q{
16892         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16893             SELECT borrowernumber, 3, 'manage_sms_providers' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16894     });
16895     $dbh->do(q{
16896         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16897             SELECT borrowernumber, 3, 'manage_audio_alerts' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16898     });
16899     $dbh->do(q{
16900         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16901             SELECT borrowernumber, 3, 'manage_usage_stats' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM user_permissions WHERE code = 'parameters_remaining_permissions');
16902     });
16903     $dbh->do(q{
16904         INSERT INTO user_permissions (borrowernumber, module_bit, code)
16905             SELECT borrowernumber, 3, 'manage_item_search_fields' FROM borrowers WHERE flags & (1 << 2);
16906     });
16907     SetVersion( $DBversion );
16908     print "Upgrade to $DBversion done (Bug 14391: Add granular permissions to the administration module)\n";
16909 }
16910
16911 $DBversion = '18.06.00.053';
16912 if( CheckVersion( $DBversion ) ) {
16913     $dbh->do( "INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES ('ItemsDeniedRenewal','','','This syspref allows to define custom rules for denying renewal of specific items.','Textarea')" );
16914     SetVersion( $DBversion );
16915     print "Upgrade to $DBversion done (Bug 15494 - Block renewals by arbitrary item values)\n";
16916 }
16917
16918 $DBversion = '18.06.00.054';
16919 if( CheckVersion( $DBversion ) ) {
16920     if( !column_exists( 'search_field', 'weight' ) ) {
16921         $dbh->do( "ALTER TABLE `search_field` ADD COLUMN `weight` decimal(5,2) DEFAULT NULL AFTER `type`" );
16922     }
16923     SetVersion( $DBversion );
16924     print "Upgrade to $DBversion done (Bug 18316 - Add column search_field.weight)\n";
16925 }
16926
16927 $DBversion = '18.06.00.055';
16928 if( CheckVersion( $DBversion ) ) {
16929     unless( column_exists( 'issuingrules', 'note' ) ) {
16930         $dbh->do(q|ALTER TABLE `issuingrules` ADD `note` varchar(100) default NULL AFTER `article_requests`|);
16931     }
16932     SetVersion( $DBversion );
16933     print "Upgrade to $DBversion done (Bug 12365: Add column issuingrules.note)\n";
16934 }
16935
16936 $DBversion = '18.06.00.056';
16937 if( CheckVersion( $DBversion ) ) {
16938
16939     # All attributes we're potentially interested in
16940     my $ff_req = $dbh->selectall_arrayref(
16941         'SELECT a.illrequest_id, a.type, a.value '.
16942         'FROM illrequests r, illrequestattributes a '.
16943         'WHERE r.illrequest_id = a.illrequest_id '.
16944         'AND r.backend = "FreeForm"',
16945         { Slice => {} }
16946     );
16947
16948     # Before we go any further, identify whether we've done
16949     # this before, we test for the presence of "container_title"
16950     # We stop as soon as we find one
16951     foreach my $req(@{$ff_req}) {
16952         if ($req->{type} eq 'container_title') {
16953             warn "Upgrade already carried out";
16954         }
16955     }
16956
16957     # Transform into a hashref with the key of the request ID
16958     my $requests = {};
16959     foreach my $request(@{$ff_req}) {
16960         my $id = $request->{illrequest_id};
16961         if (!exists $requests->{$id}) {
16962             $requests->{$id} = {};
16963         }
16964         $requests->{$id}->{$request->{type}} = $request->{value};
16965     }
16966
16967     # Transform any article requests
16968     my $transformed = {};
16969     foreach my $id(keys %{$requests}) {
16970         if (lc($requests->{$id}->{type}) eq 'article') {
16971             $transformed->{$id} = $requests->{$id};
16972             $transformed->{$id}->{type} = 'article';
16973             $transformed->{$id}->{container_title} = $transformed->{$id}->{title}
16974                 if defined $transformed->{$id}->{title} &&
16975                     length $transformed->{$id}->{title} > 0;
16976             $transformed->{$id}->{title} = $transformed->{$id}->{article_title}
16977                 if defined $transformed->{$id}->{article_title} &&
16978                     length $transformed->{$id}->{article_title} > 0;
16979             $transformed->{$id}->{author} = $transformed->{$id}->{article_author}
16980                 if defined $transformed->{$id}->{article_author} &&
16981                     length $transformed->{$id}->{article_author} > 0;
16982             $transformed->{$id}->{pages} = $transformed->{$id}->{article_pages}
16983                 if defined $transformed->{$id}->{article_pages} &&
16984                     length $transformed->{$id}->{article_pages} > 0;
16985         }
16986     }
16987
16988     # Now write back the transformed data
16989     # Rather than selectively replace, we just remove all attributes we've
16990     # transformed and re-write them
16991     my @changed = keys %{$transformed};
16992     my $changed_str = join(',', @changed);
16993
16994     if (scalar @changed > 0) {
16995         my ($raise_error) = $dbh->{RaiseError};
16996         $dbh->{AutoCommit} = 0;
16997         $dbh->{RaiseError} = 1;
16998         eval {
16999             my $del = $dbh->do(
17000                 "DELETE FROM illrequestattributes ".
17001                 "WHERE illrequest_id IN ($changed_str)"
17002             );
17003             foreach my $reqid(keys %{$transformed}) {
17004                 my $attr = $transformed->{$reqid};
17005                 foreach my $key(keys %{$attr}) {
17006                     my $sth = $dbh->prepare(
17007                         'INSERT INTO illrequestattributes '.
17008                         '(illrequest_id, type, value) '.
17009                         'VALUES '.
17010                         '(?, ?, ?)'
17011                     );
17012                     $sth->execute(
17013                         $reqid,
17014                         $key,
17015                         $attr->{$key}
17016                     );
17017                 }
17018             }
17019             $dbh->commit;
17020         };
17021
17022         if ($@) {
17023             warn "Upgrade to $DBversion failed: $@\n";
17024             eval { $dbh->rollback };
17025         } else {
17026             SetVersion( $DBversion );
17027             print "Upgrade to $DBversion done (Bug 21079 - Unify metadata schema across backends)\n";
17028         }
17029
17030         $dbh->{AutoCommit} = 1;
17031         $dbh->{RaiseError} = $raise_error;
17032     }
17033
17034 }
17035
17036 $DBversion = '18.06.00.057';
17037 if( CheckVersion( $DBversion ) ) {
17038     # System preferences
17039     $dbh->do(q{
17040         INSERT IGNORE INTO `systempreferences` (`variable`,`value`,`explanation`,`options`,`type`)
17041         VALUES ('showLastPatron','0','','If ON, enables the last patron feature in the intranet','YesNo');
17042     });
17043     SetVersion( $DBversion );
17044     print "Upgrade to $DBversion done (Bug 20312 - Add showLastPatron systempreference)\n";
17045 }
17046
17047 $DBversion = '18.06.00.058';
17048 if( CheckVersion( $DBversion ) ) {
17049     $dbh->do(q{
17050         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`, `type`) VALUES
17051         ('MarcFieldForCreatorId','',NULL,'Where to store the borrowernumber of the record''s creator','Free'),
17052         ('MarcFieldForCreatorName','',NULL,'Where to store the name of the record''s creator','Free'),
17053         ('MarcFieldForModifierId','',NULL,'Where to store the borrowernumber of the record''s last modifier','Free'),
17054         ('MarcFieldForModifierName','',NULL,'Where to store the name of the record''s last modifier','Free')
17055     });
17056
17057     SetVersion( $DBversion );
17058     print "Upgrade to $DBversion done (Bug 19349 - Add system preferences MarcFieldForCreatorId, MarcFieldForCreatorName, MarcFieldForModifierId, MarcFieldForModifierName)\n";
17059 }
17060
17061 $DBversion = '18.06.00.059';
17062 if( CheckVersion( $DBversion ) ) {
17063     $dbh->do(q{
17064         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type`) VALUES  ('EmailSMSSendDriverFromAddress', '', '', 'Email SMS send driver from address override', 'Free');
17065     });
17066     SetVersion( $DBversion );
17067     print "Upgrade to $DBversion done (Bug 20356 - Add EmailSMSSendDriverFromAddress system preference)\n";
17068 }
17069
17070 $DBversion = '18.06.00.060';
17071 if( CheckVersion( $DBversion ) ) {
17072     unless( TableExists( 'class_split_rules' ) ) {
17073         $dbh->do(q|
17074             CREATE TABLE class_split_rules (
17075               class_split_rule varchar(10) NOT NULL default '',
17076               description LONGTEXT,
17077               split_routine varchar(30) NOT NULL default '',
17078               split_regex varchar(255) NOT NULL default '',
17079               PRIMARY KEY (class_split_rule),
17080               UNIQUE KEY class_split_rule_idx (class_split_rule)
17081             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci
17082         |);
17083
17084         $dbh->do(q|
17085             ALTER TABLE class_sources
17086             ADD COLUMN class_split_rule varchar(10) NOT NULL default ''
17087             AFTER class_sort_rule
17088         |);
17089
17090         $dbh->do(q|
17091             UPDATE class_sources
17092             SET class_split_rule = class_sort_rule
17093         |);
17094
17095         $dbh->do(q|
17096             UPDATE class_sources
17097             SET class_split_rule = 'generic'
17098             WHERE class_split_rule NOT IN('dewey', 'generic', 'lcc')
17099         |);
17100
17101         $dbh->do(q|
17102             INSERT INTO class_split_rules(class_split_rule, description, split_routine)
17103             VALUES
17104             ('dewey', 'Default sorting rules for DDC', 'Dewey'),
17105             ('lcc', 'Default sorting rules for LCC', 'LCC'),
17106             ('generic', 'Generic call number sorting rules', 'Generic')
17107         |);
17108
17109         $dbh->do(q|
17110             ALTER TABLE class_sources
17111             ADD CONSTRAINT class_source_ibfk_2 FOREIGN KEY (class_split_rule)
17112             REFERENCES class_split_rules (class_split_rule)
17113         |);
17114     }
17115
17116     SetVersion( $DBversion );
17117     print "Upgrade to $DBversion done (Bug 15836 - Add class_sort_rules.split_routine and split_regex)\n";
17118 }
17119
17120 $DBversion = '18.06.00.061';
17121 if ( CheckVersion($DBversion) ) {
17122     $dbh->do(q{
17123         INSERT IGNORE INTO `systempreferences` (`variable`,`value`,`explanation`,`options`,`type`) VALUES
17124         ('ElasticsearchIndexStatus_biblios', '0', 'Biblios index status', NULL, NULL),
17125         ('ElasticsearchIndexStatus_authorities', '0', 'Authorities index status', NULL, NULL)
17126     });
17127     SetVersion($DBversion);
17128     print "Upgrade to $DBversion done (Bug 19893 - Add elasticsearch index status preferences)\n";
17129 }
17130
17131 $DBversion = '18.06.00.062';
17132 if( CheckVersion( $DBversion ) ) {
17133     $dbh->do( "INSERT IGNORE INTO authorised_value_categories (category_name) VALUES ('PA_CLASS');");
17134     SetVersion( $DBversion );
17135     print "Upgrade to $DBversion done (Bug 21730: Add new authorised value category PA_CLASS)\n";
17136 }
17137
17138 $DBversion = '18.11.00.000';
17139 if( CheckVersion( $DBversion ) ) {
17140     SetVersion( $DBversion );
17141     print "Upgrade to $DBversion done (18.11.00 release)\n";
17142 }
17143
17144 $DBversion = '18.12.00.000';
17145 if( CheckVersion( $DBversion ) ) {
17146     SetVersion( $DBversion );
17147     print "Upgrade to $DBversion done (...and Steven!)\n";
17148 }
17149
17150 $DBversion = '18.12.00.001';
17151 if( CheckVersion( $DBversion ) ) {
17152     $dbh->do(q{
17153         UPDATE permissions SET code = 'manage_didyoumean' WHERE code = 'manage_didyouean';
17154     });
17155     $dbh->do(q{
17156         UPDATE user_permissions SET code = 'manage_didyoumean' WHERE code = 'manage_didyouean';
17157     });
17158     SetVersion( $DBversion );
17159     print "Upgrade to $DBversion (Bug 21961 - Fix typo in manage_didyoumean permission)\n";
17160 }
17161
17162 $DBversion = '18.12.00.002';
17163 if( CheckVersion( $DBversion ) ) {
17164     my $sth = $dbh->prepare(q|SELECT * FROM INFORMATION_SCHEMA.TABLE_CONSTRAINTS WHERE CONSTRAINT_NAME='accountlines_ibfk_1'|);
17165     $sth->execute;
17166     if ($sth->fetchrow_hashref) {
17167         $dbh->do(q|
17168             ALTER TABLE accountlines DROP FOREIGN KEY accountlines_ibfk_1;
17169         |);
17170         $dbh->do(q|
17171             ALTER TABLE accountlines CHANGE COLUMN borrowernumber borrowernumber INT(11) DEFAULT NULL;
17172         |);
17173         $dbh->do(q|
17174             ALTER TABLE accountlines ADD CONSTRAINT accountlines_ibfk_borrowers FOREIGN KEY (borrowernumber) REFERENCES borrowers (borrowernumber) ON DELETE SET NULL ON UPDATE CASCADE;
17175         |);
17176     }
17177     SetVersion( $DBversion );
17178     print "Upgrade to $DBversion done (Bug 21065 - Set ON DELETE SET NULL on accountlines.borrowernumber)\n";
17179 }
17180
17181 $DBversion = '18.12.00.003';
17182 if( CheckVersion( $DBversion ) ) {
17183     # On a new installation the class_sources.sql will have failed, so we need to add all missing data
17184     my( $sort_cnt ) = $dbh->selectrow_array( q|SELECT COUNT(*) FROM class_sort_rules|);
17185     if( !$sort_cnt ) {
17186         $dbh->do(q|INSERT INTO `class_sort_rules` (`class_sort_rule`, `description`, `sort_routine`) VALUES
17187                                ('dewey', 'Default filing rules for DDC', 'Dewey'),
17188                                ('lcc', 'Default filing rules for LCC', 'LCC'),
17189                                ('generic', 'Generic call number filing rules', 'Generic')
17190             |);
17191     }
17192
17193     my ( $split_cnt ) = $dbh->selectrow_array( q|SELECT COUNT(*) FROM class_split_rules|);
17194     if( !$split_cnt ) {
17195         $dbh->do(q|INSERT INTO `class_split_rules` (`class_split_rule`, `description`, `split_routine`) VALUES
17196                                ('dewey', 'Default splitting rules for DDC', 'Dewey'),
17197                                ('lcc', 'Default splitting rules for LCC', 'LCC'),
17198                                ('generic', 'Generic call number splitting rules', 'Generic')
17199             |);
17200     }
17201
17202     my( $source_cnt ) = $dbh->selectrow_array( q|SELECT COUNT(*) FROM class_sources|);
17203     if( !$source_cnt ) {
17204         $dbh->do(q|INSERT INTO `class_sources` (`cn_source`, `description`, `used`, `class_sort_rule`, `class_split_rule`) VALUES
17205                             ('ddc', 'Dewey Decimal Classification', 1, 'dewey', 'dewey'),
17206                             ('lcc', 'Library of Congress Classification', 1, 'lcc', 'lcc'),
17207                             ('udc', 'Universal Decimal Classification', 0, 'generic', 'generic'),
17208                             ('sudocs', 'SuDoc Classification (U.S. GPO)', 0, 'generic', 'generic'),
17209                             ('anscr', 'ANSCR (Sound Recordings)', 0, 'generic', 'generic'),
17210                             ('z', 'Other/Generic Classification Scheme', 0, 'generic', 'generic')
17211             |);
17212
17213     }
17214
17215     SetVersion( $DBversion );
17216     print "Upgrade to $DBversion done (Bug 22024 - Add missing splitting rule definitions)\n";
17217 }
17218
17219 $DBversion = '18.12.00.004';
17220 if( CheckVersion( $DBversion ) ) {
17221     if( !column_exists( 'accountlines', 'branchcode' ) ) {
17222         $dbh->do("ALTER TABLE accountlines ADD branchcode VARCHAR( 10 ) NULL DEFAULT NULL AFTER manager_id");
17223         $dbh->do("ALTER TABLE accountlines ADD CONSTRAINT accountlines_ibfk_branches FOREIGN KEY (branchcode) REFERENCES branches (branchcode) ON DELETE SET NULL ON UPDATE CASCADE");
17224     }
17225     SetVersion( $DBversion );
17226     print "Upgrade to $DBversion done (Bug 19066 - Add branchcode to accountlines)\n";
17227 }
17228
17229 $DBversion = '18.12.00.005';
17230 if( CheckVersion( $DBversion ) ) {
17231     $dbh->do(q{
17232         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
17233         ('OverDriveUsername','cardnumber','cardnumber|userid','Which patron information should be passed as OverDrive username','Choice')
17234     });
17235     SetVersion( $DBversion );
17236     print "Upgrade to $DBversion done (Bug 22030: Add OverDriveUsername syspref)\n";
17237 }
17238
17239 $DBversion = '18.12.00.006';
17240 if( CheckVersion( $DBversion ) ) {
17241     $dbh->do(q{
17242         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES
17243         ('AccountAutoReconcile','0','If enabled, patron balances will get reconciled automatically on each transaction.',NULL,'YesNo');
17244     });
17245     SetVersion($DBversion);
17246     print "Upgrade to $DBversion done (Bug 21915 - Add a way to automatically reconcile balance for patrons)\n";
17247 }
17248
17249 $DBversion = '18.12.00.007';
17250 if( CheckVersion( $DBversion ) ) {
17251     if( column_exists( 'issuingrules', 'chargename' ) ) {
17252         $dbh->do( "ALTER TABLE issuingrules DROP chargename" );
17253     }
17254     SetVersion( $DBversion );
17255     print "Upgrade to $DBversion done (Bug 21753: Drop chargename from issuingrules )\n";
17256 }
17257
17258 $DBversion = '18.12.00.008';
17259 if( CheckVersion( $DBversion ) ) {
17260     if( !column_exists( 'subscription', 'mana_id' ) ) {
17261         $dbh->do( "ALTER TABLE subscription ADD mana_id int(11) NULL DEFAULT NULL" );
17262     }
17263
17264     if( !column_exists( 'saved_sql', 'mana_id' ) ) {
17265         $dbh->do( "ALTER TABLE saved_sql ADD mana_id int(11) NULL DEFAULT NULL" );
17266     }
17267     $dbh->do(q{
17268         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
17269         ('Mana','2',NULL,'request to Mana Webservice. Mana centralize common information between other Koha to facilitate the creation of new subscriptions, vendors, report queries etc... You can search, share, import and comment the content of Mana.','YesNo');
17270     });
17271     $dbh->do(q{
17272         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
17273         ('AutoShareWithMana','','','defines datas automatically shared with mana','multiple');
17274     });
17275     $dbh->do(q{
17276         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
17277         ('ManaToken','',NULL,'Security token used for authentication on Mana KB service (anti spam)','Textarea');
17278     });
17279     SetVersion( $DBversion );
17280     print "Upgrade to $DBversion done (Bug 17047 - Mana knowledge base)\n";
17281 }
17282
17283 $DBversion = '18.12.00.009';
17284 if( CheckVersion( $DBversion ) ) {
17285     $dbh->do(q{
17286         INSERT IGNORE INTO systempreferences (variable, value, options, explanation, type) VALUES ('FallbackToSMSIfNoEmail', 0, 'Enable|Disable', 'Send messages by SMS if no patron email is defined', 'YesNo');
17287     });
17288     SetVersion( $DBversion );
17289     print "Upgrade to $DBversion done (Bug 21241 - Add FallbackToSMSIfNoEmail syspref )\n";
17290 }
17291
17292 $DBversion = '18.12.00.010';
17293 if( CheckVersion( $DBversion ) ) {
17294     $dbh->do(q{
17295         INSERT IGNORE INTO systempreferences
17296             ( variable, value, options, explanation, type )
17297         VALUES
17298             ('RESTPublicAPI','1',NULL,'If enabled, the REST API will expose the /public endpoints.','YesNo')
17299     });
17300
17301     # Always end with this (adjust the bug info)
17302     SetVersion( $DBversion );
17303     print "Upgrade to $DBversion done (Bug 22061 - Add a /public namespace that can be switched on/off)\n";
17304 }
17305
17306 $DBversion = '18.12.00.011';
17307 if( CheckVersion( $DBversion ) ) {
17308     if ( column_exists( 'biblio_metadata', 'marcflavour' ) ) {
17309         $dbh->do(q{
17310             ALTER TABLE biblio_metadata
17311                 CHANGE COLUMN marcflavour `schema` VARCHAR(16)
17312         });
17313     }
17314     if ( column_exists( 'deletedbiblio_metadata', 'marcflavour' ) ) {
17315         $dbh->do(q{
17316             ALTER TABLE deletedbiblio_metadata
17317                 CHANGE COLUMN marcflavour `schema` VARCHAR(16)
17318         });
17319     }
17320     SetVersion( $DBversion );
17321     print "Upgrade to $DBversion done (Bug 22155 - biblio_metadata.marcflavour should be renamed 'schema')\n";
17322 }
17323
17324 $DBversion = '18.12.00.012';
17325 if( CheckVersion( $DBversion ) ) {
17326     $dbh->do(q{
17327         INSERT IGNORE INTO systempreferences
17328             (variable, value, options, explanation, type )
17329         VALUES
17330             ('RESTBasicAuth','0',NULL,'If enabled, Basic authentication is enabled for the REST API.','YesNo')
17331     });
17332     SetVersion( $DBversion );
17333     print "Upgrade to $DBversion done (Bug 22132 - Add Basic authentication)\n";
17334 }
17335
17336 $DBversion = '18.12.00.013';
17337 if( CheckVersion( $DBversion ) ) {
17338     $dbh->do(q{
17339         INSERT IGNORE INTO permissions (module_bit, code, description) VALUES ( 3, 'manage_mana', 'Manage Mana KB content sharing');
17340     });
17341     SetVersion( $DBversion );
17342     print "Upgrade to $DBversion done (Bug 22198 - Add ghranular permission setting for Mana KB)\n";
17343 }
17344
17345 $DBversion = '18.12.00.014';
17346 if( CheckVersion( $DBversion ) ) {
17347     unless( foreign_key_exists( 'messages', 'messages_borrowernumber' ) ) {
17348         $dbh->do(q|
17349             DELETE m FROM messages m
17350             LEFT JOIN borrowers b ON m.borrowernumber=b.borrowernumber
17351             WHERE b.borrowernumber IS NULL
17352         |);
17353         $dbh->do(q|
17354             ALTER TABLE messages
17355             ADD CONSTRAINT messages_borrowernumber
17356             FOREIGN KEY (borrowernumber) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE
17357         |);
17358     }
17359     SetVersion( $DBversion );
17360     print "Upgrade to $DBversion done (Bug 13515 - Add a FOREIGN KEY constaint on messages.borrowernumber)\n";
17361 }
17362
17363 $DBversion = '18.12.00.015';
17364 if( CheckVersion( $DBversion ) ) {
17365     $dbh->do( "UPDATE action_logs SET info = REPLACE(info,'cardnumber_replaced','cardnumber'), timestamp = timestamp WHERE module='MEMBERS' AND action='MODIFY'" );
17366     $dbh->do( "UPDATE action_logs SET info = REPLACE(info,'previous_cardnumber','before'), timestamp = timestamp WHERE module='MEMBERS' AND action='MODIFY'" );
17367     $dbh->do( "UPDATE action_logs SET info = REPLACE(info,'new_cardnumber','after'), timestamp = timestamp WHERE module='MEMBERS' AND action='MODIFY'" );
17368
17369     SetVersion( $DBversion );
17370     print "Upgrade to $DBversion done (Bug 3820 - Update patron modification logs)\n";
17371 }
17372
17373 $DBversion = '18.12.00.016';
17374 if( CheckVersion( $DBversion ) ) {
17375
17376     if ( !column_exists( 'illrequests', 'status_alias' ) ) {
17377         # Fresh upgrade, just add the column and constraint
17378         $dbh->do( "ALTER TABLE illrequests ADD COLUMN status_alias varchar(80) DEFAULT NULL AFTER status" );
17379     } else {
17380         # Migrate all existing foreign keys from referencing authorised_values.id
17381         # to referencing authorised_values.authorised_value
17382         # First remove the foreign key constraint and index
17383         if ( foreign_key_exists( 'illrequests', 'illrequests_safk' ) ) {
17384             $dbh->do( "ALTER TABLE illrequests DROP FOREIGN KEY illrequests_safk");
17385         }
17386         if ( index_exists( 'illrequests', 'illrequests_safk' ) ) {
17387             $dbh->do( "DROP INDEX illrequests_safk ON illrequests" );
17388         }
17389         # Now change the illrequests.status_alias column definition from int to varchar
17390         $dbh->do( "ALTER TABLE illrequests MODIFY COLUMN status_alias varchar(80)" );
17391         # Now replace all references to authorised_values.id with their
17392         # corresponding authorised_values.authorised_value
17393         my $sth = $dbh->prepare( "SELECT illrequest_id, status_alias FROM illrequests WHERE status_alias IS NOT NULL" );
17394         $sth->execute();
17395         while (my @row = $sth->fetchrow_array()) {
17396             my $r_id = $row[0];
17397             my $av_id = $row[1];
17398             # Get the authorised value's authorised_value value
17399             my ($av_val) = $dbh->selectrow_array( "SELECT authorised_value FROM authorised_values WHERE id = ?", {}, $av_id );
17400             # Now update illrequests.status_alias
17401             if ($av_val) {
17402                 $dbh->do( "UPDATE illrequests SET status_alias = ? WHERE illrequest_id = ?", {}, ($av_val, $r_id) );
17403             }
17404         }
17405     }
17406     if ( !foreign_key_exists( 'illrequests', 'illrequests_safk' ) ) {
17407         $dbh->do( "ALTER TABLE illrequests ADD CONSTRAINT illrequests_safk FOREIGN KEY (status_alias) REFERENCES authorised_values(authorised_value) ON UPDATE CASCADE ON DELETE SET NULL" );
17408     }
17409     $dbh->do( "INSERT IGNORE INTO authorised_value_categories SET category_name = 'ILLSTATUS'");
17410
17411     SetVersion( $DBversion );
17412     print "Upgrade to $DBversion done (Bug 20581 - Allow manual selection of custom ILL request statuses)\n";
17413 }
17414
17415 $DBversion = '18.12.00.017';
17416 if( CheckVersion( $DBversion ) ) {
17417     $dbh->do(q{
17418         INSERT IGNORE INTO account_offset_types ( type ) VALUES ( 'fine_increase' ), ( 'fine_decrease' );
17419     });
17420     $dbh->do(q{
17421         UPDATE account_offsets SET type = 'fine_increase' WHERE type = 'Fine Update' AND amount > 0;
17422     });
17423     $dbh->do(q{
17424         UPDATE account_offsets SET type = 'fine_decrease' WHERE type = 'Fine Update' AND amount < 0;
17425     });
17426
17427     $dbh->do(q{
17428         DELETE FROM account_offset_types WHERE type = 'Fine Update';
17429     });
17430     SetVersion( $DBversion );
17431     print "Upgrade to $DBversion done (Bug 21747 - Update account_offset_types to include 'fine_increase' and 'fine_decrease')\n";
17432 }
17433
17434 $DBversion = '18.12.00.018';
17435 if( CheckVersion( $DBversion ) ) {
17436   $dbh->do( "UPDATE `search_field` SET `name` = 'date-of-publication', `label` = 'date-of-publication' WHERE `name` = 'pubdate'" );
17437   $dbh->do( "UPDATE `search_field` SET `name` = 'title-series', `label` = 'title-series' WHERE `name` = 'se'" );
17438   $dbh->do( "UPDATE `search_field` SET `name` = 'identifier-standard', `label` = 'identifier-standard' WHERE `name` = 'identifier-standard'" );
17439   $dbh->do( "UPDATE `search_field` SET `name` = 'author', `label` = 'author' WHERE `name` = 'author'" );
17440   $dbh->do( "UPDATE `search_field` SET `name` = 'control-number', `label` = 'control-number' WHERE `name` = 'control-number'" );
17441   $dbh->do( "UPDATE `search_field` SET `name` = 'place-of-publication', `label` = 'place-of-publication' WHERE `name` = 'place'" );
17442   $dbh->do( "UPDATE `search_field` SET `name` = 'date-of-acquisition', `label` = 'date-of-acquisition' WHERE `name` = 'acqdate'" );
17443   $dbh->do( "UPDATE `search_field` SET `name` = 'isbn', `label` = 'isbn' WHERE `name` = 'isbn'" );
17444   $dbh->do( "UPDATE `search_field` SET `name` = 'koha-auth-number', `label` = 'koha-auth-number' WHERE `name` = 'an'" );
17445   $dbh->do( "UPDATE `search_field` SET `name` = 'subject', `label` = 'subject' WHERE `name` = 'subject'" );
17446   $dbh->do( "UPDATE `search_field` SET `name` = 'publisher', `label` = 'publisher' WHERE `name` = 'publisher'" );
17447   $dbh->do( "UPDATE `search_field` SET `name` = 'record-source', `label` = 'record-source' WHERE `name` = 'record-source'" );
17448   $dbh->do( "UPDATE `search_field` SET `name` = 'title', `label` = 'title' WHERE `name` = 'title'" );
17449   $dbh->do( "UPDATE `search_field` SET `name` = 'local-classification', `label` = 'local-classification' WHERE `name` = 'local-classification'" );
17450   $dbh->do( "UPDATE `search_field` SET `name` = 'bib-level', `label` = 'bib-level' WHERE `name` = 'bib-level'" );
17451   $dbh->do( "UPDATE `search_field` SET `name` = 'microform-generation', `label` = 'microform-generation' WHERE `name` = 'microform-generation'" );
17452   $dbh->do( "UPDATE `search_field` SET `name` = 'material-type', `label` = 'material-type' WHERE `name` = 'material-type'" );
17453   $dbh->do( "UPDATE `search_field` SET `name` = 'bgf-number', `label` = 'bgf-number' WHERE `name` = 'bgf-number'" );
17454   $dbh->do( "UPDATE `search_field` SET `name` = 'number-db', `label` = 'number-db' WHERE `name` = 'number-db'" );
17455   $dbh->do( "UPDATE `search_field` SET `name` = 'number-natl-biblio', `label` = 'number-natl-biblio' WHERE `name` = 'number-natl-biblio'" );
17456   $dbh->do( "UPDATE `search_field` SET `name` = 'number-legal-deposit', `label` = 'number-legal-deposit' WHERE `name` = 'number-legal-deposit'" );
17457   $dbh->do( "UPDATE `search_field` SET `name` = 'issn', `label` = 'issn' WHERE `name` = 'issn'" );
17458   $dbh->do( "UPDATE `search_field` SET `name` = 'local-number', `label` = 'local-number' WHERE `name` = 'local-number'" );
17459   $dbh->do( "UPDATE `search_field` SET `name` = 'suppress', `label` = 'supress' WHERE `name` = 'suppress'" );
17460   $dbh->do( "UPDATE `search_field` SET `name` = 'bnb-card-number', `label` = 'bnb-card-number' WHERE `name` = 'bnb-card-number'" );
17461   $dbh->do( "UPDATE `search_field` SET `name` = 'date/time-last-modified', `label` = 'date/time-last-modified' WHERE `name` = 'date-time-last-modified'" );
17462   $dbh->do( "DELETE FROM `search_field` WHERE `name` = 'lc-cardnumber'" );
17463   $dbh->do( "DELETE FROM `search_marc_map` WHERE `id` NOT IN(SELECT `search_marc_map_id` FROM `search_marc_to_field`)" );
17464   SetVersion( $DBversion );
17465   print "Upgrade to $DBversion done (Bug 19575 - Use canonical field names and resolve aliased fields)\n";
17466 }
17467
17468 $DBversion = '18.12.00.019';
17469 if( CheckVersion( $DBversion ) ) {
17470     $dbh->do(q{
17471         INSERT IGNORE INTO account_offset_types ( type ) VALUES ( 'Reserve Fee' );
17472     });
17473
17474     SetVersion( $DBversion );
17475     print "Upgrade to $DBversion done (Bug 21728 - Add 'Reserve Fee' to the account_offset_types table if missing)\n";
17476 }
17477
17478 $DBversion = '18.12.00.020';
17479 if( CheckVersion( $DBversion ) ) {
17480     if ( TableExists( 'branch_borrower_circ_rules' ) ) {
17481         if ( column_exists( 'branch_borrower_circ_rules', 'maxissueqty' ) ) {
17482             $dbh->do("
17483                 INSERT INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
17484                 SELECT categorycode, branchcode, NULL, 'patron_maxissueqty', COALESCE( maxissueqty, '' )
17485                 FROM branch_borrower_circ_rules
17486             ");
17487             $dbh->do("
17488                 INSERT INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
17489                 SELECT categorycode, branchcode, NULL, 'patron_maxonsiteissueqty', COALESCE( maxonsiteissueqty, '' )
17490                 FROM branch_borrower_circ_rules
17491             ");
17492             $dbh->do("DROP TABLE branch_borrower_circ_rules");
17493         }
17494     }
17495
17496     if ( TableExists( 'default_borrower_circ_rules' ) ) {
17497         if ( column_exists( 'default_borrower_circ_rules', 'maxissueqty' ) ) {
17498             $dbh->do("
17499                 INSERT INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
17500                 SELECT categorycode, NULL, NULL, 'patron_maxissueqty', COALESCE( maxissueqty, '' )
17501                 FROM default_borrower_circ_rules
17502             ");
17503             $dbh->do("
17504                 INSERT INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
17505                 SELECT categorycode, NULL, NULL, 'patron_maxonsiteissueqty', COALESCE( maxonsiteissueqty, '' )
17506                 FROM default_borrower_circ_rules
17507             ");
17508             $dbh->do("DROP TABLE default_borrower_circ_rules");
17509         }
17510     }
17511
17512     if ( column_exists( 'default_circ_rules', 'maxissueqty' ) ) {
17513         $dbh->do("
17514             INSERT INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
17515             SELECT NULL, NULL, NULL, 'patron_maxissueqty', COALESCE( maxissueqty, '' )
17516             FROM default_circ_rules
17517         ");
17518         $dbh->do("
17519             INSERT INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
17520             SELECT NULL, NULL, NULL, 'patron_maxonsiteissueqty', COALESCE( maxonsiteissueqty, '' )
17521             FROM default_circ_rules
17522         ");
17523         $dbh->do("ALTER TABLE default_circ_rules DROP COLUMN maxissueqty, DROP COLUMN maxonsiteissueqty");
17524     }
17525
17526     if ( column_exists( 'default_branch_circ_rules', 'maxissueqty' ) ) {
17527         $dbh->do("
17528             INSERT INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
17529             SELECT NULL, branchcode, NULL, 'patron_maxissueqty', COALESCE( maxissueqty, '' )
17530             FROM default_branch_circ_rules
17531         ");
17532         $dbh->do("
17533             INSERT INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
17534             SELECT NULL, NULL, NULL, 'patron_maxonsiteissueqty', COALESCE( maxonsiteissueqty, '' )
17535             FROM default_branch_circ_rules
17536         ");
17537         $dbh->do("ALTER TABLE default_branch_circ_rules DROP COLUMN maxissueqty, DROP COLUMN maxonsiteissueqty");
17538     }
17539
17540     if ( column_exists( 'issuingrules', 'maxissueqty' ) ) {
17541         # Cleaning invalid rules before, to avoid FK contraints to fail
17542         $dbh->do(q|
17543             DELETE FROM issuingrules WHERE categorycode != '*' AND categorycode NOT IN (SELECT categorycode FROM categories);
17544         |);
17545         $dbh->do(q|
17546             DELETE FROM issuingrules WHERE branchcode != '*' AND branchcode NOT IN (SELECT branchcode FROM branches);
17547         |);
17548         $dbh->do(q|
17549             DELETE FROM issuingrules WHERE itemtype != '*' AND itemtype NOT IN (SELECT itemtype FROM itemtypes);
17550         |);
17551
17552         $dbh->do("
17553             INSERT INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
17554             SELECT IF(categorycode='*', NULL, categorycode),
17555                    IF(branchcode='*', NULL, branchcode),
17556                    IF(itemtype='*', NULL, itemtype),
17557                    'maxissueqty',
17558                    COALESCE( maxissueqty, '' )
17559             FROM issuingrules
17560         ");
17561         $dbh->do("
17562             INSERT INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
17563             SELECT IF(categorycode='*', NULL, categorycode),
17564                    IF(branchcode='*', NULL, branchcode),
17565                    IF(itemtype='*', NULL, itemtype),
17566                    'maxonsiteissueqty',
17567                    COALESCE( maxonsiteissueqty, '' )
17568             FROM issuingrules
17569         ");
17570         $dbh->do("ALTER TABLE issuingrules DROP COLUMN maxissueqty, DROP COLUMN maxonsiteissueqty");
17571     }
17572
17573     SetVersion( $DBversion );
17574     print "Upgrade to $DBversion done (Bug 18925 - Move maxissueqty and maxonsiteissueqty to circulation_rules)\n";
17575 }
17576
17577 $DBversion = '18.12.00.021';
17578 if ( CheckVersion($DBversion) ) {
17579
17580     if ( !column_exists( 'itemtypes', 'rentalcharge_daily' ) ) {
17581         $dbh->do("ALTER TABLE `itemtypes` ADD COLUMN `rentalcharge_daily` decimal(28,6) default NULL AFTER `rentalcharge`");
17582     }
17583
17584     if ( !column_exists( 'itemtypes', 'rentalcharge_hourly' ) ) {
17585         $dbh->do("ALTER TABLE `itemtypes` ADD COLUMN `rentalcharge_hourly` decimal(28,6) default NULL AFTER `rentalcharge_daily`");
17586     }
17587
17588     if ( column_exists( 'itemtypes', 'rental_charge_daily' ) ) {
17589         $dbh->do("UPDATE `itemtypes` SET `rentalcharge_daily` = `rental_charge_daily`");
17590         $dbh->do("ALTER TABLE `itemtypes` DROP COLUMN `rental_charge_daily`");
17591     }
17592
17593     SetVersion($DBversion);
17594     print "Upgrade to $DBversion done (Bug 20912 - Support granular rental charges)\n";
17595 }
17596
17597 $DBversion = '18.12.00.022';
17598 if( CheckVersion( $DBversion ) ) {
17599     $dbh->do( q{
17600         INSERT IGNORE INTO permissions (module_bit,code,description)
17601         VALUES
17602         (3,'manage_additional_fields','Add, edit, or delete additional custom fields for baskets or subscriptions (also requires order_manage or edit_subscription permissions)')
17603     });
17604     $dbh->do( q{
17605         INSERT INTO user_permissions (borrowernumber, module_bit, code)
17606         SELECT borrowernumber, 3, 'manage_additional_fields' FROM borrowers WHERE borrowernumber IN (SELECT DISTINCT borrowernumber FROM user_permissions WHERE code = 'order_manage' OR code = 'edit_subscription');
17607     });
17608     $dbh->do( q{
17609         INSERT INTO user_permissions (borrowernumber, module_bit, code)
17610         SELECT borrowernumber, 3, 'manage_additional_fields' FROM borrowers WHERE borrowernumber IN (SELECT borrowernumber FROM borrowers WHERE MOD(flags DIV POWER(2,11),2)=1 OR MOD(flags DIV POWER(2,15),2) =1);
17611     });
17612     SetVersion( $DBversion );
17613     print "Upgrade to $DBversion done (Bug 15774 - Add permission for managing additional fields)\n";
17614 }
17615
17616 $DBversion = '18.12.00.023';
17617 if( CheckVersion( $DBversion ) ) {
17618     $dbh->do(q|
17619       INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
17620       VALUES ('ILLOpacbackends',NULL,NULL,'ILL backends to enabled for OPAC initiated requests','multiple');
17621     |);
17622
17623     # Always end with this (adjust the bug info)
17624     SetVersion( $DBversion );
17625     print "Upgrade to $DBversion done (Bug 20639 - Add ILLOpacbackends syspref)\n";
17626 }
17627
17628 $DBversion = '18.12.00.024';
17629 if ( CheckVersion($DBversion) ) {
17630
17631     # Fixup any pre-existing bad suggestedby, manageddate, accepteddate dates
17632     $dbh->do(
17633         "UPDATE suggestions SET suggesteddate = '1970-01-01' WHERE suggesteddate = '0000-00-00';"
17634     );
17635     $dbh->do(
17636         "UPDATE suggestions SET manageddate = '1970-01-01' WHERE manageddate = '0000-00-00';"
17637     );
17638     $dbh->do(
17639         "UPDATE suggestions SET accepteddate = '1970-01-01' WHERE accepteddate = '0000-00-00';"
17640     );
17641
17642     # Add constraint for suggestedby
17643     unless ( foreign_key_exists( 'suggestions', 'suggestions_ibfk_suggestedby' ) )
17644     {
17645         $dbh->do(
17646 "ALTER TABLE suggestions CHANGE COLUMN suggestedby suggestedby INT(11) NULL DEFAULT NULL;"
17647         );
17648         $dbh->do(
17649 "UPDATE suggestions LEFT JOIN borrowers ON (suggestions.suggestedby = borrowers.borrowernumber) SET suggestedby = null WHERE borrowernumber IS null"
17650         );
17651         $dbh->do(
17652 "ALTER TABLE suggestions ADD CONSTRAINT `suggestions_ibfk_suggestedby` FOREIGN KEY (`suggestedby`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE CASCADE"
17653         );
17654     }
17655
17656     # Add constraint for managedby
17657     unless ( foreign_key_exists( 'suggestions', 'suggestions_ibfk_managedby' ) )
17658     {
17659         $dbh->do(
17660 "UPDATE suggestions LEFT JOIN borrowers ON (suggestions.managedby = borrowers.borrowernumber) SET managedby = null WHERE borrowernumber IS NULL"
17661         );
17662         $dbh->do(
17663 "ALTER TABLE suggestions ADD CONSTRAINT `suggestions_ibfk_managedby` FOREIGN KEY (`managedby`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE CASCADE"
17664         );
17665     }
17666
17667     # Add constraint for acceptedby
17668     unless (
17669         foreign_key_exists( 'suggestions', 'suggestions_ibfk_acceptedby' ) )
17670     {
17671         $dbh->do(
17672 "UPDATE suggestions LEFT JOIN borrowers ON (suggestions.acceptedby = borrowers.borrowernumber) SET acceptedby = null WHERE borrowernumber IS NULL"
17673         );
17674         $dbh->do(
17675 "ALTER TABLE suggestions ADD CONSTRAINT `suggestions_ibfk_acceptedby` FOREIGN KEY (`acceptedby`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE CASCADE"
17676         );
17677     }
17678
17679     # Add constraint for rejectedby
17680     unless (
17681         foreign_key_exists( 'suggestions', 'suggestions_ibfk_rejectedby' ) )
17682     {
17683         $dbh->do(
17684 "UPDATE suggestions LEFT JOIN borrowers ON (suggestions.rejectedby = borrowers.borrowernumber) SET rejectedby = null WHERE borrowernumber IS null"
17685         );
17686         $dbh->do(
17687 "ALTER TABLE suggestions ADD CONSTRAINT `suggestions_ibfk_rejectedby` FOREIGN KEY (`rejectedby`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE CASCADE"
17688         );
17689     }
17690
17691     # Add constraint for biblionumber
17692     unless (
17693         foreign_key_exists( 'suggestions', 'suggestions_ibfk_biblionumber' ) )
17694     {
17695         $dbh->do(
17696 "UPDATE suggestions s LEFT JOIN biblio b ON (s.biblionumber = b.biblionumber) SET s.biblionumber = null WHERE b.biblionumber IS null"
17697         );
17698         $dbh->do(
17699 "ALTER TABLE suggestions ADD CONSTRAINT `suggestions_ibfk_biblionumber` FOREIGN KEY (`biblionumber`) REFERENCES `biblio` (`biblionumber`) ON DELETE SET NULL ON UPDATE CASCADE"
17700         );
17701     }
17702
17703     # Add constraint for branchcode
17704     unless (
17705         foreign_key_exists( 'suggestions', 'suggestions_ibfk_branchcode' ) )
17706     {
17707         $dbh->do(
17708 "UPDATE suggestions s LEFT JOIN branches b ON (s.branchcode = b.branchcode) SET s.branchcode = null WHERE b.branchcode IS null"
17709         );
17710         $dbh->do(
17711 "ALTER TABLE suggestions ADD CONSTRAINT `suggestions_ibfk_branchcode` FOREIGN KEY (`branchcode`) REFERENCES `branches` (`branchcode`) ON DELETE SET NULL ON UPDATE CASCADE"
17712         );
17713     }
17714
17715     SetVersion($DBversion);
17716     print
17717 "Upgrade to $DBversion done (Bug 22368 - Add missing constraints to suggestions)\n";
17718 }
17719
17720 $DBversion = '18.12.00.025';
17721 if( CheckVersion( $DBversion ) ) {
17722
17723     $dbh->do('SET FOREIGN_KEY_CHECKS=0');
17724
17725     # Change columns accordingly
17726     $dbh->do(q{
17727         ALTER TABLE tags_index
17728             MODIFY COLUMN term VARCHAR(191) COLLATE utf8mb4_bin NOT NULL;
17729     });
17730
17731     $dbh->do(q{
17732         ALTER TABLE tags_approval
17733             MODIFY COLUMN term VARCHAR(191) COLLATE utf8mb4_bin NOT NULL;
17734     });
17735
17736     $dbh->do(q{
17737         ALTER TABLE tags_all
17738             MODIFY COLUMN term VARCHAR(191) COLLATE utf8mb4_bin NOT NULL;
17739     });
17740
17741     $dbh->do('SET FOREIGN_KEY_CHECKS=1');
17742
17743     SetVersion( $DBversion );
17744     print "Upgrade to $DBversion done (Bug 21846 - Using emoji as tags has broken weights)\n";
17745     my $maintenance_script = C4::Context->config("intranetdir") . "/misc/maintenance/fix_tags_weight.pl";
17746     print "WARNING: (Bug 21846) You need to manually run $maintenance_script to fix possible issues with tags.\n";
17747 }
17748
17749 $DBversion = '18.12.00.026';
17750 if( CheckVersion( $DBversion ) ) {
17751     $dbh->do( "INSERT IGNORE INTO systempreferences (variable, value, explanation, type) VALUES ('IllLog', 0, 'If ON, log information about ILL requests', 'YesNo')" );
17752
17753     SetVersion( $DBversion );
17754     print "Upgrade to $DBversion done (Bug 20750 - Allow timestamped auditing of ILL request events)\n";
17755 }
17756
17757 $DBversion = '18.12.00.027';
17758 if( CheckVersion( $DBversion ) ) {
17759     $dbh->do(q{
17760 INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES
17761        ('ILLModuleUnmediated','0','','If enabled, try to immediately progress newly placed ILL requests.','YesNo');
17762     });
17763     SetVersion( $DBversion );
17764     print "Upgrade to $DBversion done (Bug 18837: Add ILLModuleUnmediated Syspref)\n";
17765 }
17766
17767 $DBversion = '18.12.00.028';
17768 if( CheckVersion( $DBversion ) ) {
17769     $dbh->do(q{
17770         INSERT IGNORE INTO account_offset_types ( type ) VALUES ( 'Account Fee' );
17771     });
17772
17773     $dbh->do(q{
17774         INSERT IGNORE INTO account_offset_types ( type ) VALUES ( 'Hold Expired' );
17775     });
17776
17777     SetVersion( $DBversion );
17778     print "Upgrade to $DBversion done (Bug 21756 - Add 'Account Fee' and 'Hold Expired' to the account_offset_types table if missing)\n";
17779 }
17780
17781 $DBversion = '18.12.00.029';
17782 if( CheckVersion( $DBversion ) ) {
17783     $dbh->do( "INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('OrderPriceRounding',NULL,'Local preference for rounding orders before calculations to ensure correct calculations','|nearest_cent','Choice')" );
17784
17785     SetVersion( $DBversion );
17786     print "Upgrade to $DBversion done (Bug 18736 - Add syspref to control order rounding)\n";
17787 }
17788
17789 $DBversion = '18.12.00.030';
17790 if( CheckVersion( $DBversion ) ) {
17791     if( column_exists( 'accountlines', 'accountno' ) ) {
17792         $dbh->do( "ALTER TABLE accountlines DROP COLUMN accountno" );
17793     }
17794     if( column_exists( 'statistics', 'proccode' ) ) {
17795         $dbh->do( "ALTER TABLE statistics DROP COLUMN proccode" );
17796     }
17797     SetVersion( $DBversion );
17798     print "Upgrade to $DBversion done (Bug 21683 - Remove accountlines.accountno and statistics.proccode fields)\n";
17799 }
17800
17801 $DBversion = '18.12.00.031';
17802 if( CheckVersion( $DBversion ) ) {
17803
17804     # Add constraint for manager_id
17805     unless( foreign_key_exists( 'accountlines', 'accountlines_ibfk_borrowers_2' ) ) {
17806         $dbh->do("ALTER TABLE accountlines CHANGE COLUMN manager_id manager_id INT(11) NULL DEFAULT NULL");
17807         $dbh->do("UPDATE accountlines a LEFT JOIN borrowers b ON ( a.manager_id = b.borrowernumber) SET a.manager_id = NULL WHERE b.borrowernumber IS NULL");
17808         $dbh->do("ALTER TABLE accountlines ADD CONSTRAINT `accountlines_ibfk_borrowers_2` FOREIGN KEY (`manager_id`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE CASCADE");
17809     }
17810
17811     # Rename accountlines_ibfk_2 to accountlines_ibfk_items
17812     if ( foreign_key_exists( 'accountlines', 'accountlines_ibfk_2' ) && !foreign_key_exists( 'accountlines', 'accountlines_ibfk_items' ) ) {
17813         $dbh->do("ALTER TABLE accountlines DROP FOREIGN KEY accountlines_ibfk_2");
17814         $dbh->do("ALTER TABLE accountlines ADD CONSTRAINT `accountlines_ibfk_items` FOREIGN KEY (`itemnumber`) REFERENCES `items` (`itemnumber`) ON DELETE SET NULL ON UPDATE CASCADE");
17815     }
17816
17817     SetVersion( $DBversion );
17818     print "Upgrade to $DBversion done (Bug 22008 - Add missing constraints for accountlines.manager_id)\n";
17819 }
17820
17821 $DBversion = '18.12.00.032';
17822 if( CheckVersion( $DBversion ) ) {
17823     if( !column_exists( 'search_field', 'facet_order' ) ) {
17824         $dbh->do("ALTER TABLE search_field ADD COLUMN facet_order TINYINT(4) DEFAULT NULL AFTER weight");
17825     }
17826     $dbh->do("UPDATE search_field SET facet_order=1 WHERE name='author'");
17827     $dbh->do("UPDATE search_field SET facet_order=2 WHERE name='itype'");
17828     $dbh->do("UPDATE search_field SET facet_order=3 WHERE name='location'");
17829     $dbh->do("UPDATE search_field SET facet_order=4 WHERE name='su-geo'");
17830     $dbh->do("UPDATE search_field SET facet_order=5 WHERE name='title-series'");
17831     $dbh->do("UPDATE search_field SET facet_order=6 WHERE name='subject'");
17832     $dbh->do("UPDATE search_field SET facet_order=7 WHERE name='ccode'");
17833     $dbh->do("UPDATE search_field SET facet_order=8 WHERE name='holdingbranch'");
17834     $dbh->do("UPDATE search_field SET facet_order=9 WHERE name='homebranch'");
17835     SetVersion( $DBversion );
17836     print "Upgrade to $DBversion done (Bug 18235 - Elastic search - make facets configurable)\n";
17837 }
17838
17839 $DBversion = '18.12.00.033';
17840 if( CheckVersion( $DBversion ) ) {
17841     $dbh->do( "UPDATE search_field SET facet_order=10 WHERE name='ln'" );
17842     SetVersion( $DBversion );
17843     print "Upgrade to $DBversion done (Bug 18213 - Add language facets to Elasticsearch)\n";
17844 }
17845
17846 $DBversion = '18.12.00.034';
17847 if( CheckVersion( $DBversion ) ) {
17848
17849     if ( column_exists( 'accountlines', 'lastincrement' ) ) {
17850         $dbh->do("ALTER TABLE `accountlines` DROP COLUMN `lastincrement`");
17851     }
17852
17853     SetVersion( $DBversion );
17854     print "Upgrade to $DBversion done (Bug 22516 - Drop deprecated accountlines.lastincrement field)\n";
17855 }
17856
17857 $DBversion = '18.12.00.035';
17858 if( CheckVersion( $DBversion ) ) {
17859     $dbh->do( "INSERT IGNORE INTO systempreferences (variable, value, options, explanation, type)
17860                VALUES ('MaxItemsToDisplayForBatchMod','1000',NULL,'Display up to a given number of items in a single item modification batch.','Integer')"
17861             );
17862     SetVersion( $DBversion );
17863     print "Upgrade to $DBversion done (Bug 19722 - Add a MaxItemsToDisplayForBatchMod preference)\n";
17864 }
17865
17866 $DBversion = '18.12.00.036';
17867 if ( CheckVersion($DBversion) ) {
17868
17869     my $rows = $dbh->do(
17870         qq{
17871         UPDATE `accountlines`
17872         SET
17873           `accounttype` = 'FU'
17874         WHERE
17875           `accounttype` = 'O'
17876       }
17877     );
17878
17879     SetVersion($DBversion);
17880     printf "Upgrade to $DBversion done (Bug 22518 - Fix accounttype 'O' to 'FU' - %d updated)\n", $rows;
17881 }
17882
17883 $DBversion = '18.12.00.037';
17884 if( CheckVersion( $DBversion ) ) {
17885
17886     $dbh->do( "UPDATE issues SET renewals = 0 WHERE renewals IS NULL" );
17887     $dbh->do( "UPDATE old_issues SET renewals = 0 WHERE renewals IS NULL" );
17888
17889     $dbh->do( "ALTER TABLE issues MODIFY COLUMN renewals tinyint(4) NOT NULL default 0");
17890     $dbh->do( "ALTER TABLE old_issues MODIFY COLUMN renewals tinyint(4) NOT NULL default 0");
17891
17892     # Always end with this (adjust the bug info)
17893     SetVersion( $DBversion );
17894     print "Upgrade to $DBversion done (Bug 22607 - Set default value of issues.renewals to 0)\n";
17895 }
17896
17897 $DBversion = '18.12.00.038';
17898 if ( CheckVersion($DBversion) ) {
17899
17900     if ( !column_exists( 'accountlines', 'status' ) ) {
17901         $dbh->do(
17902             qq{
17903             ALTER TABLE `accountlines`
17904             ADD
17905               `status` varchar(16) DEFAULT NULL
17906             AFTER
17907               `accounttype`
17908           }
17909         );
17910     }
17911
17912     SetVersion($DBversion);
17913     print "Upgrade to $DBversion done (Bug 22512 - Add status to accountlines)\n";
17914 }
17915
17916 $DBversion = '18.12.00.039';
17917 if ( CheckVersion($DBversion) ) {
17918
17919     if ( !column_exists( 'accountlines', 'interface' ) ) {
17920         $dbh->do(
17921             qq{
17922             ALTER TABLE `accountlines`
17923             ADD
17924               `interface` varchar(16)
17925             AFTER
17926               `manager_id`;
17927           }
17928         );
17929     }
17930
17931     $dbh->do(qq{
17932         UPDATE
17933           `accountlines`
17934         SET
17935           interface = 'opac'
17936         WHERE
17937           borrowernumber = manager_id;
17938     });
17939
17940     $dbh->do(qq{
17941         UPDATE
17942           `accountlines`
17943         SET
17944           interface = 'cron'
17945         WHERE
17946           manager_id IS NULL
17947         AND
17948           branchcode IS NULL;
17949     });
17950
17951     $dbh->do(qq{
17952         UPDATE
17953           `accountlines`
17954         SET
17955           interface = 'intranet'
17956         WHERE
17957           interface IS NULL;
17958     });
17959
17960     $dbh->do(qq{
17961         ALTER TABLE `accountlines`
17962         MODIFY COLUMN `interface` varchar(16) NOT NULL;
17963     });
17964
17965     SetVersion($DBversion);
17966     print "Upgrade to $DBversion done (Bug 22600 - Add interface to accountlines)\n";
17967 }
17968
17969 $DBversion = '18.12.00.040';
17970 if( CheckVersion( $DBversion ) ) {
17971     $dbh->do("UPDATE accountlines SET description = REPLACE(description, 'Reserve Charge - ', '') WHERE description LIKE 'Reserve Charge - %'");
17972     SetVersion( $DBversion );
17973     print "Upgrade to $DBversion done (Bug 12166 - Remove 'Reserve Charge' text from accountlines description)\n";
17974 }
17975
17976 $DBversion = '18.12.00.041';
17977 if( CheckVersion( $DBversion ) ) {
17978     my $table_sth = $dbh->prepare('SHOW CREATE TABLE `search_marc_map`');
17979     $table_sth->execute();
17980     my @table = $table_sth->fetchrow_array();
17981     unless ( $table[1] =~ /`marc_field`.*COLLATE utf8mb4_bin/ ) { #catches utf8mb4 collated tables
17982         $dbh->do("ALTER TABLE `search_marc_map` MODIFY `marc_field` VARCHAR(255) NOT NULL COLLATE utf8mb4_bin COMMENT 'the MARC specifier for this field'");
17983     }
17984
17985     # Always end with this (adjust the bug info)
17986     SetVersion( $DBversion );
17987         print "Upgrade to $DBversion done (Bug 19670 - Change collation of marc_field to allow mixed case search field mappings)\n";
17988 }
17989
17990 $DBversion = '18.12.00.042';
17991 if( CheckVersion( $DBversion ) ) {
17992     $dbh->do( "UPDATE systempreferences SET value = 'default' WHERE variable = 'XSLTDetailsDisplay' AND value = ''" );
17993     SetVersion( $DBversion );
17994     print "Upgrade to $DBversion done (Bug 29891 - Remove non-XSLT detail view in the staff client)\n";
17995 }
17996
17997 $DBversion = '18.12.00.043';
17998 if ( CheckVersion($DBversion) ) {
17999     $dbh->do("UPDATE accountlines SET description = REPLACE(description, 'Lost Item ', '') WHERE description LIKE 'Lost Item %'");
18000     SetVersion($DBversion);
18001     print "Upgrade to $DBversion done (Bug 21953 - Remove 'Lost Item' text from accountlines description)\n";
18002 }
18003
18004 $DBversion = '18.12.00.044';
18005 if( CheckVersion( $DBversion ) ) {
18006
18007     if ( !column_exists( 'categories', 'reset_password' ) ) {
18008         $dbh->do(q{
18009             ALTER TABLE categories
18010                 ADD COLUMN reset_password TINYINT(1) NULL DEFAULT NULL
18011                 AFTER checkprevcheckout
18012         });
18013     }
18014
18015     SetVersion( $DBversion );
18016     print "Upgrade to $DBversion done (Bug 21890 - Patron password reset by category)\n";
18017 }
18018
18019 $DBversion = '18.12.00.045';
18020 if( CheckVersion( $DBversion ) ) {
18021
18022     if ( !column_exists( 'categories', 'change_password' ) ) {
18023         $dbh->do(q{
18024             ALTER TABLE categories
18025                 ADD COLUMN change_password TINYINT(1) NULL DEFAULT NULL
18026                 AFTER reset_password
18027         });
18028     }
18029
18030     SetVersion( $DBversion );
18031     print "Upgrade to $DBversion done (Bug 10796 - Patron password change by category)\n";
18032 }
18033
18034 $DBversion = '18.12.00.046';
18035 if( CheckVersion( $DBversion ) ) {
18036     $dbh->do( "UPDATE systempreferences SET value = 'default' WHERE variable = 'XSLTResultsDisplay' AND value = ''" );
18037     SetVersion( $DBversion );
18038     print "Upgrade to $DBversion done (Bug 22695 - Remove non-XSLT search results view from the staff client)\n";
18039 }
18040
18041 $DBversion = '18.12.00.047';
18042 if( CheckVersion( $DBversion ) ) {
18043     $dbh->do(q|
18044         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('LibrisKey', '', 'This key must be obtained at http://api.libris.kb.se/. It is unique for the IP of the server.', NULL, 'Free');
18045     |);
18046     $dbh->do(q|
18047         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES ('LibrisURL', 'http://api.libris.kb.se/bibspell/', 'This is the base URL for the Libris spellchecking API.',NULL,'Free');
18048     |);
18049     SetVersion( $DBversion );
18050     print "Upgrade to $DBversion done (Bug 14557: Add Libris spellchecking system preferences)\n";
18051 }
18052
18053 $DBversion = '18.12.00.048';
18054 if( CheckVersion( $DBversion ) ) {
18055     $dbh->do( q{
18056         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type)
18057         VALUES ('NoRenewalBeforePrecision', 'exact_time', 'Calculate "No renewal before" based on date or exact time. Only relevant for loans calculated in days, hourly loans are not affected.', 'date|exact_time', 'Choice');
18058     });
18059     $dbh->do("UPDATE systempreferences SET value='exact_time' WHERE variable='NoRenewalBeforePrecision' AND value IS NULL;" );
18060     SetVersion( $DBversion );
18061     print "Upgrade to $DBversion done (Bug 22044 - Set a default value for NoRenewalBeforePrecision)\n";
18062 }
18063
18064 $DBversion = '18.12.00.049';
18065 if( CheckVersion( $DBversion ) ) {
18066
18067     $dbh->do(q{
18068         ALTER TABLE borrowers
18069             ADD COLUMN flgAnonymized tinyint DEFAULT 0
18070             AFTER overdrive_auth_token
18071     }) if !column_exists('borrowers', 'flgAnonymized');
18072
18073     $dbh->do(q{
18074         ALTER TABLE deletedborrowers
18075             ADD COLUMN flgAnonymized tinyint DEFAULT 0
18076             AFTER overdrive_auth_token
18077     }) if !column_exists('deletedborrowers', 'flgAnonymized');
18078
18079     SetVersion( $DBversion );
18080     print "Upgrade to $DBversion done (Bug 21336 - Add field flgAnonymized)\n";
18081 }
18082
18083 $DBversion = '18.12.00.050';
18084 if( CheckVersion( $DBversion ) ) {
18085     $dbh->do( q|
18086 INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` )
18087 VALUES
18088 ('UnsubscribeReflectionDelay','',NULL,'Delay for locking unsubscribers', 'Integer'),
18089 ('PatronAnonymizeDelay','',NULL,'Delay for anonymizing patrons', 'Integer'),
18090 ('PatronRemovalDelay','',NULL,'Delay for removing anonymized patrons', 'Integer')
18091     |);
18092     SetVersion( $DBversion );
18093     print "Upgrade to $DBversion done (Bug 21336 - Add preferences)\n";
18094 }
18095
18096 $DBversion = '18.12.00.051';
18097 if( CheckVersion( $DBversion ) ) {
18098     my $failed_attempts = C4::Context->preference('FailedLoginAttempts');
18099     $dbh->do( "UPDATE borrowers SET login_attempts = ? WHERE login_attempts > ?", undef, $failed_attempts, $failed_attempts ) if $failed_attempts && $failed_attempts > 0;
18100     SetVersion( $DBversion );
18101     print "Upgrade to $DBversion done (Bug 21336 - Reset login_attempts)\n";
18102 }
18103
18104 $DBversion = '18.12.00.052';
18105 if( CheckVersion( $DBversion ) ) {
18106     $dbh->do(q{
18107         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
18108         ('OpacMoreSearches', '', NULL, 'Add additional elements to the OPAC more searches bar', 'Textarea')
18109     } );
18110
18111     SetVersion( $DBversion );
18112     print "Upgrade to $DBversion done (Bug 22311 - Add a SysPref to allow adding content to the #moresearches div in the opac)\n";
18113 }
18114
18115 $DBversion = '18.12.00.053';
18116 if( CheckVersion( $DBversion ) ) {
18117     $dbh->do(q{
18118         INSERT IGNORE INTO `systempreferences` (`variable`, `value`, `options`, `explanation`, `type`) VALUES
18119         ('AutoReturnCheckedOutItems', '0', '', 'If disabled, librarian must confirm return of checked out item when checking out to another.', 'YesNo');
18120     });
18121
18122     SetVersion( $DBversion );
18123     print "Upgrade to $DBversion done (Bug 17171 - Add a syspref to allow currently issued items to be issued to a new patron without staff confirmation)\n";
18124 }
18125
18126 $DBversion = '18.12.00.054';
18127 if( CheckVersion( $DBversion ) ) {
18128     $dbh->do(q{
18129         INSERT IGNORE permissions (module_bit, code, description)
18130         VALUES
18131         (9,'advanced_editor','Use the advanced cataloging editor')
18132     });
18133     if( C4::Context->preference('EnableAdvancedCatalogingEditor') ){
18134         $dbh->do(q{
18135             INSERT INTO user_permissions (borrowernumber, module_bit, code)
18136             SELECT borrowernumber, 9, 'advanced_editor' FROM borrowers WHERE borrowernumber IN (SELECT DISTINCT borrowernumber FROM user_permissions WHERE code = 'edit_catalogue');
18137         });
18138     }
18139     SetVersion( $DBversion );
18140     print "Upgrade to $DBversion done (Bug 20128: Add permission for Advanced Cataloging Editor)\n";
18141 }
18142
18143 $DBversion = '18.12.00.055';
18144 if ( CheckVersion($DBversion) ) {
18145
18146     $dbh->do(qq{
18147         UPDATE
18148           `account_offset_types`
18149         SET
18150           type = 'OVERDUE'
18151         WHERE
18152           type = 'Fine';
18153     });
18154
18155     $dbh->do(qq{
18156         UPDATE
18157           `account_offset_types`
18158         SET
18159           type = 'OVERDUE_INCREASE'
18160         WHERE
18161           type = 'fine_increase';
18162     });
18163
18164     $dbh->do(qq{
18165         UPDATE
18166           `account_offset_types`
18167         SET
18168           type = 'OVERDUE_DECREASE'
18169         WHERE
18170           type = 'fine_decrease';
18171     });
18172
18173     if ( column_exists( 'accountlines', 'accounttype' ) ) {
18174         $dbh->do(
18175             qq{
18176             ALTER TABLE `accountlines`
18177             CHANGE COLUMN `accounttype`
18178               `accounttype` varchar(16) DEFAULT NULL;
18179           }
18180         );
18181     }
18182
18183     $dbh->do(qq{
18184         UPDATE
18185           accountlines
18186         SET
18187           accounttype = 'OVERDUE',
18188           status = 'UNRETURNED'
18189         WHERE
18190           accounttype = 'FU';
18191     });
18192
18193     $dbh->do(qq{
18194         UPDATE
18195           accountlines
18196         SET
18197           accounttype = 'OVERDUE',
18198           status = 'FORGIVEN'
18199         WHERE
18200           accounttype = 'FFOR';
18201     });
18202
18203     $dbh->do(qq{
18204         UPDATE
18205           accountlines
18206         SET
18207           accounttype = 'OVERDUE',
18208           status = 'RETURNED'
18209         WHERE
18210           accounttype = 'F';
18211     });
18212     SetVersion($DBversion);
18213     print "Upgrade to $DBversion done (Bug 22521 - Update accountlines.accounttype to varchar(16), and map new statuses)\n";
18214 }
18215
18216 $DBversion = '18.12.00.056';
18217 if( CheckVersion( $DBversion ) ) {
18218     $dbh->do( "UPDATE systempreferences SET explanation = 'This syspref allows to define custom rules for hiding specific items at the OPAC. See http://wiki.koha-community.org/wiki/OpacHiddenItems for more information.' WHERE variable = 'OpacHiddenItems'");
18219     SetVersion( $DBversion );
18220     print "Upgrade to $DBversion done (Bug 8701 - Update OpacHiddenItems system preference description)\n";
18221 }
18222
18223 $DBversion = '18.12.00.057';
18224 if( CheckVersion( $DBversion ) ) {
18225     if( column_exists('statistics', 'associatedborrower') ) {
18226         $dbh->do(q{ ALTER TABLE statistics DROP COLUMN associatedborrower });
18227     }
18228     if( column_exists('statistics', 'usercode') ) {
18229         $dbh->do(q{ ALTER TABLE statistics DROP COLUMN usercode });
18230     }
18231
18232     SetVersion($DBversion);
18233     print "Upgrade to $DBversion done (Bug 13795 - Delete unused fields from statistics table)\n";
18234 }
18235
18236 $DBversion = '18.12.00.058';
18237 if( CheckVersion( $DBversion ) ) {
18238     my $opaclang = C4::Context->preference("opaclanguages");
18239     my @langs;
18240     push @langs, split ( '\,', $opaclang );
18241     # Get any existing value from the OpacNavRight system preference
18242     my ($OpacNavRight) = $dbh->selectrow_array( q|
18243         SELECT value FROM systempreferences WHERE variable='OpacNavRight';
18244     |);
18245     if( $OpacNavRight ){
18246         # If there is a value in the OpacNavRight preference, insert it into opac_news
18247         $dbh->do("INSERT INTO opac_news (branchcode, lang, title, content ) VALUES (NULL, ?, '', ?)", undef, "OpacNavRight_$langs[0]", $OpacNavRight);
18248     }
18249     # Remove the OpacNavRight system preference
18250     $dbh->do("DELETE FROM systempreferences WHERE variable='OpacNavRight'");
18251     SetVersion ($DBversion);
18252     print "Upgrade to $DBversion done (Bug 22318: Move contents of OpacNavRight preference to Koha news system)\n";
18253 }
18254
18255 $DBversion = '18.12.00.059';
18256 if( CheckVersion( $DBversion ) ) {
18257     if( column_exists( 'import_records', 'z3950random' ) ) {
18258         $dbh->do( "ALTER TABLE import_records DROP COLUMN z3950random" );
18259     }
18260
18261     # Always end with this (adjust the bug info)
18262     SetVersion( $DBversion );
18263     print "Upgrade to $DBversion done (Bug 22532 - Remove import_records z3950random column)\n";
18264 }
18265
18266 $DBversion = '18.12.00.060';
18267 if ( CheckVersion($DBversion) ) {
18268
18269     my $rows = $dbh->do(
18270         qq{
18271         UPDATE `accountlines`
18272         SET
18273           `accounttype` = 'L',
18274           `status`      = 'REPLACED'
18275         WHERE
18276           `accounttype` = 'Rep'
18277       }
18278     );
18279
18280     SetVersion($DBversion);
18281     printf "Upgrade to $DBversion done (Bug 22564 - Fix accounttype 'Rep' - %d updated)\n", $rows;
18282 }
18283
18284 $DBversion = '18.12.00.061';
18285 if( CheckVersion( $DBversion ) ) {
18286
18287     if ( column_exists( 'borrowers', 'flgAnonymized' ) ) {
18288         $dbh->do(q{
18289             UPDATE borrowers SET flgAnonymized = 0 WHERE flgAnonymized IS NULL
18290         });
18291         $dbh->do(q{
18292             ALTER TABLE borrowers
18293                 CHANGE `flgAnonymized` `anonymized` TINYINT(1) NOT NULL DEFAULT 0
18294         });
18295     }
18296
18297     if ( column_exists( 'deletedborrowers', 'flgAnonymized' ) ) {
18298         $dbh->do(q{
18299             UPDATE deletedborrowers SET flgAnonymized = 0 WHERE flgAnonymized IS NULL
18300         });
18301         $dbh->do(q{
18302             ALTER TABLE deletedborrowers
18303                 CHANGE `flgAnonymized` `anonymized` TINYINT(1) NOT NULL DEFAULT 0
18304         });
18305     }
18306
18307     SetVersion( $DBversion );
18308     print "Upgrade to $DBversion done (Bug 21336 - (follow-up) Rename flgAnonymized column)\n";
18309 }
18310
18311 $DBversion = '18.12.00.062';
18312 if( CheckVersion( $DBversion ) ) {
18313     $dbh->do( q|
18314         UPDATE search_marc_map SET marc_field='007_/0'
18315           WHERE marc_type IN ('marc21', 'normarc') AND marc_field='007_/1' AND id IN
18316             (SELECT search_marc_map_id FROM search_marc_to_field WHERE search_field_id IN
18317               (SELECT id FROM search_field WHERE label='ff7-00')
18318             )
18319     |);
18320
18321     $dbh->do( q|
18322         UPDATE search_marc_map SET marc_field='007_/1'
18323           WHERE marc_type IN ('marc21', 'normarc') AND marc_field='007_/2' AND id IN
18324             (SELECT search_marc_map_id FROM search_marc_to_field WHERE search_field_id IN
18325               (SELECT id FROM search_field WHERE label='ff7-01')
18326             )
18327     |);
18328
18329     $dbh->do( q|
18330         UPDATE search_marc_map SET marc_field='007_/2'
18331           WHERE marc_type IN ('marc21', 'normarc') AND marc_field='007_/3' AND id IN
18332             (SELECT search_marc_map_id FROM search_marc_to_field WHERE search_field_id IN
18333               (SELECT id FROM search_field WHERE label='ff7-02')
18334             )
18335     |);
18336
18337     # N.B. ff7-01-02 really is 00-01!
18338     $dbh->do( q|
18339         UPDATE search_marc_map SET marc_field='007_/0-1'
18340           WHERE marc_type IN ('marc21', 'normarc') AND marc_field='007_/1-2' AND id IN
18341             (SELECT search_marc_map_id FROM search_marc_to_field WHERE search_field_id IN
18342               (SELECT id FROM search_field WHERE label='ff7-01-02')
18343             )
18344     |);
18345
18346     $dbh->do( q|
18347         UPDATE search_marc_map SET marc_field='008_/0-5'
18348           WHERE marc_type IN ('marc21', 'normarc') AND marc_field='008_/1-5' AND id IN
18349             (SELECT search_marc_map_id FROM search_marc_to_field WHERE search_field_id IN
18350               (SELECT id FROM search_field WHERE label='date-entered-on-file')
18351             )
18352     |);
18353
18354     $dbh->do( q|
18355         UPDATE search_marc_map SET marc_field='leader_/0-4'
18356           WHERE marc_type IN ('marc21', 'normarc') AND marc_field='leader_/1-5' AND id IN
18357             (SELECT search_marc_map_id FROM search_marc_to_field WHERE search_field_id IN
18358               (SELECT id FROM search_field WHERE label='llength')
18359             )
18360     |);
18361
18362     # Always end with this (adjust the bug info)
18363     SetVersion( $DBversion );
18364     print "Upgrade to $DBversion done (Bug 22339 - Fix search field mappings of MARC fixed fields)\n";
18365 }
18366
18367 $DBversion = '18.12.00.063';
18368 if ( CheckVersion($DBversion) ) {
18369
18370     my $types_map = {
18371         'Writeoff'      => 'W',
18372         'Payment'       => 'Pay',
18373         'Lost Item'     => 'CR',
18374         'Manual Credit' => 'C',
18375         'Forgiven'      => 'FOR'
18376     };
18377
18378     my $sth = $dbh->prepare( "SELECT accountlines_id FROM accountlines WHERE accounttype = 'VOID'" );
18379     my $sth2 = $dbh->prepare( "SELECT type FROM account_offsets WHERE credit_id = ? ORDER BY created_on LIMIT 1" );
18380     my $sth3 = $dbh->prepare( "UPDATE accountlines SET accounttype = ?, status = 'VOID' WHERE accountlines_id = ?" );
18381     $sth->execute();
18382     while (my $row = $sth->fetchrow_hashref) {
18383         $sth2->execute($row->{accountlines_id});
18384         my $result = $sth2->fetchrow_hashref;
18385         my $type = $types_map->{$result->{'type'}} // 'Pay';
18386         $sth3->execute($type,$row->{accountlines_id});
18387     }
18388
18389     SetVersion($DBversion);
18390     print "Upgrade to $DBversion done (Bug 22511 - Update existing VOID accountlines)\n";
18391 }
18392
18393 $DBversion = '18.12.00.064';
18394 if( CheckVersion( $DBversion ) ) {
18395     $dbh->do(q{
18396         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES ('UpdateItemLocationOnCheckin', 'PROC: _PERM_\n', 'NULL', 'This is a list of value pairs.\n Examples:\n PROC: FIC - causes an item in the Processing Center location to be updated into the Fiction location on check in.\n FIC: GEN - causes an item in the Fiction location to be updated into the General stacks location on check in.\n _BLANK_:FIC - causes an item that has no location to be updated into the Fiction location on check in.\nFIC: _BLANK_ - causes an item in location FIC to be updated to a blank location on check in.\n_ALL_:FIC - causes all items to be updated into the Fiction location on check in.\nPROC: _PERM_ - causes an item that is in the Processing Center to be updated to it''s permanent location.\nGeneral rule: if the location value on the left matches the item''s current location, it will be updated to match the location value on the right.\nNote: PROC and CART are special values, for these locations only can location and permanent_location differ, in all other cases an update will affect both. Items in the CART location will be returned to their permanent location on checkout.\nThe special term _BLANK_ may be used on either side of a value pair to update or remove the location from items with no location assigned. The special term _ALL_ is used on the left side of the colon (:) to affect all items.\nThe special term _PERM_ is used on the right side of the colon (:) to return items to their permanent location.', 'Free');
18397     });
18398     $dbh->do(q{
18399         UPDATE systempreferences s1, (SELECT IF(value,'PROC: CART\n','') AS p2c FROM systempreferences WHERE variable='InProcessingToShelvingCart') s2 SET s1.value= CONCAT(s2.p2c, REPLACE(s1.value,'PROC: _PERM_\n','') ) WHERE s1.variable='UpdateItemLocationOnCheckin' AND s1.value NOT LIKE '%PROC: CART%';
18400     });
18401     $dbh->do(q{
18402         DELETE FROM systempreferences WHERE variable='InProcessingToShelvingCart';
18403     });
18404     $dbh->do(q{
18405         UPDATE systempreferences s1, (SELECT IF(value,'_ALL_: CART\n','') AS rtc FROM systempreferences WHERE variable='ReturnToShelvingCart') s2 SET s1.value= CONCAT(s2.rtc,s1.value) WHERE s1.variable='UpdateItemLocationOnCheckin' AND s1.value NOT LIKE '%_ALL_: CART%';
18406     });
18407     $dbh->do(q{
18408         DELETE FROM systempreferences WHERE variable='ReturnToShelvingCart';
18409     });
18410     SetVersion( $DBversion );
18411     print "Upgrade to $DBversion done (Bug 14576: Add UpdateItemLocationOnCheckin syspref)\n";
18412 }
18413
18414 $DBversion = '18.12.00.065';
18415 if( CheckVersion( $DBversion ) ) {
18416     $dbh->do( q{
18417         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` )
18418         SELECT 'IndependentBranchesTransfers', value, NULL, 'Allow non-superlibrarians to transfer items between libraries','YesNo'
18419         FROM systempreferences WHERE variable = 'IndependentBranches'
18420     });
18421     SetVersion( $DBversion );
18422     print "Upgrade to $DBversion done (Bug 10300 - Allow transferring of items to be have separate IndependentBranches syspref)\n";
18423 }
18424
18425 $DBversion = '18.12.00.066';
18426 if ( CheckVersion($DBversion) ) {
18427     $dbh->do(q{
18428         INSERT IGNORE INTO `systempreferences` (`variable`, `value`, `explanation`, `options`, `type`) VALUES
18429           ('OpenURLResolverURL', '', 'URL of OpenURL Resolver', NULL, 'Free'),
18430           ('OpenURLText', '', 'Text of OpenURL links (or image title if OpenURLImageLocation is defined)', NULL, 'Free'),
18431           ('OpenURLImageLocation', '', 'Location of image for OpenURL links', NULL, 'Free'),
18432           ('OPACShowOpenURL', '', 'Enable display of OpenURL links in OPAC search results and detail page', NULL, 'YesNo'),
18433           ('OPACOpenURLItemTypes', '', 'Show the OpenURL link only for these item types', NULL, 'Free');
18434     });
18435
18436     SetVersion($DBversion);
18437     print
18438 "Upgrade to $DBversion done (Bug 8995 - Add new preferences for OpenURLResolvers)\n";
18439 }
18440
18441 $DBversion = '18.12.00.067';
18442 if ( CheckVersion($DBversion) ) {
18443     $dbh->do(q{
18444         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
18445         VALUES ('SendAllEmailsTo','',NULL,'All emails will be redirected to this email if it is not empty','free');
18446     });
18447     SetVersion($DBversion);
18448     print
18449 "Upgrade to $DBversion done (Bug 8000 - Add new preferences for SendAllEmailsTo)\n";
18450 }
18451
18452 $DBversion = '18.12.00.068';
18453 if ( CheckVersion($DBversion) ) {
18454     $dbh->do(q{
18455         INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES
18456         ('AllowRenewalOnHoldOverride','0','','If on, allow items on hold to be renewed with a specified due date','YesNo');
18457     });
18458     SetVersion($DBversion);
18459     print "Upgrade to $DBversion done (Bug 7088: Cannot renew items on hold even with override)\n";
18460 }
18461
18462 $DBversion = '18.12.00.069';
18463 if( CheckVersion( $DBversion ) ) {
18464
18465     $dbh->do(q{
18466         INSERT INTO plugin_data
18467             (plugin_class, plugin_key, plugin_value)
18468         SELECT
18469             plugin_class,
18470             '__ENABLED__',
18471             1
18472         FROM plugin_data
18473         WHERE plugin_key='__INSTALLED_VERSION__'
18474     });
18475
18476     # Always end with this (adjust the bug info)
18477     SetVersion( $DBversion );
18478     print "Upgrade to $DBversion done (Bug 22053 - enable all plugins)\n";
18479 }
18480
18481 $DBversion = '18.12.00.070';
18482 if ( CheckVersion($DBversion) ) {
18483     $dbh->do(q{
18484         INSERT IGNORE INTO systempreferences
18485             ( `variable`, `value`, `options`, `explanation`, `type` )
18486         VALUES
18487         ('SelfCheckAllowByIPRanges','',NULL,'(Leave blank if not used. Use ranges or simple ip addresses separated by spaces, like <code>192.168.1.1 192.168.0.0/24</code>.)','Short');
18488     });
18489     SetVersion($DBversion);
18490     print "Upgrade to $DBversion done (Bug 14407 - Limit web-based self-checkout to specific IP addresses)\n";
18491 }
18492
18493 $DBversion = '18.12.00.071';
18494 if( CheckVersion( $DBversion ) ) {
18495     $dbh->do(q{
18496 INSERT IGNORE INTO `letter` (`module`, `code`, `branchcode`, `name`, `is_html`, `title`, `content`, `message_transport_type`, `lang`) VALUES
18497 ('circulation', 'ACCOUNT_CREDIT', '', 'Account payment', 0, 'Account payment', '<table>
18498 [% IF ( LibraryName ) %]
18499  <tr>
18500     <th colspan="4" class="centerednames">
18501         <h3>[% LibraryName | html %]</h3>
18502     </th>
18503  </tr>
18504 [% END %]
18505  <tr>
18506     <th colspan="4" class="centerednames">
18507         <h2><u>Fee receipt</u></h2>
18508     </th>
18509  </tr>
18510  <tr>
18511     <th colspan="4" class="centerednames">
18512         <h2>[% Branches.GetName( patron.branchcode ) | html %]</h2>
18513     </th>
18514  </tr>
18515  <tr>
18516     <th colspan="4">
18517         Received with thanks from  [% patron.firstname | html %] [% patron.surname | html %] <br />
18518         Card number: [% patron.cardnumber | html %]<br />
18519     </th>
18520  </tr>
18521   <tr>
18522     <th>Date</th>
18523     <th>Description of charges</th>
18524     <th>Note</th>
18525     <th>Amount</th>
18526  </tr>
18527
18528   [% FOREACH account IN accounts %]
18529     <tr class="highlight">
18530       <td>[% account.date | $KohaDates %]</td>
18531       <td>
18532         [% PROCESS account_type_description account=account %]
18533         [%- IF account.description %], [% account.description | html %][% END %]
18534       </td>
18535       <td>[% account.note | html %]</td>
18536       [% IF ( account.amountcredit ) %]<td class="credit">[% ELSE %]<td class="debit">[% END %][% account.amount | $Price %]</td>
18537     </tr>
18538
18539   [% END %]
18540 <tfoot>
18541   <tr>
18542     <td colspan="3">Total outstanding dues as on date: </td>
18543     [% IF ( totalcredit ) %]<td class="credit">[% ELSE %]<td class="debit">[% END %][% total | $Price %]</td>
18544   </tr>
18545 </tfoot>
18546 </table>', 'print', 'default');
18547     });
18548     SetVersion( $DBversion );
18549     print "Upgrade to $DBversion done (Bug 22809 - Move 'ACCOUNT_CREDIT' from template to a slip)\n";
18550 }
18551
18552 $DBversion = '18.12.00.072';
18553 if( CheckVersion( $DBversion ) ) {
18554     $dbh->do(q{
18555 INSERT IGNORE INTO `letter` (`module`, `code`, `branchcode`, `name`, `is_html`, `title`, `content`, `message_transport_type`, `lang`) VALUES
18556 ('circulation', 'ACCOUNT_DEBIT', '', 'Account fee', 0, 'Account fee', '<table>
18557   [% IF ( LibraryName ) %]
18558     <tr>
18559       <th colspan="5" class="centerednames">
18560         <h3>[% LibraryName | html %]</h3>
18561       </th>
18562     </tr>
18563   [% END %]
18564
18565   <tr>
18566     <th colspan="5" class="centerednames">
18567       <h2><u>INVOICE</u></h2>
18568     </th>
18569   </tr>
18570   <tr>
18571     <th colspan="5" class="centerednames">
18572       <h2>[% Branches.GetName( patron.branchcode ) | html %]</h2>
18573     </th>
18574   </tr>
18575   <tr>
18576     <th colspan="5" >
18577       Bill to: [% patron.firstname | html %] [% patron.surname | html %] <br />
18578       Card number: [% patron.cardnumber | html %]<br />
18579     </th>
18580   </tr>
18581   <tr>
18582     <th>Date</th>
18583     <th>Description of charges</th>
18584     <th>Note</th>
18585     <th style="text-align:right;">Amount</th>
18586     <th style="text-align:right;">Amount outstanding</th>
18587   </tr>
18588
18589   [% FOREACH account IN accounts %]
18590     <tr class="highlight">
18591       <td>[% account.date | $KohaDates%]</td>
18592       <td>
18593         [% PROCESS account_type_description account=account %]
18594         [%- IF account.description %], [% account.description | html %][% END %]
18595       </td>
18596       <td>[% account.note | html %]</td>
18597       [% IF ( account.amountcredit ) %]<td class="credit">[% ELSE %]<td class="debit">[% END %][% account.amount | $Price %]</td>
18598       [% IF ( account.amountoutstandingcredit ) %]<td class="credit">[% ELSE %]<td class="debit">[% END %][% account.amountoutstanding | $Price %]</td>
18599     </tr>
18600   [% END %]
18601
18602   <tfoot>
18603     <tr>
18604       <td colspan="4">Total outstanding dues as on date: </td>
18605       [% IF ( totalcredit ) %]<td class="credit">[% ELSE %]<td class="debit">[% END %][% total | $Price %]</td>
18606     </tr>
18607   </tfoot>
18608 </table>', 'print', 'default');
18609     });
18610     SetVersion( $DBversion );
18611     print "Upgrade to $DBversion done (Bug 22809 - Move 'INVOICE' from template to a slip)\n";
18612 }
18613
18614 $DBversion = '18.12.00.073';
18615 if( CheckVersion( $DBversion ) ) {
18616     $dbh->do( q{
18617             INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES
18618             ('EmailPurchaseSuggestions','0','0|EmailAddressForSuggestions|BranchEmailAddress|KohaAdminEmailAddress','Choose email address that will be sent new purchase suggestions','Choice'),
18619             ('EmailAddressForSuggestions','','','If you choose EmailAddressForSuggestions you should enter a valid email address','free')
18620     });
18621
18622     $dbh->do( q{
18623             INSERT IGNORE INTO `letter` (module, code, name, title, content, is_html, message_transport_type) VALUES
18624             ('suggestions','NEW_SUGGESTION','New suggestion','New suggestion','<h3>Suggestion pending approval</h3>
18625                 <p><h4>Suggested by</h4>
18626                     <ul>
18627                         <li><<borrowers.firstname>> <<borrowers.surname>></li>
18628                         <li><<borrowers.cardnumber>></li>
18629                         <li><<borrowers.phone>></li>
18630                         <li><<borrowers.email>></li>
18631                     </ul>
18632                 </p>
18633                 <p><h4>Title suggested</h4>
18634                     <ul>
18635                         <li><b>Library:</b> <<branches.branchname>></li>
18636                         <li><b>Title:</b> <<suggestions.title>></li>
18637                         <li><b>Author:</b> <<suggestions.author>></li>
18638                         <li><b>Copyright date:</b> <<suggestions.copyrightdate>></li>
18639                         <li><b>Standard number (ISBN, ISSN or other):</b> <<suggestions.isbn>></li>
18640                         <li><b>Publisher:</b> <<suggestions.publishercode>></li>
18641                         <li><b>Collection title:</b> <<suggestions.collectiontitle>></li>
18642                         <li><b>Publication place:</b> <<suggestions.place>></li>
18643                         <li><b>Quantity:</b> <<suggestions.quantity>></li>
18644                         <li><b>Item type:</b> <<suggestions.itemtype>></li>
18645                         <li><b>Reason for suggestion:</b> <<suggestions.patronreason>></li>
18646                         <li><b>Notes:</b> <<suggestions.note>></li>
18647                     </ul>
18648                 </p>',1, 'email')
18649     });
18650
18651     SetVersion( $DBversion );
18652     print "Upgrade to $DBversion done (Bug 5770 - Email librarian when purchase suggestion made)\n";
18653 }
18654
18655 $DBversion = '18.12.00.074';
18656 if( CheckVersion( $DBversion ) ) {
18657     unless ( TableExists( 'keyboard_shortcuts' ) ) {
18658         $dbh->do(q|
18659             CREATE TABLE keyboard_shortcuts (
18660             shortcut_name varchar(80) NOT NULL,
18661             shortcut_keys varchar(80) NOT NULL,
18662             PRIMARY KEY (shortcut_name)
18663             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;|
18664         );
18665     }
18666     $dbh->do(q|
18667         INSERT IGNORE INTO keyboard_shortcuts (shortcut_name, shortcut_keys) VALUES
18668         ("insert_copyright","Alt-C"),
18669         ("insert_copyright_sound","Alt-P"),
18670         ("insert_delimiter","Ctrl-D"),
18671         ("subfield_help","Ctrl-H"),
18672         ("link_authorities","Shift-Ctrl-L"),
18673         ("delete_field","Ctrl-X"),
18674         ("delete_subfield","Shift-Ctrl-X"),
18675         ("new_line","Enter"),
18676         ("line_break","Shift-Enter"),
18677         ("next_position","Tab"),
18678         ("prev_position","Shift-Tab")
18679         ;|
18680     );
18681     $dbh->do(q|
18682         INSERT IGNORE permissions (module_bit, code, description)
18683         VALUES
18684         (3,'manage_keyboard_shortcuts','Manage keyboard shortcuts for advanced cataloging editor')
18685         ;|
18686     );
18687     SetVersion( $DBversion );
18688     print "Upgrade to $DBversion done (Bug 21411 - Add keyboard_shortcuts table)\n";
18689 }
18690
18691 $DBversion = '18.12.00.075';
18692 if( CheckVersion( $DBversion ) ) {
18693     # you can use $dbh here like:
18694     unless ( foreign_key_exists( 'tmp_holdsqueue', 'tmp_holdsqueue_ibfk_1' ) ) {
18695         $dbh->do(q{
18696             DELETE t FROM tmp_holdsqueue t
18697             LEFT JOIN items i ON t.itemnumber=i.itemnumber
18698             WHERE i.itemnumber IS NULL
18699         });
18700         $dbh->do(q{
18701             ALTER TABLE tmp_holdsqueue
18702             ADD CONSTRAINT `tmp_holdsqueue_ibfk_1` FOREIGN KEY (`itemnumber`)
18703             REFERENCES `items` (`itemnumber`) ON DELETE CASCADE ON UPDATE CASCADE
18704         });
18705     }
18706     SetVersion( $DBversion );
18707     print "Upgrade to $DBversion done (Bug 22899 - Add items constraint to tmp_holdsqueue)\n";
18708 }
18709
18710 $DBversion = '19.05.00.000';
18711 if( CheckVersion( $DBversion ) ) {
18712     SetVersion( $DBversion );
18713     print "Upgrade to $DBversion done (19.05.00 release)\n";
18714 }
18715
18716 $DBversion = '19.06.00.000';
18717 if( CheckVersion( $DBversion ) ) {
18718     SetVersion( $DBversion );
18719     print "Upgrade to $DBversion done (Wingardium Leviosa!)\n";
18720 }
18721
18722 $DBversion = '19.06.00.001';
18723 if( CheckVersion( $DBversion ) ) {
18724     $dbh->do( q{
18725         UPDATE systempreferences
18726         SET explanation = 'This is a list of value pairs.\n Examples:\n PROC: FIC - causes an item in the Processing Center location to be updated into the Fiction location on check in.\n FIC: GEN - causes an item in the Fiction location to be updated into the General stacks location on check in.\n _BLANK_:FIC - causes an item that has no location to be updated into the Fiction location on check in.\nFIC: _BLANK_ - causes an item in location FIC to be updated to a blank location on check in.\n_ALL_:FIC - causes all items to be updated into the Fiction location on check in.\nPROC: _PERM_ - causes an item that is in the Processing Center to be updated to it''s permanent location.\nGeneral rule: if the location value on the left matches the item''s current location, it will be updated to match the location value on the right.\nNote: PROC and CART are special values, for these locations only can location and permanent_location differ, in all other cases an update will affect both. Items in the CART location will be returned to their permanent location on checkout.\nThe special term _BLANK_ may be used on either side of a value pair to update or remove the location from items with no location assigned. The special term _ALL_ is used on the left side of the colon (:) to affect all items.\nThe special term _PERM_ is used on the right side of the colon (:) to return items to their permanent location.'
18727         WHERE variable = 'UpdateItemLocationOnCheckin'
18728     });
18729     SetVersion( $DBversion );
18730     print "Upgrade to $DBversion done (Bug 22960: Fix typo in syspref description)\n";
18731 }
18732
18733 $DBversion = '19.06.00.002';
18734 if ( CheckVersion($DBversion) ) {
18735
18736     $dbh->do(q{ALTER TABLE subscriptionhistory CHANGE opacnote opacnote LONGTEXT NULL});
18737     $dbh->do(q{ALTER TABLE subscriptionhistory CHANGE librariannote librariannote LONGTEXT NULL});
18738
18739     $dbh->do(q{UPDATE subscriptionhistory SET opacnote = NULL WHERE opacnote = ''});
18740     $dbh->do(q{UPDATE subscriptionhistory SET librariannote = NULL WHERE librariannote = ''});
18741
18742     SetVersion ($DBversion);
18743     print "Upgrade to $DBversion done (Bug 10215: Increase the size of opacnote and librariannote for table subscriptionhistory)\n";
18744 }
18745
18746 $DBversion = '19.06.00.003';
18747 if( CheckVersion( $DBversion ) ) {
18748     $dbh->do(q{UPDATE systempreferences SET value = REPLACE( value, ' ', '|' ) WHERE variable = 'UniqueItemFields'; });
18749
18750     SetVersion( $DBversion );
18751     print "Upgrade to $DBversion done (Bug 22867: UniqueItemFields preference value should be pipe-delimited)\n";
18752 }
18753
18754 $DBversion = '19.06.00.004';
18755 if( CheckVersion( $DBversion ) ) {
18756     $dbh->do( 'UPDATE language_descriptions SET description = "Griechisch (Modern 1453-)"
18757       WHERE subtag = "el" and type = "language" and lang ="de"' );
18758     SetVersion( $DBversion );
18759     print "Upgrade to $DBversion done (Bug 22770: Fix typo in language description for el in German)\n";
18760 }
18761
18762 $DBversion = '19.06.00.005';
18763 if( CheckVersion( $DBversion ) ) {
18764     unless ( column_exists( 'reserves', 'item_level_hold' ) ) {
18765         $dbh->do( "ALTER TABLE reserves ADD COLUMN item_level_hold BOOLEAN NOT NULL DEFAULT 0 AFTER itemtype" );
18766     }
18767     unless ( column_exists( 'old_reserves', 'item_level_hold' ) ) {
18768         $dbh->do( "ALTER TABLE old_reserves ADD COLUMN item_level_hold BOOLEAN NOT NULL DEFAULT 0 AFTER itemtype" );
18769     }
18770
18771     SetVersion( $DBversion );
18772     print "Upgrade to $DBversion done (Bug  9834: Add the reserves.item_level_hold column)\n";
18773 }
18774
18775 $DBversion = '19.06.00.006';
18776 if( CheckVersion( $DBversion ) ) {
18777
18778     unless ( TableExists('plugin_methods') ) {
18779         $dbh->do(q{
18780             CREATE TABLE plugin_methods (
18781               plugin_class varchar(255) NOT NULL,
18782               plugin_method varchar(255) NOT NULL,
18783               PRIMARY KEY ( `plugin_class` (191), `plugin_method` (191) )
18784             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
18785         });
18786     }
18787
18788     require Koha::Plugins;
18789     Koha::Plugins->new({ enable_plugins => 1 })->InstallPlugins;
18790
18791     SetVersion( $DBversion );
18792     print "Upgrade to $DBversion done (Bug 21073: Improve plugin performance)\n";
18793 }
18794
18795 $DBversion = '19.06.00.007';
18796 if( CheckVersion( $DBversion ) ) {
18797     $dbh->do( "DELETE FROM systempreferences WHERE variable = 'RotationPreventTransfers'" );
18798     SetVersion( $DBversion );
18799     print "Upgrade to $DBversion done (Bug 22653: Remove unimplemented RotationPreventTransfers system preference)\n";
18800 }
18801
18802 $DBversion = '19.06.00.008';
18803 if( CheckVersion( $DBversion ) ) {
18804     $dbh->do( "UPDATE userflags SET flagdesc = 'Allow staff members to modify permissions and passwords for other staff members' WHERE flag = 'staffaccess'" );
18805     SetVersion( $DBversion );
18806     print "Upgrade to $DBversion done (Bug 23109: Improve description of staffaccess permission)\n";
18807 }
18808
18809 $DBversion = '19.06.00.009';
18810 if( CheckVersion( $DBversion ) ) {
18811     $dbh->do(q{
18812         INSERT IGNORE INTO keyboard_shortcuts (shortcut_name, shortcut_keys)
18813             VALUES ("toggle_keyboard", "Shift-Ctrl-K")
18814     });
18815
18816     SetVersion( $DBversion );
18817     print "Upgrade to $DBversion done (Bug 17178: add shortcut to keyboard_shortcuts)\n";
18818 }
18819
18820 $DBversion = '19.06.00.010';
18821 if( CheckVersion( $DBversion ) ) {
18822
18823     if ( TableExists('default_circ_rules') ) {
18824         if ( column_exists( 'default_circ_rules', 'holdallowed' ) ) {
18825             $dbh->do("
18826                 INSERT IGNORE INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
18827                 SELECT NULL, NULL, NULL, 'holdallowed', holdallowed
18828                 FROM default_circ_rules
18829             ");
18830             $dbh->do("
18831                 INSERT IGNORE INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
18832                 SELECT NULL, NULL, NULL, 'hold_fulfillment_policy', hold_fulfillment_policy
18833                 FROM default_circ_rules
18834             ");
18835             $dbh->do("
18836                 INSERT IGNORE INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
18837                 SELECT NULL, NULL, NULL, 'returnbranch', returnbranch
18838                 FROM default_circ_rules
18839             ");
18840             $dbh->do("DROP TABLE default_circ_rules");
18841         }
18842     }
18843
18844     if ( TableExists('default_branch_circ_rules') ) {
18845         if ( column_exists( 'default_branch_circ_rules', 'holdallowed' ) ) {
18846             $dbh->do("
18847                 INSERT IGNORE INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
18848                 SELECT NULL, branchcode, NULL, 'holdallowed', holdallowed
18849                 FROM default_branch_circ_rules
18850             ");
18851             $dbh->do("
18852                 INSERT IGNORE INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
18853                 SELECT NULL, branchcode, NULL, 'hold_fulfillment_policy', hold_fulfillment_policy
18854                 FROM default_branch_circ_rules
18855             ");
18856             $dbh->do("
18857                 INSERT IGNORE INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
18858                 SELECT NULL, branchcode, NULL, 'returnbranch', returnbranch
18859                 FROM default_branch_circ_rules
18860             ");
18861             $dbh->do("DROP TABLE default_branch_circ_rules");
18862         }
18863     }
18864
18865     if ( TableExists('branch_item_rules') ) {
18866         if ( column_exists( 'branch_item_rules', 'holdallowed' ) ) {
18867             $dbh->do("
18868                 INSERT IGNORE INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
18869                 SELECT NULL, branchcode, itemtype, 'holdallowed', holdallowed
18870                 FROM branch_item_rules
18871             ");
18872             $dbh->do("
18873                 INSERT IGNORE INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
18874                 SELECT NULL, branchcode, itemtype, 'hold_fulfillment_policy', hold_fulfillment_policy
18875                 FROM branch_item_rules
18876             ");
18877             $dbh->do("
18878                 INSERT IGNORE INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
18879                 SELECT NULL, branchcode, itemtype, 'returnbranch', returnbranch
18880                 FROM branch_item_rules
18881             ");
18882             $dbh->do("DROP TABLE branch_item_rules");
18883         }
18884     }
18885
18886     if ( TableExists('default_branch_item_rules') ) {
18887         if ( column_exists( 'default_branch_item_rules', 'holdallowed' ) ) {
18888             $dbh->do("
18889                 INSERT IGNORE INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
18890                 SELECT NULL, NULL, itemtype, 'holdallowed', holdallowed
18891                 FROM default_branch_item_rules
18892             ");
18893             $dbh->do("
18894                 INSERT IGNORE INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
18895                 SELECT NULL, NULL, itemtype, 'hold_fulfillment_policy', hold_fulfillment_policy
18896                 FROM default_branch_item_rules
18897             ");
18898             $dbh->do("
18899                 INSERT IGNORE INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
18900                 SELECT NULL, NULL, itemtype, 'returnbranch', returnbranch
18901                 FROM default_branch_item_rules
18902             ");
18903             $dbh->do("DROP TABLE default_branch_item_rules");
18904         }
18905     }
18906
18907     SetVersion( $DBversion );
18908     print "Upgrade to $DBversion done (Bug 18928: Move holdallowed, hold_fulfillment_policy, returnbranch to circulation_rules)\n";
18909 }
18910
18911 $DBversion = '19.06.00.011';
18912 if( CheckVersion( $DBversion ) ) {
18913
18914     if ( TableExists('refund_lost_item_fee_rules') ) {
18915         if ( column_exists( 'refund_lost_item_fee_rules', 'refund' ) ) {
18916             $dbh->do("
18917                 INSERT INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
18918                 SELECT NULL, IF(branchcode='*', NULL, branchcode), NULL, 'refund', refund
18919                 FROM refund_lost_item_fee_rules
18920             ");
18921             $dbh->do("DROP TABLE refund_lost_item_fee_rules");
18922         }
18923     }
18924
18925     SetVersion( $DBversion );
18926     print "Upgrade to $DBversion done (Bug 18930: Move lost item refund rules to circulation_rules table)\n";
18927 }
18928
18929 $DBversion = '19.06.00.012';
18930 if ( CheckVersion($DBversion) ) {
18931
18932     # Find and correct pathological cases of LR becoming a credit
18933     my $sth = $dbh->prepare( "SELECT accountlines_id, issue_id, borrowernumber, itemnumber, amount, manager_id FROM accountlines WHERE accounttype = 'LR' AND amount < 0" );
18934     $sth->execute();
18935     while ( my $row = $sth->fetchrow_hashref ) {
18936         $dbh->do(
18937             "INSERT INTO accountlines (accounttype, issue_id, borrowernumber, itemnumber, amount, manager_id, interface) VALUES ( ?, ?, ?, ?, ?, ?, ? );",
18938             {},
18939             (
18940                 'CR',                   $row->{issue_id},
18941                 $row->{borrowernumber}, $row->{itemnumber},
18942                 $row->{amount},         $row->{manager_id},
18943                 'upgrade'
18944             )
18945         );
18946         my $credit_id = $dbh->last_insert_id(undef, undef, 'accountlines', undef);
18947         my $amount = $row->{amount} * -1;
18948         $dbh->do("INSERT INTO account_offsets (credit_id, debit_id, type, amount) VALUES (?,?,?,?);",{},($credit_id, $row->{accountlines_id}, 'Lost Item', $amount));
18949         $dbh->do("UPDATE accountlines SET amount = '$amount' WHERE accountlines_id = '$row->{accountlines_id}';");
18950     }
18951
18952     $dbh->do(qq{
18953         UPDATE
18954           accountlines
18955         SET
18956           accounttype = 'LOST',
18957           status = 'RETURNED'
18958         WHERE
18959           accounttype = 'LR';
18960     });
18961
18962     # Find and correct pathalogical cases of L having been converted to W
18963     $sth = $dbh->prepare( "SELECT accountlines_id, issue_id, borrowernumber, itemnumber, amount, manager_id FROM accountlines WHERE accounttype = 'W' AND itemnumber IS NOT NULL" );
18964     $sth->execute();
18965     while ( my $row = $sth->fetchrow_hashref ) {
18966         my $amount = $row->{amount} * -1;
18967         $dbh->do(
18968             "INSERT INTO accountlines (accounttype, issue_id, borrowernumber, itemnumber, amount, manager_id, interface) VALUES ( ?, ?, ?, ?, ?, ?, ? );",
18969             {},
18970             (
18971                 'LOST', $row->{issue_id}, $row->{borrowernumber},
18972                 $row->{itemnumber}, $amount, $row->{manager_id},
18973                 'upgrade'
18974             )
18975         );
18976         my $debit_id = $dbh->last_insert_id(undef, undef, 'accountlines', undef);
18977         $dbh->do(
18978             "INSERT INTO account_offsets (credit_id, debit_id, type, amount) VALUES (?,?,?,?);",
18979             {},
18980             (
18981                 $row->{accountlines_id}, $debit_id,
18982                 'Lost Item',    $amount
18983             )
18984         );
18985     }
18986
18987     $dbh->do(qq{
18988         UPDATE
18989           accountlines
18990         SET
18991           accounttype = 'LOST'
18992         WHERE
18993           accounttype = 'L';
18994     });
18995
18996     $dbh->do(qq{
18997         UPDATE
18998           accountlines
18999         SET
19000           accounttype = 'LOST_RETURN'
19001         WHERE
19002           accounttype = 'CR';
19003     });
19004
19005     SetVersion($DBversion);
19006     print "Upgrade to $DBversion done (Bug 22563: Fix accounttypes for 'L', 'LR' and 'CR')\n";
19007 }
19008
19009 $DBversion = '19.06.00.013';
19010 if ( CheckVersion( $DBversion ) ) {
19011     unless ( column_exists( 'borrower_modifications', 'changed_fields' ) ) {
19012         $dbh->do("ALTER TABLE borrower_modifications ADD changed_fields MEDIUMTEXT AFTER verification_token;");
19013     }
19014     SetVersion( $DBversion );
19015     print "Upgrade to $DBversion done (Bug 23151: Add borrower_modifications.changed_fields column)\n";
19016 }
19017
19018 $DBversion = '19.06.00.014';
19019 if ( CheckVersion($DBversion) ) {
19020
19021     $dbh->do(qq{
19022         UPDATE
19023           accountlines
19024         SET
19025           accounttype = 'RENT_DAILY_RENEW'
19026         WHERE
19027           accounttype = 'Rent'
19028         AND
19029           description LIKE 'Renewal of Daily Rental Item%';
19030     });
19031
19032     $dbh->do(qq{
19033         UPDATE
19034           accountlines
19035         SET
19036           accounttype = 'RENT_DAILY'
19037         WHERE
19038           accounttype = 'Rent'
19039         AND
19040           description LIKE 'Daily rental';
19041     });
19042
19043
19044     $dbh->do(qq{
19045         UPDATE
19046           accountlines
19047         SET
19048           accounttype = 'RENT_RENEW'
19049         WHERE
19050           accounttype = 'Rent'
19051         AND
19052           description LIKE 'Renewal of Rental Item%';
19053     });
19054
19055     $dbh->do(qq{
19056         UPDATE
19057           accountlines
19058         SET
19059           accounttype = 'RENT'
19060         WHERE
19061           accounttype = 'Rent';
19062     });
19063
19064     SetVersion($DBversion);
19065     print "Upgrade to $DBversion done (Bug 11573: Fix accounttypes for 'Rent')\n";
19066 }
19067
19068 $DBversion = '19.06.00.015';
19069 if( CheckVersion( $DBversion ) ) {
19070     $dbh->do( "UPDATE `search_field` SET `name` = 'date-time-last-modified', `label` = 'date-time-last-modified' WHERE `name` = 'date/time-last-modified'" );
19071
19072     SetVersion( $DBversion );
19073     print "Upgrade to $DBversion done (Bug 22524: Fix date/time-last-modified search with Elasticsearch)\n";
19074 }
19075
19076 $DBversion = '19.06.00.016';
19077 if( CheckVersion( $DBversion ) ) {
19078
19079     $dbh->do(q|
19080         INSERT IGNORE INTO keyboard_shortcuts (shortcut_name, shortcut_keys) VALUES
19081             ("insert_copyright","Alt-C"),
19082             ("insert_copyright_sound","Alt-P"),
19083             ("insert_delimiter","Ctrl-D"),
19084             ("subfield_help","Ctrl-H"),
19085             ("link_authorities","Shift-Ctrl-L"),
19086             ("delete_field","Ctrl-X"),
19087             ("delete_subfield","Shift-Ctrl-X"),
19088             ("new_line","Enter"),
19089             ("line_break","Shift-Enter"),
19090             ("next_position","Tab"),
19091             ("prev_position","Shift-Tab"),
19092             ("toggle_keyboard", "Shift-Ctrl-K")
19093     ;|);
19094
19095     SetVersion( $DBversion );
19096     print "Upgrade to $DBversion done (Bug 23396: Fix missing keyboard_shortcuts table)\n";
19097 }
19098
19099 $DBversion = '19.06.00.017';
19100 if ( CheckVersion($DBversion) ) {
19101
19102     $dbh->do(qq{
19103         INSERT INTO
19104           authorised_values (category,authorised_value,lib)
19105         VALUES
19106           ('PAYMENT_TYPE','SIP00','Cash via SIP2'),
19107           ('PAYMENT_TYPE','SIP01','VISA via SIP2'),
19108           ('PAYMENT_TYPE','SIP02','Creditcard via SIP2')
19109     });
19110
19111     $dbh->do(qq{
19112         UPDATE
19113           accountlines
19114         SET
19115           accounttype  = 'Pay',
19116           payment_type = 'SIP00'
19117         WHERE
19118           accounttype = 'Pay00';
19119     });
19120
19121     $dbh->do(qq{
19122         UPDATE
19123           accountlines
19124         SET
19125           accounttype  = 'Pay',
19126           payment_type = 'SIP01'
19127         WHERE
19128           accounttype = 'Pay01';
19129     });
19130
19131     $dbh->do(qq{
19132         UPDATE
19133           accountlines
19134         SET
19135           accounttype  = 'Pay',
19136           payment_type = 'SIP02'
19137         WHERE
19138           accounttype = 'Pay02';
19139     });
19140
19141     my $sth = $dbh->prepare( q{SELECT * FROM accountlines WHERE accounttype REGEXP '^Pay[[:digit:]]{2}$' } );
19142     $sth->execute();
19143     my $seen = {};
19144     while (my $row = $sth->fetchrow_hashref) {
19145         my $type = $row->{accounttype};
19146         my $sipcode = $type;
19147         $sipcode =~ s/Pay/SIP/g;
19148         unless ($seen->{$sipcode}) {
19149             $dbh->do(qq{
19150                 INSERT INTO
19151                   authorised_values (category,authorised_value,lib)
19152                 VALUES
19153                   ('PAYMENT_TYPE',"$sipcode",'Unrecognised SIP2 payment type')
19154             });
19155
19156              $dbh->do(qq{
19157                 UPDATE
19158                   accountlines
19159                 SET
19160                   accounttype  = 'Pay',
19161                   payment_type = "$sipcode"
19162                 WHERE
19163                   accounttype = "$type";
19164             });
19165
19166             $seen->{$sipcode} = 1;
19167         }
19168     }
19169
19170     SetVersion($DBversion);
19171     print "Upgrade to $DBversion done (Bug 22610: Fix accounttypes for SIP2 payments)\n";
19172 }
19173
19174 $DBversion = '19.06.00.018';
19175 if( CheckVersion( $DBversion ) ) {
19176     if( !column_exists( 'biblio', 'subtitle' ) ) {
19177         $dbh->do( "ALTER TABLE biblio ADD COLUMN medium LONGTEXT AFTER title" );
19178         $dbh->do( "ALTER TABLE biblio ADD COLUMN subtitle LONGTEXT AFTER medium" );
19179         $dbh->do( "ALTER TABLE biblio ADD COLUMN part_number LONGTEXT AFTER subtitle" );
19180         $dbh->do( "ALTER TABLE biblio ADD COLUMN part_name LONGTEXT AFTER part_number" );
19181
19182         $dbh->do( "ALTER TABLE deletedbiblio ADD COLUMN medium LONGTEXT AFTER title" );
19183         $dbh->do( "ALTER TABLE deletedbiblio ADD COLUMN subtitle LONGTEXT AFTER medium" );
19184         $dbh->do( "ALTER TABLE deletedbiblio ADD COLUMN part_number LONGTEXT AFTER subtitle" );
19185         $dbh->do( "ALTER TABLE deletedbiblio ADD COLUMN part_name LONGTEXT AFTER part_number" );
19186     }
19187
19188     $dbh->do( "UPDATE marc_subfield_structure SET kohafield='biblio.subtitle' WHERE kohafield='bibliosubtitle.subtitle'" );
19189
19190     my $marcflavour = C4::Context->preference('marcflavour');
19191
19192     if ( $marcflavour eq 'UNIMARC' ) {
19193         $dbh->do(qq{
19194             UPDATE marc_subfield_structure SET kohafield='biblio.medium'
19195             WHERE (kohafield IS NULL OR kohafield='') AND frameworkcode='' AND tagfield='200' AND tagsubfield='b'
19196         });
19197         $dbh->do(qq{
19198             UPDATE marc_subfield_structure SET kohafield='biblio.subtitle'
19199             WHERE (kohafield IS NULL OR kohafield='') AND frameworkcode='' AND tagfield='200' AND tagsubfield='e'
19200         });
19201         $dbh->do(qq{
19202             UPDATE marc_subfield_structure SET kohafield='biblio.part_number'
19203             WHERE (kohafield IS NULL OR kohafield='') AND frameworkcode='' AND tagfield='200' AND tagsubfield='h'
19204         });
19205         $dbh->do(qq{
19206             UPDATE marc_subfield_structure SET kohafield='biblio.part_name'
19207             WHERE (kohafield IS NULL OR kohafield='') AND frameworkcode='' AND tagfield='200' AND tagsubfield='i'
19208         });
19209     } else {
19210         $dbh->do(qq{
19211             UPDATE marc_subfield_structure SET kohafield='biblio.medium'
19212             WHERE (kohafield IS NULL OR kohafield='') AND frameworkcode='' AND tagfield='245' AND tagsubfield='h'
19213         });
19214         $dbh->do(qq{
19215             UPDATE marc_subfield_structure SET kohafield='biblio.subtitle'
19216             WHERE (kohafield IS NULL OR kohafield='') AND frameworkcode='' AND tagfield='245' AND tagsubfield='b'
19217         });
19218         $dbh->do(qq{
19219             UPDATE marc_subfield_structure SET kohafield='biblio.part_number'
19220             WHERE (kohafield IS NULL OR kohafield='') AND frameworkcode='' AND tagfield='245' AND tagsubfield='n'
19221         });
19222         $dbh->do(qq{
19223             UPDATE marc_subfield_structure SET kohafield='biblio.part_name'
19224             WHERE (kohafield IS NULL OR kohafield='') AND frameworkcode='' AND tagfield='245' AND tagsubfield='p'
19225         });
19226     }
19227
19228     $sth = $dbh->prepare("SELECT * FROM fieldmapping");
19229     $sth->execute;
19230     my @fails_11529;
19231     if ( $sth->rows ) {
19232         while ( my $value = $sth->fetchrow_hashref() ) {
19233             my $framework =
19234               $value->{frameworkcode} eq ""
19235               ? "Default"
19236               : $value->{frameworkcode};
19237             push @fails_11529,
19238               {
19239                 field        => $value->{field},
19240                 fieldcode    => $value->{fieldcode},
19241                 subfieldcode => $value->{subfieldcode},
19242                 framework    => $framework
19243               };
19244         }
19245     }
19246
19247     $dbh->do( "DROP TABLE IF EXISTS fieldmapping" );
19248
19249     $dbh->do( "DELETE FROM user_permissions WHERE code='manage_keywords2koha_mappings'" );
19250
19251     $dbh->do( "DELETE FROM permissions WHERE code='manage_keywords2koha_mappings'" );
19252
19253     # Always end with this (adjust the bug info)
19254     SetVersion( $DBversion );
19255     print "Upgrade to $DBversion done (Bug 11529: Add medium, subtitle and part information to biblio table)\n";
19256     if ( @fails_11529 ) {
19257         print "WARNING: Keyword to MARC Mappings:\n";
19258         for my $fail_11529 ( @fails_11529 ) {
19259             print "    keyword: "
19260               . $fail_11529->{field}
19261               . " to field: "
19262               . $fail_11529->{fieldcode} . "\$"
19263               . $fail_11529->{subfieldcode} . " for "
19264               . $fail_11529->{framework}
19265               . " framework\n";
19266         }
19267         print "The keyword to marc mapping feature is no longer supported. Above find the\n";
19268         print "mappings that had been defined in your system. You will need to remap any\n";
19269         print "desired MARC fields to the Koha field you desire in the Koha to MARC mappings\n";
19270         print "page under Administration\n";
19271     }
19272     print "NOTE: misc/batchRebuildBiblioTables.pl should be run to populate the fields introduced in bug 11529. It may take some time for larger databases.\n\n"
19273 }
19274
19275 $DBversion = '19.06.00.019';
19276 if ( CheckVersion($DBversion) ) {
19277     $dbh->do(q{
19278         INSERT IGNORE INTO systempreferences (variable, value, options, explanation, type)
19279         VALUES
19280           (
19281             'FinePaymentAutoPopup',
19282             '0',
19283             NULL,
19284             'If enabled, automatically display a print dialog for a payment receipt when making a payment.',
19285             'YesNo'
19286           )
19287     });
19288
19289     SetVersion($DBversion);
19290     print
19291 "Upgrade to $DBversion done (Bug 23228: Add option to automatically display payment receipt for printing after making a payment)\n";
19292 }
19293
19294 $DBversion = '19.06.00.020';
19295 if( CheckVersion( $DBversion ) ) {
19296     $dbh->do(q|
19297         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
19298         ('PreserveSerialNotes','1','','When a new "Expected" issue is generated, should it be prefilled with last created issue notes?','YesNo');
19299     |);
19300
19301     SetVersion( $DBversion );
19302     print "Upgrade to $DBversion done (Bug 23416: Add PreserveSerialNotes syspref)\n";
19303 }
19304
19305 $DBversion = '19.06.00.021';
19306 if( CheckVersion( $DBversion ) ) {
19307
19308     $dbh->do(q|
19309         ALTER TABLE marc_subfield_structure CHANGE COLUMN hidden hidden TINYINT(1) DEFAULT 8 NOT NULL;
19310     |);
19311     # Always end with this (adjust the bug info)
19312     SetVersion( $DBversion );
19313     print "Upgrade to $DBversion done (Bug 23309: Can't add new subfields to bibliographic frameworks in strict mode)\n";
19314 }
19315
19316 $DBversion = '19.06.00.022';
19317 if ( CheckVersion($DBversion) ) {
19318
19319     unless ( TableExists('borrower_relationships') ) {
19320         $dbh->do(q{
19321             CREATE TABLE `borrower_relationships` (
19322                   id INT(11) NOT NULL AUTO_INCREMENT,
19323                   guarantor_id INT(11) NOT NULL,
19324                   guarantee_id INT(11) NOT NULL,
19325                   relationship VARCHAR(100) NOT NULL,
19326                   PRIMARY KEY (id),
19327                   UNIQUE KEY `guarantor_guarantee_idx` ( `guarantor_id`, `guarantee_id` ),
19328                   CONSTRAINT r_guarantor FOREIGN KEY ( guarantor_id ) REFERENCES borrowers ( borrowernumber ) ON UPDATE CASCADE ON DELETE CASCADE,
19329                   CONSTRAINT r_guarantee FOREIGN KEY ( guarantee_id ) REFERENCES borrowers ( borrowernumber ) ON UPDATE CASCADE ON DELETE CASCADE
19330             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
19331         });
19332
19333         $dbh->do(q{
19334             UPDATE borrowers
19335             LEFT JOIN borrowers guarantor ON ( borrowers.guarantorid = guarantor.borrowernumber )
19336             SET borrowers.guarantorid = NULL WHERE guarantor.borrowernumber IS NULL;
19337         });
19338
19339         # Bad data handling: guarantorid IS NOT NULL AND relationship IS NULL
19340         $dbh->do(q{
19341             UPDATE borrowers
19342             SET relationship = '_bad_data'
19343             WHERE guarantorid IS NOT NULL AND
19344                   relationship IS NULL
19345         });
19346
19347         $dbh->do(q{
19348             INSERT INTO borrower_relationships ( guarantor_id, guarantee_id, relationship )
19349             SELECT guarantorid, borrowernumber, relationship FROM borrowers WHERE guarantorid IS NOT NULL;
19350         });
19351
19352         # Clean migrated guarantor data
19353         $dbh->do(q{
19354             UPDATE borrowers
19355             SET contactname=NULL,
19356                 contactfirstname=NULL,
19357                 relationship=NULL
19358             WHERE guarantorid IS NOT NULL
19359         });
19360     }
19361
19362     if ( column_exists( 'borrowers', 'guarantorid' ) ) {
19363         $dbh->do(q{
19364             ALTER TABLE borrowers DROP guarantorid;
19365         });
19366     }
19367
19368     if ( column_exists( 'deletedborrowers', 'guarantorid' ) ) {
19369         $dbh->do(q{
19370             ALTER TABLE deletedborrowers DROP guarantorid;
19371         });
19372     }
19373
19374     if ( column_exists( 'borrower_modifications', 'guarantorid' ) ) {
19375         $dbh->do(q{
19376             ALTER TABLE borrower_modifications DROP guarantorid;
19377         });
19378     }
19379
19380     SetVersion($DBversion);
19381     print "Upgrade to $DBversion done (Bug 14570: Make it possible to add multiple guarantors to a record)\n";
19382 }
19383
19384 $DBversion = '19.06.00.023';
19385 if( CheckVersion( $DBversion ) ) {
19386     $dbh->do(q{
19387         INSERT IGNORE INTO `systempreferences` (`variable`,`value`,`explanation`,`options`,`type`) VALUES
19388         ('ElasticsearchMARCFormat', 'ISO2709', 'ISO2709|ARRAY', 'Elasticsearch MARC format. ISO2709 format is recommended as it is faster and takes less space, whereas array is searchable.', 'Choice')
19389     });
19390
19391     SetVersion( $DBversion );
19392     print "Upgrade to $DBversion done (Bug 22258: Add ElasticsearchMARCFormat preference)\n";
19393 }
19394
19395 $DBversion = '19.06.00.024';
19396 if( CheckVersion( $DBversion ) ) {
19397     $dbh->do(q{ALTER TABLE accountlines CHANGE COLUMN accounttype accounttype varchar(80) default NULL});
19398
19399     SetVersion( $DBversion );
19400     print "Upgrade to $DBversion done (Bug 23539: accountlines.accounttype should match authorised_values.authorised_value in size)\n";
19401 }
19402
19403 $DBversion = '19.06.00.025';
19404 if( CheckVersion( $DBversion ) ) {
19405     $dbh->do( q/INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES (?, ?, ?, ?, ?)/, undef, 'BarcodeSeparators','\s\r\n','','Splitting characters for barcodes','Free' );
19406     SetVersion( $DBversion );
19407     print "Upgrade to $DBversion done (Bug 22996: Add pref BarcodeSeparators)\n";
19408 }
19409
19410 $DBversion = '19.06.00.026';
19411 if( CheckVersion( $DBversion ) ) {
19412
19413     unless ( column_exists( 'borrowers', 'privacy_guarantor_fines' ) ) {
19414         $dbh->do(q{
19415             ALTER TABLE borrowers
19416                 ADD privacy_guarantor_fines TINYINT(1) NOT NULL DEFAULT '0' AFTER privacy;
19417         });
19418     }
19419
19420     unless ( column_exists( 'deletedborrowers', 'privacy_guarantor_fines' ) ) {
19421         $dbh->do(q{
19422             ALTER TABLE deletedborrowers
19423                 ADD privacy_guarantor_fines TINYINT(1) NOT NULL DEFAULT '0' AFTER privacy;
19424         });
19425     }
19426
19427     $dbh->do(q{
19428         INSERT IGNORE INTO systempreferences (variable, value, options, explanation, type )
19429         VALUES (
19430             'AllowStaffToSetFinesVisibilityForGuarantor',  '0', NULL,
19431             'If enabled, library staff can set a patron''s fines to be visible to linked patrons from the opac.',  'YesNo'
19432         ), (
19433             'AllowPatronToSetFinesVisibilityForGuarantor',  '0', NULL,
19434             'If enabled, the patron can set fines to be visible to  his or her guarantor',  'YesNo'
19435         )
19436     });
19437
19438     SetVersion( $DBversion );
19439     print "Upgrade to $DBversion done (Bug 20691: Add ability for guarantors to view guarantee's fines in OPAC)\n";
19440 }
19441
19442 $DBversion = '19.06.00.027';
19443 if( CheckVersion( $DBversion ) ) {
19444
19445     if( !TableExists( 'itemtypes_branches' ) ) {
19446        $dbh->do( "
19447             CREATE TABLE itemtypes_branches( -- association table between authorised_values and branches
19448                 itemtype VARCHAR(10) NOT NULL,
19449                 branchcode VARCHAR(10) NOT NULL,
19450                 FOREIGN KEY (itemtype) REFERENCES itemtypes(itemtype) ON DELETE CASCADE,
19451                 FOREIGN KEY (branchcode) REFERENCES branches(branchcode) ON DELETE CASCADE
19452             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
19453         ");
19454     }
19455
19456     SetVersion( $DBversion );
19457     print "Upgrade to $DBversion done (Bug 15497: Add itemtypes_branches table)\n";
19458 }
19459
19460 $DBversion = '19.06.00.028';
19461 if ( CheckVersion($DBversion) ) {
19462
19463     $dbh->do(qq{
19464         UPDATE
19465           accountlines
19466         SET
19467           accounttype = 'ACCOUNT'
19468         WHERE
19469           accounttype = 'A';
19470     });
19471
19472     SetVersion($DBversion);
19473     print "Upgrade to $DBversion done (Bug 11573: Fix accounttypes for 'A')\n";
19474 }
19475
19476 $DBversion = '19.06.00.029';
19477 if ( CheckVersion($DBversion) ) {
19478
19479     unless ( TableExists( 'cash_registers' ) ) {
19480         $dbh->do(qq{
19481     CREATE TABLE `cash_registers` (
19482     `id` int(11) NOT NULL auto_increment, -- unique identifier for each account register
19483     `name` varchar(24) NOT NULL, -- the user friendly identifier for each account register
19484     `description` longtext NOT NULL, -- the user friendly description for each account register
19485     `branch` varchar(10) NOT NULL, -- the foreign key the library this account register belongs
19486     `branch_default` tinyint(1) NOT NULL DEFAULT 0, -- boolean flag to denote that this till is the branch default
19487     `starting_float` decimal(28, 6), -- the starting float this account register should be assigned
19488     `archived` tinyint(1) NOT NULL DEFAULT 0, -- boolean flag to denote if this till is archived or not
19489     PRIMARY KEY (`id`),
19490     UNIQUE KEY `name` (`name`,`branch`),
19491     CONSTRAINT cash_registers_branch FOREIGN KEY (branch) REFERENCES branches (branchcode) ON UPDATE CASCADE ON DELETE CASCADE
19492     ) ENGINE = InnoDB DEFAULT CHARSET = utf8mb4 COLLATE = utf8mb4_unicode_ci;
19493         });
19494     }
19495
19496     unless ( column_exists( 'accountlines', 'register_id' ) ) {
19497         $dbh->do(qq{ALTER TABLE `accountlines` ADD `register_id` int(11) NULL DEFAULT NULL AFTER `manager_id`});
19498         $dbh->do(qq{
19499             ALTER TABLE `accountlines`
19500             ADD CONSTRAINT `accountlines_ibfk_registers` FOREIGN KEY (`register_id`)
19501             REFERENCES `cash_registers` (`id`) ON DELETE SET NULL ON UPDATE CASCADE
19502         });
19503     }
19504
19505     $dbh->do(qq{
19506         INSERT IGNORE INTO `userflags` (`bit`, `flag`, `flagdesc`, `defaulton`)
19507         VALUES (25, 'cash_management', 'Cash management', 0)
19508     });
19509
19510     $dbh->do(qq{
19511         INSERT IGNORE permissions (module_bit, code, description)
19512         VALUES
19513         (25, 'manage_cash_registers', 'Add and remove cash registers')
19514     });
19515
19516     $dbh->do(qq{
19517         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES
19518         ('UseCashRegisters','0','','Use cash registers with the accounting system and assign patron transactions to them.','YesNo')
19519     });
19520
19521     SetVersion($DBversion);
19522     print "Upgrade to $DBversion done (Bug 23321: Add cash_registers table, permissions and preferences)\n";
19523 }
19524
19525 $DBversion = '19.06.00.030';
19526 if( CheckVersion( $DBversion ) ) {
19527
19528     if ( !TableExists('club_holds') ) {
19529         $dbh->do(q|
19530             CREATE TABLE club_holds (
19531                 id        INT(11) NOT NULL AUTO_INCREMENT,
19532                 club_id   INT(11) NOT NULL, -- id for the club the hold was generated for
19533                 biblio_id INT(11) NOT NULL, -- id for the bibliographic record the hold has been placed against
19534                 item_id   INT(11) NULL DEFAULT NULL, -- If item-level, the id for the item the hold has been placed agains
19535                 date_created TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP, -- Timestamp for the placed hold
19536                 PRIMARY KEY (id),
19537                 -- KEY club_id (club_id),
19538                 CONSTRAINT clubs_holds_ibfk_1 FOREIGN KEY (club_id)   REFERENCES clubs  (id) ON DELETE CASCADE ON UPDATE CASCADE,
19539                 CONSTRAINT clubs_holds_ibfk_2 FOREIGN KEY (biblio_id) REFERENCES biblio (biblionumber) ON DELETE CASCADE ON UPDATE CASCADE,
19540                 CONSTRAINT clubs_holds_ibfk_3 FOREIGN KEY (item_id)   REFERENCES items  (itemnumber) ON DELETE CASCADE ON UPDATE CASCADE
19541             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
19542         |);
19543     }
19544
19545     if ( !TableExists('club_holds_to_patron_holds') ) {
19546         $dbh->do(q|
19547             CREATE TABLE club_holds_to_patron_holds (
19548                 id              INT(11) NOT NULL AUTO_INCREMENT,
19549                 club_hold_id    INT(11) NOT NULL,
19550                 patron_id       INT(11) NOT NULL,
19551                 hold_id         INT(11),
19552                 error_code      ENUM ( 'damaged', 'ageRestricted', 'itemAlreadyOnHold',
19553                                     'tooManyHoldsForThisRecord', 'tooManyReservesToday',
19554                                     'tooManyReserves', 'notReservable', 'cannotReserveFromOtherBranches',
19555                                     'libraryNotFound', 'libraryNotPickupLocation', 'cannotBeTransferred'
19556                                 ) NULL DEFAULT NULL,
19557                 error_message   varchar(100) NULL DEFAULT NULL,
19558                 PRIMARY KEY (id),
19559                 -- KEY club_hold_id (club_hold_id),
19560                 CONSTRAINT clubs_holds_paton_holds_ibfk_1 FOREIGN KEY (club_hold_id) REFERENCES club_holds (id) ON DELETE CASCADE ON UPDATE CASCADE,
19561                 CONSTRAINT clubs_holds_paton_holds_ibfk_2 FOREIGN KEY (patron_id) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE,
19562                 CONSTRAINT clubs_holds_paton_holds_ibfk_3 FOREIGN KEY (hold_id) REFERENCES reserves (reserve_id) ON DELETE CASCADE ON UPDATE CASCADE
19563             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
19564         |);
19565     }
19566
19567     # Always end with this (adjust the bug info)
19568     SetVersion( $DBversion );
19569     print "Upgrade to $DBversion done (Bug 19618: add club_holds tables)\n";
19570 }
19571
19572 $DBversion = '19.06.00.031';
19573 if( CheckVersion( $DBversion ) ) {
19574     $dbh->do(q|
19575         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
19576         ('OPACDetailQRCode','0','','Enable the display of a QR Code on the OPAC detail page','YesNo');
19577     |);
19578
19579     SetVersion( $DBversion );
19580     print "Upgrade to $DBversion done (Bug 23566: Add OPACDetailQRCode system preference)\n";
19581 }
19582
19583 $DBversion = '19.06.00.032';
19584 if ( CheckVersion($DBversion) ) {
19585     if ( !column_exists( 'search_marc_to_field', 'search' ) ) {
19586         $dbh->do(q|
19587             ALTER TABLE `search_marc_to_field` ADD COLUMN `search` tinyint(1) NOT NULL DEFAULT 1
19588         |);
19589     }
19590     if ( !column_exists( 'search_field', 'staff_client' ) ) {
19591         $dbh->do(q|
19592             ALTER TABLE `search_field` ADD COLUMN `staff_client` tinyint(1) NOT NULL DEFAULT 1
19593         |);
19594     }
19595     if ( !column_exists( 'search_field', 'opac' ) ) {
19596         $dbh->do(q|
19597             ALTER TABLE `search_field` ADD COLUMN `opac` tinyint(1) NOT NULL DEFAULT 1
19598         |);
19599     }
19600
19601     SetVersion($DBversion);
19602     print
19603 "Upgrade to $DBversion done (Bug 20589: Add field boosting and use elastic query fields parameter instead of depricated _all)\n";
19604 }
19605
19606 $DBversion = '19.06.00.033';
19607 if( CheckVersion( $DBversion ) ) {
19608
19609     $dbh->do(qq{
19610         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES
19611         ('OnSiteCheckoutAutoCheck','0','','Enable/Do not enable onsite checkout by default if last checkout was an onsite checkout','YesNo')
19612     });
19613     SetVersion( $DBversion );
19614     print "Upgrade to $DBversion done (Bug 23686: Add OnSiteCheckoutAutoCheck system preference)\n";
19615 }
19616
19617 $DBversion = '19.06.00.034';
19618 if( CheckVersion( $DBversion ) ) {
19619     $dbh->do(q{
19620         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
19621         ('TransfersBlockCirc','1',NULL,'Should the transfer modal block circulation staff from continuing scanning items','YesNo')
19622     });
19623     SetVersion( $DBversion );
19624     print "Upgrade to $DBversion done (Bug 23007: Make transfer modals optionally block circ)\n";
19625 }
19626
19627 $DBversion = '19.06.00.035';
19628 if( CheckVersion( $DBversion ) ) {
19629
19630     $dbh->do(q{
19631         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES
19632         ( 'IntranetCoce','0', NULL, 'If on, enables cover retrieval from the configured Coce server in the staff client', 'YesNo')
19633     });
19634
19635     $dbh->do(qq{
19636         UPDATE systempreferences SET
19637           variable = 'OpacCoce',
19638           explanation = 'If on, enables cover retrieval from the configured Coce server in the OPAC'
19639         WHERE
19640           variable = 'Coce'
19641     });
19642
19643     SetVersion( $DBversion );
19644     print "Upgrade to $DBversion done (Bug 18421: Add Coce image cache to the Intranet)\n";
19645 }
19646
19647 $DBversion = '19.06.00.036';
19648 if( CheckVersion( $DBversion ) ) {
19649
19650     $dbh->do(q{
19651         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type`) VALUES
19652         ('QueryRegexEscapeOptions', 'escape', 'dont_escape|escape|unescape_escaped', 'Escape option for regexps delimiters in Elasicsearch queries.', 'Choice')
19653     });
19654
19655     SetVersion( $DBversion );
19656     print "Upgrade to $DBversion done (Bug 20334: Add elasticsearch escape options preference)\n";
19657 }
19658
19659 $DBversion = '19.06.00.037';
19660 if( CheckVersion( $DBversion ) ) {
19661     $dbh->do(q{
19662         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` )
19663         VALUES ('PayPalReturnURL','BaseURL','BaseURL|OPACAlias','Specify whether PayPal will return to the url specified in the OPACBaseURL option or to the OPAC\'s alias url.','Choice')
19664     });
19665
19666     SetVersion( $DBversion );
19667     print "Upgrade to $DBversion done (Bug 21701: PayPal return URL option)\n";
19668 }
19669
19670 $DBversion = '19.06.00.038';
19671 if( CheckVersion( $DBversion ) ) {
19672     $dbh->do( "UPDATE systempreferences SET variable='PatronAutoComplete' WHERE variable='CircAutocompl' LIMIT 1" );
19673     SetVersion( $DBversion );
19674     print "Upgrade to $DBversion done (Bug 23697: Rename CircAutocompl system preference to PatronAutoComplete)\n";
19675 }
19676
19677 $DBversion = '19.06.00.039';
19678 if( CheckVersion( $DBversion ) ) {
19679     $dbh->do(q|
19680         INSERT IGNORE INTO keyboard_shortcuts (shortcut_name, shortcut_keys) VALUES
19681         ("copy_line","Ctrl-C"),
19682         ("copy_subfield","Shift-Ctrl-C"),
19683         ("paste_line","Ctrl-P"),
19684         ("insert_line","Ctrl-I")
19685         ;
19686     |);
19687     SetVersion( $DBversion );
19688     print "Upgrade to $DBversion done (Bug 17179: Add additional keyboard_shortcuts)\n";
19689 }
19690
19691 $DBversion = '19.06.00.040';
19692 if( CheckVersion( $DBversion ) ) {
19693     $dbh->do(q|
19694         INSERT IGNORE INTO systempreferences
19695         (variable,value,explanation,options,type)
19696         VALUES
19697         ('RoundFinesAtPayment','0','If enabled any fines with fractions of a cent will be rounded to the nearest cent when payments are collected. e.g. 1.004 will be paid off by a 1.00 payment','0','YesNo')
19698     |);
19699
19700     SetVersion( $DBversion );
19701     print "Upgrade to $DBversion done (Bug 17140: Add pref to allow rounding fines at payment)\n";
19702 }
19703
19704 $DBversion = '19.06.00.041';
19705 if( CheckVersion( $DBversion ) ) {
19706     my ($socialnetworks) = $dbh->selectrow_array( q|
19707         SELECT value FROM systempreferences WHERE variable='socialnetworks';
19708     |);
19709     if( $socialnetworks ){
19710         # If the socialnetworks preference is enabled, enable all social networks
19711         $dbh->do("UPDATE systempreferences SET value = 'email,facebook,linkedin,twitter', explanation = 'email|facebook|linkedin|twitter', type = 'multiple'  WHERE variable = 'SocialNetworks'");
19712     } else {
19713         $dbh->do("UPDATE systempreferences SET value = '', explanation = 'email|facebook|linkedin|twitter', type = 'multiple'  WHERE variable = 'SocialNetworks'");
19714     }
19715     SetVersion ($DBversion);
19716     print "Upgrade to $DBversion done (Bug 22880: Allow granular control of socialnetworks preference)\n";
19717 }
19718
19719 $DBversion = '19.06.00.042';
19720 if( CheckVersion( $DBversion ) ) {
19721     $dbh->do(q{
19722         INSERT IGNORE INTO systempreferences
19723             ( variable, value, options, explanation, type )
19724         VALUES
19725             ('CustomCoverImages','0',NULL,'If enabled, the custom cover images will be displayed in the staff client. CustomCoverImagesURL must be defined.','YesNo'),
19726             ('OPACCustomCoverImages','0',NULL,'If enabled, the custom cover images will be displayed at the OPAC. CustomCoverImagesURL must be defined.','YesNo'),
19727             ('CustomCoverImagesURL','',NULL,'Define an URL serving book cover images, using the following patterns: {issn}, {isbn}, {normalized_isbn}, {field$subfield} (use it with CustomCoverImages and/or OPACCustomCoverImages)','free')
19728     });
19729
19730     SetVersion( $DBversion );
19731     print "Upgrade to $DBversion done (Bug 22445: Add new pref *CustomCoverImages*)\n";
19732 }
19733
19734 $DBversion = '19.06.00.043';
19735 if ( CheckVersion($DBversion) ) {
19736
19737     # Adding account_debit_types
19738     if ( !TableExists('account_debit_types') ) {
19739         $dbh->do(
19740             qq{
19741                 CREATE TABLE account_debit_types (
19742                   code varchar(80) NOT NULL,
19743                   description varchar(200) NULL,
19744                   can_be_added_manually tinyint(4) NOT NULL DEFAULT 1,
19745                   default_amount decimal(28, 6) NULL,
19746                   is_system tinyint(1) NOT NULL DEFAULT 0,
19747                   archived tinyint(1) NOT NULL DEFAULT 0,
19748                   PRIMARY KEY (code)
19749                 ) ENGINE = InnoDB DEFAULT CHARSET = utf8mb4 COLLATE = utf8mb4_unicode_ci
19750               }
19751         );
19752     }
19753
19754     # Adding account_debit_types_branches
19755     if ( !TableExists('account_debit_types_branches') ) {
19756         $dbh->do(
19757             qq{
19758                 CREATE TABLE account_debit_types_branches (
19759                     debit_type_code VARCHAR(80),
19760                     branchcode VARCHAR(10),
19761                     FOREIGN KEY (debit_type_code) REFERENCES account_debit_types(code) ON DELETE CASCADE,
19762                     FOREIGN KEY (branchcode) REFERENCES branches(branchcode) ON DELETE CASCADE
19763                 ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci
19764             }
19765         );
19766     }
19767
19768     # Populating account_debit_types
19769     $dbh->do(
19770         qq{
19771             INSERT IGNORE INTO account_debit_types (
19772               code,
19773               description,
19774               can_be_added_manually,
19775               default_amount,
19776               is_system
19777             )
19778             VALUES
19779               ('ACCOUNT', 'Account creation fee', 0, NULL, 1),
19780               ('ACCOUNT_RENEW', 'Account renewal fee', 0, NULL, 1),
19781               ('RESERVE_EXPIRED', 'Hold waiting too long', 0, NULL, 1),
19782               ('LOST', 'Lost item', 1, NULL, 1),
19783               ('MANUAL', 'Manual fee', 1, NULL, 0),
19784               ('NEW_CARD', 'New card fee', 1, NULL, 1),
19785               ('OVERDUE', 'Overdue fine', 0, NULL, 1),
19786               ('PROCESSING', 'Lost item processing fee', 0, NULL, 1),
19787               ('RENT', 'Rental fee', 0, NULL, 1),
19788               ('RENT_DAILY', 'Daily rental fee', 0, NULL, 1),
19789               ('RENT_RENEW', 'Renewal of rental item', 0, NULL, 1),
19790               ('RENT_DAILY_RENEW', 'Renewal of daily rental item', 0, NULL, 1),
19791               ('RESERVE', 'Hold fee', 0, NULL, 1)
19792         }
19793     );
19794
19795     # Update accountype 'Res' to 'RESERVE'
19796     $dbh->do(
19797         qq{
19798           UPDATE accountlines SET accounttype = 'RESERVE' WHERE accounttype = 'Res'
19799         }
19800     );
19801
19802     # Update accountype 'PF' to 'PROCESSING'
19803     $dbh->do(
19804         qq{
19805           UPDATE accountlines SET accounttype = 'PROCESSING' WHERE accounttype = 'PF'
19806         }
19807     );
19808
19809     # Update accountype 'HE' to 'RESERVE_EXPIRED'
19810     $dbh->do(
19811         qq{
19812           UPDATE accountlines SET accounttype = 'RESERVE_EXPIRED' WHERE accounttype = 'HE'
19813         }
19814     );
19815
19816     # Update accountype 'N' to 'NEW_CARD'
19817     $dbh->do(
19818         qq{
19819           UPDATE accountlines SET accounttype = 'NEW_CARD' WHERE accounttype = 'N'
19820         }
19821     );
19822
19823     # Update accountype 'M' to 'MANUAL'
19824     $dbh->do(
19825         qq{
19826           UPDATE accountlines SET accounttype = 'MANUAL' WHERE accounttype = 'M'
19827         }
19828     );
19829
19830     # Catch 'F' cases introduced since bug 22521
19831     $dbh->do(qq{
19832         UPDATE
19833           accountlines
19834         SET
19835           accounttype = 'OVERDUE',
19836           status = 'RETURNED'
19837         WHERE
19838           accounttype = 'F';
19839     });
19840
19841     # Moving MANUAL_INV to account_debit_types
19842     $dbh->do(
19843         qq{
19844             INSERT IGNORE INTO account_debit_types (
19845               code,
19846               default_amount,
19847               description,
19848               can_be_added_manually,
19849               is_system
19850             )
19851             SELECT
19852               authorised_value,
19853               lib,
19854               authorised_value,
19855               1,
19856               0
19857             FROM
19858               authorised_values
19859             WHERE
19860               category = 'MANUAL_INV'
19861           }
19862     );
19863
19864     # Update uncaught partial accounttypes left behind after bugs 23539 and 22521
19865     my $sth = $dbh->prepare( "SELECT code, SUBSTR(code, 1,5) AS subcode FROM account_debit_types" );
19866     $sth->execute();
19867     while ( my $row = $sth->fetchrow_hashref ) {
19868         $dbh->do(
19869             qq{
19870               UPDATE accountlines SET accounttype = ? WHERE accounttype = ?
19871             },
19872             {},
19873             (
19874                 $row->{code},
19875                 $row->{subcode}
19876             )
19877         );
19878     }
19879
19880     # Add any unexpected accounttype codes to debit_types as appropriate
19881     $dbh->do(
19882         qq{
19883           INSERT IGNORE INTO account_debit_types (
19884             code,
19885             description,
19886             can_be_added_manually,
19887             default_amount,
19888             is_system
19889           )
19890           SELECT
19891             DISTINCT(accounttype),
19892             "Unexpected type found during upgrade",
19893             1,
19894             NULL,
19895             0
19896           FROM
19897             accountlines
19898           WHERE
19899             amount >= 0
19900         }
19901     );
19902
19903     # Adding debit_type_code to accountlines
19904     unless ( column_exists('accountlines', 'debit_type_code') ) {
19905         $dbh->do(
19906             qq{
19907                 ALTER TABLE accountlines
19908                 ADD
19909                   debit_type_code varchar(80) DEFAULT NULL
19910                 AFTER
19911                   accounttype
19912               }
19913         );
19914     }
19915
19916     # Linking debit_type_code in accountlines to code in account_debit_types
19917     unless ( foreign_key_exists( 'accountlines', 'accountlines_ibfk_debit_type' ) ) {
19918         $dbh->do(
19919             qq{
19920             ALTER TABLE accountlines ADD CONSTRAINT `accountlines_ibfk_debit_type` FOREIGN KEY (`debit_type_code`) REFERENCES `account_debit_types` (`code`) ON DELETE RESTRICT ON UPDATE CASCADE
19921               }
19922         );
19923     }
19924
19925     # Populating debit_type_code
19926     $dbh->do(
19927         qq{
19928         UPDATE accountlines SET debit_type_code = accounttype, accounttype = NULL WHERE accounttype IN (SELECT code from account_debit_types) AND amount >= 0
19929         }
19930     );
19931
19932     # Remove MANUAL_INV
19933     $dbh->do(
19934         qq{
19935         DELETE FROM authorised_values WHERE category = 'MANUAL_INV'
19936         }
19937     );
19938     $dbh->do(
19939         qq{
19940         DELETE FROM authorised_value_categories WHERE category_name = 'MANUAL_INV'
19941         }
19942     );
19943
19944     # Add new permission
19945     $dbh->do(
19946         q{
19947             INSERT IGNORE INTO permissions (module_bit, code, description)
19948             VALUES
19949               (
19950                 3,
19951                 'manage_accounts',
19952                 'Manage Account Debit and Credit Types'
19953               )
19954         }
19955     );
19956
19957     SetVersion($DBversion);
19958     print "Upgrade to $DBversion done (Bug 23049: Add account debit_types)\n";
19959 }
19960
19961 $DBversion = '19.06.00.044';
19962 if ( CheckVersion($DBversion) ) {
19963
19964     # Adding account_credit_types
19965     if ( !TableExists('account_credit_types') ) {
19966         $dbh->do(
19967             qq{
19968                 CREATE TABLE account_credit_types (
19969                   code varchar(80) NOT NULL,
19970                   description varchar(200) NULL,
19971                   can_be_added_manually tinyint(4) NOT NULL DEFAULT 1,
19972                   is_system tinyint(1) NOT NULL DEFAULT 0,
19973                   PRIMARY KEY (code)
19974                 ) ENGINE = InnoDB DEFAULT CHARSET = utf8mb4 COLLATE = utf8mb4_unicode_ci
19975               }
19976         );
19977     }
19978
19979     # Adding account_credit_types_branches
19980     if ( !TableExists('account_credit_types_branches') ) {
19981         $dbh->do(
19982             qq{
19983                 CREATE TABLE account_credit_types_branches (
19984                     credit_type_code VARCHAR(80),
19985                     branchcode VARCHAR(10),
19986                     FOREIGN KEY (credit_type_code) REFERENCES account_credit_types(code) ON DELETE CASCADE,
19987                     FOREIGN KEY (branchcode) REFERENCES branches(branchcode) ON DELETE CASCADE
19988                 ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci
19989             }
19990         );
19991     }
19992
19993     # Populating account_credit_types
19994     $dbh->do(
19995         qq{
19996             INSERT IGNORE INTO account_credit_types (
19997               code,
19998               description,
19999               can_be_added_manually,
20000               is_system
20001             )
20002             VALUES
20003               ('PAYMENT', 'Payment', 0, 1),
20004               ('WRITEOFF', 'Writeoff', 0, 1),
20005               ('FORGIVEN', 'Forgiven', 1, 1),
20006               ('CREDIT', 'Credit', 1, 1),
20007               ('LOST_RETURN', 'Lost item fee refund', 0, 1)
20008         }
20009     );
20010
20011     # Adding credit_type_code to accountlines
20012     unless ( column_exists('accountlines', 'credit_type_code') ) {
20013         $dbh->do(
20014             qq{
20015                 ALTER TABLE accountlines
20016                 ADD
20017                   credit_type_code varchar(80) DEFAULT NULL
20018                 AFTER
20019                   accounttype
20020               }
20021         );
20022     }
20023
20024     # Catch LOST_RETURNED cases from original bug 22563 update
20025     $dbh->do(
20026         qq{
20027             UPDATE accountlines
20028             SET accounttype = 'LOST_RETURN'
20029             WHERE accounttype = 'LOST_RETURNED'
20030     });
20031
20032     # Linking credit_type_code in accountlines to code in account_credit_types
20033     unless ( foreign_key_exists( 'accountlines', 'accountlines_ibfk_credit_type' ) ) {
20034         $dbh->do(
20035             qq{
20036                 ALTER TABLE accountlines
20037                 ADD CONSTRAINT
20038                   `accountlines_ibfk_credit_type`
20039                 FOREIGN KEY (`credit_type_code`) REFERENCES `account_credit_types` (`code`)
20040                 ON DELETE RESTRICT
20041                 ON UPDATE CASCADE
20042               }
20043         );
20044     }
20045
20046     # Update accountype 'C' to 'CREDIT'
20047     $dbh->do(
20048         qq{
20049           UPDATE accountlines SET accounttype = 'CREDIT' WHERE accounttype = 'C' OR accounttype = 'CR'
20050         }
20051     );
20052
20053     # Update accountype 'FOR' to 'FORGIVEN'
20054     $dbh->do(
20055         qq{
20056           UPDATE accountlines SET accounttype = 'FORGIVEN' WHERE accounttype = 'FOR' OR accounttype = 'FORW'
20057         }
20058     );
20059
20060     # Update accountype 'Pay' to 'PAYMENT'
20061     $dbh->do(
20062         qq{
20063           UPDATE accountlines SET accounttype = 'PAYMENT' WHERE accounttype = 'Pay' OR accounttype = 'PAY'
20064         }
20065     );
20066
20067     # Update accountype 'W' to 'WRITEOFF'
20068     $dbh->do(
20069         qq{
20070           UPDATE accountlines SET accounttype = 'WRITEOFF' WHERE accounttype = 'W' OR accounttype = 'WO'
20071         }
20072     );
20073
20074     # Add any unexpected accounttype codes to credit_types as appropriate
20075     $dbh->do(
20076         qq{
20077           INSERT IGNORE INTO account_credit_types (
20078             code,
20079             description,
20080             can_be_added_manually,
20081             is_system
20082           )
20083           SELECT
20084             DISTINCT(accounttype),
20085             "Unexpected type found during upgrade",
20086             1,
20087             0
20088           FROM
20089             accountlines
20090           WHERE
20091             amount < 0
20092         }
20093     );
20094
20095     # Populating credit_type_code
20096     $dbh->do(
20097         qq{
20098           UPDATE
20099             accountlines
20100           SET
20101             credit_type_code = accounttype, accounttype = NULL
20102           WHERE accounttype IN (SELECT code from account_credit_types)
20103         }
20104     );
20105
20106     # Drop accounttype field
20107     $dbh->do(
20108         qq{
20109           ALTER TABLE accountlines
20110           DROP COLUMN `accounttype`
20111         }
20112     );
20113
20114     SetVersion($DBversion);
20115     print "Upgrade to $DBversion done (Bug 23805: Add account credit_types)\n";
20116 }
20117
20118 $DBversion = '19.06.00.045';
20119 if( CheckVersion( $DBversion ) ) {
20120     $dbh->do( "UPDATE systempreferences SET value = '2' WHERE value = '0' AND variable = 'UsageStats'" );
20121
20122     SetVersion( $DBversion );
20123     print "Upgrade to $DBversion done (Bug 23866: Set HEA syspref to prompt for review)\n";
20124 }
20125
20126 $DBversion = '19.06.00.046';
20127 if( CheckVersion( $DBversion ) ) {
20128     $dbh->do(qq{
20129         UPDATE systempreferences
20130         SET
20131           options = "Calendar|Days|Datedue|Dayweek",
20132           explanation = "Choose the method for calculating due date: select Calendar, Datedue or Dayweek to use the holidays module, and Days to ignore the holidays module"
20133         WHERE
20134           variable = "useDaysMode"
20135     });
20136
20137     # Always end with this (adjust the bug info)
20138     SetVersion( $DBversion );
20139     print "Upgrade to $DBversion done (Bug 15260: Option for extended loan with useDaysMode)\n";
20140 }
20141
20142 $DBversion = '19.06.00.047';
20143 if ( CheckVersion($DBversion) ) {
20144     if ( !TableExists('return_claims') ) {
20145         $dbh->do(
20146             q{
20147             CREATE TABLE return_claims (
20148                 id int(11) auto_increment,                             -- Unique ID of the return claim
20149                 itemnumber int(11) NOT NULL,                           -- ID of the item
20150                 issue_id int(11) NULL DEFAULT NULL,                    -- ID of the checkout that triggered the claim
20151                 borrowernumber int(11) NOT NULL,                       -- ID of the patron
20152                 notes MEDIUMTEXT DEFAULT NULL,                         -- Notes about the claim
20153                 created_on TIMESTAMP NULL,                             -- Time and date the claim was created
20154                 created_by int(11) NULL DEFAULT NULL,                  -- ID of the staff member that registered the claim
20155                 updated_on TIMESTAMP NULL ON UPDATE CURRENT_TIMESTAMP, -- Time and date of the latest change on the claim (notes)
20156                 updated_by int(11) NULL DEFAULT NULL,                  -- ID of the staff member that updated the claim
20157                 resolution  varchar(80) NULL DEFAULT NULL,             -- Resolution code (RETURN_CLAIM_RESOLUTION AVs)
20158                 resolved_on TIMESTAMP NULL DEFAULT NULL,               -- Time and date the claim was resolved
20159                 resolved_by int(11) NULL DEFAULT NULL,                 -- ID of the staff member that resolved the claim
20160                 PRIMARY KEY (`id`),
20161                 KEY `itemnumber` (`itemnumber`),
20162                 CONSTRAINT UNIQUE `issue_id` ( issue_id ),
20163                 CONSTRAINT `issue_id` FOREIGN KEY (`issue_id`) REFERENCES `issues` (`issue_id`) ON DELETE SET NULL ON UPDATE CASCADE,
20164                 CONSTRAINT `rc_items_ibfk` FOREIGN KEY (`itemnumber`) REFERENCES `items` (`itemnumber`) ON DELETE CASCADE ON UPDATE CASCADE,
20165                 CONSTRAINT `rc_borrowers_ibfk` FOREIGN KEY (`borrowernumber`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE CASCADE ON UPDATE CASCADE,
20166                 CONSTRAINT `rc_created_by_ibfk` FOREIGN KEY (`created_by`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE CASCADE,
20167                 CONSTRAINT `rc_updated_by_ibfk` FOREIGN KEY (`updated_by`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE CASCADE,
20168                 CONSTRAINT `rc_resolved_by_ibfk` FOREIGN KEY (`resolved_by`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE CASCADE
20169             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
20170         }
20171         );
20172     }
20173
20174     $dbh->do(
20175         q{
20176         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
20177         ('ClaimReturnedChargeFee', 'ask', 'ask|charge|no_charge', 'Controls whether or not a lost item fee is charged for return claims', 'Choice'),
20178         ('ClaimReturnedLostValue', '', '', 'Sets the LOST AV value that represents "Claims returned" as a lost value', 'Free'),
20179         ('ClaimReturnedWarningThreshold', '', '', 'Sets the number of return claims past which the librarian will be warned the patron has many return claims', 'Integer');
20180     }
20181     );
20182
20183     $dbh->do(
20184         q{
20185         INSERT IGNORE INTO authorised_value_categories ( category_name ) VALUES
20186             ('RETURN_CLAIM_RESOLUTION');
20187     }
20188     );
20189
20190     $dbh->do(
20191         q{
20192         INSERT IGNORE INTO `authorised_values` ( category, authorised_value, lib )
20193         VALUES
20194           ('RETURN_CLAIM_RESOLUTION', 'RET_BY_PATRON', 'Returned by patron'),
20195           ('RETURN_CLAIM_RESOLUTION', 'FOUND_IN_LIB', 'Found in library');
20196     }
20197     );
20198
20199     SetVersion($DBversion);
20200     print
20201 "Upgrade to $DBversion done (Bug 14697: Extend and enhance 'Claims returned' lost status)\n";
20202 }
20203
20204 $DBversion = '19.06.00.048';
20205 if( CheckVersion( $DBversion ) ) {
20206     # you can use $dbh here like:
20207     $dbh->do( qq{
20208         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` )
20209         VALUES  ('OPACShowMusicalInscripts','0','','Display musical inscripts on the OPAC record details page when available.','YesNo'),
20210                 ('OPACPlayMusicalInscripts','0','','If displayed musical inscripts, play midi conversion on the OPAC record details page.','YesNo')
20211     } );
20212
20213     SetVersion( $DBversion );
20214     print "Upgrade to $DBversion done (Bug 22581: add new OPACShowMusicalInscripts and OPACPlayMusicalInscripts system preferences)\n";
20215 }
20216
20217 $DBversion = '19.06.00.049';
20218 if( CheckVersion( $DBversion ) ) {
20219
20220     $dbh->do(q{
20221         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
20222         SELECT
20223             'SuspensionsCalendar',
20224             IF( value='noFinesWhenClosed', 'noSuspensionsWhenClosed', 'ignoreCalendar'),
20225             'ignoreCalendar|noSuspensionsWhenClosed',
20226             'Specify whether to use the Calendar in calculating suspensions',
20227             'Choice'
20228         FROM systempreferences
20229         WHERE variable='finesCalendar';
20230     });
20231
20232     SetVersion( $DBversion );
20233     print "Upgrade to $DBversion done (Bug 13958: Add a SuspensionsCalendar syspref)\n";
20234 }
20235
20236 $DBversion = '19.06.00.050';
20237 if( CheckVersion( $DBversion ) ) {
20238     $dbh->do( q{
20239             INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
20240             VALUES ('OPACFineNoRenewalsIncludeCredits','1',NULL,'If enabled the value specified in OPACFineNoRenewals should include any unapplied account credits in the calculation','YesNo')
20241     });
20242
20243     SetVersion( $DBversion );
20244     print "Upgrade to $DBversion done (Bug 23293: Add 'OPACFineNoRenewalsIncludeCredits' system preference)\n";
20245 }
20246
20247 $DBversion = '19.11.00.000';
20248 if( CheckVersion( $DBversion ) ) {
20249     NewVersion( $DBversion, undef, '19.11.00 release' );
20250 }
20251
20252 $DBversion = '19.12.00.000';
20253 if( CheckVersion( $DBversion ) ) {
20254     NewVersion( $DBversion, undef, 'Dobbie is a free elf...' );
20255 }
20256
20257 $DBversion = '19.12.00.001';
20258 if( CheckVersion( $DBversion ) ) {
20259     $dbh->do( "UPDATE marc_subfield_structure SET kohafield = NULL WHERE kohafield = 'bibliosubject.subject';" );
20260     NewVersion( $DBversion, 17831, 'Remove non-existing bibliosubject.subject from frameworks' );
20261 }
20262
20263 $DBversion = '19.12.00.002';
20264 if( CheckVersion( $DBversion ) ) {
20265     $dbh->do(q{
20266         UPDATE systempreferences SET
20267         variable = 'AllowItemsOnHoldCheckoutSIP',
20268         explanation = 'Do not generate RESERVE_WAITING and RESERVED warning when checking out items reserved to someone else via SIP. This allows self checkouts for those items.'
20269         WHERE variable = 'AllowItemsOnHoldCheckout'
20270     });
20271
20272     NewVersion( $DBversion, 23233, 'Rename AllowItemsOnHoldCheckout syspref' );
20273 }
20274
20275 $DBversion = '19.12.00.003';
20276 if( CheckVersion( $DBversion ) ) {
20277
20278     if( !column_exists( 'library_groups', 'ft_local_hold_group' ) ) {
20279         $dbh->do( "ALTER TABLE library_groups ADD COLUMN ft_local_hold_group tinyint(1) NOT NULL DEFAULT 0 AFTER ft_search_groups_staff" );
20280     }
20281
20282     NewVersion( $DBversion, 22284, 'Add ft_local_hold_group column to library_groups' );
20283 }
20284
20285 $DBversion = '19.12.00.004';
20286 if ( CheckVersion($DBversion) ) {
20287
20288     $dbh->do(
20289         qq{
20290             INSERT IGNORE INTO account_debit_types (
20291               code,
20292               description,
20293               can_be_added_manually,
20294               default_amount,
20295               is_system
20296             )
20297             VALUES
20298               ('PAYOUT', 'Payment from library to patron', 0, NULL, 1)
20299         }
20300     );
20301
20302     $dbh->do(qq{
20303         INSERT IGNORE INTO account_offset_types ( type ) VALUES ('PAYOUT');
20304     });
20305
20306     $dbh->do(qq{
20307         INSERT IGNORE permissions (module_bit, code, description)
20308         VALUES
20309         (10, 'payout', 'Perform account payout action')
20310     });
20311
20312     NewVersion( $DBversion, 24080, ['Add PAYOUT account_debit_type', 'Add PAYOUT account_offset_type', 'Add accounts payout permission'] );
20313 }
20314
20315 $DBversion = '19.12.00.005';
20316 if( CheckVersion( $DBversion ) ) {
20317     $dbh->do( "ALTER TABLE action_logs MODIFY COLUMN `timestamp` timestamp NOT NULL default CURRENT_TIMESTAMP" );
20318
20319     NewVersion( $DBversion, 24329, 'Do not update action_log.timestamp' );
20320 }
20321
20322 $DBversion = '19.12.00.006';
20323 if( CheckVersion( $DBversion ) ) {
20324     $dbh->do( q|
20325         UPDATE borrowers SET relationship = NULL
20326         WHERE relationship = ""
20327     |);
20328
20329     NewVersion( $DBversion, 24263, 'Replace relationship with NULL when empty string' );
20330 }
20331
20332 $DBversion = '19.12.00.007';
20333 if ( CheckVersion($DBversion) ) {
20334
20335     $dbh->do(
20336         qq{
20337             INSERT IGNORE INTO account_credit_types (code, description, can_be_added_manually, is_system)
20338             VALUES
20339               ('REFUND', 'A refund applied to a patrons fine', 0, 1)
20340         }
20341     );
20342
20343     $dbh->do(qq{
20344         INSERT IGNORE INTO account_offset_types ( type ) VALUES ('REFUND');
20345     });
20346
20347     $dbh->do(qq{
20348         INSERT IGNORE permissions (module_bit, code, description)
20349         VALUES
20350         (10, 'refund', 'Perform account refund action')
20351     });
20352
20353     NewVersion( $DBversion, 23442, ['Add REFUND to account_credit_types', 'Add REFUND to account_offset_types', 'Add accounts refund permission'] );
20354 }
20355
20356 $DBversion = '19.12.00.008';
20357 if( CheckVersion( $DBversion ) ) {
20358     $dbh->do( 'UPDATE systempreferences SET value = REPLACE(value, "http://worldcat.org", "https://worldcat.org") WHERE variable = "OPACSearchForTitleIn"' );
20359     $dbh->do( 'UPDATE systempreferences SET value = REPLACE(value, "http://www.bookfinder.com", "https://www.bookfinder.com") WHERE variable = "OPACSearchForTitleIn"' );
20360     $dbh->do( 'UPDATE systempreferences SET value = REPLACE(value, "https://openlibrary.org/search/?", "https://openlibrary.org/search?") WHERE variable = "OPACSearchForTitleIn"' );
20361
20362     NewVersion( $DBversion, 24206, 'Update OpacSearchForTitleIn system preference' );
20363 }
20364
20365 $DBversion = '19.12.00.009';
20366 if( CheckVersion( $DBversion ) ) {
20367
20368     $dbh->do(q{
20369         INSERT IGNORE INTO account_offset_types ( type ) VALUES ( 'Purchase' );
20370     });
20371
20372     $dbh->do(q{
20373         INSERT IGNORE INTO account_credit_types ( code, description, can_be_added_manually, is_system )
20374         VALUES ('PURCHASE', 'Purchase', 0, 1);
20375     });
20376
20377     my $sth = $dbh->prepare(q{
20378         SELECT COUNT(*) FROM authorised_values WHERE category = 'PAYMENT_TYPE' AND authorised_value = 'CASH'
20379     });
20380     $sth->execute;
20381     my $already_exists = $sth->fetchrow;
20382     if ( not $already_exists ) {
20383         $dbh->do(q{
20384            INSERT INTO authorised_values (category,authorised_value,lib) VALUES ('PAYMENT_TYPE','CASH','Cash')
20385         });
20386     }
20387
20388     # Updating field in account_debit_types
20389     unless ( column_exists('account_debit_types', 'can_be_invoiced') ) {
20390         $dbh->do(
20391             qq{
20392                 ALTER TABLE account_debit_types
20393                 CHANGE COLUMN
20394                   can_be_added_manually can_be_invoiced tinyint(1) NOT NULL DEFAULT 1
20395               }
20396         );
20397     }
20398     unless ( column_exists('account_debit_types', 'can_be_sold') ) {
20399         $dbh->do(
20400             qq{
20401                 ALTER TABLE account_debit_types
20402                 ADD
20403                   can_be_sold tinyint(1) DEFAULT 0
20404                 AFTER
20405                   can_be_invoiced
20406               }
20407         );
20408     }
20409
20410     $dbh->do(q{
20411 INSERT IGNORE INTO `letter` (`module`, `code`, `branchcode`, `name`, `is_html`, `title`, `content`, `message_transport_type`, `lang`) VALUES
20412 ('pos', 'RECEIPT', '', 'Point of sale receipt', 0, 'Receipt', '[% PROCESS "accounts.inc" %]
20413 <table>
20414 [% IF ( LibraryName ) %]
20415  <tr>
20416     <th colspan="2" class="centerednames">
20417         <h3>[% LibraryName | html %]</h3>
20418     </th>
20419  </tr>
20420 [% END %]
20421  <tr>
20422     <th colspan="2" class="centerednames">
20423         <h2>[% Branches.GetName( payment.branchcode ) | html %]</h2>
20424     </th>
20425  </tr>
20426 <tr>
20427     <th colspan="2" class="centerednames">
20428         <h3>[% payment.date | $KohaDates %]</h3>
20429 </tr>
20430 <tr>
20431   <td>Transaction ID: </td>
20432   <td>[% payment.accountlines_id %]</td>
20433 </tr>
20434 <tr>
20435   <td>Operator ID: </td>
20436   <td>[% payment.manager_id %]</td>
20437 </tr>
20438 <tr>
20439   <td>Payment type: </td>
20440   <td>[% payment.payment_type %]</td>
20441 </tr>
20442  <tr></tr>
20443  <tr>
20444     <th colspan="2" class="centerednames">
20445         <h2><u>Fee receipt</u></h2>
20446     </th>
20447  </tr>
20448  <tr></tr>
20449  <tr>
20450     <th>Description of charges</th>
20451     <th>Amount</th>
20452   </tr>
20453
20454   [% FOREACH offset IN offsets %]
20455     <tr>
20456         <td>[% PROCESS account_type_description account=offset.debit %]</td>
20457         <td>[% offset.amount * -1 | $Price %]</td>
20458     </tr>
20459   [% END %]
20460
20461 <tfoot>
20462   <tr class="highlight">
20463     <td>Total: </td>
20464     <td>[% payment.amount * -1| $Price %]</td>
20465   </tr>
20466   <tr>
20467     <td>Tendered: </td>
20468     <td>[% collected | $Price %]</td>
20469   </tr>
20470   <tr>
20471     <td>Change: </td>
20472     <td>[% change | $Price %]</td>
20473     </tr>
20474 </tfoot>
20475 </table>', 'print', 'default');
20476     });
20477
20478     $dbh->do(qq{
20479         INSERT IGNORE permissions (module_bit, code, description)
20480         VALUES
20481         (25, 'takepayment', 'Access the point of sale page and take payments')
20482     });
20483
20484     NewVersion( $DBversion, 23354, [q|Add 'Purchase' account offset type|, q|Add 'RECEIPT' notice for Point of Sale|, q|Add point of sale permissions|] );
20485 }
20486
20487 $DBversion = '19.12.00.010';
20488 if( CheckVersion( $DBversion ) ) {
20489     if( !column_exists( 'oai_sets_mappings', 'rule_order' ) ) {
20490         $dbh->do( "ALTER TABLE oai_sets_mappings ADD COLUMN rule_order INT AFTER set_id, ADD COLUMN rule_operator VARCHAR(3) AFTER rule_order" );
20491         $dbh->do( "UPDATE oai_sets_mappings SET rule_operator='or'" );
20492         my $sets = $dbh->selectall_arrayref("SELECT * from oai_sets_mappings ORDER BY set_id", { Slice => {} });
20493         my $i = 0;
20494         my $previous_set_id;
20495         for my $set ( @{$sets}) {
20496             my $set_id = $set->{set_id};
20497
20498             if ($previous_set_id && $previous_set_id != $set_id) {
20499                 $i = 0;
20500             }
20501
20502             if ($i == 0) {
20503                 $dbh->do("UPDATE oai_sets_mappings SET rule_operator=NULL WHERE set_id=? LIMIT 1", {}, $set_id);
20504             }
20505
20506             $dbh->do("UPDATE oai_sets_mappings SET rule_order=? WHERE set_id=? AND rule_order IS NULL LIMIT 1", {}, $i, $set_id);
20507
20508             $i++;
20509             $previous_set_id = $set_id;
20510         }
20511     }
20512
20513     NewVersion( $DBversion, 21520, 'Add rule_order and rule_operator fields to oai_sets_mappings table' );
20514 }
20515
20516 $DBversion = '19.12.00.011';
20517 if( CheckVersion( $DBversion ) ) {
20518     if( !foreign_key_exists( 'repeatable_holidays', 'repeatable_holidays_ibfk_1' ) ) {
20519         $dbh->do(q|
20520             DELETE h
20521             FROM repeatable_holidays h
20522             LEFT JOIN branches b ON h.branchcode=b.branchcode
20523             WHERE b.branchcode IS NULL;
20524         |);
20525         $dbh->do(q|
20526             ALTER TABLE repeatable_holidays
20527             ADD FOREIGN KEY repeatable_holidays_ibfk_1 (branchcode) REFERENCES branches (branchcode) ON DELETE CASCADE ON UPDATE CASCADE
20528         |);
20529     }
20530
20531     if( !foreign_key_exists( 'special_holidays', 'special_holidays_ibfk_1' ) ) {
20532         $dbh->do(q|
20533             DELETE h
20534             FROM special_holidays h
20535             LEFT JOIN branches b ON h.branchcode=b.branchcode
20536             WHERE b.branchcode IS NULL;
20537         |);
20538         $dbh->do(q|
20539             ALTER TABLE special_holidays
20540             ADD FOREIGN KEY special_holidays_ibfk_1 (branchcode) REFERENCES branches (branchcode) ON DELETE CASCADE ON UPDATE CASCADE
20541         |);
20542     }
20543
20544     NewVersion( $DBversion, 24289, 'Adding foreign keys on *_holidays.branchcode tables' );
20545 }
20546
20547 $DBversion = '19.12.00.012';
20548 if( CheckVersion( $DBversion ) ) {
20549
20550     $dbh->do(qq{
20551         UPDATE
20552           `permissions`
20553         SET
20554           `module_bit` = 3
20555         WHERE
20556           `code` = 'manage_cash_registers'
20557     });
20558
20559     NewVersion( $DBversion, 24481, 'Move permission to correct module_bit' );
20560 }
20561
20562 $DBversion = '19.12.00.013';
20563 if( CheckVersion( $DBversion ) ) {
20564     $dbh->do(qq{
20565         INSERT IGNORE INTO
20566           systempreferences (variable,value,options,explanation,type)
20567         VALUES
20568           ('EnablePointOfSale','0',NULL,'Enable the point of sale feature to allow anonymous transactions with the accounting system. (Requires UseCashRegisters)','YesNo')
20569     });
20570
20571     NewVersion( $DBversion, 24478, 'Add `EnablePointOfSale` system preference to allow disabling the point of sale feature)' );
20572 }
20573
20574 $DBversion = '19.12.00.014';
20575 if( CheckVersion( $DBversion ) ) {
20576     unless ( column_exists('branchtransfers', 'reason') ) {
20577         $dbh->do(
20578             qq{
20579                 ALTER TABLE branchtransfers
20580                 ADD
20581                   `reason` enum('Manual')
20582                 AFTER
20583                   comments
20584               }
20585         );
20586     }
20587
20588     NewVersion( $DBversion, 24287, q|Add 'reason' field to transfers table| );
20589 }
20590
20591 $DBversion = '19.12.00.015';
20592 if( CheckVersion( $DBversion ) ) {
20593
20594     # Add stockrotation states to reason enum
20595     $dbh->do(
20596         qq{
20597             ALTER TABLE
20598                 `branchtransfers`
20599             MODIFY COLUMN
20600                 `reason` enum(
20601                     'Manual',
20602                     'StockrotationAdvance',
20603                     'StockrotationRepatriation'
20604                 )
20605             AFTER `comments`
20606           }
20607     );
20608
20609     # Move stockrotation states to reason field
20610     $dbh->do(
20611         qq{
20612             UPDATE
20613               `branchtransfers`
20614             SET
20615               `reason` = 'StockrotationAdvance',
20616               `comments` = NULL
20617             WHERE
20618               `comments` = 'StockrotationAdvance'
20619           }
20620     );
20621     $dbh->do(
20622         qq{
20623             UPDATE
20624               `branchtransfers`
20625             SET
20626               `reason` = 'StockrotationRepatriation',
20627               `comments` = NULL
20628             WHERE
20629               `comments` = 'StockrotationRepatriation'
20630           }
20631     );
20632
20633     NewVersion( $DBversion, 24296, q|Update stockrotation to use 'reason' field in transfers table| );
20634 }
20635
20636 $DBversion = '19.12.00.016';
20637 if( CheckVersion( $DBversion ) ) {
20638     $dbh->do(q{
20639         INSERT IGNORE INTO `userflags` (`bit`, `flag`, `flagdesc`, `defaulton`)
20640         VALUES (12, 'suggestions', 'Suggestion management', 0)
20641     });
20642
20643     $dbh->do(q{
20644         UPDATE permissions SET module_bit=12
20645         WHERE code="suggestions_manage"
20646     });
20647
20648     $dbh->do(q{
20649         UPDATE borrowers SET flags = flags | (1<<12) WHERE flags & (1 << 11)
20650     });
20651
20652     NewVersion( $DBversion, 22868, 'Move suggestions_manage subpermission out of acquisition permission' );
20653 }
20654
20655 $DBversion = '19.12.00.017';
20656 if( CheckVersion( $DBversion ) ) {
20657     if( !index_exists( 'library_groups', 'library_groups_uniq_2' ) ) {
20658         $dbh->do(q|
20659             DELETE FROM library_groups
20660             WHERE id NOT IN (
20661                 SELECT MIN(id)
20662                 FROM ( SELECT * FROM library_groups ) AS lg
20663                 GROUP BY parent_id, branchcode
20664             )
20665             AND NOT(parent_id IS NULL OR branchcode IS NULL);
20666         |);
20667         $dbh->do(q|
20668             ALTER TABLE library_groups
20669             ADD UNIQUE KEY library_groups_uniq_2 (parent_id, branchcode)
20670         |);
20671     }
20672
20673     NewVersion( $DBversion, 21674, 'Add unique key (parent_id, branchcode) to library_group' );
20674 }
20675
20676 $DBversion = '19.12.00.018';
20677 if( CheckVersion( $DBversion ) ) {
20678     my @columns = qw(
20679         restrictedtype
20680         rentaldiscount
20681         fine
20682         finedays
20683         maxsuspensiondays
20684         suspension_chargeperiod
20685         firstremind
20686         chargeperiod
20687         chargeperiod_charge_at
20688         accountsent
20689         issuelength
20690         lengthunit
20691         hardduedate
20692         hardduedatecompare
20693         renewalsallowed
20694         renewalperiod
20695         norenewalbefore
20696         auto_renew
20697         no_auto_renewal_after
20698         no_auto_renewal_after_hard_limit
20699         reservesallowed
20700         holds_per_record
20701         holds_per_day
20702         onshelfholds
20703         opacitemholds
20704         overduefinescap
20705         cap_fine_to_replacement_price
20706         article_requests
20707         note
20708     );
20709
20710     if ( column_exists( 'issuingrules', 'categorycode' ) ) {
20711         foreach my $column ( @columns ) {
20712             $dbh->do("
20713                 INSERT INTO circulation_rules ( categorycode, branchcode, itemtype, rule_name, rule_value )
20714                 SELECT IF(categorycode='*', NULL, categorycode), IF(branchcode='*', NULL, branchcode), IF(itemtype='*', NULL, itemtype), \'$column\', COALESCE( $column, '' )
20715                 FROM issuingrules
20716             ");
20717         }
20718         $dbh->do("
20719             DELETE FROM circulation_rules WHERE rule_name='holdallowed' AND rule_value='';
20720         ");
20721         $dbh->do("DROP TABLE issuingrules");
20722     }
20723
20724     NewVersion( $DBversion, 18936, 'Convert issuingrules fields to circulation_rules' );
20725 }
20726
20727 $DBversion = '19.12.00.019';
20728 if( CheckVersion( $DBversion ) ) {
20729
20730     $dbh->do("ALTER TABLE message_queue MODIFY time_queued timestamp NULL");
20731
20732     if( !column_exists( 'message_queue', 'updated_on' ) ) {
20733         $dbh->do("ALTER TABLE message_queue ADD COLUMN updated_on timestamp NOT NULL default CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP AFTER time_queued");
20734         $dbh->do("UPDATE message_queue SET updated_on=time_queued");
20735     }
20736
20737     NewVersion( $DBversion, 23673, 'modify time_queued and add updated_on to message_queue' );
20738 }
20739
20740 $DBversion = '19.12.00.020';
20741 if ( CheckVersion($DBversion) ) {
20742     if ( !column_exists( 'marc_subfield_structure', 'important') ){
20743         $dbh->do("ALTER TABLE marc_subfield_structure ADD COLUMN important TINYINT(4) NOT NULL DEFAULT 0  AFTER mandatory");
20744     }
20745     if ( !column_exists( 'marc_tag_structure', 'important') ){
20746         $dbh->do("ALTER TABLE marc_tag_structure ADD COLUMN important TINYINT(4) NOT NULL DEFAULT 0  AFTER mandatory");
20747     }
20748
20749     NewVersion( $DBversion, 8643, 'Add important constraint to marc subfields' );
20750 }
20751
20752 $DBversion = '19.12.00.021';
20753 if( CheckVersion( $DBversion ) ) {
20754
20755     # Add LOST_FOUND debit type
20756     $dbh->do(qq{
20757         INSERT IGNORE INTO
20758           account_credit_types ( code, description, can_be_added_manually, is_system )
20759         VALUES
20760           ('LOST_FOUND', 'Lost item fee refund', 0, 1)
20761     });
20762
20763     # Migrate LOST_RETURN to LOST_FOUND
20764     $dbh->do(qq{
20765         UPDATE
20766           accountlines
20767         SET
20768           credit_type_code = 'LOST_FOUND'
20769         WHERE
20770           credit_type_code = 'LOST_RETURN'
20771         OR
20772           credit_type_code = 'LOST_RETURNED'
20773     });
20774
20775     # Migrate LOST + RETURNED to LOST + FOUND
20776     $dbh->do(qq{
20777         UPDATE
20778           accountlines
20779         SET
20780           status = 'FOUND'
20781         WHERE
20782           debit_type_code = 'LOST'
20783         AND
20784           status = 'RETURNED'
20785     });
20786
20787     # Drop LOST_RETURNED credit type
20788     $dbh->do(qq{
20789         DELETE FROM account_credit_types WHERE code = 'LOST_RETURNED'
20790     });
20791
20792     # Drop LOST_RETURN credit type
20793     $dbh->do(qq{
20794         DELETE FROM account_credit_types WHERE code = 'LOST_RETURN'
20795     });
20796
20797     # Add Lost Item Found offset type
20798     $dbh->do(qq{
20799         INSERT IGNORE INTO
20800           account_offset_types ( type )
20801         VALUES
20802           ( 'Lost Item Found' )
20803     });
20804
20805     NewVersion( $DBversion, 24592, 'Update LOST_RETURN to LOST_FOUND');
20806 }
20807
20808 $DBversion = '19.12.00.022';
20809 if( CheckVersion( $DBversion ) ) {
20810     $dbh->do( "ALTER TABLE items MODIFY COLUMN uri MEDIUMTEXT" );
20811     $dbh->do( "ALTER TABLE deleteditems MODIFY COLUMN uri MEDIUMTEXT" );
20812
20813     NewVersion( $DBversion, 20882, 'items.uri to MEDIUMTEXT');
20814 }
20815
20816 $DBversion = '19.12.00.023';
20817 if( CheckVersion( $DBversion ) ) {
20818     $dbh->do( "ALTER TABLE quotes MODIFY timestamp datetime NULL" );
20819
20820     NewVersion( $DBversion, 24640, 'Allow quotes.timestamp to be NULL');
20821 }
20822
20823 $DBversion = '19.12.00.024';
20824 if( CheckVersion( $DBversion ) ) {
20825     $dbh->do(q{
20826         UPDATE systempreferences SET value = 'off'
20827         WHERE variable = 'finesMode' AND (value <> 'production' OR value IS NULL)
20828     });
20829     $dbh->do(q{
20830         UPDATE systempreferences SET options = 'off|production',
20831         explanation = "Choose the fines mode, 'off' (do not accrue fines) or 'production' (accrue overdue fines).  Requires accruefines cronjob or CalculateFinesOnReturn system preference."
20832         WHERE variable = 'finesMode'
20833     });
20834
20835     NewVersion( $DBversion, 21633, 'Remove finesMode "test"');
20836 }
20837
20838 $DBversion = '19.12.00.025';
20839 if( CheckVersion( $DBversion ) ) {
20840     $dbh->do(q{
20841         INSERT IGNORE INTO `systempreferences` (variable,value,options,explanation,type)
20842         VALUES ('DumpSearchQueryTemplate',0,'','Add the search query being passed to the search engine into the template for debugging','YesNo')
20843     });
20844
20845     NewVersion( $DBversion, 24103, 'add DumpSearchQueryTemplate syspref');
20846 }
20847
20848 $DBversion = '19.12.00.026';
20849 if( CheckVersion( $DBversion ) ) {
20850     if( !column_exists( 'z3950servers', 'attributes' ) ) {
20851         $dbh->do( "ALTER TABLE z3950servers ADD COLUMN attributes VARCHAR(255) after add_xslt" );
20852     }
20853
20854     NewVersion( $DBversion, 11297, 'Add support for custom PQF attributes for Z39.50 server searches');
20855 }
20856
20857 $DBversion = '19.12.00.027';
20858 if( CheckVersion( $DBversion ) ) {
20859
20860     # Add any pathalogical incorrect debit_types as credit_types as appropriate
20861     $dbh->do(
20862         qq{
20863           INSERT IGNORE INTO account_credit_types (
20864             code,
20865             description,
20866             can_be_added_manually,
20867             is_system
20868           )
20869           SELECT
20870             DISTINCT(debit_type_code),
20871             "Unexpected type found during upgrade",
20872             1,
20873             0
20874           FROM
20875             accountlines
20876           WHERE
20877             amount < 0
20878           AND
20879             debit_type_code IS NOT NULL
20880         }
20881     );
20882
20883     # Correct any pathalogical cases
20884     $dbh->do( qq{
20885       UPDATE
20886         accountlines
20887       SET
20888         credit_type_code = debit_type_code,
20889         debit_type_code = NULL
20890       WHERE
20891         amount < 0
20892       AND
20893         debit_type_code IS NOT NULL
20894     });
20895
20896     NewVersion( $DBversion, 24532, 'Fix pathological cases of negative debits');
20897 }
20898
20899 $DBversion = '19.12.00.028';
20900 if( CheckVersion( $DBversion ) ) {
20901     $dbh->do(q{
20902         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
20903         VALUES
20904         ('OpacBrowseSearch', '0',NULL, "Elasticsearch only: add a page allowing users to 'browse' all items in the collection",'YesNo')
20905     });
20906
20907     NewVersion( $DBversion, 14567, 'Add OpacBrowseSearch syspref');
20908 }
20909
20910 $DBversion = '19.12.00.029';
20911 if( CheckVersion( $DBversion ) ) {
20912     if (!column_exists('account_credit_types', 'archived')) {
20913         $dbh->do('ALTER TABLE account_credit_types ADD COLUMN archived tinyint(1) NOT NULL DEFAULT 0 AFTER is_system');
20914     }
20915
20916     NewVersion( $DBversion, 17702, 'Add column account_credit_types.archived');
20917 }
20918
20919 $DBversion = '19.12.00.030';
20920 if( CheckVersion( $DBversion ) ) {
20921
20922     # get list of installed translations
20923     require C4::Languages;
20924     my @langs;
20925     my $tlangs = C4::Languages::getTranslatedLanguages('opac','bootstrap');
20926
20927     foreach my $language ( @$tlangs ) {
20928         foreach my $sublanguage ( @{$language->{'sublanguages_loop'}} ) {
20929             push @langs, $sublanguage->{'rfc4646_subtag'};
20930         }
20931     }
20932
20933     # Get any existing value from the opacheader system preference
20934     my ($opacheader) = $dbh->selectrow_array( q|
20935         SELECT value FROM systempreferences WHERE variable='opacheader';
20936     |);
20937
20938     my @detail;
20939     if( $opacheader ){
20940         foreach my $lang ( @langs ) {
20941             # If there is a value in the opacheader preference, insert it into opac_news
20942             $dbh->do("INSERT INTO opac_news (branchcode, lang, title, content ) VALUES (NULL, ?, '', ?)", undef, "opacheader_$lang", $opacheader);
20943             push @detail, "Inserted opacheader contents into $lang news item...";
20944         }
20945     }
20946     # Remove the opacheader system preference
20947     $dbh->do("DELETE FROM systempreferences WHERE variable='opacheader'");
20948
20949     unshift @detail, 'Move contents of opacheader preference to Koha news system';
20950     NewVersion( $DBversion, 22880, \@detail);
20951 }
20952
20953 $DBversion = '19.12.00.031';
20954 if( CheckVersion( $DBversion ) ) {
20955     $dbh->do( q|
20956 ALTER TABLE article_requests MODIFY COLUMN created_on timestamp NULL, MODIFY COLUMN updated_on timestamp NOT NULL DEFAULT current_timestamp() ON UPDATE current_timestamp()
20957     |);
20958
20959     NewVersion( $DBversion, 22273, "Column article_requests.created_on should not be updated" );
20960 }
20961
20962 $DBversion = '19.12.00.032';
20963 if( CheckVersion( $DBversion ) ) {
20964     $dbh->do( q|
20965         DELETE FROM systempreferences WHERE variable="UseQueryParser"
20966     |);
20967
20968     NewVersion( $DBversion, 24735, "Remove UseQueryParser system preference" );
20969 }
20970
20971 $DBversion = '19.12.00.033';
20972 if ( CheckVersion($DBversion) ) {
20973
20974     # Add cash_register_actions table
20975     if ( !TableExists('cash_register_actions') ) {
20976         $dbh->do(qq{
20977             CREATE TABLE `cash_register_actions` (
20978               `id` int(11) NOT NULL auto_increment, -- unique identifier for each account register action
20979               `code` varchar(24) NOT NULL, -- action code denoting the type of action recorded (enum),
20980               `register_id` int(11) NOT NULL, -- id of cash_register this action belongs to,
20981               `manager_id` int(11) NOT NULL, -- staff member performing the action
20982               `amount` decimal(28,6) DEFAULT NULL, -- amount recorded in action (signed)
20983               `timestamp` timestamp NOT NULL default CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP,
20984               PRIMARY KEY (`id`),
20985               CONSTRAINT `cash_register_actions_manager` FOREIGN KEY (`manager_id`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE CASCADE ON UPDATE CASCADE,
20986               CONSTRAINT `cash_register_actions_register` FOREIGN KEY (`register_id`) REFERENCES `cash_registers` (`id`) ON DELETE CASCADE ON UPDATE CASCADE
20987             ) ENGINE = InnoDB DEFAULT CHARSET = utf8mb4 COLLATE = utf8mb4_unicode_ci;
20988         });
20989     }
20990
20991     # Add cashup permission
20992     $dbh->do(qq{
20993         INSERT IGNORE permissions (module_bit, code, description)
20994         VALUES
20995         (25, 'cashup', 'Perform cash register cashup action')
20996     });
20997
20998     NewVersion( $DBversion, 23355, [ "Add cash_register_actions table", "Add cash register cashup permissions" ] );
20999 }
21000
21001 $DBversion = '19.12.00.034';
21002 if ( CheckVersion($DBversion) ) {
21003
21004     $dbh->do(
21005         qq{
21006             INSERT IGNORE INTO account_credit_types (code, description, can_be_added_manually, is_system)
21007             VALUES
21008               ('DISCOUNT', 'A discount applied to a patrons fine', 0, 1)
21009         }
21010     );
21011
21012     $dbh->do(
21013         qq{
21014         INSERT IGNORE INTO account_offset_types ( type ) VALUES ('DISCOUNT');
21015     }
21016     );
21017
21018     $dbh->do(
21019         qq{
21020         INSERT IGNORE permissions (module_bit, code, description)
21021         VALUES
21022         (10, 'discount', 'Perform account discount action')
21023     }
21024     );
21025
21026     NewVersion( $DBversion, 24081, "Add DISCOUNT to account_credit_types and account_offset_types, Add accounts discount permission");
21027 }
21028
21029 $DBversion = '19.12.00.035';
21030 if ( CheckVersion($DBversion) ) {
21031
21032     $dbh->do(qq{
21033         INSERT IGNORE permissions (module_bit, code, description)
21034         VALUES
21035         (25, 'anonymous_refund', 'Perform refund actions from cash registers')
21036     });
21037
21038     NewVersion( $DBversion, 23442, "Add a refund option to the point of sale system" );
21039 }
21040
21041 $DBversion = '19.12.00.036';
21042 if( CheckVersion( $DBversion ) ) {
21043     $dbh->do(q{
21044         INSERT IGNORE INTO `systempreferences`
21045             (`variable`, `value`, `options`, `explanation`, `type`)
21046         VALUES
21047             ('AccessControlAllowOrigin', '', NULL, 'Set the Access-Control-Allow-Origin header to the specified value', 'Free');
21048     });
21049
21050     NewVersion( $DBversion, 24369, "Add CORS support to Koha");
21051 }
21052
21053 $DBversion = '19.12.00.037';
21054 if( CheckVersion( $DBversion ) ) {
21055
21056     $dbh->do( q| INSERT IGNORE INTO systempreferences (variable, value, explanation, options, type) VALUES ('RenewAccruingItemInOpac', '0', 'If enabled, when the fines on an item accruing is paid off in the OPAC via a payment plugin, attempt to renew that item. If the syspref "RenewalPeriodBase" is set to "due date", renewed items may still be overdue', '', 'YesNo'); | );
21057
21058     $dbh->do( q| INSERT IGNORE INTO systempreferences (variable, value, explanation, options, type) VALUES ('RenewAccruingItemWhenPaid', '0', 'If enabled, when the fines on an item accruing is paid off, attempt to renew that item. If the syspref "RenewalPeriodBase" is set to "due date", renewed items may still be overdue', '', 'YesNo'); | );
21059
21060     NewVersion( $DBversion, 23051, [ "Add RenewAccruingItemInOpac syspref", "Add RenewAccruingItemWhenPaid syspref" ]);
21061 }
21062
21063 $DBversion = '19.12.00.038';
21064 if( CheckVersion( $DBversion ) ) {
21065     $dbh->do( q| INSERT IGNORE INTO systempreferences (variable, value, explanation, options, type) VALUES ('CirculateILL', '0', 'If enabled, it is possible to circulate ILL requested items from within ILL', '', 'YesNo'); | );
21066
21067     NewVersion( $DBversion, 23112, "Add CirculateILL syspref");
21068 }
21069
21070 $DBversion = '19.12.00.039';
21071 if( CheckVersion( $DBversion ) ) {
21072     $dbh->do( "DROP TABLE IF EXISTS printers" );
21073
21074     if( column_exists( 'branches', 'branchprinter' ) ) {
21075         $dbh->do( "ALTER TABLE branches DROP COLUMN branchprinter" );
21076     }
21077
21078     $dbh->do(qq{ DELETE FROM systempreferences WHERE variable = "printcirculationslips"} );
21079
21080     NewVersion( $DBversion, 17845, "Drop unused table printers and branchprinter column");
21081 }
21082
21083 $DBversion = '19.12.00.040';
21084 if( CheckVersion( $DBversion ) ) {
21085     $dbh->do( "UPDATE systempreferences SET  explanation = 'Comma separated list defining the default fields to be used during a patron search using the \"standard\" option. If empty Koha will default to \"surname,firstname,othernames,cardnumber,userid\". Additional fields added to this preference will be added as search options in the dropdown menu on the patron search page.' WHERE variable='DefaultPatronSearchFields' " );
21086
21087     NewVersion( $DBversion, 17374, "Update description of DefaultPatronSearchFields");
21088 }
21089
21090 $DBversion = '19.12.00.041';
21091 if( CheckVersion( $DBversion ) ) {
21092
21093     # Update existing NULL priorities
21094     $dbh->do(q|
21095         UPDATE reserves SET priority = 1 WHERE priority IS NULL
21096     |);
21097
21098     $dbh->do(q|
21099         ALTER TABLE reserves MODIFY priority SMALLINT(6) NOT NULL DEFAULT 1
21100     |);
21101
21102     $dbh->do(q|
21103         UPDATE old_reserves SET priority = 1 WHERE priority IS NULL
21104     |);
21105
21106     $dbh->do(q|
21107         ALTER TABLE old_reserves MODIFY priority SMALLINT(6) NOT NULL DEFAULT 1
21108     |);
21109
21110     NewVersion( $DBversion, 24722, "Enforce NOT NULL constraint for reserves.priority");
21111 }
21112
21113 $DBversion = '19.12.00.042';
21114 if( CheckVersion( $DBversion ) ) {
21115     if (!column_exists('message_queue', 'reply_address')) {
21116         $dbh->do('ALTER TABLE message_queue ADD COLUMN reply_address LONGTEXT AFTER from_address');
21117     }
21118
21119     NewVersion( $DBversion, 22821, "Add reply_address to message_queue");
21120 }
21121
21122 $DBversion = '19.12.00.043';
21123 if( CheckVersion( $DBversion ) ) {
21124
21125     # Add return reasons to enum
21126     $dbh->do(
21127         qq{
21128             ALTER TABLE
21129                 `branchtransfers`
21130             MODIFY COLUMN
21131                 `reason` enum(
21132                     'Manual',
21133                     'StockrotationAdvance',
21134                     'StockrotationRepatriation',
21135                     'ReturnToHome',
21136                     'ReturnToHolding'
21137                 )
21138             AFTER `comments`
21139           }
21140     );
21141
21142     NewVersion( $DBversion, 24296, "Add 'return' reasons to branchtransfers enum");
21143 }
21144
21145 $DBversion = '19.12.00.044';
21146 if( CheckVersion( $DBversion ) ) {
21147     $dbh->do(qq{
21148         INSERT IGNORE permissions (module_bit, code, description)
21149         VALUES
21150         (13, 'batch_extend_due_dates', 'Perform batch extend due dates')
21151     });
21152
21153     NewVersion( $DBversion, 24846, "Add a new permission for new tool batch extend due dates");
21154 }
21155
21156 $DBversion = '19.12.00.045';
21157 if( CheckVersion( $DBversion ) ) {
21158     $dbh->do(q{
21159         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
21160         VALUES
21161         ('CollapseFieldsPatronAddForm','',NULL,'Collapse these fields by default when adding a new patron. These fields can still be expanded.','Multiple')
21162     });
21163
21164     NewVersion( $DBversion, 4461, "Add CollapseFieldsPatronAddForm system preference");
21165 }
21166
21167 $DBversion = '19.12.00.046';
21168 if( CheckVersion( $DBversion ) ) {
21169
21170     $dbh->do( "ALTER TABLE accountlines MODIFY COLUMN date TIMESTAMP NULL" );
21171
21172     NewVersion( $DBversion, 24818, "Update 'accountlines.date' from DATE to TIMESTAMP");
21173 }
21174
21175 $DBversion = '19.12.00.047';
21176 if( CheckVersion( $DBversion ) ) {
21177     $dbh->do(q{
21178         ALTER TABLE biblioimages
21179         ADD `timestamp` TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP
21180         AFTER `thumbnail`;
21181     });
21182
21183     NewVersion( $DBversion, 22987, "Add biblioimages.timestamp");
21184 }
21185
21186 $DBversion = '19.12.00.048';
21187 if( CheckVersion( $DBversion ) ) {
21188
21189     # Add rotating collection states to reason enum
21190     $dbh->do(
21191         qq{
21192             ALTER TABLE
21193                 `branchtransfers`
21194             MODIFY COLUMN
21195                 `reason` enum(
21196                     'Manual',
21197                     'StockrotationAdvance',
21198                     'StockrotationRepatriation',
21199                     'ReturnToHome',
21200                     'ReturnToHolding',
21201                     'RotatingCollection'
21202                 )
21203             AFTER `comments`
21204           }
21205     );
21206
21207     NewVersion( $DBversion, 24299, "Add 'collection' reasons to branchtransfers enum");
21208 }
21209
21210 $DBversion = '19.12.00.049';
21211 if( CheckVersion( $DBversion ) ) {
21212
21213     # Add reserve reasons enum
21214     $dbh->do(
21215         qq{
21216             ALTER TABLE
21217                 `branchtransfers`
21218             MODIFY COLUMN
21219                 `reason` enum(
21220                     'Manual',
21221                     'StockrotationAdvance',
21222                     'StockrotationRepatriation',
21223                     'ReturnToHome',
21224                     'ReturnToHolding',
21225                     'RotatingCollection',
21226                     'Reserve',
21227                     'LostReserve',
21228                     'CancelReserve'
21229                 )
21230             AFTER `comments`
21231           }
21232     );
21233
21234     NewVersion( $DBversion, 24299, "Add 'reserve' reasons to branchtransfers enum");
21235 }
21236
21237 $DBversion = '19.12.00.050';
21238 if( CheckVersion( $DBversion ) ) {
21239     $dbh->do( "DELETE FROM systempreferences WHERE variable in ('IDreamBooksReadometer','IDreamBooksResults','IDreamBooksReviews')" );
21240
21241     NewVersion( $DBversion, 24854, "Remove IDreamBooks* system preferences");
21242 }
21243
21244 $DBversion = '19.12.00.051';
21245 if( CheckVersion( $DBversion ) ) {
21246     $dbh->do(q{
21247         UPDATE systempreferences SET options = 'itemhomebranch|patronhomebranch|checkoutbranch|none' WHERE variable='OpacRenewalBranch'
21248     });
21249     $dbh->do(q{
21250         UPDATE systempreferences SET value = "none" WHERE variable='OpacRenewalBranch'
21251         AND value = 'NULL'
21252     });
21253     $dbh->do(q{
21254         UPDATE systempreferences SET value = 'opacrenew' WHERE variable='OpacRenewalBranch'
21255         AND value NOT IN ('checkoutbranch','itemhomebranch','opacrenew','patronhomebranch','none')
21256     });
21257
21258     NewVersion( $DBversion, 24759, "Cleanup OpacRenewalBranch");
21259 }
21260
21261 $DBversion = '19.12.00.052';
21262 if( CheckVersion( $DBversion ) ) {
21263     if( !column_exists( 'itemtypes', 'rentalcharge_daily_calendar' ) ) {
21264         $dbh->do(q{
21265             ALTER TABLE itemtypes ADD COLUMN
21266             rentalcharge_daily_calendar tinyint(1) NOT NULL DEFAULT 1
21267             AFTER rentalcharge_daily;
21268         });
21269     }
21270
21271     if( !column_exists( 'itemtypes', 'rentalcharge_hourly_calendar' ) ) {
21272         $dbh->do(q{
21273             ALTER TABLE itemtypes ADD COLUMN
21274             rentalcharge_hourly_calendar tinyint(1) NOT NULL DEFAULT 1
21275             AFTER rentalcharge_hourly;
21276         });
21277     }
21278
21279     my $finesCalendar = C4::Context->preference('finesCalendar');
21280     my $value = $finesCalendar eq 'noFinesWhenClosed' ? 1 : 0;
21281     $dbh->do("UPDATE itemtypes SET rentalcharge_hourly_calendar = $value, rentalcharge_daily_calendar = $value");
21282
21283     NewVersion( $DBversion, 21443, "Add ability to exclude holidays when calculating rentals fees by time period");
21284 }
21285
21286 $DBversion = '19.12.00.053';
21287 if( CheckVersion( $DBversion ) ) {
21288     unless( column_exists('borrowers','autorenew_checkouts') ){
21289         $dbh->do( "ALTER TABLE borrowers ADD COLUMN autorenew_checkouts TINYINT(1) NOT NULL DEFAULT 1 AFTER anonymized" );
21290     }
21291     unless( column_exists('deletedborrowers','autorenew_checkouts') ){
21292         $dbh->do( "ALTER TABLE deletedborrowers ADD COLUMN autorenew_checkouts TINYINT(1) NOT NULL DEFAULT 1 AFTER anonymized" );
21293     }
21294     $dbh->do(q{
21295         INSERT IGNORE INTO systempreferences
21296         ( `variable`, `value`, `options`, `explanation`, `type` )
21297         VALUES
21298         ('AllowPatronToControlAutorenewal','0',NULL,'If enabled, patrons will have a field in their account to choose whether their checkouts are auto renewed or not','YesNo')
21299     });
21300
21301     NewVersion( $DBversion, 24476, "Allow patrons to opt-out of autorenewal");
21302 }
21303
21304 $DBversion = '19.12.00.054';
21305 if( CheckVersion( $DBversion ) ) {
21306
21307     if ( !TableExists('desks') ) {
21308         $dbh->do(qq{
21309              CREATE TABLE `desks` ( -- desks available in a library
21310                `desk_id` int(11) NOT NULL auto_increment, -- unique identifier added by Koha
21311                `desk_name` varchar(100) NOT NULL default '', -- name of the desk
21312                `branchcode` varchar(10) NOT NULL,       -- library the desk is located at
21313                PRIMARY KEY (`desk_id`),
21314                KEY `fk_desks_branchcode` (`branchcode`),
21315                CONSTRAINT `fk_desks_branchcode` FOREIGN KEY (`branchcode`) REFERENCES `branches` (`branchcode`) ON DELETE CASCADE ON UPDATE CASCADE
21316              ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
21317         });
21318     }
21319
21320     NewVersion( $DBversion, 13881, "Add desk management");
21321 }
21322
21323 $DBversion = '19.12.00.055';
21324 if( CheckVersion( $DBversion ) ) {
21325     if( !column_exists( 'suggestions', 'lastmodificationby' ) ) {
21326         $dbh->do(q|
21327             ALTER TABLE suggestions ADD COLUMN lastmodificationby INT(11) DEFAULT NULL AFTER rejecteddate
21328         |);
21329
21330         $dbh->do(q|
21331             ALTER TABLE suggestions ADD CONSTRAINT `suggestions_ibfk_lastmodificationby` FOREIGN KEY (`lastmodificationby`) REFERENCES `borrowers` (`borrowernumber`) ON DELETE SET NULL ON UPDATE CASCADE
21332         |);
21333     }
21334
21335     if( !column_exists( 'suggestions', 'lastmodificationdate' ) ) {
21336         $dbh->do(q|
21337             ALTER TABLE suggestions ADD COLUMN lastmodificationdate DATE DEFAULT NULL AFTER lastmodificationby
21338         |);
21339
21340         my $suggestions = $dbh->selectall_arrayref(q|
21341             SELECT suggestionid, managedby, manageddate, acceptedby, accepteddate, rejectedby, rejecteddate
21342             FROM suggestions
21343         |, { Slice => {} });
21344         for my $suggestion ( @$suggestions ) {
21345             my ( $max_date ) = sort ( $suggestion->{manageddate} || (), $suggestion->{accepteddate} || (), $suggestion->{rejecteddate} || () );
21346             next unless $max_date;
21347             my $last_modif_by = ( defined $suggestion->{manageddate} and $max_date eq $suggestion->{manageddate} )
21348               ? $suggestion->{managedby}
21349               : ( defined $suggestion->{accepteddate} and $max_date eq $suggestion->{accepteddate} )
21350               ? $suggestion->{acceptedby}
21351               : ( defined $suggestion->{rejecteddate} and $max_date eq $suggestion->{rejecteddate} )
21352               ? $suggestion->{rejectedby}
21353               : undef;
21354             next unless $last_modif_by;
21355             $dbh->do(q|
21356                 UPDATE suggestions
21357                 SET lastmodificationdate = ?, lastmodificationby = ?
21358                 WHERE suggestionid = ?
21359             |, undef, $max_date, $last_modif_by, $suggestion->{suggestionid});
21360         }
21361
21362     }
21363
21364     $dbh->do( q|
21365         INSERT IGNORE INTO letter(module, code, branchcode, name, is_html, title, content, message_transport_type, lang) VALUES ('suggestions', 'NOTIFY_MANAGER', '', 'Notify manager of a suggestion', 0, "A suggestion has been assigned to you", "Dear [% borrower.firstname %] [% borrower.surname %],\nA suggestion has been assigned to you: [% suggestion.title %].\nThank you,\n[% branch.branchname %]", 'email', 'default');
21366     | );
21367
21368     NewVersion( $DBversion, 23590, "Add lastmodificationby and lastmodificationdate to the suggestions table");
21369 }
21370
21371 $DBversion = '19.12.00.056';
21372 if( CheckVersion( $DBversion ) ) {
21373
21374     $dbh->do( "DELETE FROM systempreferences WHERE variable='UseKohaPlugins'" );
21375
21376     NewVersion( $DBversion, 20415, "Remove UseKohaPlugins preference");
21377 }
21378
21379 $DBversion = '19.12.00.057';
21380 if( CheckVersion( $DBversion ) ) {
21381
21382     $dbh->do( "DELETE FROM systempreferences WHERE variable='INTRAdidyoumean'" );
21383
21384     NewVersion( $DBversion, 20399, "Remove INTRAdidyoumean preference");
21385 }
21386
21387 $DBversion = '19.12.00.058';
21388 if( CheckVersion( $DBversion ) ) {
21389     $dbh->do(q{
21390         INSERT IGNORE INTO systempreferences (`variable`, `value`, `options`, `explanation`,`type`) VALUES
21391         ('OPACnumSearchResultsDropdown', 0, NULL, 'Enable option list of number of results per page to show in OPAC search results','YesNo'),
21392         ('numSearchResultsDropdown', 0, NULL, 'Enable option list of number of results per page to show in staff client search results','YesNo')
21393     });
21394
21395     NewVersion( $DBversion, 14715, "Add sysprefs numSearchResultsDropdown and OPACnumSearchResultsDropdown");
21396 }
21397
21398 $DBversion = '19.12.00.059';
21399 if( CheckVersion( $DBversion ) ) {
21400
21401     for my $column ( qw(othersupplier booksellerfax booksellerurl bookselleremail currency) ) {
21402         if( column_exists( 'aqbooksellers', $column ) ) {
21403             my ($count) = $dbh->selectrow_array(qq|
21404                 SELECT COUNT(*)
21405                 FROM aqbooksellers
21406                 WHERE $column IS NOT NULL AND $column <> ""
21407             |);
21408             if ( $count ) {
21409                 warn "Warning - Cannot remove column aqbooksellers.$column. At least one value exists";
21410             } else {
21411                 $dbh->do(qq|
21412                     ALTER TABLE aqbooksellers
21413                     DROP COLUMN $column
21414                 |);
21415             }
21416         }
21417     }
21418
21419     NewVersion( $DBversion, 18177, "Remove some unused columns from aqbooksellers");
21420 }
21421
21422 $DBversion = '19.12.00.060';
21423 if( CheckVersion( $DBversion ) ) {
21424     $dbh->do(q{
21425         ALTER TABLE search_marc_map CHANGE marc_type `marc_type` enum('marc21','normarc','unimarc') COLLATE utf8mb4_unicode_ci NOT NULL COMMENT 'what MARC type this map is for';
21426     });
21427     NewVersion( $DBversion, 23204, "Change enum order for marc_type in search_marc_map to fix sorting");
21428 }
21429
21430 $DBversion = '19.12.00.061';
21431 if ( CheckVersion($DBversion) ) {
21432     $dbh->do(q{
21433         UPDATE
21434           systempreferences
21435         SET
21436           options = "batchmod|moredetail|cronjob|additem|pendingreserves|onpayment"
21437         WHERE
21438           variable = "MarkLostItemsAsReturned"
21439     });
21440
21441     my $lost_item_returned = C4::Context->preference("MarkLostItemsAsReturned");
21442     my @set = split( ",", $lost_item_returned );
21443     push @set, 'onpayment';
21444     $lost_item_returned = join( ",", @set );
21445
21446     $dbh->do(qq{
21447         UPDATE
21448           systempreferences
21449         SET
21450           value = "$lost_item_returned"
21451         WHERE
21452           variable = "MarkLostItemsAsReturned"
21453     });
21454
21455     NewVersion( $DBversion, 24474, "Add `onpayment` option to MarkLostItemsAsReturned");
21456 }
21457
21458 $DBversion = '19.12.00.062';
21459 if( CheckVersion( $DBversion ) ) {
21460     $dbh->do( "UPDATE account_debit_types SET description = REPLACE(description,'Rewewal','Renewal') WHERE description like '%Rewewal%'" );
21461
21462     NewVersion( $DBversion, 25010, "Fix typo in account_debit_type description");
21463 }
21464
21465 $DBversion = '19.12.00.063';
21466 if( CheckVersion( $DBversion ) ) {
21467     $dbh->do(q{INSERT IGNORE INTO systempreferences (variable, value, options, explanation, type) VALUES ('PrefillGuaranteeField', 'phone,email,streetnumber,address,city,state,zipcode,country', NULL, 'Prefill these fields in guarantee member entry form from guarantor patron record', 'Multiple') });
21468
21469     NewVersion( $DBversion, 22534, "Add PreFillGuaranteeField syspref");
21470 }
21471
21472 $DBversion = '19.12.00.064';
21473 if( CheckVersion( $DBversion ) ) {
21474
21475     $dbh->do( q|
21476         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` )
21477             SELECT 'OpacNoItemTypeImages', value, NULL, 'If ON, disables itemtype images in the OPAC','YesNo'
21478             FROM (SELECT value FROM systempreferences WHERE variable="NoItemTypeImages") tmp
21479     | );
21480     $dbh->do( "UPDATE systempreferences SET explanation = 'If ON, disables itemtype images in the staff interface'
21481         WHERE variable = 'noItemTypeImages' ");
21482
21483     NewVersion( $DBversion, 4944, "Add new system preference OpacNoItemTypeImages");
21484 }
21485
21486 $DBversion = '19.12.00.065';
21487 if( CheckVersion( $DBversion ) ) {
21488
21489     $dbh->do( q|
21490         INSERT IGNORE INTO systempreferences (variable, value, explanation, options, type)
21491         VALUES ('ILLCheckAvailability', '0', 'If enabled, during the ILL request process third party sources will be checked for current availability', '', 'YesNo')
21492     | );
21493
21494     NewVersion( $DBversion, 23173, "Add ILLCheckAvailability syspref");
21495 }
21496
21497 $DBversion = '19.12.00.066';
21498 if ( CheckVersion($DBversion) ) {
21499     $dbh->do(
21500 q{INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES ('OPACReportProblem', 0, NULL, 'Allow patrons to submit problem reports for OPAC pages to the library or Koha Administrator', 'YesNo') }
21501     );
21502     $dbh->do(
21503 q{INSERT IGNORE INTO letter (module, code, name, title, content, message_transport_type) VALUES ('members', 'PROBLEM_REPORT','OPAC Problem Report','OPAC Problem Report','Username: <<problem_reports.username>>\n\nProblem page: <<problem_reports.problempage>>\n\nTitle: <<problem_reports.title>>\n\nMessage: <<problem_reports.content>>','email') }
21504     );
21505     if ( !TableExists('problem_reports') ) {
21506         $dbh->do(
21507             q{ CREATE TABLE problem_reports (
21508             reportid int(11) NOT NULL auto_increment, -- unique identifier assigned by Koha
21509             title varchar(40) NOT NULL default '', -- report subject line
21510             content varchar(255) NOT NULL default '', -- report message content
21511             borrowernumber int(11) NOT NULL default 0, -- the user who created the problem report
21512             branchcode varchar(10) NOT NULL default '', -- borrower's branch
21513             username varchar(75) default NULL, -- OPAC username
21514             problempage TEXT default NULL, -- page the user triggered the problem report form from
21515             recipient enum('admin','library') NOT NULL default 'library', -- the 'to-address' of the problem report
21516             created_on timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP, -- timestamp of report submission
21517             status varchar(6) NOT NULL default 'New', -- status of the report. New, Viewed, Closed
21518             PRIMARY KEY (reportid),
21519             CONSTRAINT problem_reports_ibfk1 FOREIGN KEY (borrowernumber) REFERENCES borrowers (borrowernumber) ON DELETE CASCADE ON UPDATE CASCADE,
21520             CONSTRAINT problem_reports_ibfk2 FOREIGN KEY (branchcode) REFERENCES branches (branchcode) ON DELETE CASCADE ON UPDATE CASCADE
21521         ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci }
21522         );
21523     }
21524     $dbh->do(
21525 q{INSERT IGNORE INTO userflags (bit, flag, flagdesc, defaulton) VALUES (26, 'problem_reports', 'Manage problem reports', 0) }
21526     );
21527     $dbh->do(
21528 q{INSERT IGNORE INTO permissions (module_bit, code, description) VALUES (26, 'manage_problem_reports', 'Manage OPAC problem reports') }
21529     );
21530
21531     NewVersion(
21532         $DBversion,
21533         4461,
21534         [
21535             "Add OPACReportProblem system preference",
21536             "Adding PROBLEM_REPORT notice",
21537             "Add problem reports table",
21538             "Add user permissions for managing OPAC problem reports"
21539         ]
21540     );
21541 }
21542
21543 $DBversion = '19.12.00.067';
21544 if( CheckVersion( $DBversion ) ) {
21545     # From: https://stackoverflow.com/questions/3311903/remove-duplicate-rows-in-mysql
21546     $dbh->do(q|
21547         DELETE a
21548         FROM virtualshelfshares as a, virtualshelfshares as b
21549         WHERE
21550           a.id < b.id
21551         AND
21552           a.borrowernumber IS NOT NULL
21553         AND
21554           a.borrowernumber=b.borrowernumber
21555         AND
21556           a.shelfnumber=b.shelfnumber
21557     |);
21558
21559     NewVersion( $DBversion, 20754, "Remove double accepted list shares" );
21560 }
21561
21562 $DBversion = '19.12.00.068';
21563 if( CheckVersion( $DBversion ) ) {
21564     $dbh->do(q|
21565         INSERT IGNORE INTO systempreferences
21566           (variable,value,explanation,options,type)
21567         VALUES
21568           ('AuthFailureLog','','If enabled, log authentication failures',NULL,'YesNo'),
21569           ('AuthSuccessLog','','If enabled, log successful authentications',NULL,'YesNo')
21570     |);
21571
21572     NewVersion( $DBversion, 21190, "Add prefs AuthFailureLog and AuthSuccessLog");
21573 }
21574
21575 $DBversion = '19.12.00.069';
21576 if( CheckVersion( $DBversion ) ) {
21577     if( !column_exists( 'suggestions', 'archived' ) ) {
21578         $dbh->do(q|
21579             ALTER TABLE suggestions ADD COLUMN archived TINYINT(1) NOT NULL DEFAULT 0 AFTER `STATUS`;
21580         |);
21581     }
21582
21583     NewVersion( $DBversion, 22784, "Add a new suggestions.archived column");
21584 }
21585
21586 $DBversion = '19.12.00.070';
21587 if( CheckVersion( $DBversion ) ) {
21588
21589     $dbh->do( q{
21590             INSERT IGNORE INTO systempreferences (variable,value,explanation,type) VALUES
21591                 ('MaxTotalSuggestions','','Number of total suggestions used for time limit with NumberOfSuggestionDays','Free'),
21592                 ('NumberOfSuggestionDays','','Number of days that will be used to determine the MaxTotalSuggestions limit','Free')
21593             });
21594
21595     NewVersion( $DBversion, 22774, "Limit purchase suggestion in a specified time period");
21596 }
21597
21598 $DBversion = '19.12.00.071';
21599 if( CheckVersion( $DBversion ) ) {
21600     my @description = ("Add unique constraint to authorised_values");
21601     unless ( index_exists('authorised_values', 'av_uniq') ) {
21602         $dbh->do(q|
21603             DELETE FROM authorised_values
21604             WHERE category="COUNTRY" AND authorised_value="CC" AND lib="Keeling"
21605         |);
21606         my $duplicates = $dbh->selectall_arrayref(q|
21607             SELECT category, authorised_value, COUNT(concat(category, ':', authorised_value)) AS c
21608             FROM authorised_values
21609             GROUP BY category, authorised_value
21610             HAVING COUNT(concat(category, ':', authorised_value)) > 1
21611         |, { Slice => {} });
21612         if ( @$duplicates ) {
21613             push @description, "WARNING - Cannot create unique constraint on authorised_value(category, authorised_value)";
21614             push @description, "The following entries are duplicated: " . join(
21615                 ', ',
21616                 map {
21617                     sprintf "%s:%s (%s)", $_->{category},
21618                       $_->{authorised_value}, $_->{c}
21619                 } @$duplicates
21620             );
21621             for my $warning (@description) {
21622                 warn $warning;
21623             }
21624         } else {
21625             $dbh->do( q{ALTER TABLE `authorised_values` ADD CONSTRAINT `av_uniq` UNIQUE (category, authorised_value)} );
21626         }
21627     }
21628
21629     NewVersion( $DBversion, 22887, \@description );
21630 }
21631
21632 $DBversion = '19.12.00.072';
21633 if( CheckVersion( $DBversion ) ) {
21634     $dbh->do(q{
21635         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` )
21636             SELECT 'CalculateFinesOnBackdate',value,'','Switch to control if overdue fines are calculated on return when backdating','YesNo'
21637             FROM ( SELECT value FROM systempreferences WHERE variable = 'CalculateFinesOnReturn' ) tmp
21638     });
21639
21640     NewVersion( $DBversion, 24380, "Add syspref CalculateFinesOnBackdate");
21641 }
21642
21643 $DBversion = '19.12.00.073';
21644 if( CheckVersion( $DBversion ) ) {
21645     $dbh->do( "ALTER TABLE subscription MODIFY COLUMN closed tinyint(1) not null default 0" );
21646
21647     NewVersion( $DBversion, 25152, "Update subscription.closed to tinyint(1) as per guidelines");
21648 }
21649
21650 $DBversion = '19.12.00.074';
21651 if( CheckVersion( $DBversion ) ) {
21652     $dbh->do( "UPDATE systempreferences SET variable = 'SCOAllowCheckin' WHERE variable = 'AllowSelfCheckReturns'" );
21653
21654     # Always end with this (adjust the bug info)
21655     NewVersion( $DBversion, 25147, "Rename AllowSelfCheckReturns to SCOAllowCheckin for consistency");
21656 }
21657
21658 $DBversion = '19.12.00.075';
21659 if( CheckVersion( $DBversion ) ) {
21660
21661     $dbh->do( "ALTER TABLE borrower_modifications MODIFY changed_fields MEDIUMTEXT DEFAULT NULL" );
21662
21663     NewVersion( $DBversion, 25086, "Set changed_fields column of borrower_modifications as nullable");
21664 }
21665
21666 $DBversion = '19.12.00.076';
21667 if( CheckVersion( $DBversion ) ) {
21668     my @warnings;
21669
21670     $dbh->do(q|
21671         UPDATE
21672           serial
21673         SET
21674           planneddate = NULL
21675         WHERE
21676           planneddate = '0000-00-00'
21677     |);
21678
21679     $dbh->do(q|
21680         UPDATE
21681           serial
21682         SET
21683           publisheddate = NULL
21684         WHERE
21685           publisheddate = '0000-00-00'
21686     |);
21687
21688     $dbh->do(q|
21689         UPDATE
21690           serial
21691         SET
21692           claimdate = NULL
21693         WHERE
21694           claimdate = '0000-00-00'
21695     |);
21696
21697     $dbh->do(q|
21698         ALTER TABLE serial
21699         MODIFY COLUMN biblionumber INT(11) NOT NULL
21700     |);
21701
21702     unless ( foreign_key_exists( 'serial', 'serial_ibfk_1' ) ) {
21703         my $serials = $dbh->selectall_arrayref(q|
21704             SELECT serialid FROM serial WHERE biblionumber NOT IN (SELECT biblionumber FROM biblio)
21705         |, { Slice => {} });
21706         if ( @$serials ) {
21707             push @warnings, q|WARNING - The following serials are deleted, they were not attached to an existing bibliographic record (serialid): | . join ", ", map { $_->{serialid} } @$serials;
21708             $dbh->do(q|
21709                 DELETE FROM serial WHERE biblionumber NOT IN (SELECT biblionumber FROM biblio)
21710             |);
21711         }
21712         $dbh->do(q|
21713             ALTER TABLE serial
21714             ADD CONSTRAINT serial_ibfk_1 FOREIGN KEY (biblionumber) REFERENCES biblio (biblionumber) ON DELETE CASCADE ON UPDATE CASCADE
21715         |);
21716     }
21717
21718     $dbh->do(q|
21719         ALTER TABLE serial
21720         MODIFY COLUMN subscriptionid INT(11) NOT NULL
21721     |);
21722
21723     unless ( foreign_key_exists( 'serial', 'serial_ibfk_2' ) ) {
21724         my $serials = $dbh->selectall_arrayref(q|
21725             SELECT serialid FROM serial WHERE subscriptionid NOT IN (SELECT subscriptionid FROM subscription)
21726         |, { Slice => {} });
21727         if ( @$serials ) {
21728             push @warnings, q|WARNING - The following serials are deleted, they were not attached to an existing subscription (serialid): | . join ", ", map { $_->{serialid} } @$serials;
21729             $dbh->do(q|
21730                 DELETE FROM serial WHERE subscriptionid NOT IN (SELECT subscriptionid FROM subscription)
21731             |);
21732         }
21733         $dbh->do(q|
21734             ALTER TABLE serial
21735             ADD CONSTRAINT serial_ibfk_2 FOREIGN KEY (subscriptionid) REFERENCES subscription (subscriptionid) ON DELETE CASCADE ON UPDATE CASCADE
21736         |);
21737     }
21738
21739     $dbh->do(q|
21740         ALTER TABLE subscriptionhistory
21741         MODIFY COLUMN biblionumber int(11) NOT NULL,
21742         MODIFY COLUMN subscriptionid int(11) NOT NULL
21743     |);
21744
21745     unless ( foreign_key_exists( 'subscriptionhistory', 'subscription_history_ibfk_1' ) ) {
21746         $dbh->do(q|
21747             DELETE FROM subscriptionhistory WHERE biblionumber NOT IN (SELECT biblionumber FROM biblio)
21748         |);
21749         $dbh->do(q|
21750             ALTER TABLE subscriptionhistory
21751             ADD CONSTRAINT subscription_history_ibfk_1 FOREIGN KEY (biblionumber) REFERENCES biblio (biblionumber) ON DELETE CASCADE ON UPDATE CASCADE
21752         |);
21753     }
21754
21755     unless ( foreign_key_exists( 'subscriptionhistory', 'subscription_history_ibfk_2' ) ) {
21756         $dbh->do(q|
21757             DELETE FROM subscriptionhistory WHERE subscriptionid NOT IN (SELECT subscriptionid FROM subscription)
21758         |);
21759         $dbh->do(q|
21760             ALTER TABLE subscriptionhistory
21761             ADD CONSTRAINT subscription_history_ibfk_2 FOREIGN KEY (subscriptionid) REFERENCES subscription (subscriptionid) ON DELETE CASCADE ON UPDATE CASCADE
21762         |);
21763     }
21764
21765     $dbh->do(q|
21766         ALTER TABLE subscription
21767         MODIFY COLUMN biblionumber int(11) NOT NULL
21768     |);
21769
21770     unless ( foreign_key_exists( 'subscription', 'subscription_ibfk_3' ) ) {
21771         my $subscriptions = $dbh->selectall_arrayref(q|
21772             SELECT subscriptionid FROM subscription WHERE biblionumber NOT IN (SELECT biblionumber FROM biblio)
21773         |, { Slice => {} });
21774         if ( @$subscriptions ) {
21775             push @warnings, q|WARNING - The following subscriptions are deleted, they were not attached to an existing bibliographic record (subscriptionid): | . join ", ", map { $_->{subscriptionid} } @$subscriptions;
21776
21777             $dbh->do(q|
21778                 DELETE FROM subscription WHERE biblionumber NOT IN (SELECT biblionumber FROM biblio)
21779             |);
21780         }
21781         $dbh->do(q|
21782             ALTER TABLE subscription
21783             ADD CONSTRAINT subscription_ibfk_3 FOREIGN KEY (biblionumber) REFERENCES biblio (biblionumber) ON DELETE CASCADE ON UPDATE CASCADE
21784         |);
21785     }
21786
21787     for my $warning (@warnings) {
21788         warn $warning;
21789     }
21790
21791     my $description = [ "Add foreign key constraints on serial", @warnings ];
21792     NewVersion( $DBversion, 21901, $description);
21793 }
21794
21795 $DBversion = '19.12.00.077';
21796 if( CheckVersion( $DBversion ) ) {
21797     if ( !column_exists( 'course_items', 'itype_enabled' ) ) {
21798         $dbh->do(q{
21799             ALTER TABLE course_items
21800             ADD COLUMN itype_enabled tinyint(1) NOT NULL DEFAULT 0 AFTER itype,
21801             ADD COLUMN ccode_enabled tinyint(1) NOT NULL DEFAULT 0 AFTER ccode,
21802             ADD COLUMN holdingbranch_enabled tinyint(1) NOT NULL DEFAULT 0 AFTER holdingbranch,
21803             ADD COLUMN location_enabled tinyint(1) NOT NULL DEFAULT 0 AFTER location,
21804             ADD COLUMN itype_storage varchar(10) DEFAULT NULL AFTER itype_enabled,
21805             ADD COLUMN ccode_storage varchar(80) DEFAULT NULL AFTER ccode_enabled,
21806             ADD COLUMN holdingbranch_storage varchar(10) DEFAULT NULL AFTER ccode_enabled,
21807             ADD COLUMN location_storage varchar(80) DEFAULT NULL AFTER location_enabled
21808         });
21809
21810         my $item_level_items = C4::Context->preference('item-level_itypes');
21811         my $itype_field = $item_level_items ? 'i.itype' : 'bi.itemtype';
21812         $dbh->do(qq{
21813             UPDATE course_items ci
21814             LEFT JOIN items i USING ( itemnumber )
21815             LEFT JOIN biblioitems bi USING ( biblioitemnumber )
21816             SET
21817
21818             -- Assume the column is enabled if the course item is active and i.itype/bi.itemtype is set,
21819             -- or if the course item is not enabled and ci.itype is set
21820             ci.itype_enabled = IF( ci.enabled = 'yes', IF( $itype_field IS NULL, 0, 1 ), IF(  ci.itype IS NULL, 0, 1  ) ),
21821             ci.ccode_enabled = IF( ci.enabled = 'yes', IF( i.ccode IS NULL, 0, 1 ), IF(  ci.ccode IS NULL, 0, 1  ) ),
21822             ci.holdingbranch_enabled = IF( ci.enabled = 'yes', IF( i.holdingbranch IS NULL, 0, 1 ), IF(  ci.holdingbranch IS NULL, 0, 1  ) ),
21823             ci.location_enabled = IF( ci.enabled = 'yes', IF( i.location IS NULL, 0, 1 ), IF(  ci.location IS NULL, 0, 1  ) ),
21824
21825             -- If the course item is enabled, copy the value from the item.
21826             -- If the course item is not enabled, keep the existing value
21827             ci.itype = IF( ci.enabled = 'yes', $itype_field, ci.itype ),
21828             ci.ccode = IF( ci.enabled = 'yes', i.ccode, ci.ccode ),
21829             ci.holdingbranch = IF( ci.enabled = 'yes', i.holdingbranch, ci.holdingbranch ),
21830             ci.location = IF( ci.enabled = 'yes', i.location, ci.location ),
21831
21832             -- If the course is enabled, copy the value from the item to storage.
21833             -- If it is not enabled, copy the value from the course item to storage
21834             ci.itype_storage = IF( ci.enabled = 'no', $itype_field, ci.itype ),
21835             ci.ccode_storage = IF( ci.enabled = 'no', i.ccode, ci.ccode ),
21836             ci.holdingbranch_storage = IF( ci.enabled = 'no', i.holdingbranch, ci.holdingbranch ),
21837             ci.location_storage = IF( ci.enabled = 'no', i.location, ci.location );
21838         });
21839
21840         # Clean up the storage columns
21841         $dbh->do(q{
21842             UPDATE course_items SET
21843                 itype_storage = NULL,
21844                 ccode_storage = NULL,
21845                 holdingbranch_storage = NULL,
21846                 location_storage = NULL
21847             WHERE enabled = 'no';
21848         });
21849
21850         # Clean up the course enabled value columns
21851         $dbh->do(q{
21852             UPDATE course_items SET
21853                 itype = IF( itype_enabled = 'no', NULL, itype ),
21854                 ccode = IF( ccode_enabled = 'no', NULL, ccode ),
21855                 holdingbranch = IF( holdingbranch_enabled = 'no', NULL, holdingbranch ),
21856                 location = IF( location_enabled = 'no', NULL, location )
21857             WHERE enabled = 'no';
21858         });
21859     }
21860
21861     NewVersion( $DBversion, 23727, "Editing course reserve items is broken");
21862 }
21863
21864 $DBversion = '19.12.00.078';
21865 if( CheckVersion( $DBversion ) ) {
21866     $dbh->do(q{INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES ('PatronSelfRegistrationConfirmEmail', '0', NULL, 'Require users to confirm their email address by entering it twice.', 'YesNo') });
21867
21868     NewVersion( $DBversion, 24913, "Add PatronSelfRegistrationConfirmEmail syspref");
21869 }
21870
21871 $DBversion = '19.12.00.079';
21872 if( CheckVersion( $DBversion ) ) {
21873
21874     # Default to the homologous OpacPublic syspref
21875     my $opac_public = C4::Context->preference('OpacPublic') ? 1 : 0;
21876
21877     $dbh->do(qq{
21878         INSERT IGNORE INTO `systempreferences`
21879             (`variable`,`value`,`explanation`,`options`,`type`)
21880         VALUES
21881             ('RESTPublicAnonymousRequests', $opac_public, NULL,'If enabled, the API will allow anonymous access to public routes that do not require authenticated access.','YesNo');
21882     });
21883
21884     NewVersion( $DBversion, 25045, "Add a way to restrict anonymous access to public routes (OpacPublic behaviour)");
21885 }
21886
21887 $DBversion = '19.12.00.080';
21888 if( CheckVersion( $DBversion ) ) {
21889      $dbh->do( "UPDATE items set issues=0 where issues is null" );
21890      $dbh->do( "UPDATE deleteditems set issues=0 where issues is null" );
21891      $dbh->do( "ALTER TABLE items ALTER issues set default 0" );
21892      $dbh->do( "ALTER TABLE deleteditems ALTER issues set default 0" );
21893
21894     NewVersion( $DBversion, 23081, "Set default to 0 for items.issues");
21895 }
21896
21897 $DBversion = '19.12.00.081';
21898 if (CheckVersion($DBversion)) {
21899     if (!column_exists('course_items', 'homebranch')) {
21900         $dbh->do(q{
21901             ALTER TABLE course_items
21902             ADD COLUMN homebranch VARCHAR(10) NULL DEFAULT NULL AFTER ccode_storage
21903         });
21904     }
21905
21906     if (!foreign_key_exists('course_items', 'fk_course_items_homebranch')) {
21907         $dbh->do(q{
21908             ALTER TABLE course_items
21909             ADD CONSTRAINT fk_course_items_homebranch
21910               FOREIGN KEY (homebranch) REFERENCES branches (branchcode)
21911               ON DELETE CASCADE ON UPDATE CASCADE
21912         });
21913     }
21914
21915     if (!column_exists('course_items', 'homebranch_enabled')) {
21916         $dbh->do(q{
21917             ALTER TABLE course_items
21918             ADD COLUMN homebranch_enabled tinyint(1) NOT NULL DEFAULT 0 AFTER homebranch
21919         });
21920     }
21921
21922     if (!column_exists('course_items', 'homebranch_storage')) {
21923         $dbh->do(q{
21924             ALTER TABLE course_items
21925             ADD COLUMN homebranch_storage VARCHAR(10) NULL DEFAULT NULL AFTER homebranch_enabled
21926         });
21927     }
21928
21929     if (!foreign_key_exists('course_items', 'fk_course_items_homebranch_storage')) {
21930         $dbh->do(q{
21931             ALTER TABLE course_items
21932             ADD CONSTRAINT fk_course_items_homebranch_storage
21933               FOREIGN KEY (homebranch_storage) REFERENCES branches (branchcode)
21934               ON DELETE CASCADE ON UPDATE CASCADE
21935         });
21936     }
21937
21938     NewVersion( $DBversion, 22630, "Add course_items.homebranch");
21939 }
21940
21941 $DBversion = '19.12.00.082';
21942 if( CheckVersion( $DBversion ) ) {
21943
21944     # get list of installed translations
21945     require C4::Languages;
21946     my @langs;
21947     my $tlangs = C4::Languages::getTranslatedLanguages('opac','bootstrap');
21948
21949     foreach my $language ( @$tlangs ) {
21950         foreach my $sublanguage ( @{$language->{'sublanguages_loop'}} ) {
21951             push @langs, $sublanguage->{'rfc4646_subtag'};
21952         }
21953     }
21954
21955     # Get any existing value from the OpacMainUserBlock system preference
21956     my ($opacmainuserblock) = $dbh->selectrow_array( q|
21957         SELECT value FROM systempreferences WHERE variable='OpacMainUserBlock';
21958     |);
21959
21960     my @detail;
21961     if( $opacmainuserblock ){
21962         foreach my $lang ( @langs ) {
21963             # If there is a value in the OpacMainUserBlock preference, insert it into opac_news
21964             $dbh->do("INSERT INTO opac_news (branchcode, lang, title, content ) VALUES (NULL, ?, '', ?)", undef, "OpacMainUserBlock_$lang", $opacmainuserblock);
21965             push @detail, "Inserting OpacMainUserBlock contents into $lang news item...";
21966         }
21967     }
21968     # Remove the OpacMainUserBlock system preference
21969     $dbh->do("DELETE FROM systempreferences WHERE variable='OpacMainUserBlock'");
21970
21971     unshift @detail, "Move contents of OpacMainUserBlock preference to Koha news system";
21972     NewVersion( $DBversion, 23794, \@detail);
21973 }
21974
21975 $DBversion = '19.12.00.083';
21976 if( CheckVersion( $DBversion ) ) {
21977
21978     unless ( column_exists( 'authorised_value_categories', 'is_system' ) ) {
21979         $dbh->do(q|
21980             ALTER TABLE authorised_value_categories
21981             ADD COLUMN is_system TINYINT(1) DEFAULT 0 AFTER category_name
21982         |);
21983     }
21984
21985     $dbh->do(q|
21986         UPDATE authorised_value_categories
21987         SET is_system = 1
21988         WHERE category_name IN ('LOC', 'LOST', 'WITHDRAWN', 'Bsort1', 'Bsort2', 'Asort1', 'Asort2', 'SUGGEST', 'DAMAGED', 'LOST', 'BOR_NOTES', 'CCODE', 'NOT_LOAN')
21989     |);
21990
21991     $dbh->do(q|
21992         UPDATE authorised_value_categories
21993         SET is_system = 1
21994         WHERE category_name IN ('branches', 'itemtypes', 'cn_source')
21995     |);
21996
21997     NewVersion( $DBversion, 17355, "Add is_system to authorised_value_categories table");
21998 }
21999
22000 $DBversion = '19.12.00.084';
22001 if( CheckVersion( $DBversion ) ) {
22002     unless ( TableExists('advanced_editor_macros') ) {
22003         $dbh->do(q|
22004             CREATE TABLE advanced_editor_macros (
22005             id INT(11) NOT NULL AUTO_INCREMENT,
22006             name varchar(80) NOT NULL,
22007             macro longtext NULL,
22008             borrowernumber INT(11) default NULL,
22009             shared TINYINT(1) default 0,
22010             PRIMARY KEY (id),
22011             CONSTRAINT borrower_macro_fk FOREIGN KEY ( borrowernumber ) REFERENCES borrowers ( borrowernumber ) ON UPDATE CASCADE ON DELETE CASCADE
22012             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;|
22013         );
22014     }
22015     $dbh->do(q|
22016         INSERT IGNORE INTO permissions (module_bit, code, description)
22017         VALUES (9, 'create_shared_macros', 'Create public macros')
22018     |);
22019     $dbh->do(q|
22020         INSERT IGNORE INTO permissions (module_bit, code, description)
22021         VALUES (9, 'delete_shared_macros', 'Delete public macros')
22022     |);
22023
22024     NewVersion( $DBversion, 17682, "Add macros db table and permissions");
22025 }
22026
22027 $DBversion = '19.12.00.085';
22028 if( CheckVersion( $DBversion ) ) {
22029     unless ( TableExists( 'aqorders_claims' ) ) {
22030         $dbh->do(q|
22031             CREATE TABLE aqorders_claims (
22032                 id int(11) AUTO_INCREMENT,
22033                 ordernumber INT(11) NOT NULL,
22034                 claimed_on TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP,
22035                 PRIMARY KEY (id),
22036                 CONSTRAINT aqorders_claims_ibfk_1 FOREIGN KEY (ordernumber) REFERENCES aqorders (ordernumber) ON DELETE CASCADE ON UPDATE CASCADE
22037             ) ENGINE = InnoDB DEFAULT CHARSET = utf8mb4 COLLATE = utf8mb4_unicode_ci
22038         |);
22039
22040         my $orders = $dbh->selectall_arrayref(q|
22041             SELECT ordernumber, claims_count, claimed_date
22042             FROM aqorders
22043             WHERE claims_count > 0
22044         |, { Slice => {} });
22045         my $insert_claim_sth = $dbh->prepare(q|
22046             INSERT INTO aqorders_claims (ordernumber, claimed_on)
22047             VALUES (?,?)
22048         |);
22049
22050         for my $order ( @$orders ) {
22051             for my $claim (1..$order->{claims_count}) {
22052                 $insert_claim_sth->execute($order->{ordernumber}, $order->{claimed_on});
22053             }
22054         }
22055
22056         $dbh->do(q|ALTER TABLE aqorders DROP COLUMN claims_count, DROP COLUMN claimed_date|);
22057     }
22058
22059     NewVersion( $DBversion, 24161, "Add new join table aqorders_claims to keep track of claims");
22060 }
22061
22062 $DBversion = '19.12.00.086';
22063 if( CheckVersion( $DBversion ) ) {
22064     $dbh->do(q{
22065         INSERT IGNORE INTO export_format( profile, description, content, csv_separator, type, used_for ) VALUES
22066         ("Late orders (CSV profile)", "Default CSV export for late orders", 'Title[% separator %]Author[% separator %]Publication year[% separator %]ISBN[% separator %]Quantity[% separator %]Number of claims
22067         [% FOR order IN orders ~%]
22068         [%~ SET biblio = order.biblio ~%]
22069         "[% biblio.title %]"[% separator ~%]
22070         "[% biblio.author %]"[% separator ~%]
22071         "[% bibio.biblioitem.publicationyear %]"[% separator ~%]
22072         "[% biblio.biblioitem.isbn %]"[% separator ~%]
22073         "[% order.quantity%]"[% separator ~%]
22074         "[% order.claims.count%][% IF order.claims.count %]([% FOR c IN order.claims %][% c.claimed_on | $KohaDates %][% UNLESS loop.last %], [% END %][% END %])[% END %]"
22075         [% END %]', ",", "sql", "late_orders")
22076     });
22077
22078     NewVersion( $DBversion, 24163, "Define a default CSV profile for late orders");
22079 }
22080
22081 $DBversion = '19.12.00.087';
22082 if( CheckVersion( $DBversion ) ) {
22083     $dbh->do(q{
22084         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
22085         ('TrapHoldsOnOrder','1',NULL,'If enabled, Koha will trap holds for on order items ( notforloan < 0 )','YesNo')
22086     });
22087
22088     NewVersion( $DBversion, 25184, "Items with a negative notforloan status should not be captured for holds");
22089 }
22090
22091 $DBversion = '19.12.00.088';
22092 if( CheckVersion( $DBversion ) ) {
22093
22094     $dbh->do(q{
22095         UPDATE letter SET
22096         name = REPLACE(name, "notification on auto renewing", "Notification of automatic renewal"),
22097         title = REPLACE(title, "Auto renewals", "Automatic renewal notice"),
22098         content = REPLACE(content, "You have reach the maximum of checkouts possible.", "You have reached the maximum number of checkouts possible.")
22099         WHERE code = 'AUTO_RENEWALS';
22100     });
22101     $dbh->do(q{
22102         UPDATE letter SET
22103         content = REPLACE(content, "You have overdues.", "You have overdue items.")
22104         WHERE code = 'AUTO_RENEWALS';
22105     });
22106     $dbh->do(q{
22107         UPDATE letter SET
22108         content = REPLACE(content, "It's too late to renew this checkout.", "It's too late to renew this item.")
22109         WHERE code = 'AUTO_RENEWALS';
22110     });
22111     $dbh->do(q{
22112         UPDATE letter SET
22113         content = REPLACE(content, "You have too much unpaid fines.", "Your total unpaid fines are too high.")
22114         WHERE code = 'AUTO_RENEWALS';
22115     });
22116     $dbh->do(q{
22117         UPDATE letter SET
22118         content = REPLACE(content, "The following item [% biblio.title %] has correctly been renewed and is now due [% checkout.date_due %]", "The following item, [% biblio.title %], has correctly been renewed and is now due on [% checkout.date_due as_due_date => 1 %]
22119 ")
22120         WHERE code = 'AUTO_RENEWALS';
22121     });
22122
22123     NewVersion( $DBversion, 24378, "Fix some grammatical errors in default auto renewal notice");
22124 }
22125
22126 $DBversion = '19.12.00.089';
22127 if( CheckVersion( $DBversion ) ) {
22128
22129     # Migrate LOST_RETURNED to LOST_FOUND
22130     $dbh->do(qq{
22131         UPDATE
22132           accountlines
22133         SET
22134           credit_type_code = 'LOST_FOUND'
22135         WHERE
22136           credit_type_code = 'LOST_RETURNED'
22137     });
22138
22139     # Drop LOST_RETURNED credit type
22140     $dbh->do(qq{
22141         DELETE FROM account_credit_types WHERE code = 'LOST_RETURNED'
22142     });
22143
22144     NewVersion( $DBversion, 25389, "Catch errant cases of LOST_RETURNED");
22145 }
22146
22147 $DBversion = '19.12.00.090';
22148 if ( CheckVersion($DBversion) ) {
22149
22150     $dbh->do(
22151         qq{
22152           INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES
22153           ('UseIssueDesks','0','','Use issue desks with circulation.','YesNo')
22154       }
22155     );
22156
22157     NewVersion( $DBversion, 13881, "Add issue desks system preference");
22158 }
22159
22160 $DBversion = '19.12.00.091';
22161 if ( CheckVersion($DBversion) ) {
22162
22163     $dbh->do(qq{
22164         UPDATE systempreferences SET variable = 'UseCirculationDesks' WHERE variable = 'UseIssueDesks'
22165     });
22166
22167     NewVersion( $DBversion, 13881, "Correction to preference terminology");
22168 }
22169
22170 $DBversion = '20.05.00.000';
22171 if( CheckVersion( $DBversion ) ) {
22172     NewVersion( $DBversion, undef, '20.05.00 alpha release' );
22173 }
22174
22175 $DBversion = '20.06.00.000';
22176 if( CheckVersion( $DBversion ) ) {
22177     NewVersion( $DBversion, undef, 'All our codebase are belong to everybody' );
22178 }
22179
22180 $DBversion = '20.06.00.001';
22181 if( CheckVersion( $DBversion ) ) {
22182     for my $f (qw( streetnumber streettype zipcode mobile B_streetnumber B_streettype B_zipcode ) ) {
22183         $dbh->do(qq|
22184             ALTER TABLE borrowers MODIFY $f TINYTEXT DEFAULT NULL
22185         |);
22186         $dbh->do(qq|
22187             ALTER TABLE deletedborrowers MODIFY $f TINYTEXT DEFAULT NULL
22188         |);
22189     }
22190     for my $f ( qw( B_address altcontactfirstname altcontactsurname altcontactaddress1 altcontactaddress2 altcontactaddress3 altcontactzipcode altcontactphone ) ) {
22191         $dbh->do(qq|
22192             ALTER TABLE borrowers MODIFY $f MEDIUMTEXT DEFAULT NULL
22193         |);
22194         $dbh->do(qq|
22195             ALTER TABLE deletedborrowers MODIFY $f MEDIUMTEXT DEFAULT NULL
22196         |);
22197     }
22198
22199     NewVersion( $DBversion, 24986, "Switch borrowers address related fields to TINYTEXT or MEDIUMTEXT");
22200 }
22201
22202 $DBversion = '20.06.00.002';
22203 if( CheckVersion( $DBversion ) ) {
22204     $dbh->do(q{
22205         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
22206         ('SkipHoldTrapOnNotForLoanValue','',NULL,'If set, Koha will never trap items for hold with this notforloan value','Integer')
22207     });
22208
22209     NewVersion( $DBversion, 25184, "Items with a negative notforloan status should not be captured for holds");
22210 }
22211
22212 $DBversion = '20.06.00.003';
22213 if( CheckVersion( $DBversion ) ) {
22214     unless ( TableExists( 'tables_settings' ) ) {
22215         $dbh->do(q|
22216             CREATE TABLE tables_settings (
22217                 module varchar(255) NOT NULL,
22218                 page varchar(255) NOT NULL,
22219                 tablename varchar(255) NOT NULL,
22220                 default_display_length smallint(6) NOT NULL DEFAULT 20,
22221                 default_sort_order varchar(255),
22222                 PRIMARY KEY(module (191), page (191), tablename (191) )
22223             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
22224         |);
22225     }
22226
22227     NewVersion( $DBversion, 24156, "Add new table tables_settings" );
22228 }
22229
22230 $DBversion = '20.06.00.004';
22231 if( CheckVersion( $DBversion ) ) {
22232     $dbh->do("
22233         DELETE FROM circulation_rules WHERE rule_name='holdallowed' AND rule_value='';
22234     ");
22235     NewVersion( $DBversion, 25851, "Remove holdallowed rule if value is an empty string");
22236 }
22237
22238 $DBversion = '20.06.00.005';
22239 if( CheckVersion( $DBversion ) ) {
22240     $dbh->do( "UPDATE borrowers SET login_attempts=0 WHERE login_attempts IS NULL" );
22241     $dbh->do( "ALTER TABLE borrowers MODIFY COLUMN login_attempts int(4) NOT NULL DEFAULT 0" );
22242     $dbh->do( "UPDATE deletedborrowers SET login_attempts=0 WHERE login_attempts IS NULL" );
22243     $dbh->do( "ALTER TABLE deletedborrowers MODIFY COLUMN login_attempts int(4) NOT NULL DEFAULT 0" );
22244     NewVersion( $DBversion, 24379, "Set login_attempts NOT NULL" );
22245 }
22246
22247 $DBversion = '20.06.00.006';
22248 if( CheckVersion( $DBversion ) ) {
22249     unless( TableExists( 'pseudonymized_transactions' ) ) {
22250         $dbh->do(q|
22251             CREATE TABLE `pseudonymized_transactions` (
22252               `id` INT(11) NOT NULL AUTO_INCREMENT,
22253               `hashed_borrowernumber` VARCHAR(60) NOT NULL,
22254               `has_cardnumber` TINYINT(1) NOT NULL DEFAULT 0,
22255               `title` LONGTEXT,
22256               `city` LONGTEXT,
22257               `state` MEDIUMTEXT default NULL,
22258               `zipcode` varchar(25) default NULL,
22259               `country` MEDIUMTEXT,
22260               `branchcode` varchar(10) NOT NULL default '',
22261               `categorycode` varchar(10) NOT NULL default '',
22262               `dateenrolled` date default NULL,
22263               `sex` varchar(1) default NULL,
22264               `sort1` varchar(80) default NULL,
22265               `sort2` varchar(80) default NULL,
22266               `datetime` datetime default NULL,
22267               `transaction_branchcode` varchar(10) default NULL,
22268               `transaction_type` varchar(16) default NULL,
22269               `itemnumber` int(11) default NULL,
22270               `itemtype` varchar(10) default NULL,
22271               `holdingbranch` varchar(10) default null,
22272               `homebranch` varchar(10) default null,
22273               `location` varchar(80) default NULL,
22274               `itemcallnumber` varchar(255) default NULL,
22275               `ccode` varchar(80) default NULL,
22276               PRIMARY KEY (`id`),
22277               CONSTRAINT `pseudonymized_transactions_ibfk_1` FOREIGN KEY (`categorycode`) REFERENCES `categories` (`categorycode`),
22278               CONSTRAINT `pseudonymized_transactions_borrowers_ibfk_2` FOREIGN KEY (`branchcode`) REFERENCES `branches` (`branchcode`),
22279               CONSTRAINT `pseudonymized_transactions_borrowers_ibfk_3` FOREIGN KEY (`transaction_branchcode`) REFERENCES `branches` (`branchcode`)
22280             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
22281         |);
22282     }
22283
22284     $dbh->do(q|
22285         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
22286         VALUES ('Pseudonymization','0',NULL,'If enabled patrons and transactions will be copied in a separate table for statistics purpose','YesNo')
22287     |);
22288     $dbh->do(q|
22289         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
22290         VALUES ('PseudonymizationPatronFields','','title,city,state,zipcode,country,branchcode,categorycode,dateenrolled,sex,sort1,sort2','Patron fields to copy to the pseudonymized_transactions table','multiple')
22291     |);
22292     $dbh->do(q|
22293         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
22294         VALUES ('PseudonymizationTransactionFields','','datetime,transaction_branchcode,transaction_type,itemnumber,itemtype,holdingbranch,homebranch,location,itemcallnumber,ccode','Transaction fields to copy to the pseudonymized_transactions table','multiple')
22295     |);
22296
22297     unless( TableExists( 'pseudonymized_borrower_attributes' ) ) {
22298         $dbh->do(q|
22299             CREATE TABLE pseudonymized_borrower_attributes (
22300               `id` int(11) NOT NULL AUTO_INCREMENT PRIMARY KEY, -- Row id field
22301               `transaction_id` int(11) NOT NULL,
22302               `code` varchar(10) NOT NULL,
22303               `attribute` varchar(255) default NULL,
22304               CONSTRAINT `pseudonymized_borrower_attributes_ibfk_1` FOREIGN KEY (`transaction_id`) REFERENCES `pseudonymized_transactions` (`id`) ON DELETE CASCADE ON UPDATE CASCADE,
22305               CONSTRAINT `anonymized_borrower_attributes_ibfk_2` FOREIGN KEY (`code`) REFERENCES `borrower_attribute_types` (`code`) ON DELETE CASCADE ON UPDATE CASCADE
22306             ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;
22307         |);
22308     }
22309
22310     unless( column_exists('borrower_attribute_types', 'keep_for_pseudonymization') ) {
22311         $dbh->do(q|
22312             ALTER TABLE borrower_attribute_types ADD COLUMN `keep_for_pseudonymization` TINYINT(1) NOT NULL DEFAULT 0 AFTER `class`
22313         |);
22314     }
22315
22316     NewVersion( $DBversion, 24151, "Add pseudonymized_transactions tables and sysprefs for Pseudonymization" );
22317 }
22318
22319 $DBversion = '20.06.00.007';
22320 if( CheckVersion( $DBversion ) ) {
22321     if( !column_exists( 'borrower_attribute_types', 'mandatory' ) ) {
22322         $dbh->do(q|
22323             ALTER TABLE borrower_attribute_types
22324             ADD COLUMN mandatory TINYINT(1) NOT NULL DEFAULT 0
22325             AFTER keep_for_pseudonymization
22326         |);
22327     }
22328
22329     NewVersion( $DBversion, 22844, "Add borrower_attribute_types.mandatory" );
22330 }
22331
22332 $DBversion = '20.06.00.008';
22333 if( CheckVersion( $DBversion ) ) {
22334     $dbh->do( "UPDATE itemtypes SET imageurl = REPLACE (imageurl, '.gif', '.png') WHERE imageurl LIKE 'bridge/%'" );
22335
22336     NewVersion( $DBversion, 23148, "Replace Bridge icons with transparent PNG files" );
22337 }
22338
22339 $DBversion = '20.06.00.009';
22340 if( CheckVersion( $DBversion ) ) {
22341     $dbh->do( q{
22342             INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type)
22343             VALUES ('ILLHiddenRequestStatuses',NULL,NULL,'ILL statuses that are considered finished and should not be displayed in the ILL module','multiple')
22344     });
22345
22346     NewVersion( $DBversion, 23391, "Hide finished ILL requests" );
22347 }
22348
22349 $DBversion = '20.06.00.010';
22350 if( CheckVersion( $DBversion ) ) {
22351     $dbh->do(q{
22352         INSERT IGNORE INTO systempreferences ( `variable`, `value`, `options`, `explanation`, `type` ) VALUES
22353         ('NoRefundOnLostReturnedItemsAge','','','Do not refund lost item fees if item is lost for more than this number of days','Integer')
22354     });
22355
22356     NewVersion( $DBversion, 20815, "Add NoRefundOnLostReturnedItemsAge system preference" );
22357 }
22358
22359 $DBversion = '20.06.00.011';
22360 if( CheckVersion( $DBversion ) ) {
22361     unless( column_exists( 'export_format', 'staff_only' ) ) {
22362         $dbh->do(q|
22363             ALTER TABLE export_format
22364                 ADD staff_only TINYINT(1) NOT NULL DEFAULT 0 AFTER used_for,
22365                 ADD KEY `staff_only_idx` (`staff_only`);
22366         |);
22367     }
22368
22369     unless ( index_exists( 'export_format', 'used_for_idx' ) ) {
22370         $dbh->do(q|
22371             ALTER TABLE export_format
22372                 ADD KEY `used_for_idx` (`used_for` (191));
22373         |);
22374     }
22375
22376     NewVersion( $DBversion, 5087, "Add export_format.staff_only" );
22377 }
22378
22379 $DBversion = '20.06.00.012';
22380 if( CheckVersion( $DBversion ) ) {
22381
22382     # get list of installed translations
22383     require C4::Languages;
22384     my @langs;
22385     my $tlangs = C4::Languages::getTranslatedLanguages('opac','bootstrap');
22386
22387     foreach my $language ( @$tlangs ) {
22388         foreach my $sublanguage ( @{$language->{'sublanguages_loop'}} ) {
22389             push @langs, $sublanguage->{'rfc4646_subtag'};
22390         }
22391     }
22392
22393     # Get any existing value from the opaccredits system preference
22394     my ($opaccredits) = $dbh->selectrow_array( q|
22395         SELECT value FROM systempreferences WHERE variable='opaccredits';
22396     |);
22397     if( $opaccredits ){
22398         foreach my $lang ( @langs ) {
22399             # If there is a value in the opaccredits preference, insert it into opac_news
22400             $dbh->do("INSERT IGNORE INTO opac_news (branchcode, lang, title, content ) VALUES (NULL, ?, '', ?)", undef, "opaccredits_$lang", $opaccredits);
22401         }
22402     }
22403     # Remove the opaccredits system preference
22404     $dbh->do("DELETE FROM systempreferences WHERE variable='opaccredits'");
22405
22406     NewVersion( $DBversion, 23795, "Convert OpacCredits system preference to news block" );
22407 }
22408
22409 $DBversion = '20.06.00.013';
22410 if( CheckVersion( $DBversion ) ) {
22411
22412     # get list of installed translations
22413     require C4::Languages;
22414     my @langs;
22415     my $tlangs = C4::Languages::getTranslatedLanguages('opac','bootstrap');
22416
22417     foreach my $language ( @$tlangs ) {
22418         foreach my $sublanguage ( @{$language->{'sublanguages_loop'}} ) {
22419             push @langs, $sublanguage->{'rfc4646_subtag'};
22420         }
22421     }
22422
22423     # Get any existing value from the OpacCustomSearch system preference
22424     my ($OpacCustomSearch) = $dbh->selectrow_array( q|
22425         SELECT value FROM systempreferences WHERE variable='OpacCustomSearch';
22426     |);
22427     if( $OpacCustomSearch ){
22428         foreach my $lang ( @langs ) {
22429             # If there is a value in the OpacCustomSearch preference, insert it into opac_news
22430             $dbh->do("INSERT INTO opac_news (branchcode, lang, title, content ) VALUES (NULL, ?, '', ?)", undef, "OpacCustomSearch_$lang", $OpacCustomSearch);
22431         }
22432     }
22433     # Remove the OpacCustomSearch system preference
22434     $dbh->do("DELETE FROM systempreferences WHERE variable='OpacCustomSearch'");
22435
22436     NewVersion( $DBversion, 23795, "Convert OpacCustomSearch system preference to news block" );
22437 }
22438
22439 $DBversion = '20.06.00.014';
22440 if( CheckVersion( $DBversion ) ) {
22441
22442     $dbh->do( "ALTER TABLE opac_news CHANGE lang lang VARCHAR(50) NOT NULL DEFAULT ''" );
22443
22444     NewVersion( $DBversion, 23797, "Extend the opac_news lang column to accommodate longer values" );
22445 }
22446
22447 $DBversion = '20.06.00.015';
22448 if( CheckVersion( $DBversion ) ) {
22449
22450     # get list of installed translations
22451     require C4::Languages;
22452     my @langs;
22453     my $tlangs = C4::Languages::getTranslatedLanguages('opac','bootstrap');
22454
22455     foreach my $language ( @$tlangs ) {
22456         foreach my $sublanguage ( @{$language->{'sublanguages_loop'}} ) {
22457             push @langs, $sublanguage->{'rfc4646_subtag'};
22458         }
22459     }
22460
22461     # Get any existing value from the OpacLoginInstructions system preference
22462     my ($opaclogininstructions) = $dbh->selectrow_array( q|
22463         SELECT value FROM systempreferences WHERE variable='OpacLoginInstructions';
22464     |);
22465     if( $opaclogininstructions ){
22466         foreach my $lang ( @langs ) {
22467             # If there is a value in the OpacLoginInstructions preference, insert it into opac_news
22468             $dbh->do("INSERT INTO opac_news (branchcode, lang, title, content ) VALUES (NULL, ?, '', ?)", undef, "OpacLoginInstructions_$lang", $opaclogininstructions);
22469         }
22470     }
22471     # Remove the OpacLoginInstructions system preference
22472     $dbh->do("DELETE FROM systempreferences WHERE variable='OpacLoginInstructions'");
22473
22474     NewVersion( $DBversion, 23797, "Convert OpacLoginInstructions system preference to news block" );
22475 }
22476
22477 $DBversion = '20.06.00.016';
22478 if( CheckVersion( $DBversion ) ) {
22479
22480     unless ( column_exists('branchtransfers', 'daterequested') ) {
22481         $dbh->do(
22482             qq{
22483                 ALTER TABLE branchtransfers
22484                 ADD
22485                   `daterequested` timestamp NOT NULL default CURRENT_TIMESTAMP
22486                 AFTER
22487                   `itemnumber`
22488               }
22489         );
22490     }
22491
22492     NewVersion( $DBversion, 23092, "Add 'daterequested' field to transfers table" );
22493 }
22494
22495 $DBversion = '20.06.00.017';
22496 if( CheckVersion( $DBversion ) ) {
22497     $dbh->do( "UPDATE systempreferences SET variable='NotesToHide' WHERE variable = 'NotesBlacklist'" );
22498     NewVersion( $DBversion, 25709, "Rename systempreference to NotesToHide");
22499 }
22500
22501 $DBversion = '20.06.00.018';
22502 if( CheckVersion( $DBversion ) ) {
22503     $dbh->do(q|
22504         INSERT IGNORE INTO permissions (module_bit, code, description) VALUES
22505         (11, 'reopen_closed_invoices', 'Reopen closed invoices')
22506     |);
22507
22508     $dbh->do(q|
22509         INSERT IGNORE INTO permissions (module_bit, code, description) VALUES
22510         (11, 'edit_invoices', 'Edit invoices')
22511     |);
22512
22513     $dbh->do(q|
22514         INSERT IGNORE INTO permissions (module_bit, code, description) VALUES
22515         (11, 'delete_baskets', 'Delete baskets')
22516     |);
22517
22518     $dbh->do(q|
22519         INSERT IGNORE INTO permissions (module_bit, code, description) VALUES
22520         (11, 'delete_invoices', 'Delete invoices')
22521     |);
22522
22523     $dbh->do(q|
22524         INSERT IGNORE INTO permissions (module_bit, code, description) VALUES
22525         (11, 'merge_invoices', 'Merge invoices')
22526     |);
22527
22528     NewVersion( $DBversion, 24157, "Add new permissions reopen_closed_invoices, edit_invoices, delete_invoices, merge_invoices, delete_basket");
22529 }
22530
22531 $DBversion = '20.06.00.019';
22532 if( CheckVersion( $DBversion ) ) {
22533     $dbh->do( "INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('NewsToolEditor','tinymce', 'Choose tool for editing News','tinymce|codemirror','Choice')" );
22534
22535     NewVersion( $DBversion, 22660, "Adds NewsToolEditor system preference");
22536 }
22537
22538 $DBversion = '20.06.00.020';
22539 if( CheckVersion( $DBversion ) ) {
22540     # Remove from the systempreferences table
22541     $dbh->do("DELETE FROM systempreferences WHERE variable = 'GoogleIndicTransliteration'");
22542
22543     NewVersion( $DBversion, 26070, "Remove references to deprecated Google Transliterate API");
22544 }
22545
22546 $DBversion = '20.06.00.021';
22547 if( CheckVersion( $DBversion ) ) {
22548     $dbh->do(q{
22549         UPDATE systempreferences SET options = "callnum|ccode|location|library"
22550         WHERE variable = "OpacItemLocation"
22551     });
22552     NewVersion( $DBversion, 25871, "Add library option to OpacItemLocation");
22553 }
22554
22555 $DBversion = '20.06.00.022';
22556 if( CheckVersion( $DBversion ) ) {
22557     unless ( column_exists('itemtypes', 'parent_type') ) {
22558         $dbh->do(q{
22559             ALTER TABLE itemtypes
22560                 ADD COLUMN parent_type VARCHAR(10) NULL DEFAULT NULL
22561                 AFTER itemtype;
22562
22563         });
22564     }
22565     unless ( foreign_key_exists( 'itemtypes', 'itemtypes_ibfk_1') ){
22566         $dbh->do(q{
22567             ALTER TABLE itemtypes
22568             ADD CONSTRAINT itemtypes_ibfk_1
22569             FOREIGN KEY (parent_type) REFERENCES itemtypes (itemtype)
22570         });
22571     }
22572
22573     NewVersion( $DBversion, 21946, "Add parent type to itemtypes" );
22574 }
22575
22576 $DBversion = '20.06.00.023';
22577 if( CheckVersion( $DBversion ) ) {
22578
22579     my $QuoteOfTheDay = C4::Context->preference('QuoteOfTheDay');
22580     $dbh->do( q|
22581         UPDATE systempreferences
22582         SET options = 'intranet,opac',
22583             explanation = 'Enable or disable display of Quote of the Day on the OPAC and staff interface home page',
22584             type = 'multiple'
22585         WHERE variable = 'QuoteOfTheDay'
22586     | );
22587
22588     C4::Context->set_preference('QuoteOfTheDay', $QuoteOfTheDay ? 'opac' : '');
22589
22590     NewVersion( $DBversion, 16371, "Quote of the Day (QOTD) for the staff interface " );
22591 }
22592
22593 $DBversion = '20.06.00.024';
22594 if( CheckVersion( $DBversion ) ) {
22595
22596     $dbh->do( "UPDATE marc_subfield_structure SET liblibrarian = 'Home library' WHERE liblibrarian = 'Permanent location'
22597         AND tagfield = 952 and tagsubfield = 'a'" );
22598     $dbh->do( "UPDATE marc_subfield_structure SET libopac = 'Home library' WHERE libopac = 'Permanent location'
22599         AND tagfield = 952 and tagsubfield = 'a'" );
22600     $dbh->do( "UPDATE marc_subfield_structure SET liblibrarian = 'Current library' WHERE liblibrarian = 'Current location'
22601         AND tagfield = 952 and tagsubfield = 'b'" );
22602     $dbh->do( "UPDATE marc_subfield_structure SET libopac = 'Current library' WHERE libopac = 'Current location'
22603         AND tagfield = 952 and tagsubfield = 'b'" );
22604
22605     NewVersion( $DBversion, 25867, "Update subfield descriptions for 952\$a and 952\$b");
22606 }
22607
22608 $DBversion = '20.06.00.025';
22609 if( CheckVersion( $DBversion ) ) {
22610
22611     $dbh->do( q{
22612         INSERT IGNORE INTO systempreferences (variable,value,options,explanation,type) VALUES
22613         ('PatronDuplicateMatchingAddFields','surname|firstname|dateofbirth', NULL,'A list of fields separated by "|" to deduplicate patrons when created','Free')
22614     });
22615
22616     NewVersion( $DBversion, 6725, "Adds PatronDuplicateMatchingAddFields system preference");
22617 }
22618
22619 $DBversion = '20.06.00.026';
22620 if (CheckVersion($DBversion)) {
22621     unless (column_exists('accountlines', 'credit_number')) {
22622         $dbh->do('ALTER TABLE accountlines ADD COLUMN credit_number VARCHAR(20) NULL DEFAULT NULL COMMENT "autogenerated number for credits" AFTER debit_type_code');
22623     }
22624
22625     unless (column_exists('account_credit_types', 'credit_number_enabled')) {
22626         $dbh->do(q{
22627             ALTER TABLE account_credit_types
22628             ADD COLUMN credit_number_enabled TINYINT(1) NOT NULL DEFAULT 0
22629                 COMMENT "Is autogeneration of credit number enabled for this credit type"
22630                 AFTER can_be_added_manually
22631         });
22632     }
22633
22634     $dbh->do('INSERT IGNORE INTO systempreferences (variable, value, options, explanation, type) VALUES(?, ?, ?, ?, ?)', undef, 'AutoCreditNumber', '', '', 'Automatically generate a number for account credits', 'Choice');
22635
22636     NewVersion( $DBversion, 19036, "Add accountlines.credit_number, account_credit_types.credit_number_enabled and syspref AutoCreditNumber" );
22637 }
22638
22639 $DBversion = '20.06.00.027';
22640 if( CheckVersion( $DBversion ) ) {
22641     $dbh->do( "INSERT IGNORE INTO systempreferences (variable,value,explanation,options,type) VALUES('BiblioItemtypeInfo', '0','Control whether biblio level itemtype image displays','0','YesNo')" );
22642
22643     NewVersion( $DBversion, 8732, 'Add new BiblioItemtypeInfo to system preferences' );
22644 }
22645
22646 # SEE bug 13068
22647 # if there is anything in the atomicupdate, read and execute it.
22648 my $update_dir = C4::Context->config('intranetdir') . '/installer/data/mysql/atomicupdate/';
22649 opendir( my $dirh, $update_dir );
22650 foreach my $file ( sort readdir $dirh ) {
22651     next if $file !~ /\.(sql|perl)$/;  #skip other files
22652     next if $file eq 'skeleton.perl'; # skip the skeleton file
22653     print "DEV atomic update: $file\n";
22654     if ( $file =~ /\.sql$/ ) {
22655         my $installer = C4::Installer->new();
22656         my $rv = $installer->load_sql( $update_dir . $file ) ? 0 : 1;
22657     } elsif ( $file =~ /\.perl$/ ) {
22658         my $code = read_file( $update_dir . $file );
22659         eval $code; ## no critic (StringyEval)
22660         say "Atomic update generated errors: $@" if $@;
22661     }
22662 }
22663
22664 =head1 FUNCTIONS
22665
22666 =head2 DropAllForeignKeys($table)
22667
22668 Drop all foreign keys of the table $table
22669
22670 =cut
22671
22672 sub DropAllForeignKeys {
22673     my ($table) = @_;
22674     # get the table description
22675     my $sth = $dbh->prepare("SHOW CREATE TABLE $table");
22676     $sth->execute;
22677     my $vsc_structure = $sth->fetchrow;
22678     # split on CONSTRAINT keyword
22679     my @fks = split /CONSTRAINT /,$vsc_structure;
22680     # parse each entry
22681     foreach (@fks) {
22682         # isolate what is before FOREIGN KEY, if there is something, it's a foreign key to drop
22683         $_ = /(.*) FOREIGN KEY.*/;
22684         my $id = $1;
22685         if ($id) {
22686             # we have found 1 foreign, drop it
22687             $dbh->do("ALTER TABLE $table DROP FOREIGN KEY $id");
22688             $id="";
22689         }
22690     }
22691 }
22692
22693
22694 =head2 TransformToNum
22695
22696 Transform the Koha version from a 4 parts string
22697 to a number, with just 1 .
22698
22699 =cut
22700
22701 sub TransformToNum {
22702     my $version = shift;
22703     # remove the 3 last . to have a Perl number
22704     $version =~ s/(.*\..*)\.(.*)\.(.*)/$1$2$3/;
22705     # three X's at the end indicate that you are testing patch with dbrev
22706     # change it into 999
22707     # prevents error on a < comparison between strings (should be: lt)
22708     $version =~ s/XXX$/999/;
22709     return $version;
22710 }
22711
22712 =head2 SetVersion
22713
22714 set the DBversion in the systempreferences
22715
22716 =cut
22717
22718 sub SetVersion {
22719     return if $_[0]=~ /XXX$/;
22720       #you are testing a patch with a db revision; do not change version
22721     my $kohaversion = TransformToNum($_[0]);
22722     if (C4::Context->preference('Version')) {
22723       my $finish=$dbh->prepare("UPDATE systempreferences SET value=? WHERE variable='Version'");
22724       $finish->execute($kohaversion);
22725     } else {
22726       my $finish=$dbh->prepare("INSERT into systempreferences (variable,value,explanation) values ('Version',?,'The Koha database version. WARNING: Do not change this value manually, it is maintained by the webinstaller')");
22727       $finish->execute($kohaversion);
22728     }
22729     C4::Context::clear_syspref_cache(); # invalidate cached preferences
22730 }
22731
22732 sub NewVersion {
22733     my ( $DBversion, $bug_number, $descriptions ) = @_;
22734
22735     SetVersion($DBversion);
22736
22737     unless ( ref($descriptions) ) {
22738         $descriptions = [ $descriptions ];
22739     }
22740     my $first = 1;
22741     my $time = POSIX::strftime("%H:%M:%S",localtime);
22742     for my $description ( @$descriptions ) {
22743         if ( @$descriptions > 1 ) {
22744             if ( $first ) {
22745                 unless ( $bug_number ) {
22746                     say sprintf "Upgrade to %s done [%s]: %s", $DBversion, $time, $description;
22747                 } else {
22748                     say sprintf "Upgrade to %s done [%s]: Bug %5s - %s", $DBversion, $time, $bug_number, $description;
22749                 }
22750             } else {
22751                 say sprintf "\t\t\t\t\t\t   - %s", $description;
22752             }
22753         } else {
22754             unless ( $bug_number ) {
22755                 say sprintf "Upgrade to %s done [%s]: %s", $DBversion, $time, $description;
22756             } else {
22757                 say sprintf "Upgrade to %s done [%s]: Bug %5s - %s", $DBversion, $time, $bug_number, $description;
22758             }
22759         }
22760         $first = 0;
22761     }
22762 }
22763
22764 =head2 CheckVersion
22765
22766 Check whether a given update should be run when passed the proposed version
22767 number. The update will always be run if the proposed version is greater
22768 than the current database version and less than or equal to the version in
22769 kohaversion.pl. The update is also run if the version contains XXX, though
22770 this behavior will be changed following the adoption of non-linear updates
22771 as implemented in bug 7167.
22772
22773 =cut
22774
22775 sub CheckVersion {
22776     my ($proposed_version) = @_;
22777     my $version_number = TransformToNum($proposed_version);
22778
22779     # The following line should be deleted when bug 7167 is pushed
22780     return 1 if ( $proposed_version =~ m/XXX/ );
22781
22782     if ( C4::Context->preference("Version") < $version_number
22783         && $version_number <= TransformToNum( $Koha::VERSION ) )
22784     {
22785         return 1;
22786     }
22787     else {
22788         return 0;
22789     }
22790 }
22791
22792 exit;