(bug #4518) enhance 2.2 to 3.0 scripts

Changing version to 3.0.6

This is version 3.0.6 of Koha.
Change log :

bug fixes
bug #3348
bug #3536
bug #3894
bug #4002
bug #4004
bug #4020
bug #4021
bug #4038
bug #4043
bug #4044
bug #4049
bug #4050
bug #4052
bug #4055
bug #4075
bug #4084
bug #4326
bug #4276

Adds IndependentBranchPatrons system preferences for libraries which would not like to see patrons from other libraries
Adds  XSLT systempreferences so that path can be provided
Also adds CSV exports
Adds a page for subscription history management
Changes the way reserves are allowed. You HAVE TO enter the itemtypes and holds Policy in order to enable your patron to reserve

It adds 10 changes in database, which adds some new tables required for some partial features ports from 3.2 due to the previous release and updates languages tag for portuguese and updates Calendar SystemPreference.

Followup Adding system preference XSLT*FileName

This patch fixes the name of the system preference according to the usage done in C4::XSLT
And also takes the value of the system preferences (XSLTDetailsDisplay and XSLTResultsDisplay) set in 3.0.6.03
rather than rewriting the value without taking a previous updated value into account

Release notes 3.0.6

Intranet po file updates

Opac po file updates

Adding XSLTreultsFilename and XSLTDetailFilename

Thos two system preferences enables the librarian to choose an xslt different from the one provided in Koha

Bug 4326 ; returndate were fixed on the day before

dropbox mode was set even though it was not dropbox.
This patch is an adaptation of Ian Walls
http://www.mail-archive.com/koha-patches@lists.koha.org/msg04736.html

Bug 4276: Proposed fix for "Related Subjects" links in Opac.

Adds fields other than 'a' to the links for subject headings in the Opac details page.

Also adds subfield b of a Corporate Author (710) to the appropriate link.  Otherwise you may have a link with "United States" instead of "United States. Public Works Adminstration"

Another patch needs to be sent for the Intranet.

MT3421, Follow-up: Moves subscription history in a separate page

- Displays link for every subscription
 - Allows modification even for subscriptions without manual history

MT3421, Follow-up: Moves subscription history in a separate page

- Adds link to serial-collection.pl
 - Changes are displayed after modification

MT3421: Moves subscription history in a separate page

(MT 3267) Add Homebranch and Holdingbranch search criterion on circulation stat.

(bug #4491) fix weird code in search scripts

This change some code a bit strange, that generate strange effetcs.
Now we use $cgi->param to get the values.

(bug #4490) do not warn each notice if xslt is on

(bug #4487) permit - and . in callnumber plugin

(MT3318) RSS OPAC: Adding CDATA term in title and description tags.

(bug #3737) fix title search in order history

Minor Fix : IndependentBranchPatron misspelling

C4/Members.pm
Line 179, preference used would not be correctly spelled

BuildUnimarcHierarchies : Fixing infinite loop

When referenced authority in 5XX$3 would be the same as the current authid, the script would get into infinite loop

batchRebuildBiblioTables.pl doesn't crash anymore when GetMarcBiblio fails.
Unprocessed biblionumbers are displayed at the end of the execution instead.

(bug #4358) fix sql query in C4::Members::GetAllIssues

This fix the use of oldissues instead of old_issues table.

Fix kohastructure for deletedborrowers

This patch add a forgotten column in deletedborrowers, that make koha doesn't save deletedborrowers in fresh installs.

Better conformance for UNIMARC Authorities Encoding

Adding support for UNIMARC Authorities UNIMARC encoding
place of the encoding marker is different

Fixing Hierarchies : taking any heading subfield

MT3160 : Fix plugin callback when subfields are cloned

(bug #3950) only show on shelf items

This fix pending reserves to show only on shelf items.

Problem with error message

output_html_with_http_headers now takes status too

Bug 4320 : Text::CSV::Encoded

Adding Text::CSV::Encoded to INSTALL Notes

[followup](bug #4334) fix duplicate entries in sql

(bug #4334) create needed sample datas

This add samplenotices.sql that disappear, and add in fr-FR:
* sample_notices_message_attributes.sql
* sample_notices_message_transports.sql

warning on C4/Biblio.pm

Language file updates

[followup](bug #4055) fix backport error

There is an error during backport, all the 3.0.x API is not the same as 3.2.

Reintroducing finedays in updatedatabase

Bumping dbrev 3.06.009

Followup admin/categorie.pl

Bug 3663 screen changes to OPAC advanced search

Copy Search button to top of screen, rearrange order of indexes in search
pulldown list (to Keyword, Title, Subject, then Author & the rest)

(bug #4319) allow reserves on waiting items

This add a function to check the reserve status, and add a check in IsAvailableForItemLevelRequest() to allow request on items that are waiting

MT2889 : Fix statistics' itemtype when item-level_itypes is ON

Fixing hierarchy processing

MT 2116, Follow-up : Fix subfield separator

MT 3044, Follow-up : Fix CSV Export when there are blank chars in tag names

    Regexp is now global

MT 3044 : Fix CSV Export when there are blank chars in tag names

MT 3044 : Adds missing links for opac cart and shelf download

(MT #3076) make cancel button working on return

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

(bug #4207) receive shipment problem

this change the way to get pending orders during shipment receive.

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

(bug #4295) fix overduerules edition

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

(bug #4051) forgotten format_date

as we format_date in API, we cannot re-format date in csv export.

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

(bug #4051) add due date in overdue.tmpl

this add in the tmpl, the due date of each document.

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

(bug #4051) fix mistake in overdues

a big mistake is in sql query, that get non-overdue items instead of overdues.

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

(bug #4195) fix OAI repository

this fix the OAI repository, to don't return resumptionToken if there is no more record.

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

[followup] (bug #4051) fix default values

this set default empty values when nothing is set.

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

[followup](bug #4051) rewrite some stuffs in overdues

This fix overdues to reformat the way to export in csv, create a function in C4::Overdues, and add a date filter.

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

(bug #4290) searching for author in repository

this fix the breedingsearch to search for authors, and not only in titles.

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

[3.0.x] (bug #4263) fix the edition of items with repeatable subfields

The subfield management in item level is broken, fields are concatenated in one field, and if the librarian edit it, the values are not selected.
This big patch fix three things:
 1) saving fields that are stocked in SQL(using koha2marc mapping) are now well cut and separated in _REAL_ subfields
 2) loading records with repeatable subfields are now well returned
 3) Editing items with repeatable fields works well

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

(bug #4287) add enrolment period update in 22 to 30 script

this fix the upgrade script, to upgrade the enrolment period, that is no more in years, but in month unity.

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

Revert "(bug #3778) GetBranchesLoop and searchMyLibraryFirst"

This reverts commit 36ae08af3221f8a5073c1576ee53c4ba00a1d153.

MT 2116: Addons to the CSV export

Fix encoding selection

Italian SQL updates

Signed-off-by: Chris Cormack <chris@bigballofwax.co.nz>

Adding release notes 3.0.6

updatedatabase : fixing XSLT syspref type

XSLT* is now of type free and not Boolean
letter added for staff hold spelling problem fixed

Bug fix: Authentication with cardnumber allows superlibrarian access

un privileged users couls access intranet with superlibrarian rights
when login in with cardnumber/password

Updatedatabase : Updating edititems permissions

edit_items permissions were not set for an existing system
This would have propted user to loose some edit rights.
This patch enables the edit_items provided that they had editcatalogue permissions

MT2938 : Adds a permission for editing items

Bugfix in errors/*.pl and opac/errors/*.pl

The scripts did not define the status printed on the first line of
HTTP headers correctly: they were sending 200 OK,
which was confusing for browsers.

Signed-off-by: Galen Charlton <gmcharlt@gmail.com>
Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

fixing updatedatabase

MT2582: Fix user deletion without permission

MT2636 : Send a different notification whether an hold has been made from OPAC or from the Intranet

C4/XSLT Removing unconditionnal comment

MT2116, Follow-up: CSV Export, fix backporting bugs

[3.0.x](bug #4084) fix offline circ

this add the function C4::Circulation::GetOpenIssue and delete \r chars when processing koc files.

Adding RIS and bibtex export

Signed-off-by: Galen Charlton <gmcharlt@gmail.com>

1110 : Balance carts and lists, follow-up : Added Opac lists features to admin lists

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

MT2116:   Addons to the CSV export

Adds the ability to customize CSV exports through the use of a YAML file.

The following customizations are available :
  - Preprocessing
  - Postprocessing
  - Field-by-field processing

The YAML field should be stored in the tools/csv-profiles/ directory and
named after the id of the CSV profile you want to customize.
An example file is provided in that directory.

MT2116 : Addons to the CSV Export

Add encoding selection
Add authorised values handling

MT2116: Addons to the CSV export

Add user-defined headers
Add CSV, field and subfield separator selection

Bug 3857: Add tools menu to left of CSV Profiles page

MT 2067, Follow-up : Description for CSV export not mandatory anymore

MT 1587 (Follow-up) : CSV export for cart and shelves (export_format table creation)

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

MT 1587 : CSV export for cart and shelves, with the ability to define different export profiles

Signed-off-by: Henri-Damien LAURENT <henridamien.laurent@biblibre.com>

(bug #4075) add use of getrecordvalue in opac-detail

MT2663 : Adds an itemcallnumber plugin

(bug #4020) XSLT unimarc display

When using XSLT Display, and UNIMARC,
since marcFlavour is not used in encoding data, when data is true utf8, as_xml
fails on some subfields.

Moreover, because transformMARCXMLForXSLT edits some values in the marc record
and the PERL UTF8 is not handled by MARC::File::USMARC, it endsup in double
encoding the data.
Sending a patch to fix both issues.

This patch adds
    - two functions in  C4/Charset.pm
        NormalizeString (uses Unicode::Normalize)
        SetUTF8Flag (This function in my opinion belongs to MARC::Record, or at least MARC::File::USMARC)
    - edits C4::XSLT in order to cope with the correct marcflavour
    - edits C4::Search searchResults to use setUTF8Flag

Conflicts solved:

C4/Charset.pm
C4/Search.pm
C4/XSLT.pm

[followup](bug #4062) marc21 item support

this add "item" index in marc21 record.abs

(bug #4062) add item index in zebra conf

This add the "item" index.

Spanish and Turkish updates

German, Italian, and Portuguese (Brazil) updates

Fixing the thai double up

Adding Thai translators

Spanish and Thai updates

[followup](bug #3348) fix spent values and spent resume

This fix the way to get spent datas, to user aqbudgetid instead of bookfund.

[followup] (bug #4051) set as binary

As we concat adress, we need to specify csv as binary, else it's broken and skip some lines.

[3.0.x] (bug #4055) backport canbook/itembereserved

This backport the functions from 3.2/3.4 to the 3.0 API, because we need to factorize the code.

[followup](bug #4051)  add borrower "title", and complete address in csv

this add the borrower title, and the complete address.

(bug #4051) separate firstname and surname

this patch separate firstname and surname in two columns in csv export.

(bug #4052) fix mandatory field/subfield deletion

this fix the way to delete repeatable mandatory fields, the minus char is now shown only on repeatable fields, even if they are mandatory or not.
If the last field is mandatory it won't be deleted.

(bug #4051) add columns in csv export of overdues

this patch add 2 columns in the csv export :
* item callnumber
* issue date

(bug #4050) update datelastseen even if document isn't on loan

this change the place of moddatelastseen to be used each time a document is checked in, even if the document is not on loan.

(Bug 4049) Searching itemtypes returning noise

Fix the problem of searching on partial itemtypes strings
for instance, itemtype="ARTICLE DE PERIODIQUE", itemtype="PERIODIQUE"
searching on itemtype="PERIODIQUE" would also get "ARTICLE DE PERIODIQUE"

Followup : (bug #3042) XSLT changes

types for system preference needed to be updated