Tweaking searching

fix syntax error.

remove char_decode

Items adding correctly now

forgot to add 'utf-8' argument to new_from_xml()

Adding fixes to MARC editor to HEAD

New programmer templates for the OPAC. Markup has been pared down, but structure hasn't been updated according to new guidelines put forth by Paul on the mailing list (i.e. named blocks, etc).

Bug fixing : a line missed a comment sign.

commit for holidays and news management.
(some forgotten files)

Remove the search that tests the Zconn -- warning, still no fault
tollerance

commit for holidays and news management.

Contrib from Tümer Garip (from Turkey) :
* holiday :
in /tools/ the holiday.pl script let you define holidays (days where the library is closed), branch by branch. You can define 3 types of holidays :
- single day : only this day is closed
- repet weekly (like "sunday") : the day is holiday every week
- repet yearly (like "July, 4") : this day is closed every year.

You can also put exception :
- sunday is holiday, but "2006 March, 5th" the library will be open

The holidays are used for return date calculation : the return date is set to the next date where the library is open. A systempreference (useDaysMode) set ON (Calendar) or OFF (Normal) the calendar calculation.

bug fixing : making changes for letters and reports-home (Inventory/Stocktaking and overdue) work.

rollback ... by accident I committed a rel_2_2 Biblio.pm

MARChtml2xml for improved MARC editor

A new overduenotice script to go along with overduerules
it is still UNDER CONSTRUCTION and need deep testing.

Adding some checking and feedback.

New table used in overduerules.pl tools page.

Adding getletters to Koha.pm :
allow to get a list of letters for a module.

overduerules is a tool relying on letter.pl
It will allow ppl to manage three levels of overdue thanks to a brand new overduenotice script to come out soon.

use new Context->Zconn object

Removing 'our Zconn' from top...

removed Zconns, no need for them anymore with new Context.pm setup

Don't need those $Zconn's after all.

moving all $Zconn s to z3950_extended_services (currently, nothing
works).

minor bugfix with 'commit' option

Adding support for new Zconn object from C4::Context.pm

Changed to use new Zconn object in Context.pm. Not sure if the Zconn
should be set within the subroutine or should be passed in via the
script -- Chris, what do you think?

Another purely documentation commit. Just changing formatting to ease
readability.

adding support for ISBN search in collection.abs

A bulkmarcimport.pl that is based on the new Biblio.pm Zebra routines.
It now responds to:

-n : the number of records to import.
-commit : the number of records to wait before performing a 'commit' operation

ALSO: IMPORTANT: I took out the char_encoding as this should be handled by
MARC::File::XML now, unless I'm mistaken.

Purely documentation change: converted all =head2 entries to use function
name as title rather than usage as title

Further cleanup, convering new routines to 4-chars

Better documentation, added warning if serviceType is 'drop' since it's
not supported in Zebra.

IMPORTANT: Paul, I've removed the decode_char routine because it's no
longer necessary. If we need to convert from MARC-8 for display, we should:

1. use utf-8
2. do it with MARC::Charset

If you still need it, let me know and I'll put it back in.

cleaning up POD docs, deleting zebra_create as it's no longer used (
replaced by z3950_extended_services).

readding some lost subs

Enable shadow registers in zebra.cfg

Reverting to last version because the fix I committed breaks tag
repeatability. Note that there is still a problem with the Koha
MARC editor saving blank tags and subfields in a record!

Bug fixing : Modifying template adapting for prog template format

export.tmpl was not the good one. :)

changing file according to new directory hierarchy

Adding tools directory template and scripts
Changing barcodes, export and import and letters directory.
Changing export script name (marc.pl) to export.pl
Changing import script name (breeding.pl) to import.pl

pruning files from old directory

Adding admin template files

changing parameters template directory to admin

Using 'loggedinusername' variable to populate hidden field user

Replacing all calls to zebra_update with calls to
z3950_extended_services. More work coming, but it's
working now.

First go at a connection object for Zebra. You can now get a
connection object by doing:

my $Zconn = C4::Context->Zconn;

My initial tests indicate that as soon as your funcion ends
(ie, when you're done doing something) the connection will be
closed automatically. There may be some other way to make the
connection more stateful, I'm not sure...

Using get_record() from Search.pm

Not ready for production, its just set to always use the default framework at the moment

Using get_record() from C4::Search now (ie fetching the record from zebra)

This probably will be the same file as the one in unimarc, so perhaps might be best to move them out and just into the zebra dir.
Committing now so its not lost

get_record works now

adding a link to viewlog.pl (log viewer)

templates for log viewer

typo

A new subroutine to handle Z39.50 extended services. You pass it a
connection object, service type, service options, and a record, and
it performs the service and handles any exception found.

Fix for refresh error from HDL.

forcing utf8 communications between perl & apache

removing set names=UTF8, seems useless. Still investigating mysql-perl-utf8

Little test set up that lets you type cql in which is passed to zebra
install search-test.pl on your opac (or the intranet, if intranet youll need to put the tmpl file in the intranet too)

NOT FOR PRODUCTION, purely for testing

destroy a connection after we're done -- we really should just have one
connection object and not destroy it until the whole transaction is
finished -- but this will do for now

Trying to error trap a little more.

Quick fix for functional bug in getMARCsubjects to avoid returning values that
vary between different uses of the same authorised subject heading causing
linked subject searches from the detail view to fail.  Other presentation fixes
within getMARCsubjects.

New MARC21 collection.abs based on marc21.abs

fixing broken link

Can now add an item

Removing reference to acqui.simple

Changing to get the template from the right directory

Putting this in the right place

Back to using xml, a much better idea :)

Fixing zebra.cfg for usmarc

adding some config stuff for usmarc

adding a 'use ZOOM' to biblio.pm, needed for non-mod_perl install.
also adding diagnostic error if not able to connect to Zebra

Just a little missing my

Seems to be working great Paul, and I like what you did with zebradb

road to 3.0 : updating a biblio in zebra seems to work. Still working on it, there are probably some bugs !

(chris, read carefully)
Replacing zebraserver and zebraport by zebradb in koha.conf . The zebra connexion can be done in a single variable "server:port/database". I used this in dirty searchMarc.pm as well as in Biblio.pm. I've replaced your code in Search.pm

fixing bugs for :
* search on 2 words "applied chaos"
* retrieve results when there's only 1 answer
(still dirty & to be rewritten by chris, but it's useful for me)

Work in progress still, committing for testing

Just a little fix while im testing

Start of the complete rewrite of Search.pm

It just does a simple cql search at the moment, takes a hashref of keyed by variable.
I have introduced 2 new variables to koha.conf
zebraserver and zebraport Ill add to the installer to get these set.
Very very very much a work in progress still. Thanks to paul for getting things up to this point.

adding some templates I forgot to commit (module sub menus)

some modifs to enable search on old search API with zebra. seems to work, although it is 100% dirty code that should be rewritten by someone (chris ?)
I just hacked this to have a working search to continue working on Biblio.pm & catlaoguing

+code cleaning (using biblionumber standard API name)

adding detail templates in cvs, in their new catalogue directory

cleaning code (useless use C4::)

some modifs to enable search on old search API with zebra. seems to work, although it is 100% dirty code that should be rewritten by someone (chris ?)
I just hacked this to have a working search to continue working on Biblio.pm & catlaoguing

fixing some warnings (perl -w should be quiet)

Just getting rid of some annoying warnings

OK, this time it seems to work. The last blocking problem was... a space in
recordId: (bib1,Identifier-standard) just after the comma. Adam agreed it was a bug, and it should be solved soon. But now we are aware, we can avoid putting the space !

In this commit you have all what is needed to setup a working zebra DB in Unimarc :
* collection.abs is UNIMARC specific and must be rewritten for MARC21, in marc21 directory
* pdf.properties is to be copied unmodified in the marc21 directory (can also be put somewhere else)
* rebuild_zebra.pl is SLOW, but 1 step reindexing tool, using ZOOM
* rebuild_zebra_idx is FAST, but 2 step reindexing tool, and does not use zebra. run it, it will create all biblios XML files in /zebra/biblios directory, then zebraidx update biblios in your zebra directory
* zebra.cfg is the zebra config file ;-)
* test_cql2rpn.pl is a script that will query the database and show the results. Works for me, just change the query at the beginning to get answers you expect.

What has to be done :
* benchmarking : it seems the zebraidx update is faster than lightning (400biblios/sec : 10 000biblios in 25seconds), while ZOOM indexing is slow (something like 25biblios/second) More benchmarking could be done.
* completing collection.abs for UNIMARC. I'll take care of it.
* modifying Biblio.pm to use ZOOM instead of the "zebraidx through exec" running actually. I'll take care of it also.
* modify the search API & tools & screens. I'll let the ball to someone else (chris ?) for this. I agree SearchMarc.pm can be dropped and replaced by something else (maybe a new-and-clean Search.pm package)

fixing links from acqui.simple to cataloguing

Changing to reflect the fact acqui.simple is now cataloguing

Fixing broken code to show list of branches

Hmm there seem to be quite a few subroutines twice in this module....

Paul could you take a look and remove the ones that shouldnt be there please

Cleaning up some unessecary my statements

Commenting out a line that was preventing the script executing

updating DB :
* removing useless tables
* adding useful indexes
* altering some columns definitions
* The goal being to have updater working fine for foreign keys.

For me it's done, let me know if it works for you. You can see an updated schema of the DB (with constraints) on the wiki

DB improvements : adding foreign keys on some tables. partial stuff done.

just adding menus to the top

updating prog templates for acqui

moving serials scripts to serials directory

moving cataloguing scripts to a cataloguing directory (more logic than acqui.simple !!!) & updating prog templates

templating serials & moving them to a serials directory, more self-explanatory (bull being french)