(MT #7400) Default framework in MARCdetail.pl

A bug cleans the screen when you choose "default".
(cherry picked from commit 21a625cd1daf6f6dcdafa4210084928509113389)

MT8455 - Changes AddReserve parameters in HoldItem ILSDI service

MT8078 : automatic copy of translated columns.def

Modified the misc/translator/translate script to automatically
copy the columns.def.fr-FR (or other language) file after
translation.
+ update of columns.def.fr-FR translation

Solved conflicts:
koha-tmpl/intranet-tmpl/prog/en/columns.def.fr-FR

Merge remote-tracking branch 'origin/solr/bug/MT8048' into dev/solr

(MT #7227) cron script to delete old entries in import's tables

it deletes from import_batches, import_records, import_biblios, import_items, import_record_matches
it takes 3 args : the "status" to delete, the "duration" integer of "laps" to delete
To delete entries with status cleaned older than 1 month :
perl ./clean_batchimport.pl -status cleaned -duration 1 -laps MONTH

(MT #7574) add item types in opac-user Checked Out table
(cherry picked from commit 8e6703b753cba84712e705d3dfce57271bef6459)

Merge remote-tracking branch 'origin/solr/ft/MT9873' into dev/solr

MT9873: Remove a line that was here for debugging purpose

and breaks search on staff client.

Merge remote-tracking branch 'origin/solr/ft/MT9198' into dev/solr

MT7578: FIX DT correct dates sorting
(cherry picked from commit bf4c9f5649b870326937cf65b2006504fe84b1a3)

MT7578: Add links for checkall/checknone in serials-collection tables
(cherry picked from commit de660782282486099880e3718f51943594ebc64c)

Conflicts:
koha-tmpl/intranet-tmpl/prog/en/modules/serials/serials-collection.tmpl

Merge remote-tracking branch 'origin/solr/ft/MT7578' into dev/solr

Conflicts solved:
koha-tmpl/intranet-tmpl/prog/en/modules/serials/serials-collection.tmpl

MT9198: Use items.itype when item-level_itypes is ON

Prevent useless JOINs on biblioitems when syspref is ON
Display itemtypes descriptions instead of codes

Merge remote-tracking branch 'origin/solr/ft/MT9873' into dev/solr

MT7578: FIX DT correct dates sorting

Revert "MT7578: Add links for checkall/checknone in serials-collection tables"

This reverts commit b5e427b6a88bd4ddaa6e9e7b01ec890a4e4633f9.

MT7578: Add links for checkall/checknone in serials-collection tables

Merge remote-tracking branch 'origin/solr/ft/undefined_subroutines' into dev/solr

find-undefined-subroutines.pl: All tests pass...

...using a blacklist of 4 scripts.

Merge remote-tracking branch 'origin/solr/ft/MT9265' into dev/solr

MT9198: issues_avg_stats: code clean & several fixes

- remove a lot of Perl warnings
- per-row and per-column averages calculation was wrong
- global average was not calculated
- change label 'TOTAL' to 'AVERAGE'
- make the sql joins conditionnals, it should make queries faster
- remove useless code

Merge remote-tracking branch 'origin/solr/ft/MT9936' into dev/solr

Merge remote-tracking branch 'origin/solr/ft/MT9267' into dev/solr

Merge remote-tracking branch 'origin/solr/ft/MT9282' into dev/solr

Merge remote-tracking branch 'origin/solr/ft/MT9619' into dev/solr

Merge remote-tracking branch 'origin/solr/ft/MT9638' into dev/solr

Merge remote-tracking branch 'origin/solr/ft/MT9257' into dev/solr

MT9125: FIX test if *_items_loop are not undefined

Can't use an undefined value as an ARRAY reference at
/home/koha/src/opac/opac-search.pl line XXX.

MT9936: GetPendingIssues: do nothing if no borrowernumbers

Merge remote-tracking branch 'remotes/origin/solr/ft/MT9775' into dev/solr

Merge remote-tracking branch 'origin/solr/ft/MT7510' into dev/solr

MT7510: Adds todo and fixme for check_consistency.pl

MT9282: FIX translations

MT9619: FIX translations

MT9638: FIX translation

Bug 9267: FIX Translation strings

MT9257: Fix html/html::template structure

Undefined_subroutines: All tests passed unless 1

The unpassed test is
sms/sms_listen_windows_start.pl : Can't locate Win32/Process.pl

(MT #9573) When canceling an hold the next waiting looses barcode

In request.pl when you cancel a waiting hold, the next enters in "waiting" status, but:
in the same page, the details column shows "No Barcode "
in detail.pl, the status column shows "available" that is bad too, but:
behind the scene, it's worse, because the CancelReserve function is poorly formated.
I have just corrected this, to enable it to fill correctly the reserve table.

MT7510: Followup: We have to delete record AFTER processing

Else, we miss a lot of record.
Example:
count=100, page=1
a solr search returns 100 results.
We delete 10 results (90 to 100 for ex.)
a new solr search returns results 100 to 200, but 10 results will not be
checked (was 100 to 110).

MT9873: [SOLR] Add messages

- Add messages.inc for tmpl
- Remove useless files
- Use messages.inc for opac-search.pl and catalogue/search.pl

MT7510,9864: Add authority check for check_consistencies.pl

Merge remote-tracking branch 'origin/solr/ft/MT9125' into dev/solr

Merge remote-tracking branch 'origin/solr/ft/MT8362' into dev/solr

MT9687 : Adding a new value to 8 position of coded data field 100
From july 2012, unimarc norm evolves and the value k "monograph with both publication date and print date" must be added for this position.

Merge remote-tracking branch 'origin/solr/ft/MT6557' into dev/solr

Merge remote-tracking branch 'origin/solr/ft/MT9357' into dev/solr

[SOLR] Prefix GetAuthority with module name

When SimpleSearch is called in dedup_authorities.pl, it fails because of
"undefined subroutine main::GetAuthority".

Merge remote-tracking branch 'origin/solr/ft/remove_unused_authorities' into dev/solr

Merge remote-tracking branch 'origin/solr/ft/MT8884' into dev/solr

MT9125: Apply hideatopac for xslt

Merge remote-tracking branch 'origin/solr/ft/MT8625' into dev/solr

(SOLR] MT9694 RPN2Solr: str index must be called with double quotes

str index must be called like:
  index:"value"
and not:
  index:'value'

Merge remote-tracking branch 'origin/ft/dedup_authorities' into dev/solr

Solved conflicts:
misc/cronjobs/dedup_authorities.pl

[dedup] New script dedup_authorities.pl

in misc/cronjobs.
See help (option -h) for details

Merge remote-tracking branch 'origin/solr/ft/MT9136' into dev/solr

Solved conflicts:
C4/AuthoritiesMarc.pm

sub merge refactoring using first_index when possible

This patch adds no features but intends to imporve readability.
It changes 9 lines for 1

MT9136 Fixing : restoring the first subfieldcode $a if it was changed

The change of subfielcode was permanent for all the other records
This patch restores the $a after a change

MT9656,MT8362: Move js code into a separated commmon file

MT9775: Prevent infinite loop on same lines

For an unknown reason, if the index record queue processes a bad formatted
line, we want to skip it and catch the error into the log file.

You can grep it with the "ERROR ON LINE" pattern

Merge remote-tracking branch 'origin/solr/ft/MT8200' into dev/solr

Merge remote-tracking branch 'origin/solr/ft/MT9461' into dev/solr

[SOLR] MT9461: Add --check option to dedup_authorities.pl

This option allow to tell the script which fields and subfields must be
checked to confirm that two authorities are duplicates.
See documentation for more details (perl dedup_authorities.pl -h)

This patch also modify the script so that all fields are checked and not
only the first.

MT9461: dedup_authorities.pl: fix _choose_records

@candidate_authids are now sorted by usage descending (instead of
ascending) so that the first (kept) record is the one that is the most
used.

MT9136: Fix merge function

Subfield code is changed only for $a

Merge remote-tracking branch 'origin/solr/ft/MT9537' into dev/solr

New script xt/find-undefined-subroutines.pl

MT8884: Fix merge sub

Fix crash when Solr results contain id that are not anymore in database

MT9357: FIX Patrons statistics, if patron is inactive

If patrons are selected as inactive, we want to catch rows with a
borrowernumber = NULL

MT9111: Porting edits for merge authorities

This work is a port of the authorities management
for the 'BNF Harveseter'
This makes composed UNIMARC authorities conformed to RAMEAU

MT6920 missing new in default value

MT8362: auth_finder.pl: do not copy $9 subfields

MT9537: Toggle "new" status: new_status_value become multivalued

    Now you have to give several values for the new_status_value

MT9326: Followup: Displaying cn_source as Call number source

We want to display the description (from an authorised value)

MT9537: use the ccode only if defined in the yaml config file

 + new_status_value become a multivalued param in the yaml file

MT4259: Toggle "New" Status

This is a combination of 5 commits.
MT4259: Toggle "New" status

Conflicts:

misc/cronjobs/toggle_new_status.yaml.orig

MT4259, Follow-up: Updated yaml.orig file (so comments are not mixed with values)

Conflicts:

misc/cronjobs/toggle_new_status.yaml.orig

MT4259, Follow-up: Uses items.new mapping

Conflicts:

etc/solr
kohaversion.pl
misc/cronjobs/toggle_new_status.yaml.orig

MT4259, Follow-up: Adds items.new mapping to AddItem

Conflicts:

etc/solr

MT4259 Follow-up: adds missing kohastructure.sql

MT8200: advance_notices.pl: make use of -f parameter

MT8200: Cherry-pick of 3 commits from origin/stetienne/ft/MT8200

MT8200: FIX format for onloan field for advance notices
(cherry picked from commit dc8c104a6324c4deb44c2cb7752e9be38463afe6)

MT8200: Fix C4::Letters::parseletter when date is 0000-00-00
(cherry picked from commit fd299ff5c969a8a6fbcf54cb4fcfda92b6f3e11a)

MT8200: Check return of GetMessaginPreference in advance_notices.pl
(cherry picked from commit 31cc1fed067816c6fbeadf6bf310acd2a4647796)

Merge remote-tracking branch 'origin/solr/ft/MT9342' into dev/solr

MT9265: Fix overdue_notices.pl

If delay of 3rd notice was greater than $MAX (90), sql query handled by
$sth2 returned no results since 'BETWEEN a AND b' return no results if a
> b.
This was causing a letter to be printed with no items.
This is fixed by setting $maxdays=$mindays in this case.

Note: this issue can be avoided by using --max parameter

MT9525: Bug 3413: Checkboxes for new subfields not saving correctly

The bug was in the numbering of the fields and subfields in the form.
The form elements for the 'new subfield' got the same numbered names and
ids as
the form elements for the second subfield. (example: repeatable1)
The patch fixes the numbering to continue to the new subfield.

To test:
- Create some new subfields and check all checkbox fields save correctly
  (mandatory, repeatable, is url)
  - Check that other subfields' checkboxes are not changed
  - Check existing subfields and newly created subfields can be edited

Signed-off-by: mveron <veron@veron.ch>

MT9161: Prevent FF warning on printing slip

[SOLR] MT9444 Minor fixes for remove_unused_authorities.pl

- use Modern::Perl
- print usage and exit if --max-gap is negative
- exit 1 instead of exit -1
- recordtype:biblio in filters instead of query

[SOLR] MT9444 remove_unused_authorities.pl improvements

- New parameter --max-gap (integer).
  The script first count how many biblios are indexed and compare to the
  number of biblio in database. If difference is greater than this
  parameter, it warn and stops there (ie. do nothing).
- Progression information in percentage
- Print the list of deleted authorities each 100 processed authorities
  (if any)

MT8884: Fix merge to avoid dying when authority doesn't exist.

Merge remote-tracking branch 'origin/solr/ft/MT9261' into dev/solr

Merge remote-tracking branch 'origin/solr/ft/logger' into dev/solr

Bug 6984 - Holds statistics doesn't work.

This patch fixes several errors in reserves_stats.pl and reserves_stats.tt.

Testing -
To test this patch, data must be in either the reserves table or old_reserves or both.  The following SQL will give you the raw data that is used by the report.

SELECT priority, found, reservedate, notificationdate, reminderdate,
waitingdate, cancellationdate, borrowers.categorycode, items.itype,
reserves.branchcode, holdingbranch, items.homebranch, items.ccode,
items.location, items.itemcallnumber, borrowers.sort1, borrowers.sort2
FROM reserves
LEFT JOIN borrowers on (borrowers.borrowernumber = reserves.borrowernumber)
LEFT JOIN items on (items.itemnumber = reserves.itemnumber)
UNION SELECT priority, found, reservedate, notificationdate, reminderdate,
waitingdate, cancellationdate, borrowers.categorycode, items.itype,
old_reserves.branchcode, holdingbranch, items.homebranch, items.ccode,
items.location, items.itemcallnumber, borrowers.sort1, borrowers.sort2
FROM old_reserves
LEFT JOIN borrowers on (borrowers.borrowernumber = old_reserves.borrowernumber)
LEFT JOIN items on (items.itemnumber = old_reserves.itemnumber)

To test the notificationdate and reminderdate, I added data to the old_reserves table, since I have never run notices on my test machine.

Ex:
UPDATE old_reserves
SET notificationdate = "2012-01-29",
reminderdate = "2012-01-29"
WHERE timestamp = "2012-01-29 20:09:34";

Signed-off-by: Liz Rea <wizzyrea@gmail.com>
Confirm original bug -- Reports work as expected now!
prove t xt t/db_dependent no different from master.

Merge remote-tracking branch 'origin/solr/ft/MT7481' into dev/solr

Conflicts solved:
C4/Record.pm
tools/export.pl

Merge remote-tracking branch 'origin/solr/ft/MT9184' into dev/solr

MT9136: Don't check for tagfield in _process_subfcode_4_merge

It isn't necessary since sub merge call it only with tags related to an
authority type. (merge is the only sub that uses
_process_subfcode_4_merge)

[SOLR][LOGGER] FIX warnings when no file argument

Merge remote-tracking branch 'origin/solr/ft/MT9055' into dev/solr

Merge remote-tracking branch 'origin/solr/ft/rpn2solr' into dev/solr

MT7481 - MT8298 : Adds a CLI option to tools/export.pl to remove NSE/NSB characters from exported records
(cherry picked from commit e3c3c672ddc40fece824f9451f3b5d0c87f359d1)

Conflicts solved:

tools/export.pl

MT7481: Adds tools/export_borrowers.pl

  - This script allows to export borrowers in a simple way (pipe-separated fields).
    Fields to export can be supplied in command-line parameters.
(cherry picked from commit fabce2a24fa7fa085e2f133de84f1919e44fea33)

[SOLR]RPN2Solr: Set timeout on general rule

Merge remote-tracking branch 'origin/solr/ft/MT9380' into dev/solr

Merge remote-tracking branch 'origin/solr/bug/MIN/MT8409' into dev/solr

Conflicts solved:
C4/Serials.pm

Merge remote-tracking branch 'origin/solr/ft/MT9388' into dev/solr