[SOLR] New way to install solrconf

We prefer to clone a git repository wich contains solr configuration.
So this patch delete unused lines in makefile.pl

[SOLR] Quick fix - circular dependency bad use

[SOLR] Follow-up FIX Get description for facets with ccode (in opac)

MT6223 follow-up: deal correctly with status/lost/notforloan flags

The calculation of the SQL was done on the ID of the flag, not on the value itself.

For example: "available" = 0 in notforloan, but has an id=5432

The SQL searched for items.notforloan=5432, which was, obviously, wrong !
(cherry picked from commit e1172aa64997ea5c435283fe6fb2d42b881c1c39)

MT6223: multiple fixes for inventory

* when a file was uploaded and the comparison with catalogue range requested, the comparison was wrong: the logic was wrong
* items that were not supposed to be scanned (ie: supposed to be on another shelf) didn't had the author and title, it was hard to retrieve them on the shelved !
* some useful fields were missing, like homebranch, location, status
* the CSV export contained all the item information. It should contain the same informations as the screen

Behaviour now:
* scan a list of barcode & select a range of location
* if a barcode has been scanned and should not be (mis placed item), the information is displayed
* if you choose "compare barcodes list to result option", the resulting list contains all items that have been scanned and those that were supposed to be. Any item not in both list appears with a specific message on the last column
(cherry picked from commit b57515520cea4a80dcbf5295d280f17c4de42661)

MT6383 : Revert "MT5210 CanItemBeReserved too restrictive"

This reverts commit 75581a700f1f295ee32f74876f950116c13c7c58.
(cherry picked from commit 7bc15da923dbeea2ec70a143dab7fc1303e52e38)

(MT #6181) Dead link in Checked-In items

The line for patron, when the item needs to be transfered, and the transfer is done, appears like a blank link with parenthesis.
This patch in this case, shows "Not checked out".
(cherry picked from commit 6b2d8a7935f2f7e2f14e785aee379a32192b5c21)

(MT #6609) mandatory fields are display before mandatory subfields in alert
(cherry picked from commit e0ff1fa0f1fe3d66207febd8045302a15fe30362)

MT6416 Followup : sometimes reserves were not saved into old_reserves because of duplicate primary key

Add _SaveInOld function to insert into old_reserves table all reserves value but reservenumber which is newly calculated
(cherry picked from commit dc387cbe60d48a9cbc357a2ae13790c3f8cf3b18)

MT6416 Table old_reserves is not filled

Mismatch between reservenumber and borrowernumber prevents reserves to be written in old_reserves table wher a reserve is filled (ModReserveFill)
(cherry picked from commit 3c65aed55c401fa9db4b38b8af8aff298d71abd8)

(MT #6021-6022)update othername, B_email and B_phone display on moremember.tmpl
(cherry picked from commit 734f8c99a0af24e8e33fb568a84f26f3d8bffbe3)

FIX Indexing in Plugins DeleteDash and Date

Plugins DeleteDash and Date don't index all values of subfields

MT6901 Adds the ability to display the current date in overdue letters
(cherry picked from commit 6e7a248215eef39fd894b3c40186664ee6d246ed)

MT6892: Buttons are not displayed in catalogue/detail.pl
(cherry picked from commit 7bd8695b2ec0c89a3def13201f22c6df9601dfbf)

MT5359 Overdue fines are not correctly displaid on OPAC user account

Adding 'FU' category for display
(cherry picked from commit a41028e7704d1ba2dd582c36a2508111635af65d)

Fix broken morememberpage if no patron_attributes

- Buttons were missing
(cherry picked from commit d934e829dac041a5600dc0237b34a94869d454fd)

MT6657 Autonumber does not find the right next number

Adding - in regexp to match branchcode containing -
(cherry picked from commit 67961fe98f8be284e6ac6d1ac3a2f49c5c6824e2)

MT6063 : addbiblio.pl : authorised values with 0

authorised value count 0 as a value would not be correctly processed.
Indeed, the CGIScrolling list would not be passed the correct value
because the test was not done on defined but on the value itself.

This adds a test on defined value in order to fix that.

Way to reproduce :
    - Add an authorised value category with authorised value 0 "mylib" as description and some others
    - Add a link to your framework to a subfield and change authorisedvalue in the more constraints on the category you edited
    - take a biblio, edit it.
    - Store the value 0
    - go to MARCdetail.pl you see it
    - click on Edit Record
    - one expects to see "mylib" displayed in the subfield linked to that category.
    But shows nothing and if saved as such, forgets the value
(cherry picked from commit 8791a45ea8076f8b32d49c106beea0449ff976ae)

GetCOiNS problem :

place and tpages were not correctly written.
(cherry picked from commit cafa1ca7db3caf550b503c4bf22547d9d5dbc926)

MT6626: prevents form validation by pressing "Enter" key
(cherry picked from commit b6c2594ef3d93b7af0a1f300ec92ce2eb068d6ef)

MT5923 force utf-8 header in the mail

The mail for overdues, when you choose html format does not containt utf-8 encoding header

Some mailers can deal with this missing info, some display as latin1

This patch specifies the utf8 encoding
(cherry picked from commit 8ed3410b35ca02367e0466250e9fb66176bf48f4)

MT6419: fixing marc2bibtex API return

The marc2bibtex API returns just a result, not an error then result.
Before this patch, BIBTEX export from opac-detail just returned an empty file
(cherry picked from commit ba70fd269c96607c906afe4b9e037627394be2d3)

MT6645 Some items are displaid on loan although they have been checked-in

Add reseting of onloan item attribute on return with offline circulation
(cherry picked from commit 9c28e26bba2d26c15d3387880d8f9e2153dd80ab)

MT6412 When overdue_notices.pl is run without -t parameter, a user is notified twice if his delay match exactly the delay defined fro trigger.

It is due to the fact that the interval tested included both limits each time, so if the delay of the user was exactly the limit, it matches previous and current trigger at the same time.
(cherry picked from commit 5e22d973bfa71c29b0f99d3c75555db82ef2233b)

MT6270 display debarment date and comment

The duration and comment when a patron is debarred is not displayed at login.
The patron had no way to know it (except by asking a librarian)
(cherry picked from commit 0519bb7b84953be58e53b7d5681b0b8706e5ac67)

[SOLR] Followup : Support for searching in index of type date

Update doc

[SOLR] Support for searching in index of type date

[SOLR] Rename Plugin PubDate => Date

Create a generic plugin date from old PubDate

[SOLR] FIX Get description for facets with ccode

[SOLR] rebuild_solr : Adding -w with list of biblionumbers separated by coma

[SOLR] FIX pubdate limitation (when it's the only one limit)

[SOLR] Follow up MT6953 - UsedInXBiblio is not updated

- in opac too

[SOLR] New option -i (information) for rebuild_solr script

- Ping Solr Service and stop if Solr is down
- Gives SolrAPI values
- Count all documents

[SOLR]MT7076: Sort mappings on option text, not option value

New file tablesorter.js with a getTextExtractor function.
Tablesorter doesn't sort words with accents

[SOLR] Display pubdate in facets with C4::Dates

[SOLR] FIX harcoded ccl indexes in opac search

[SOLR] FIX fields' order for pubdate in table indexes

[SOLR] Remove useless call IndexRecord in ModBiblio

[SOLR] Author link in results list must use index name

MT7004 FIX subscription-bib-search.pl search

[SOLR] MT6953 - UsedInXBiblio is not updated

- Index usedinxbiblio use C4::AuthorityMarc::CountUsage
- Authorities are not updated in solr index at each biblio update linked
- So, the results displayed on Authority Search Results and Autority detail are differents (first use usedinxbiblio index and second use CountUsage in real time)

[SOLR] FIX don't escape colons if already escaped in buildQuery

Fix merge comment forgotten

MT6196: strange order in CSV upload

uploading the circ overdues result in a csv with columns in a strange order
and not the order of the screen
This patch reorder the column by putting the usefull ones first

MT6267: opacDefaultTab fix

The opacDefaultTab syspref defines the default tab displayed (in item part)

If is was set to "serialcollection" or "holdings", it was not working.

removing warnings

Fix buildEDITORS.pl script for 3.2

buildEDITORS.pl was deprecated in 3.2.

This patch uses also Business::ISBN to construct editor ISBN prefix.

catalogue_stats, using INNER JOIN instead of LEFT JOIN

The stats were using INNER JOIN instead of LEFT : if a biblio had no items, it was not counted
as the INNER JOIN was false.
With a LEFT JOIN, all biblios are now counted, it's more correct

Very minor fix : putting a - between branchcode and location

(only if location is filled). This is usefull to separate both fields

removing warn

changing url for sudoc

Conflicts solved:

.gitmodules

follow-up: same problem with merging when there is a " in the title

BZ5725 follow-up : another wrong permission

missing permission, same thing as the previous patch, but for another call of batchedit

MT5668 Librarians who were not superlibrarians were disconnected from koha where using editors plugin

Permissions were wrong in the plugin, causing silent disconnection of the user when searching for an editor if user did not have superlibrarians permissions.

MT6294: keep frameworkcode of both biblios

Before this patch, the frameworkcode of the biblio that had the item detached was modified to be the same as the biblio that had the item attached

With this patch, frameworkcode is preserved

MT5446: total is wrong

In Acqui-home, with hierarchic bugdets, it's a non sense to do total & sub-totals:
we're adding budgets more than once.

For example :
Books 1000
  fictions books 500
  NF books 500
result in a total of 2000 !

This patch removes the total

MT6039 opacstylesheet not transmitted to opac-auth

opacstylesheet syspref is not tramsmitted on login page. Thus, the opac login look different

MT6244: Authorised values administration, warn for modifs

When a librarian modifies auth values, he sometimes think that the modifs he does will be done on records that use the authvalue.
It's not the case. This patch just add a warning about that on main & modif pages.

MT6139 uncertainprice can't be unset on an order

The uncertainprice flag couldn't be removed on a given order,
due to the fact an unchecked checkbox returned nothing (must be 0 to uncheck)

(MT #5068) Itemcallnumber with "'"

In this case the increment does not work, this patch allow to use "'".

(MT #4718) Contradictious messages on check in

When an item is returned on a branch with a reservation and if his home branch differs, two messages appears.
One for transfering the item, an other for the hold, this patch hides the transfering message to homebranch if there is a hold.

[SOLR] Fix install kohastructure for indexmappings table

- index column size

[SOLR] Follow-up: Fix ccode advanced search display (in opac too)

- the list displayed was ever the same

[SOLR] FIX option -w in rebuild_solr.pl

Without this patch, rebuild_solr.pl always reindexing biblio with biblionumber=1

Merge remote branch 'origin/solr/bug/MT6644' into dev/solr

[SOLR] optimize indexrecord

- read indexes hash in memory if present
- don't read it every time in database...

Simple test with 10000 records

==> log_10000auth_before.log <==
Building - elapsed time is   2:02 min.
Indexing - elapsed time is   0:22 min.
226.44user 6.98system 4:59.77elapsed 77%CPU (0avgtext+0avgdata 589328maxresident)k
4496inputs+1704outputs (58major+80623minor)pagefaults 0swaps

==> log_10000auth_after.log <==
Building - elapsed time is   0:51 min. (for 5000)
Indexing - elapsed time is   0:22 min.
116.64user 4.10system 2:31.16elapsed 79%CPU (0avgtext+0avgdata 584864maxresident)k
16inputs+1600outputs (1major+80061minor)pagefaults 0swaps

==> log_10000biblio_before.log <==
Building - elapsed time is   5:03 min.
Indexing - elapsed time is   3:25 min.
763.85user 25.71system 16:38.79elapsed 79%CPU (0avgtext+0avgdata 3059712maxresident)k
128inputs+1768outputs (2major+389171minor)pagefaults 0swaps

==> log_10000biblio_after.log <==
Building - elapsed time is   2:31 min.
Indexing - elapsed time is   3:28 min.
553.96user 5.76system 11:39.05elapsed 80%CPU (0avgtext+0avgdata 3059712maxresident)k
0inputs+1720outputs (0major+389242minor)pagefaults 0swaps

[SOLR] fix kohastructure syntax error.

[SOLR] FIX C4/Biblio.pm GetMarcNote : return unless $record

MT6794: Adding sorting and pager in cataloguing/addbooks.pl

[SOLR] MT6594 Follow-up - Search limit by branch

[SOLR] Return an empty string if query is not defined (normalSearch)

[SOLR] Followup FIX in advsearch when we select just itemtypes without term or filter

Followup FIX in advsearch when we select just itemtypes without term or filter

[SOLR] Followup FIX in advsearch when we select just itemtypes without term or filter

Followup FIX in advsearch when we select just itemtypes without term or
filter for opac

[SOLR] Follow-up - Search limit by branch

Revert "MT6594: when OpacAddMastheadLibraryPulldown is activated the syspref SearchMyLibraryFirst is is taken into account"

This reverts commit c017cf4a998a56eaffe6550594ef5a5a77a3927a.

[SOLR] updatedatabase init on *SortOrder initial value

- by default, value is NULL and it gives a 'Missing sort order' error.
- "score desc" choosen - seems more relevant for a default value

MT6707: FIX orderby var name

[SOLR] MT6644 FindDuplicate would break addbiblio

When no item is returned, the FindDuplicate would return Error 500 because
$res would be undefined and we are using @{$res->item}

MT6707: FIX Pager + escape quotes and brackets

[SOLR] Best support of escaped quote

[SOLR] FIX in adv search when we select just itemtypes without term or filter

[SOLR] MT6685: Add tags in opac

[SOLR] Fix ccode advanced search display

- the list displayed was ever the same

MT6622: Opac search history now works with solr

[SOLR] FIX Replace itype description by code in option value

[SOLR] FIX tmpl param name for pager

[SOLR] FIX error in Plugin 4XX

[SOLR][Limoges] removing filters when no data passed

When filters was empty and parameter passed
(Context:
OPACMastHead and SearchMyLibraryfirst enabled)
The Search string produced a BAD request on solr.
This patch fixes that.

MT6594: when OpacAddMastheadLibraryPulldown is activated the syspref SearchMyLibraryFirst is is taken into account

[SOLR] MT6642 Plugin PubDate would block cataloguing

When no field 210 set, then the plugin would fail because it searched a subfield of an undefined value
use method subfield of record which is much more forgiving.

[SOLR] MT6624 : authorities pagination

Some required parameters are badly transmitted and sometimes not transmitted at all

[SOLR] Search limit by branch

Fix masthead.inc to allow limiting search by branch

[SOLR] merge problem on opac-advsearch.tmpl

[SOLR] authorised values management with facets

[SOLR] opac authorities authentication required.

This patch removes the required authentication when searching
authorities at OPAC

[SOLR] Remove diacritics before search authority

Solr can't truncate with diacritics (in ste index)

[SOLR] MT6309 display descriptions for facets

Display of indexes linked to authorised values was returning
descriptions instead of codes

Porting to OPAC the diffs for facet display

[SOLR]MT5655: Addings authtypecode into url params

[SOLR] Adding new search in opac + FIX Query in string

FIX cf catalogue/search.pl

[SOLR] Adding toggle on itypes form +  cleaning