Cleanup get handling to 'guess the column.

This gets us away from using the form session to pass around metadata & makes it testable.

Add test for getting columns from header

Merge pull request #15117 from eileenmcnaughton/member_renew

[REF] extract send receipt in MembershipRenewal fn

Merge pull request #15219 from eileenmcnaughton/import_next

[Ref] [Import] more code cleanup

Merge pull request #15187 from eileenmcnaughton/dedupe11

dev/core#1230 Loosen permissions to Dedupe.getstatistics api

Merge pull request #15188 from eileenmcnaughton/dedupe12

dev/core#1230 Dedupe permissions - allow safe mode merging based on 'merge duplicate contacts'

Merge pull request #15222 from 19ATF77/Constituent_Summary_Fix

Fixes inconsitency between constituency summary and constituency detail

Merge pull request #15115 from eileenmcnaughton/import_metadata

Fix fatal when saving import mapping with a relationship but 'Primary' location type

Fixes inconsitency between constituency summary and constituency detail

Merge pull request #15190 from eileenmcnaughton/import_bug

dev/core#1187 Fix bug where import will not do 2 phone types of the same location

Merge pull request #15159 from andrewpthompson/master

(dev/joomla#10) Remove Joomla-specific error display and use native CiviCRM

Merge pull request #15102 from mlutfy/fixPriceSetLabelHtml

Fix an HTML error in Calculate.tpl

Merge pull request #15217 from seamuslee001/group_nesting_group_org_test

[TEST] Enable apiv4 testing for GroupNesting and GroupOrganization entities

remove if that no longer makes sense

Remove jsSet & just construct the if better.

jsSet is always TRUE when if ([] != ts('- do not import -')) {

so we don't need it

Merge pull request #15118 from eileenmcnaughton/export

Fix export header for 'Contact ID'

Merge pull request #15218 from eileenmcnaughton/import_again

[REF] Move calculation of js for import fields WITH relationship keys to processor.

Move calculation of js for import fields WITH relationship keys to processor.

As should be obvious we can collapse a lot more out with the next commit now....

Merge pull request #15216 from demeritcowboy/attachment-url-2

dev/core#938 - remove duplicate lines

Merge pull request #15181 from seamuslee001/mailing_search_date_picker_conversion

[Datepicker][REF] Convert mailing date field on mailing search screen…

fix typo in second test and update to match first url workaround

Merge pull request #15053 from eileenmcnaughton/paypal

dev/membership#13 Add handling for missing MembershipPayment record.

Enable apiv4 testing for GroupNesting and GroupOrganization entities

Merge pull request #15215 from eileenmcnaughton/import_next

[Ref] Import use process for relationship defaults, add test

dev/membership#13 Add handling for missing MembershipPayment record.

We have an intermittent regression on extending memberships off paypal payments. This adds debug messages
and handling / tests for the scenario I suspect may be in play.

The 'decision' the code makes about how to create recurring transactions is all dependent on the 'template transaction'
- if that is not correct the follow on payments will not be.

This PR allows the membershipID input from paypal to be passed through and used.  This will override any
intended changes - but that just restores previous behaviour and we do not have good handling for these

https://lab.civicrm.org/dev/membership/issues/13

[Datepicker][REF] Convert mailing date field on mailing search screen to date picker

Remove a bunch of now-unused variables, will improve performance too as one involved a query

Ensure subtype is set on processor

Move default fetching to Processor class

Improve tests on loading relationship data

Merge pull request #14621 from pradpnayak/CleanUps

Use api to create activity and removed hardcoded status id

Merge pull request #15212 from mmyriam/mmyriam-case-tag-search-patch-1

Fix search for case tags that are part of tag sets

Merge pull request #15214 from civicrm/5.17

5.17

Merge pull request #15213 from agh1/5.17.0-releasenotes-final

5.17.0 release notes: late changes and tidy-up

Merge pull request #15189 from eileenmcnaughton/import_tiny

[Import][ref] Minor code improvement -  move setDefaults to processor

Merge pull request #15211 from caltha-eu/patch.ts-deceased

Add ts() to deceased string

Fix search for case tags that are part of tag sets

Changes to be committed:
modified:   CRM/Case/BAO/Query.php

5.17.0 release notes: late changes and tidy-up

(patch.ts-deceased) Add ts() to deceased

Merge pull request #15209 from yashodha/dev1065

(dev/core#1065) Grant in Edit mode doesn't show the associated contact

(dev/core#1065) Grant in Edit mode doesn't show the associated contact

Merge pull request #15208 from civicrm/5.17

5.17 to master

Merge pull request #15207 from seamuslee001/5_16_4_5_17_release_notes

[NFC] Bring up 5.16.4 release notes into 5.17

Merge pull request #15203 from eileenmcnaughton/index_contact

Add index to civicrm_contact.created_date & modified_date

Merge pull request #15165 from fkohrt/master

SMTP help text and URL are misleading to Organization Address and Contact Info instead of leading to From Email Addresses; see also #14055 and #14329

Update 5.16.4.md

release-notes - Add 5.16.4

Merge pull request #15193 from pradpnayak/ChangeACLCacheCLass

Changed ClassName for ACL cache

Add index to civicrm_contact.created_date & modified_date

Note this will add the indexes to new installs or to installs who run the script to update indexes
(we used to promote this via a status check but there was a bug & we 'hushed' it & stopped trying to fix
the bug)

Merge pull request #15205 from colemanw/importableCommunicationStyle

Set contact communication_style_id as importable

Merge pull request #15156 from eileenmcnaughton/dedupe5

Replace some calls to CRM_Core_Error::fatal with exceptions

Set contact communication_style_id as importable

Merge pull request #15204 from pradpnayak/CacheTitle

Added field title for Cache table

Merge pull request #15196 from eileenmcnaughton/dedupe_api

dev/core#1230 [Dedupe] Add new api option to getduplicates, permitting a new search to be forced.

Added field title for Cache table

Merge pull request #15198 from seamuslee001/member_report_upgrade_step

Ensure all report templates switch the filter field_name from join_da…

Merge pull request #15200 from eileenmcnaughton/date_field

Re-remove pledge & member fields from the legacy date list

Re-remove pledge & member fields from the legacy date list

Merge pull request #15199 from civicrm/5.17

5.17 to master

Merge pull request #15197 from eileenmcnaughton/5.17

[NFC] comment fixes

Merge pull request #15194 from eileenmcnaughton/517_dates

Fix failure to save relative dates on legacy fields

Ensure all report templates switch the filter field_name from join_date to be membership_join_date

[NFC] comment fixes

Merge pull request #15177 from seamuslee001/member_fields_datepicker_conversion

[Date picker][REF] Convert jcalendar date fields to date picker on me…

Fix failure to save relative dates on legacy fields

Alter smartGroup conversion array to match 5.15 standard of groups and add in unit test of problem with mulitple relative dates in the one smart group

Fix test that was just added by moving assigning of fieldPossibilities lower

Fix join_date in batch forms and in report filters

[Date picker][REF] Convert jcalendar date fields to date picker on member search screen

Ensure that relative fields are handled as per newer handling

Update to eileen's metadata date_query functions and fix template

Fix upgrade by including each of the 3 separate field names

Add new api option to getduplicates, permitting a new search to be forced.

Per the inbuilt screen, sometimes there is a need to clear the cached duplicates & reload - e.g because more have been
created in the mean time.

Merge pull request #15185 from eileenmcnaughton/dedupe10

Incorporate searchLimit in dedupe cacheKey

Merge pull request #15160 from eileenmcnaughton/dedupe8

Fix  inconsistencies in duplicate retrieval

Merge pull request #15191 from eileenmcnaughton/pledge_high_low

Use metadata for pledgeDateRange fields

Incorporate searchLimit in dedupe cacheKey

When accessing dedupes by the api call or on the dedupe screen it's possible to pass in
a searchLimit param. This works like the group limit in that it limits the number of
contacts for whom a match is sought. For example if there are 2million contacts in the database
and you have a search limit of 0 then it will look for duplicates for all 2 million. (unset
is the same as 0). If you have a search limit of 1000 it will look for matches for the first
1000 contacts that match the criteria (criteria could be the group or other criteria passed in
via the url although the api is the most obvious way to pass in criteria)

Note there is a separate limit (sometimes called batch limit) that limits results from within
the found matches.

To test the searchLimit it is possible to add limit=5 to the url generated in the
url by findContacts. Without this patch changing the limit once the search has been done
will not alter the results as the limit is not part of the cachekey - this patch
changes that.

Merge pull request #15192 from demeritcowboy/locate-name-or-label-2

dev/core#1046 - simplify logic

Changed ClassName for ACL clacc

simplify logic

Use metadata for pledgeDateRange fields

This moves the date handling for date fields to a re-usable function

Dedupe permissions - allow safe mode merging based on 'merge duplicate contacts'

Ensure force merge permission for force merging (not at the api layer as api v4 won't use that

dev/core#1187 Fix bug where import will not do 2 phone types of the same location

Merge pull request #15186 from seamuslee001/member_fields_xml_change

Update XML files for membership fields to support date picker conversion

Merge pull request #15182 from demeritcowboy/locate-name-or-label

dev/core#1046 - allow for the real "name" to be specified in xml

[Import][ref] Minor code improvement -  move setDefaults to processor

Merge pull request #15183 from eileenmcnaughton/import_names

[REF] Import - minor cleanup  - generate js on the processor class

Update XML files for membership fields to support date picker conversion

Loosen permissions to Dedupe.getstatistics api

This api should have the same level of permission as Dedupe.getduplicates - it gets data about
cached duplicates. Note that getduplicates has 'access CiviCRM' & relys on ACLs to  restrict
which contacts can be accessed through it

Merge pull request #15170 from seamuslee001/pledge_date_picker_conversion

Convert pledge date fields to use datepicker rather than jcalendar

[REF] Import - generate js on the processor class

This moves the js calculation to the processor class for some of the function and simplifies it
so that the concatenation is done at the end.

Test cover is very solid on this

Ensure that relative dates are handled in the newer way

Convert pledge date fields to use datepicker rather than jcalendar

Add support for url variables

Standardise search form as per contribute form

Add in pledge payment xml change

dev/core#1046

Merge pull request #15180 from seamuslee001/pledge_xml_changes

Update Pledge XML to support date picker conversion

Merge pull request #15179 from eileenmcnaughton/import_names

Extend loadSavedMapping to check defaults

[NFC] Update Pledge XML to support date picker conversion

Update unit tests to match new schema

Extend loadSavedMapping to check defaults

By using the metadata already available on the function we don't need to use a class param
and can simplify and test

Merge pull request #15176 from civicrm/5.17

5.17

Merge pull request #15169 from pradpnayak/relDateFixes

1226, fixed Change log relative date search for creating smart group

Merge pull request #15175 from eileenmcnaughton/mini

Someimes ya just gotta say enough already

1226, fixed Change log relative date search for creating smart group

Someimes ya just gotta say enough already

Merge pull request #15173 from eileenmcnaughton/mini

[REF] Very minor code cleanup on import code with good test cover