Merge pull request #21482 from colemanw/fixLinks

SearchKit - Fix links to non-aggregage join fields

SearchKit - Fix links to non-aggregage join fields

Merge pull request #21420 from colemanw/fixSearchKitMultiLink

SearchKit - Fix display of links in aggregated columns

Merge pull request #21481 from eileenmcnaughton/mem_std

[REF] simplify member_tokens

Merge pull request #21480 from totten/master-edl

(dev/mail#83) ExampleDataLoader - Multiple fixes for quirky examples

[REF] simplify member_tokens

Now we have good test cover we can switch to using the parent.

The one thorn in our side is membership.fee.
Dealing with the field, and hence opening up 'listening'
is out of scope for this pr

We can (and should) switch fee to membership_type_id.minimum_fee and add
generic support. However, we also have a formatting issue.
The field is formatted 'number only' 'just cos'.

If we map that field without figuring out formatting
it will be locked in as an anomaly.

CaseActivity Examples - Only report example-data if the workflow is actually valid

The `case_activity` workflow definition is weirdly/temporarily in
`tests/phpunit`.  This makes it loadable for headless testing, but it's not
truly loadable in a web-env.  Consequently, the examples should not be
presented as valid example data when using web-env.

ExampleDataLoader - Fix loading data-sets from `tests/phpunit/*` from web-env

Before: If you add example-data under `tests/phpunit/`, then it works
in headless env. In web-env, it will be scanned, but the `include $file` step will fail.

After: The `include $file` step will succeed.

(REF) ExampleDataLoader - Extract private method `createObj()`. Improve errors.

__Before__: Two different bits of code responsible for loading+instantiating test-data class.
Different (and somewhat opaque) error-handling behaviors.

__After__: One private helper called twice. Consistent (and clearer) error-reporting.

Merge pull request #21477 from eileenmcnaughton/mem_test

dev/core#2650 upgrade membership tokens to the new format

Merge pull request #21475 from eileenmcnaughton/case_replace

dev/core#2817 remove call to getTokenDetails

dev/core#2650 upgrade membership tokens to the new format

Merge pull request #21474 from MegaphoneJon/core-2318

fixes core#2318: fix cancel button when sending an individual email

Merge pull request #21464 from eileenmcnaughton/test_hunt

dev/core#2650 dev/core#2832 add support & testing for preferred token format

dev/core#2817 remove call to getTokenDetails

Removes the call to getTokenDetails as discussed on
https://github.com/civicrm/civicrm-core/pull/21445

As discussed on that PR & related gitlabs I
created an extension to try to allow people to have
this functionality transitionally if they needed
(based on copying code from 5.41 over) - but
per the readme https://github.com/eileenmcnaughton/legacytokenhelper/blob/master/README.md
the issues I found (under 'known issues') were enough
to make me conclude no-one would actually
want to install the extension to restore pre-5.43
functionality

fix cancel button when sending an individual email

Merge pull request #21468 from mattwire/flushcachepermit

flushCaches should respect permitCacheFlushMode

Merge pull request #21445 from eileenmcnaughton/case_replace

dev/core#2817 Use token processor to resolve caseTokens for pdfs

Merge pull request #21465 from eileenmcnaughton/cont_tok

[Ref] Cleanup on SelectValues::contributeTokens

Merge pull request #21466 from eileenmcnaughton/mem

[Ref] Remove pass-by-reference

dev/core#2817 Use token processor to resolve caseTokens for pdfs

flushCaches should respect permitCacheFlushMode

Merge pull request #21338 from totten/master-msgtpl-api

(dev/mail#83) Introduce WorkflowMessage APIs with CaseActivity example

CaseActivity - Temporarily move to tests/phpunit

This is mostly to circumvent near-term questions on reviewing CaseActivity while still allowing it as an example-case.

(REF-2) Convert WorkflowMessage examples to use ExampleData classes

(REF-1) Convert Civi/WorkflowMessage/Examples.php to Civi/Test/ExampleDataLoader.php

dev/core#2650 add support & testing for preferred token format

This fixes the membership token processor to support the preferred
token format style in scheduled reminders
and adds test cover

Next step is to upgrade the old tokens out of the scheduled reminders
and remove support for them. For the legacy token handler
it is just used from one place from core so we can add a rule
to prevent them from being 'requested' & switch them
off the legacy method.

The test cover in this is more thorough than pre-existing tests
but here is a list of them

api_v3_JobTest.testCallSendReminderSuccessMoreThanDefaultLimit
api_v3_JobTest.testCallSendReminderLimitToSMS
api_v3_JobTest.testCallSendReminderLimitToSMSWithDeletedProvider
CRM_Core_BAO_ActionScheduleTest.testMembershipDateMatch
CRM_Core_BAO_ActionScheduleTest.testMembershipJoinDateNonMatch
CRM_Core_BAO_ActionScheduleTest.testMembershipEndDateRepeat
CRM_Core_BAO_ActionScheduleTest.testMembershipEndDateRepeatChangedEndDate_CRM_15376
CRM_Core_BAO_ActionScheduleTest.testMembershipEndDateMatch
CRM_Core_BAO_ActionScheduleTest.testMultipleMembershipEndDateMatch
CRM_Core_BAO_ActionScheduleTest.testMembershipEndDateNoMatch
CRM_Core_BAO_ActionScheduleTest.testMembershipLimitToNone
CRM_Core_BAO_ActionScheduleTest.testMembershipWithReferenceDate
CRM_Core_BAO_ActionScheduleTest.testMembershipOnMultipleReminder
CRM_Core_BAO_ActionScheduleTest.testRepetitionFrequencyUnit
CRM_Core_BAO_ActionScheduleTest.testInheritedMembershipPermissions
CRM_Core_BAO_ActionScheduleTest.testMembershipScheduleWithAbsoluteDate

[Ref] Remove pass-by-reference

Merge pull request #21463 from eileenmcnaughton/mem

[Ref] Remove unnecessary pass-by-reference

[Ref] Cleanup on SelectValues::contributeTokens

This has 100% test cover in the ByTypeTest::testTokenRendering test

The change means we no longer need the recently-added function
to be public & hence it is switched to protected.

Note this is the same as the equivalent contactTokens function

Merge pull request #21458 from eileenmcnaughton/badge_of_honor

dev/core#2834 Preliminary test on badge

Merge pull request #21042 from eileenmcnaughton/uf

[REF] Use OO when determining what to suggest for settings.php prefixes for drupal/backdrop views, instead of scattered "if cms =="

[Ref] Remove unnecessary pass-by-reference

Merge pull request #21459 from eileenmcnaughton/mem

[Ref] Remove no-longer-used variables

ExampleData - Declare the PK field to be 'name'. Add 'type=>Extra' for heavy fields.

Merge pull request #21461 from eileenmcnaughton/render_array

Ensure TokenSmary::render returns an array

[NFC] Cleanup on test class

Merge pull request #21436 from colemanw/afformWarning

Afform - gracefully handle missing html files

[Ref] Remove no-longer-used variables

Ensure TokenSmary::render returns an array

If there are no messages it should return an empty array

(REF) Rename WorkflowMessageExample => ExampleData

(REF) WorkflowMessageExample - Set data_type=Array. Remove serialization bits.

(NFC) CaseActivity Msg - Clarify `contactId` vs `clientId`

WorkflowMessage - Track 'support' level for each message

Add WorkflowMessage.getTemplateFields API

Add WorkflowMessage.get and WorkflowMessage.render APIs

CaseActivity - Define class-model and unit-test for workflow message. Add base test-trait.

WorkflowMessageExample - Add API for searching examples

Views db cleanup (alternative)

I took a look at https://github.com/civicrm/civicrm-core/pull/20682 and it seemed clear that
in it's current state it would fix one CMS (d9) & break another (d7). This is
an alternate that will hopefully be non-breaky

dev/core#2834 Preliminary test on badge

Merge pull request #21452 from eileenmcnaughton/mem_test

dev/core#2832 Improvements to test on membership letter task

Merge pull request #21460 from civicrm/5.42

5.42 to master

Merge pull request #21444 from colemanw/fixSearchDisplayDelete

SearchKit - Fix deleting search displays

Merge pull request #21456 from demeritcowboy/activity-export542

dev/core#2835 - Activity export broken in 5.41

activity export fail

Merge pull request #21438 from colemanw/fixApi4GetDefaults

APIv4 - Default select clause to exclude "Extra" fields

Merge pull request #21448 from eileenmcnaughton/old_param

[REF] Remove unused parameter

Merge pull request #21451 from eileenmcnaughton/mem

[REF] Remove unused variable

Merge pull request #21450 from eileenmcnaughton/compat_less

[REF] Extract code to load the contact in tokenCompat

APIv4 - Default select clause to exclude "Extra" fields

Recently a "type" property was added to getFieldSpec to allow "Extra"
calculated fields to be declared. This updates api Get to *not*
select those fields by default, as their calculation can be expensive.

Merge pull request #21439 from mlutfy/authxReadme

Authx: README: add note about CMS permissions

Merge pull request #21453 from eileenmcnaughton/member_tokens

dev/core#2832 Add test for legacy membership tokens, add support for preferred tokens

Enhance pdf letter test for mememberships

dev/core#2832 Add test for legacy membership tokens, add support for preferred tokens

There is only one place that calls this code. With cover of the legacy tokens
I can ensure it is the same as the processor tokens. I've fixed it
to support the preferred unambiguous tokens because that means that
we don't have to deal with reports of them not working while calls
to it are phased out of extensions. Working through that
also allowed me to remove some code now

dev/core#2832 rename pdf letter test

[REF] Remove unused variable

This parameter is no longer used

[REF] Extract code to load the contact in tokenCompat

Merge pull request #21401 from eileenmcnaughton/mgd2

dev/core#2823 Restructure determination of required actions.

[REF] Remove unused parameter

There are no longer any cases in git universe that pass this parameter

Merge pull request #20807 from davidjosephhayes/wordpress-profile-signon-2

Wordpress Profile User Creation Sign On (v2)

Move loadDeclartions to reconcile

I'm getting a loop

Make managed entities functions protected

The only affected universe place I found was
https://github.com/veda-consulting-company/uk.co.vedaconsulting.gdpr/pull/294

Since putting the 'information gathering & storing' function on
the constructor is tricky due to the singleton
caching this means we are always working with a consistent entry point

dev/core#2823 Restructure determination of required actions.

The expected actions are now calculated at the start of reconcile.
and retrievable by function.

The code that calls the action-actions
is still pretty cludgey - but the intent is that
we would stop passing the dao object into those
action-action functions in the near future.

This PR punts any decisions about how outputs might look
(eg. making the array retrievable from outside of the function.

Note that there is pretty comprehensive
test cover in CRM_Core_ManagedEntitiesTest

Merge pull request #21429 from eileenmcnaughton/tok_hook2

Consolidate building of contact token list

Merge pull request #21383 from eileenmcnaughton/case_tokens

dev/core#2817 Add CaseToken processor

Merge pull request #21441 from demeritcowboy/dashboard-fail2

dev/core#2829 - "Trying to access array offset on value of type null" on dashboard

SearchKit - Fix deleting search displays

Merge pull request #21443 from demeritcowboy/test-fix-2

Alternate to https://github.com/civicrm/civicrm-core/pull/21442

Merge pull request #21428 from totten/master-tp-filter

TokenProcessor - Allow basic filter/modifier expressions

Merge pull request #21440 from eileenmcnaughton/mgd_test

dev/core#2823 fix test to be more like real function usage

contact with email might not exist

dashboard has no bridge

dev/core#2823 fix test to be more like real function usage

Merge pull request #21437 from demeritcowboy/dashboard-fail

dev/core#2829 - unit test for nonempty dashboard

Authx: README: add note about CMS permissions

test for nonempty dashboard

Afform - gracefully handle missing html files

Merge pull request #21399 from eileenmcnaughton/mgd

dev/core#2823 Extract code to load the declarations and call from the constructor

Merge pull request #21400 from eileenmcnaughton/val

dev/core#2823 Move validation into validation function

Merge pull request #21434 from demeritcowboy/upgrade-text

dev/core#2828 - Make up for message template text version update from 5.20 that never happened

Merge pull request #21211 from colemanw/onDeletePrimary

[REF] Move Email, Address, etc. is_primary handling on delete to a hook (dev/core#2757)

better late than never

Merge pull request #21424 from colemanw/apiJoinBridgeCustomFields

SearchKit - Support custom fields in bridge join entities

Merge pull request #21431 from colemanw/searchTableAlign

SearchKit - Fix alignment in table headers

Merge pull request #21198 from colemanw/fkConstraint

[REF] Mapping - Check FK on delete with SQL instead of PHP (dev/core#2757)

SearchKit - Fix alignment in table headers

Mapping - Check FK on delete with SQL instead of with PHP

Move Email, Address, etc. is_primary handling on delete to a hook

Previously this was all done in a delegated function.
This moves that logic to a hook listener.

Merge pull request #21426 from eileenmcnaughton/api4

Replace expensive query with cheaper one

TokenProcessor - Allow basic filter/modifier expressions

Before
------

`Hello {foo.bar}`

After
-----

`Hello {foo.bar|upper}` and `Hello {foo.bar|lower}`

Technical Details
-----------------

This only supports tokens that supply values through `civi.token.eval`.  At the time of
this commit, most `{contact.*}` tokens still use `TokenCompatSubscriber::onRender()` to
hack-in their values and won't work until they switch over.

The regex which recognizes the filter is pretty tight (`\w+`).  This can be relaxed
somewhat by a subsequent change, but I'd say such a change has a burden to demonstrate
safety/interoparbility when running in Token-Smarty format.  (e.g.  demonstrate that
matching of open/close symbols works correctly).