FEATURE: Replace the default ImageMagick policy.xml (#483)

* Replace the default ImageMagick policy.xml

Replace the default ImageMagick policy.xml with a file containing some resource limitiations. The intention is to stop exceptionally oversized images (and/or malformed images) from consuming all resources on a system.

The values provided should provide ample resources for any reasonable image to be processed without hinderance.

Reflect Discourse default of HTTPS (#482)

Discourse installs HTTPS as standard, so mail-receiver should probably reflect this too.

Update base image to cover latest security fixes

Image has been tested on internal Discourse servers and is good

Install libxss1 for the test image, looks like it is needed by Chrome

See also https://github.com/puppeteer/puppeteer/issues/6192

FIX: Always remove pids on boot

Previously if unicorn stopped abruptly we could have a situation where
pids were left around

This could lead to Sidekiq not booting

This will ensure that on boot our state is clean

DEV: Raise an error when env variable is a YAML hash (#479)

This is never intended, and almost always causes unintended behaviour

FIX: discourse-doctor plugin check too loose (#478)

The non-official plugin check was looking only for `git`, which would match other things in the yml file (e.g., a digital ocean S3 bucket name).

`grep` for `'git clone'` should solve that problem.

Though I did test this edit on a running sitee, I made these edit in the web interface by hand rather than pushing a commit where I tested it. Please look twice to make sure that I didn't do something silly when making the edit here.

Update base image

DEV: overlay2 is the recommended storage engine not aufs

overlay2 is supported in all latest kernels and the default storage engine
for new installs of docker.

Recommend it.

Update dependencies: nginx, redis, imagemagick (#475)

- Redis from 5.0.5 to 5.0.9
- Nginx from 1.17.9 to 1.18.0
- ImageMagick from 7.0.10-6 to 7.0.10-24

Install less by default.

Useful for scanning through log files. Production Rails REPL uses Pry
which depends on less for paging. The default pager is not as user
friendly.

FIX: remove db_max_wal_senders and db_wal_level entirely

* I had previously removed the db_wal_level and db_max_wal_senders but
  foolishly assumed there was some sort of default or they would only get
  replaced if defined

FIX: re-exec code was broken

* BASH_ARGV is only used in extended debugging mode

Build libheif from source for Ubuntu (#474)

Update postgres templates (#472)

* postgres: Allow replication and basebackups to happen

* the overrides for db_wal_level and db_max_wal_senders disallow
  replication and basebackups to be taken
* there is no need for us to disable these features, allow the defaults to stay

* postgres: remove out-of-support templates

* taken from https://www.postgresql.org/support/versioning/ :
  * postgres 9.2 and 9.3 are no longer supported
  * 9.5 will be supported until February 11, 2021:

Add HEIF conversion support to ImageMagick (#473)

improve permissions in tmp directory

previously could be owned by the root group

Revert "Revert rake call to pull_compatible_all"

This reverts commit 0edf993a55953c9d5ee8856c87825659401c92c3.

Revert rake call to pull_compatible_all

FIX: run pull_compatible_all as discourse

FEATURE: add support for plugin-pinning (#470)

* FEATURE: add support for plugin-pinning

checks out pinned plugin versions, if defined, by way of the rake task

* refactor rake task name

FIX: Typo in retried image pull

Handle dangling pg data folders from previous updates

Simpler instruction in case of pg_upgrade failure

There are many cases (database had bad shutdown, missing locale env)
where the manual export isn't needed, so point the admin to meta so
some easier solutions can be tried first.

FIX: Automatically retry image pull once (#468)

Bump to optional jemalloc 5.2.1

Some content on the sshd template so pups don't explodes

wait a bit more if necessary for container stop

Remove Vagrant references as they are no longer used

Remove all pg12 traces so pg_wrapper doesn't get confused

Teach pg10 template how to install itself for rollbacks

Fix free disk space calculation take 2

Fix disk detection units

df was reporting bytes while du was reporting Kilobytes.

Fix dev image for new pg

New base image with PostgreSQL 12

PostgreSQL 12 (#462)

UI: discourse-setup tweak dns problem message (#460)

Make the "your domain doesn't resolve" message more clear.

Bump Ruby to 2.6.6

FIX: Add a blank sshd.template.yml (#463)

DEV: remove unused sshd template

No need to carry this template anymore we do not use it.

FIX: sshd template

* sshd template users were unable to rebuild
* the replace command was trying to modify a file from the package before it was installed

Update Discourse base image to 2.0.20200429-2110

FIX: remove broken symlinks from removed plugins

* if plugins have been removed or renamed, we end up with a dangling symlink in this directory
* this causes the build to fail later during a chown

Revert "Remove nginx-common package"

This reverts commit 30e0c58d1dd851a00bf7decc6182e3948c10a545.

* turns out we do depend on the default nginx.conf and directories provided by the distribution package
* notably /etc/nginx.conf and /etc/nginx/conf.d

Remove nginx-common package

* I don't think we need it at all

Add hash checks to downloaded source files

* we had one in place for redis but nowhere else

Bump ImageMagick and nginx versions

Move openssh-server from the base image to the sshd template

Prevent unused packages from being pulled into the base image

* e.g. X11 libraries, mysql libraries, mailutils, NTLM libraries

FEATURE: Give option to publish log file publicly (#459)

FEATURE: Don't use fully qualified path for bash in host (#458)

Unfreeze Gemfile in import templates

Co-authored-by: Jay Pfaffman <pfaffman@gmail.com>

DEV: Bump baseimage

This includes updated dependencies required for the codereview plugin and
additional fixes

Add cmake as a base dependency

Early hostname check (#456)

* Move hostname check to earlier in the process

* Provide instruction on hostname check failure

* Fix instruction in case of hostname failure

Update README.md (#455)

Fix indentation at L56

Bump base image

FEATURE: Default to HTTPS

update mail-receiver version

Try to force certificate issuance on second try

Change check for linux memory (#452)

* Change check for linux memory

Some VMs clock in at *just under* 1GB, so checking for 1GB of RAM will miss these.  Instead, check for MB, divide by 1000 and round up.

* Refine the check_linux_memory function

Be a little more precise and only make an exception for VMs with >= 990MB RAM

Make port check optional, add y/n prompt (#448)

Bump base image to update uglifyJS to v3

DEV: Bump uglifyjs

We now support uglifyjs version 3 in Discourse core, no need to hold back the upgrade.

SECURITY: base image updates

- Ruby upgraded from 2.6.4 -> 2.6.5 to address CVEs
- Image Magick from 7.0.8-61 -> 66
- NGINX 1.17.3 -> 4 (bug fixes only)

Check that redis archive matches hash (#450)

Redis is downloaded without TLS

Update MySQL privileges when starting phpBB3 import

MySQL isn't running in the init script yet, so updating the privileges doesn't work. Duh!

Follow-up to 3df237a6

Make phpBB3 import template work with latest image (#449)

FIX: Pass through stdout when running interactively

Follow up to commit 70aaf45.

FIX: Never prune Docker volumes

`system prune` on older Docker releases will remove volumes.  The
accidental removal of container volumes may result in user data loss.

This patch should ensure that any users on Docker CE <17.06.1 benefit
from the same, safer behaviour enjoyed by users on contemporary Docker
releases.

FIX: Install mariadb lib instead of mysql

Correctly install ECDSA certificate

Follow-up to f6ec21851dcf417c13333179a0f933d1dcc3faa1

FEATURE: Elliptic Curve certificate (#444)

[Mozilla](https://wiki.mozilla.org/Security/Server_Side_TLS) recommends (P-256) as certificate type for intermediate compatibility.

> ECDSA certificates are recommended over RSA certificates, as they allow the use of ECDHE with Windows 7 clients using Internet Explorer 11

Most modern browsers will use cipher suites with the ECDSA certificate. Older browsers will select the RSA certificate and a RSA cipher suite.

Bump base image

FIX: Backup Restore was broken because rsync was missing

Make sshd compatible with Debian image

Bump base image

Update ruby to 2.6.4

FEATURE: launcher suggests discourse-doctor on fail

Add commented sections to enable incoming TLS

Use Let's Encrypt certs from app to enable incoming TLS for mail-receiver.

fallocate swapfile instead of dd

spacing

FEATURE: discourse-doctor restart existing container if possible

Update SSL config using Mozilla SSL Intermediate config

Update dependencies

Remove nginx modules from the package manager

On Debian rsyslog is running under root

Revert "Revert "First pass in moving to debian""

This reverts commit 29204e415846c121554d41c34f241f2291e7a587.

Revert "First pass in moving to debian"

This reverts commit 223b69e775c61a7fb05386262281f7fa2f0e9520.

First pass in moving to debian

Update nginx for HTTP2 related CVEs

Make merge_user_args idempotent (#438)

The `merge_user_args` function may be called more than once within a
single `launcher` process.  e.g.: on `launcher rebuild ...`:

```
[main] -> rebuild -> run_bootstrap -> set_template_info -> merge_user_args
[main] -> rebuild -> run_start     -> set_template_info -> merge_user_args
```

If the user had included a `docker_args` map key in their container
YAML, the `user_args` global would be incorrectly populated with
duplicate docker CLI flags.

https://meta.discourse.org/t/-/123696

Fixes a regression introduced in https://meta.discourse.org/t/-/49401/9

remove unrelated comment

SSH was long ago moved into a different template

Bump base image

Update ImageMagick

FIX: Make storage detection compatible with docker 19.x

DEV: bump dependencies

- new ImageMagick
- new NGINX moved to stable from mailine
- new Redis
- new PNG Quant
- updated libjemalloc

Repo key should be downloaded securely (#432)

Include official plugins and install their gems in discourse_test (#431)

FIX: we cannot prompt for user input if we have no tty