Fix room state cleanup from db on change of persistent option change

Add tests for user mucsub mam from muc mam

Make get_subscribed_rooms work even for non-persistant rooms

This will store info about non-persistant rooms in db, but rooms with that
that option enabled will not be restored on server restart.

This will save info about room only on subscribers change.

Fix escaping for sql part of mamsub from muc mam

Deprecate some listening options

Those are: captcha, register, web_admin, http_bind and xmlrpc
The option `request_handlers` should be used instead, e.g.:

listen:
  ...
  -
    module: ejabberd_http
    request_handlers:
      "/admin": ejabberd_web_admin
      "/bosh": mod_bosh
      "/captcha": ejabberd_captcha
      "/register": mod_register_web
      "/": ejabberd_xmlrpc

Provide a suggestion when unknown request handler is detected

Provide a suggestion when unknown command is detected

Rename ejabberd_config:similar_option/2 -> misc:best_match/2

Provide a suggestion when unknown module is detected

Provide a suggestion when unknown option is detected

Disable offline_from_mam tests on riak since it doesn't support mam

Improve code for directory deletion

Fix offline from mam on mnesia

Add tests for offline with mam storage

Properly handle infinity as max number of message in mam offline storage

Sort messages by stanza_id when using mam storage in mod_offline

Return correct value from count_offline_messages with mam storage option

Make mod_offline put msg ignored by mam in spool when mam storage is on

Add tests for offline use_mam_for_storage

Remove TLS options from the example config

The purpose is two-fold:

- To simplify the example config.
- To avoid old TLS configuration to be persistent across
  server updates: this might bring security problems, because
  what's considered "modern" now might be insecure in the future.

Remove OMEMO related configuration from force_node_config section

This doesn't work reliably and takes a lot of effort to change it back

Add mod_offline option for fetching data from mam instead of from spool table

This commit introduces `use_mam_for_storage` option that take boolean
argument. Enabling it will make mod_offline not use spool table for storing
offline message, but instead will use mam archive to retrieve messages
stored when offline.

Enabling this option have couple drawback currently, only messages that
were stored in mam will be available, most of flexible message retrieval
queries don't work (those that allow retrieval/deletion of messages by id).

Return "Bad request" error when origin in websocket connection doesn't match

This also allow websocket_origin option to accept multiple values instead
of just single one.

Allow non-moderator subscribers to get list of room subscribers

Use binary framing in MQTT WebSockets

Merge pull request #2868 from rstgroup/fix-rfc-6455-violation

Fix #2821 RFC6454 violation on websocket connection when validating Origin

Fix RFC6454 violation on websocket connection when validating Origin header

Catch potential exceptions in gen_mod:wait_for_process

Seems that at ejabberd shutdown, process may terminate before that function
is called, and in that case erlang:monitor throws exception.

Reformat try_set_password/4 function

Don't call to mod_register when it's not loaded

Fixes #2828

Add WebSockets support to mod_mqtt

Example configuration:

listen:
  ...
  -
    port: 5280
    module: ejabberd_http
    request_handlers:
      "/mqtt": mod_mqtt

modules:
  ...
  mod_mqtt: {}

Fix handling of list arguments on pgsql

Support other socket modules for MQTT

Move websocket options

Improve request_handlers validator

Bump pkix version

Correctly support cache tags in ejabberd_auth

Allow returning HTTP headers in REST responses

Use new ets_cache api in ejabberd_auth

Add hook room_destroyed called when room gets destroyed

Change implementation of misc:unique_timestamp()

Handle cdata in initial data probe of ws module

Make misc:unique_timestamp not overflow microsecond part.

This should fix issue #2860

Add hooks for tracking mucsub subscriptions changes

Feed whole image to eimp:identify/1

Fixes #2859

Fix syntax in Elixir config file

Handle correctly case where ExtraUsername is empty

When making mucsub message from mam archive check for subject

Use xml:lang from stanza when it's missing in <command/> element

Thanks to Philipp Hörist for spotting this

Add 'sessionid' attribute when required

Fixes #2852

Update mod_muc_riak

Update mod_mam dependencies

Decrease ugliness of the ugly code

Change mucsub API for database backends

Add ext_mod paths before checking config (processone/ejabberd-contrib#263)

Return proper error message for duplicate or missing args in http_api call

Log message when trying to execute http_api command with extra arguments

Formating fix

Make http_api command execution exception catcher log also command and args

cache_size not applied to mod_roster on reload_config (#2769)

Fix previous commit

Fixes #2847

Rename listening callback from start/2 to start/3

This will prevent conflicts in callback names in mod_mqtt
Old callback function is still supported.

Fix issue with creating HostMatch in mod_mam_sql

This fixes issue #2844

Use xmpp:get_subtags/2

Don't use deprecated gen_mod:db_type

Fix issue with mam tests

Too much copy/paste...

Implement mod_muc_sql:select_with_mucsub

This allows us to limit number of issued queries required by
user_mucsub_from_muc_archive option

Make misc:add_delay_info properly handle multiple delay tags in element

Add option user_mucsub_from_muc_archive to mod_muc

This option disable storing separate mucsub message for each individual
subscriber but instead when user fetches archive virtual mucsub messages
are generated from muc archives.

Include id in mucsub notification message

Add 'config' tag to the reload_config command

Fix Register command to respect mod_register's Access option (#2837)

Update mysql driver in mix.lock also

Update mysql driver

Fix crash in mod_muc_admin:web_page_main/2 caused by just_created (#2830)

Origin header validation on websocket connection (#2821)

Update mysql dependency

Add newline to error_logger log format

Add check for ljid when setting up subscribers

Flip default bounce_groupchat flag value, muc will drop bounces anyway

Add option to mod_offline to make it not bounce mucsub/groupchat messages

Use jid() instead of ljid()

Improve formatting of hook crashes

Delete the ping timer only when timeout_action=kill (#2820)

mod_muc: Simplify room creation checks

Merge remote-tracking branch 'processone/pr/2811'

* processone/pr/2811:
  allow room recreate for admins even if nonempty

mod_push: Check for payload in encrypted messages

While distinguishing actual chat messages from other message types,
don't classify all <encrypted/> messages as chat messages, but only
those that have a <payload/> element.

Fix cond_options with new options

Fix transaction aborting and restarting in ejabberd_sql

allow room recreate for admins even if nonempty

Handle info log level when using MySQL (#2541)

Fix incorrect capitalization in German translation

Document required Erlang/OTP version bump

Bump required Erlang/OTP version to 19.1

Since 538f35d05a9bb25f24b30ea43b07a36cfc043e12, Erlang/OTP 19.1 is
required.

mod_http_upload: Log nicer warning on unknown host

If an HTTP client issues a request against an unknown host, log a
readable warning (rather than an unreadable error) and respond with a
404 (rather than a 500) status.

Add mqtree in included_applications

Add SQL schemas for MQTT tables

Copy p1_time_compat:unique_timestamp() to misc and make use of it

Replace code using p1_time_compat wrapper with native functions

Since we now require R19, we shouldn't need that anymore.

There are still couple places where p1_time_compat:unique_timestamp() is
used as there is no direct equivalent.

Remove now() calls that sneaked in in pull requests