Fix pubsub compliance XEP-0060 § 7.1.3.6 (#2864)

Merge branch 'master' of github.com:processone/ejabberd

Put back the presence and s2s tests in the no_db section.

Tests are skipped anyway. This reverts ecce31830486023b9227c21d323f1cab825c1b47

Raise api hook right before performing the call

Make anonymous auth don't {de}register user when there are other resources

This should fix issue reported in #2878

When applying limit of max msgs in spool check only spool size

Remove compiler warnings

Test offline:use_mam_for_storage, mam:user_mucsub_from_muc_archive used together

Do not store mucsub wrapped messages with no-store hint in offline storage

We already don't store those messages in mam and we don't store messages
that aren't wrapped with that hint in offline, so it make sense to extend
it also to mucsub messages.

Handle get_subscribed_rooms call from mod_muc_room pid

Previously sometimes we tried to post message to all online rooms, and
if that was called from muc room pid, we were not able to process that
message for that room and send response, and this did lead to timeout.

Do not declare mod_muc as dependency of mod_mam to prevent loop in deps

s2s test depend on Mnesia configuration

Elixir mix build need to use xmpp 1.3.3

Remove deprecated calls

ct_formatter is not needed anymore as Elixir tests have been removed

Use stable xmpp version

Make some standard admin command to get Mnesia info

Fix bug that appears when importing privacy from Prosody (#2872)

Store imported room in the correct ServerHost (#2874)

Set from/to in activity marker messages

Fix typo and remove forgotten log from 492da2ba

Merge pull request #2869 from rstgroup/fix-elixir-umbrella-compilation

Fix #2540 Ejabberd doesnt compile as mix umbrella project dependency

Remove logging from REST lib

Always store ActivityMarker messages

Don't issue count/message fetch queries for offline from mam when not needed

Remove Elixir tests entry points as they were removed in december:
https://github.com/processone/ejabberd/commit/51cbbf313f478a01cd732a7ee1e21ff356402d0e#diff-098f6bcd4621d373cade4e832627b4f6

Sqlite doesn't recognize concat() so use || on it instead

Cleaner test cleanup

Fix room state cleanup from db on change of persistent option change

Add tests for user mucsub mam from muc mam

Make get_subscribed_rooms work even for non-persistant rooms

This will store info about non-persistant rooms in db, but rooms with that
that option enabled will not be restored on server restart.

This will save info about room only on subscribers change.

Fix escaping for sql part of mamsub from muc mam

Deprecate some listening options

Those are: captcha, register, web_admin, http_bind and xmlrpc
The option `request_handlers` should be used instead, e.g.:

listen:
  ...
  -
    module: ejabberd_http
    request_handlers:
      "/admin": ejabberd_web_admin
      "/bosh": mod_bosh
      "/captcha": ejabberd_captcha
      "/register": mod_register_web
      "/": ejabberd_xmlrpc

Provide a suggestion when unknown request handler is detected

Provide a suggestion when unknown command is detected

Rename ejabberd_config:similar_option/2 -> misc:best_match/2

Provide a suggestion when unknown module is detected

Provide a suggestion when unknown option is detected

Disable offline_from_mam tests on riak since it doesn't support mam

Improve code for directory deletion

Fix offline from mam on mnesia

Add tests for offline with mam storage

Properly handle infinity as max number of message in mam offline storage

Sort messages by stanza_id when using mam storage in mod_offline

Return correct value from count_offline_messages with mam storage option

Make mod_offline put msg ignored by mam in spool when mam storage is on

Add tests for offline use_mam_for_storage

Remove TLS options from the example config

The purpose is two-fold:

- To simplify the example config.
- To avoid old TLS configuration to be persistent across
  server updates: this might bring security problems, because
  what's considered "modern" now might be insecure in the future.

Remove OMEMO related configuration from force_node_config section

This doesn't work reliably and takes a lot of effort to change it back

Add mod_offline option for fetching data from mam instead of from spool table

This commit introduces `use_mam_for_storage` option that take boolean
argument. Enabling it will make mod_offline not use spool table for storing
offline message, but instead will use mam archive to retrieve messages
stored when offline.

Enabling this option have couple drawback currently, only messages that
were stored in mam will be available, most of flexible message retrieval
queries don't work (those that allow retrieval/deletion of messages by id).

Return "Bad request" error when origin in websocket connection doesn't match

This also allow websocket_origin option to accept multiple values instead
of just single one.

Allow non-moderator subscribers to get list of room subscribers

Fix #2540 Ejabberd doesnt compile as mix umbrella project dependency

Use binary framing in MQTT WebSockets

Merge pull request #2868 from rstgroup/fix-rfc-6455-violation

Fix #2821 RFC6454 violation on websocket connection when validating Origin

Fix RFC6454 violation on websocket connection when validating Origin header

Catch potential exceptions in gen_mod:wait_for_process

Seems that at ejabberd shutdown, process may terminate before that function
is called, and in that case erlang:monitor throws exception.

Reformat try_set_password/4 function

Don't call to mod_register when it's not loaded

Fixes #2828

Add WebSockets support to mod_mqtt

Example configuration:

listen:
  ...
  -
    port: 5280
    module: ejabberd_http
    request_handlers:
      "/mqtt": mod_mqtt

modules:
  ...
  mod_mqtt: {}

Fix handling of list arguments on pgsql

Support other socket modules for MQTT

Move websocket options

Improve request_handlers validator

Bump pkix version

Correctly support cache tags in ejabberd_auth

Allow returning HTTP headers in REST responses

Use new ets_cache api in ejabberd_auth

Add hook room_destroyed called when room gets destroyed

Change implementation of misc:unique_timestamp()

Handle cdata in initial data probe of ws module

Make misc:unique_timestamp not overflow microsecond part.

This should fix issue #2860

Add hooks for tracking mucsub subscriptions changes

Feed whole image to eimp:identify/1

Fixes #2859

Fix syntax in Elixir config file

Handle correctly case where ExtraUsername is empty

When making mucsub message from mam archive check for subject

Use xml:lang from stanza when it's missing in <command/> element

Thanks to Philipp Hörist for spotting this

Add 'sessionid' attribute when required

Fixes #2852

Update mod_muc_riak

Update mod_mam dependencies

Decrease ugliness of the ugly code

Change mucsub API for database backends

Add ext_mod paths before checking config (processone/ejabberd-contrib#263)

Return proper error message for duplicate or missing args in http_api call

Log message when trying to execute http_api command with extra arguments

Formating fix

Make http_api command execution exception catcher log also command and args

cache_size not applied to mod_roster on reload_config (#2769)

Fix previous commit

Fixes #2847

Rename listening callback from start/2 to start/3

This will prevent conflicts in callback names in mod_mqtt
Old callback function is still supported.

Fix issue with creating HostMatch in mod_mam_sql

This fixes issue #2844

Use xmpp:get_subtags/2

Don't use deprecated gen_mod:db_type

Fix issue with mam tests

Too much copy/paste...

Implement mod_muc_sql:select_with_mucsub

This allows us to limit number of issued queries required by
user_mucsub_from_muc_archive option

Make misc:add_delay_info properly handle multiple delay tags in element

Add option user_mucsub_from_muc_archive to mod_muc

This option disable storing separate mucsub message for each individual
subscriber but instead when user fetches archive virtual mucsub messages
are generated from muc archives.

Include id in mucsub notification message

Add 'config' tag to the reload_config command