Backport #5723

Revert "API: url in zone info should be absolute"

This reverts commit 9df0238e1b567cdd7c48185b00160fb952c3e9f4.

See #5030

Backport #5826

Backport #5815

Backport #5722

Backport #5678

Backport #5641

Backport #5599

Backport #5598

Backport #5523

Backport #5509

Backport #5498

Backport #5408

Backport #5349

Backport #5309

Backport #5277

Backport #5147

Backport #5125

Backport #5043

Backport #4997

Backport #4929

Backport #4751

Backport #4650

Backport #4526

Merge pull request #5778 from rgacogne/auth40-signing-pipe

auth 4.0.x: Handle a signing pipe worker dying with work still pending

BIND: reject zones without 'file' stanza

Closes #5786

(cherry picked from commit 6808f3b5faf6ffc4bea8f78107be99766d2be75c)

pdnsutil: Check for domain before setting metadata

Closes #5787

(cherry picked from commit ed99fac4e9bb61c360e68cc71056cfb9f5c80a21)

ignore SOA-EDIT for PRESIGNED zones. Fixes #5814

(cherry picked from commit 3ba1065625b2067da6058fa3e213fbb501b2b536)

auth: Use a unique pointer for bind backend's `d_of`

(cherry picked from commit 7cfe0cc38e6db211da1b880bf24cfe9a9e6914cd)

Auth: Publish inactive KSK/CSK as CDNSKEY/CDS

Closes #5721

(cherry picked from commit c74f51e221b8ef9194604afa1aeabc46a5dd7018)

auth: Treat requestor's payload size lower than 512 as equal to 512

(cherry picked from commit 7a9b7c95891deddb1f907b743f30df82fad84ffd)

Catch DNSName exception in the Zoneparser

This wraps all calls to `toCanonic` in try/catch and rethrows it as a
PDNSException with more information.

Closes #5520.

(cherry picked from commit 1293f91eac4810769b88b6cfc404c60b1d5abee0)

Fix libatomic detection on ppc64

Thanks @tjikkun!

Closes #5456

(cherry picked from commit b16f46605d86a62e4f37bc1e2caab0c52fa9f75c)

Add help text on autodetecting systemd support

Closes #5524

(cherry picked from commit 56d30a9c8a1c1754b478de79e823e015e103b5b0)

Fix typo in two log messages

(cherry picked from commit 59d26fc8d63fd2ff924be2fa5b3bda3699081914)

Ship ldapbackend schema files in tarball

(cherry picked from commit 38f5336f54caee29566368564b7ad518d1f71f9c)

replace depricated botan.h include

(cherry picked from commit 00f1924bb1900e8c6eab1bd0fe03ff21d41f38eb)

drop botan 1.x support

(cherry picked from commit e11963ce69059d1fa47e92927ed48bd744b95348)

travis: Build the rec with Botan and libsodium

(cherry picked from commit 18a93d3812bfbf2e2dbc9b6353e3619d626283fd)

Add support for Botan 2.x

Initial testing indicates that both 2.0.1 and 2.1.0 work fine,
but signature is 10 times slower with 2.1.0, apparently due to
blinding (callgrind reports a lot of CPU spent in the `RNG`).

(cherry picked from commit 13f34f2e0ccff514cbd5f9ec076c220473da347a)

when making a netmask from a comboaddress, we neglected to zero the port. This could lead to a proliferation of netmasks.

(cherry picked from commit 0bdabe94e6fd873455d34b88f8954d8cc6034a72)

typo in the fix, sorry!

(cherry picked from commit 6d4eca051e68c7cf91b8cf704cca36c766dc5406)

we guess which versions of Lua need help with luaL_setfuncs, and then supply our own. If we guess wrong however, we trample on the Lua namespace.
With this commit, we don't do the trampling, which should close #5348. We can improve on the fix by using the native luaL_setfuncs for LuaJIT 2.1 beta too.

(cherry picked from commit a00713437a40d512976d4688d270c4866123d678)

tests: Ensure all required tools are available

If one of those tools misses, the test will silently PASS.
We should ensure it is present

Signed-off-by: Arthur Gautier <baloo@gandi.net>
(cherry picked from commit 7e47805b3898cead8418a9933d1592a884842e72)

sdig: Clarify that the `ednssubnet` option takes "subnet/mask"

The `mask` part is actually optional but it's probably better to
provide it explicitely anyway.

(cherry picked from commit 3fa6cdbb999f5f043f4d710a5f8500938ba8e4e9)

LuaWrapper: Allow embedded NULs in strings received from Lua

(cherry picked from commit 448990ab9bd7355f42ff8752a973aff20bdaf4e7)

for create-slave-zone, actually look at subsequent arguments, and not keep on adding the first one. Closes #5124.

(cherry picked from commit 215464424ca9183dad4eecf7d9605e41ffa3ef2c)

mydnsbackend: Add getAllDomains

(cherry picked from commit cfc5b5c0d05f1a0d13120c2c2bc6087323a214de)

remotebackend: Update regression test to notice domain id on do_list

(cherry picked from commit 2449d3a010df4d8cf63d137bbb382e47a5be3308)

remotebackend: Update unit test to notice domain id on do_list

(cherry picked from commit dd598a1adc34e7967d1f23c3c04d8264aed5e724)

remotebackend: Treat NULL as empty string in POST parameters

asString() cannot convert NULL to ""

(cherry picked from commit 4b8967c5f793810ad8ce399d155946c93e909bef)

remotebackend: Fix incorrect parameter name

(cherry picked from commit 1fa27e370ba1560f3c1a9967715182a5314abc1d)

gpgsql: Use a simple counter for statement names

(cherry picked from commit 46703164da40199245cee4d8720faa141221cf1b)

gpgsql: make statement names actually unique

(cherry picked from commit e21e9fcc7f4f4fdcae52ed03448adab8484f6c52)

API: prevent sending nameservers list and zone-level NS in rrsets

(cherry picked from commit 33e6c3e9505ac7c0e9b36850868aca1a1a91dd79)

bindbackend: do not corrupt data supplied by other backends in getAllDomains

(cherry picked from commit 99d6d7f6420fae2cfa4f00b09f39fc9c22574c65)

Add test demonstrating issue #4328

Where, when bindbackend is loaded, serials show up as zero in domain listing.

(cherry picked from commit a21e85669c4abe1ceaf8b07626aef3d102b68dd9)

API: url in zone info should be absolute

Fixes #4524.

(cherry picked from commit 16e25450a17bee09f83a6cf7817ebd95e3504c6a)

Merge pull request #5927 from pieterlexis/auth-backport-travis-happiness

Make travis happy on rel/auth-4.0.x

make travis happy

(cherry picked from commit 664135769af13364a4de0ed9e3efc6cd281a52b2)

Merge pull request #5811 from rgacogne/auth40-travis-encrypt-channel

Backport #5802: Encrypt the IRC channel name so notifications are not sent for forks

Encrypt the IRC channel name so notifications are not sent for forks

(cherry picked from commit f4614876f16ac3223786b26b18a4386045102f09)

auth: Handle signing pipe worker dying with work still pending

(cherry picked from commit e3200e070e7cc4e243676776c41eb806c4edb7a5)

Merge pull request #5682 from rgacogne/auth40-empty-java-options

auth: Unset _JAVA_OPTIONS before using jdnssec

auth: Unset _JAVA_OPTIONS before using jdnssec

Travis now [1] defaults to _JAVA_OPTIONS="-Xmx2048m -Xms512m". We wouldn't
care much, except that every Java command now outputs the following line
to stderr, breaking our jdnssec diffs:

"Picked up _JAVA_OPTIONS: -Xmx2048m -Xms512m"

[1]: https://docs.travis-ci.com/user/build-environment-updates/2017-09-06/

(cherry picked from commit a20029adeecbf314594ca3a921ca1f2e22669e6c)

Merge pull request #5677 from aerique/feature/update-copryright-year-auth-4.0.x

Feature/update copyright year auth 4.0.x

Update copyright year in publicly visible output and files

(cherry picked from commit ff8f70b800e8b81a6d97c2d2568483d03228df2a)

Merge pull request #5628 from rgacogne/auth40-travis-build-dir

Backport #4986: Use `${TRAVIS_BUILD_DIR}` instead of assuming the repo is in `pdns`

Use `${TRAVIS_BUILD_DIR}` instead of assuming the repo is in `pdns`

Thus avoiding issues when/if the repository is cloned with a different
name.

(cherry picked from commit 1e0253cad96199647f92ef4fa8230f614637e80c)

Merge pull request #5517 from mind04/bp-ds-40

lookups one level (or more) below apex did confuse getAuth() for qytpe DS

auth: ds-at-parent test is failing with ldap-simple and ldap-strict

auth: add a test to make sure we lookup DS in the right zone

auth: external child zones did confuse getAuth() for qytpe DS

Merge pull request #5491 from rgacogne/auth40-4940

auth-4.0.x: Backport #4940: Backport json11 fixes from upstream

Backport json11 fixes from upstream

(cherry picked from commit 3c20dd3b30bd0c15c5f7a1e82fba3bb5254b28df)

Merge pull request #5450 from Habbie/auth-4.0.x-5105

backport: auth: Don't leak a CDB object in case of bogus data

auth: Don't leak a CDB object in case of bogus data

Merge pull request #5445 from Habbie/auth-4.0.x-uri

auth backport: make URI integers 16 bits, fixes #5443

Merge pull request #5441 from mind04/backport-5427

Backport decaf signer

make URI integers 16 bits, fixes #5443

Merge pull request #5436 from Habbie/auth-4.0.x-travis-edge

install fakeroot and bump json gem version, for new travis image

Merge pull request #5440 from Habbie/auth-4.0.x-5401

unbreak quoting; fixes #5401

don't use the libdecaf ed25519 signer when libsoduim is enabled

unbreak quoting; fixes #5401

add ED448 to signers unit test

initial stab at signer testing; has one 8080 test vector for now

hello decaf signers (ED25519 and ED448)
Testing algorithm 15: 'Decaf ED25519' ->'Decaf ED25519' -> 'Decaf ED25519' Signature & verify ok, signature 68usec, verify 93usec
Testing algorithm 16: 'Decaf ED448' ->'Decaf ED448' -> 'Decaf ED448' Signature & verify ok, signature 163usec, verify 252usec

install fakeroot and bump json gem version, for new travis image

Merge pull request #5423 from mind04/ed25519-40

Backport of #5422 do not hash the message in the ed25519 signer

do not hash the message in the ed25519 signer

https://www.rfc-editor.org/errata_search.php?rfc=8080

This is a Native zone
Metadata items: None
Zone has NSEC semantics
keys:
ID = 1 (CSK), flags = 257, tag = 3613, algo = 15, bits = 256      Active ( ED25519 )
CSK DNSKEY = example.com. IN DNSKEY 257 3 15 l02Woi0iS8Aa25FQkUd9RMzZHJpBoRQwAQEX1SxZJA4= ; ( ED25519 )
DS = example.com. IN DS 3613 15 1 b2c63605467c4a40942b47a953e9c0d38f81083a ; ( SHA1 digest )
DS = example.com. IN DS 3613 15 2 3aa5ab37efce57f737fc1627013fee07bdf241bd10f3b1964ab55c78e79a304b ; ( SHA256 digest )
DS = example.com. IN DS 3613 15 4 89389da437fca8372e67359dfc0dd4428fa2615df6e31bc5501677dd068514fea5c4efaf82188530a8a1645d9d3ef884 ; ( SHA-384 digest )

DNSKEY and DS match

Merge pull request #5378 from mind04/backports-40

Backports to rel/auth-4.0.x

auth: fix override in lua backend

auth: reanimate opendbx backend

auth: make sure Lua axfrfilter() does not insert out of zone data

auth: some small rectify improvements

auth: make sure upcase qnames do not confuse rectify or axfr

auth: make sure all qnames entering pdns via axfr are properly lowered

add makeUsRelative() to DNSName class

auth: test to make sure ordername is always lower case

auth: ignore NSEC3PARAM in an unsigned zone