Recursor: Add process-no-validate option

Make it also the default. This turns the recursor into a
"Security-Aware Recursive Name Server" (RFC 4033 §2), meaning it will
pass on RRSIGs and NSEC(3)s but will not validate.

Merge pull request #3900 from rgacogne/rec-lua-policy-tags

rec: Manage the applied policy and tags from pre/post resolve hooks

rec: Manage the applied policy and tags from pre/post resolve hooks

This adds a `appliedPolicy` string member to the dq object, along
with new methods:
 * `addPolicyTag(string)`
 * `setPolicyTags(table of strings)`
 * `getPolicyTags()`
A new repeated (ie, {0,n}) `tags` is added to our protobuf responses.

Merge pull request #3897 from pieterlexis/small-recursor-fix

silence an unused variable warning

silence an unused variable warning

Merge pull request #3894 from pieterlexis/protobuf-in-pkg

Add protobuf support to the PowerDNS provided packages

Merge pull request #3876 from rgacogne/dnsdist-response-rules-3870

dnsdist: Add `showResponseRules()`, `{mv,rm,top}ResponseRule()`

Remove stubquery, unpackaged, RPMs won't build otherwise

Add protobuf support to dnsdist packages

Enable protobuf support in recursor packages

Merge pull request #3872 from pieterlexis/issue-3782-auth-multiple-carbon

Auth: add support for multiple carbon servers

Merge pull request #3893 from pieterlexis/disable-protobuf

Disable protobuf detection in packages

Merge pull request #3892 from Habbie/recursor-librt

support clock_gettime for platforms that require -lrt

Disable protobuf detection in packages

So that we do not accidently link against it.

Merge pull request #3882 from Habbie/override-python

allow overriding python binary in tests

Merge pull request #3885 from Habbie/deadsymlinks

remove two dead symlinks

Merge pull request #3881 from rgacogne/rec-noedns-stats

rec: Fix the `noEdnsOutQueries` counter

Merge pull request #3886 from pieterlexis/recursor-autotool-fixes

Some Recursor fixes

Merge pull request #3887 from pieterlexis/readme-update

Update README files

Merge pull request #3875 from ahupowerdns/edns-fallback

with this commit, we turn off DNSSEC queries iff you respond with Not…

support clock_gettime for platforms that require -lrt

Merge pull request #3851 from mind04/ecdsa2

disable algorithm 13 and 14 in the opensslsigner if OpenSSL does not …

Merge pull request #3866 from pieterlexis/issue-3811-recursor-FD-limit

rec: Increase max FDs for systemd machines

Merge pull request #3877 from rgacogne/dnsdist-max-fds

dnsdist: Increase max FDs in systemd unit, warn if clearly too low

Update README files

Ensure the `logmessages` statistic is increased.

When a message is sent to the console or syslog, increase the
logmessages counter.

Closes #3855

Remove the statbag from the recursor

rec: add configure summary

remove two dead symlinks

allow overriding python binary in tests

Merge pull request #3732 from Habbie/dnsdist-osx

improve OSX portability

move PDNS_CHECK_OS so it can actually change CXXFLAGS

introduce central gettime() function, so we can avoid clock_gettime on platforms that do not have it, like osx/mach

rec: Fix the `noEdnsOutQueries` counter

It was incremented for every call to `asyncresolveWrapper()`, then
one more time for queries sent without EDNS.

document editline usage

Merge pull request #3874 from romuald/doc-remote-type

Remote backend doc example change (types)

dnsdist: Warn when the max FDs limit is clearly too low

dnsdist: Add `showResponseRules()`, `{mv,rm,top}ResponseRule()`

Merge pull request #3857 from Habbie/stubquery

add simple stubquery tool for testing the stubresolver

Merge pull request #3858 from rgacogne/dnsdist-web-exceptions

dnsdist: Only log YaHTTP's parser exceptions in verbose mode

Add a test for #3841

with this commit, we turn off DNSSEC queries iff you respond with NotImp or FormErr. Also includes comment block with rationale.

dnsdist: Increase max FDs for systemd machines

Auth: add support for multiple carbon servers

Closes #3782
Closes #2093

Merge branch 'quietsmn'

fix up memory leak on lua reload, thanks to "t4nk607" for spotting this issue.

add OK secpoll status for DSA-3565-2 pdns rebuild

Remote backend example change (types)

Modify the examples for `getDomainMetadata`, since the "YES" value does
not currently seems to be parsed correctly by the remote backend.
"1" is correctly parsed as boolean true

Merge pull request #3852 from mind04/leftovers

remove mbedtls/polarssl leftovers

Merge pull request #3856 from Habbie/nproxy-dnsname

deal with unset name in nproxy replies, closes #3844

Merge pull request #3859 from zeha/noconfigdir

build scripts: Stop patching config-dir in pdns.conf

Merge pull request #3867 from pieterlexis/secpoll-debian-alpha3

Add alpha3 secpoll for downstream debian packages

Add alpha3 secpoll for downstream debian packages

rec: Increase max FDs for systemd machines

Closes #3811

nit, thanks JamesTK

Merge pull request #3863 from Habbie/auth-3.4.9-secpoll

add auth 3.4.9 to secpoll

add auth 3.4.9 to secpoll

Merge pull request #3861 from Habbie/auth-3.4.9-docs

changelog for auth 3.4.9

changelog for auth 3.4.9

build scripts: Stop patching config-dir in pdns.conf

By the time this is read, it is too late anyway.

dnsdist: Only log YaHTTP's parser exceptions in verbose mode

Log the remote client address in any case.

add simple stubquery tool for testing the stubresolver

deal with unset name in nproxy replies, closes #3844

Merge pull request #3840 from rgacogne/dnsdist-client-wrongtype-3839

dnsdist: Catch WrongTypeException in client mode

Merge pull request #3834 from rgacogne/dnsdist-config-tests

dnsdist: Wait for dnsdist to exit in CheckConfig tests

Merge pull request #3836 from rgacogne/dnsdist-web-log-exception

dnsdist: Log the content of webserver's exceptions

Merge pull request #3854 from pieterlexis/4a3-secpoll

Add alpha3 secpoll records

Add alpha3 secpoll records

doc nit, thanks Bart Smit

s/OPENSSL_USE_ECDSA/HAVE_OPENSSL_ECDSA

remove mbedtls/polarssl leftovers

disable algorithm 13 and 14 in the opensslsigner if OpenSSL does not support ecdsa or the required curves

fix typo (thanks @jpmens)

Merge pull request #3847 from pieterlexis/auth-4-alpha3-changelog

Update changelog for auth 4.0.0 alpha 3

Update changelog for auth 4.0.0 alpha 3

Merge pull request #3827 from pieterlexis/issue-3796-NSEC3PARAM-algo-fix

set NSEC3PARAM algorithm to 1

Check/fix invalid NSEC3PARAM hash algo

Don't allow other values than '1' for the NSEC3PARAM algorithm

Merge pull request #3810 from pieterlexis/issue-1905-rm-pdns-conf-dist

Remove pdns.conf-dist (generate it after compiling)

Merge pull request #3815 from pieterlexis/issue-3210-rm-SOA-EDIT-values

Deprecate bad soa-edit values. Closes #3210

Merge pull request #3817 from pieterlexis/issue-3615-prevent-multiple-backend-launch

Prevent launching similarly named backend

Merge pull request #3842 from pieterlexis/ignore-recursor-service-file

rec: ignore the generated service file

Merge pull request #3843 from pieterlexis/auth-4-alpha3-changelog

Auth and Recursor 4.0.0-alpha3 changelogs

Auth and Recursor 4.0.0-alpha3 changelogs

Merge pull request #3837 from pieterlexis/rm-service-file-dnsdist-trusty

Remove dnsdist service file on trusty

Add deprecation warnings for #3210

Generate pdns.conf-dist after building pdns_server

rec: ignore the generated service file

Merge pull request #3733 from Habbie/alias-testing

improve ALIAS handling

rec: Remove systemd service file on trusty

And actually ship it on non-trusty

auth: Remove systemd service file on trusty

Remove dnsdist service file on trusty

Having it there will lead to pain

dnsdist: Catch WrongTypeException in client mode

Prevent launching identical backends

This catches configuration bugs (mostly when includes are used) where a
line `launch=backend` and a line `launch+=backend` occur in the sum of
the configuration.

Closes #3615

Merge pull request #3820 from pieterlexis/issue-3818-double-SOA

pdnsutil load-zone: ignore double SOA

Merge pull request #3833 from rgacogne/coverity-issues

Minor fixes to make coverity happier

Merge pull request #3831 from Habbie/nsec3dig-exception

pick up PDNSException in nsec3dig

Merge pull request #3764 from pieterlexis/systemd-notify

Add systemd notify support to auth and recursor

Merge pull request #3816 from pieterlexis/issue-3644-rediscover-skipped-is-rejected

bind: Improve skipped zone error messages

Merge pull request #3835 from pieterlexis/issue-3832-silence-warning

Squash 2 compiler warnings in ws-auth.cc