Port the 0x20 hashing to 3.7.3

This is a combination of the commits:
- 6200227b6b3cfd8796d6cc75e8cf29bcec586f0c
- af891b3d6d3f6ee6e848411cc9e477c96e955f98

And a port of the testcase

Merge pull request #2730 from pieterlexis/3.7-auth-zones-tests

Recursor: add an extensive test for auth-zones

Recursor: add an extensive test for auth-zones

Merge pull request #2666 from cmouse/update-yahttp-3.7.4

Update YaHTTP to v0.1.7

Update YaHTTP to v0.1.7

Merge pull request #2608 from cmouse/update-yahttp-3.7.4

Update YaHTTP to v0.1.6

Update YaHTTP to v0.1.6

Update public suffix list

Merge pull request #2572 from pieterlexis/rec-3.7-long-qname

Limit the maximum length of a qname (rec 3.7)

Limit the maximum length of a qname

Merge pull request #2474 from pieterlexis/fix-compile-old-linux

Fix compilation issues on ancient linux versions

Fix compilation issues on ancient linux versions

allow referencing of compressed label directly before another compressed label, thanks @giganteous

Merge pull request #2436 from pieterlexis/rec-3.7.2-root-nx-trust

Improve robustness of root-nx-trust

Improve robustness of root-nx-trust

Query names with embedded dots or 00's in labels will no longer make the
recursor (possibly) forget existing TLDs.

add recursor-test-freebsd script

add environment variable to disable hardening in recursor

lower number of allowed compression loops in getLabelFromContent()
1000 is a bit high for a max 255 character qname

fix forward reference-check in getLabelFromContent()

Merge pull request #2270 from rubenk/rel/rec-3.7.2

Rel/rec 3.7.2

remove the parts that are wrong from this readme, add some stuff that is right

(cherry picked from commit 172da263d39c5a33f4965b410aefa9f7c0570584)

Start pdns-recursor before nss-lookup.target

(cherry picked from commit 73e05c6f2e9a6472b559cd22d76fa4cfe9a9b73e)

Silence warnings that always occur on FreeBSD

(cherry picked from commit 5b721f44b0b4504ba9b5e10314193c172d887136)

move recursor-git build script from jenkins config into git

make sure we never call sendmsg with msg_control!=NULL && msg_controllen>0. Fixes #2227

on Linux, SO_TIMESTAMP == SCM_TIMESTAMP, on at least FreeBSD, it is not, causing us to miss harvesting the timestamp, and dropping all packets as too old. With this change, we don't drop if we can't find the timestamp, plus harvest it properly

Merge pull request #1997 from rubenk/fix-undef-warnings

Fix undef warnings

Fix a few warnings which show up with -Wundef

Also remove DARWIN, since OS X doesn't define that

Merge pull request #2090 from rubenk/remove-commented-out-zone2ldap-from-spec

Remove commented out zone2ldap

Merge pull request #2210 from shimmi2/master

Update migration.md

Update migration.md

Updated link to wiki for easy reach scripts for migrating from MyDNS

Merge pull request #2181 from mind04/api1

always set di.notified_serial in getAllDomains

always set di.notified_serial in getAllDomains

Merge pull request #2170 from mind04/docker

update example in the Dockerfile for building the markdown docs

Merge pull request #2184 from rubenk/fail-when-compiling-epollmplexer-fails

Fail when compiling epollmplexer fails

Merge pull request #2190 from rubenk/cp-dont-move-binaries

Copy the binaries during install, don't move them

Merge pull request #2199 from rubenk/fix-building-with-boost-1.57

fix building with GCC 5

Merge pull request #2200 from cmouse/add-newline-carbon-error

Add newline to carbon error message on recursor

Merge pull request #2201 from zeha/api-improvements

Zone API improvements

Merge pull request #2202 from zeha/docs

Documentation improvements

Merge pull request #2205 from zeha/api-account2

API: move shared DomainInfo reader into it's own function

Merge pull request #2208 from zeha/init-exec_prefix

Readd exec_prefix to pdns.init.in

fix building with GCC 5

Fix the following failure:
checking for Boost headers version >= 1.35.0... yes
checking for Boost's header version...
configure: error: invalid value: boost_major_version=

by updating boost.m4 to upstream commit af50806d657
from https://github.com/tsuna/boost.m4

Fixes #2198

Merge pull request #2207 from zeha/api-account3

Fix goraclebackend after 2203 plus undo useless change

Readd exec_prefix to pdns.init.in

automake doesn't completely expand variables like @bindir@, so we need
to keep ${exec_prefix} in there.

insert-zone-query: Undo addition of account field

We don't actually need this, and we didn't bind any value to
:account.

Add account changes to goraclebackend

API: move shared DomainInfo reader into it's own function

And test that listing zones also returns account now.

Merge pull request #2203 from zeha/api-account

API: expose domains.account

Add newline to carbon error message on auth

API: allow writing to domains.account field

API: read and expose domain account field

docs: Remove remains of gsqlite(2)

It has been removed in 2012.

docs: Improve third party names

LUA -> Lua
PostGreSQL -> PostgreSQL
PgSQL -> PostgreSQL

Fixes #2131.

API: be more strict when parsing record contents

Fixes #2113.

API: Reject unknown types (TYPE0)

Fixes #2130.

Add newline to carbon error message on recursor

add getregisteredname() function for recursor Lua scripts

turn off root-nx-trust by default, cleanups

trust root nxdomains

throw AAAA records in the mix for resolution if we have them lying around, even if we already got a working A record

dates. they matter.

clarify booleans in our documentation, plus serve-rfc1918 correction.

secpoll security status for 3.7.0-rc2

Copy the binaries during install, don't move them

rc2 release notes

Fail when compiling epollmplexer fails

fix up the wrong size of the 'remotes' ringbuffer with pdns-distributes-queries, fix up finally the wrong sizing of caches in case of pdns-distributes-queries and slightly adjust the number of available filedescriptors based on reality. Thanks AJ ;-)

secpoll zone soa update

scoped_array/scoped_ptr mistake, found by rubenk's address sanitizer check run

Merge pull request #2175 from cmouse/set-ulimit-before-setuid

Try to raise open files before dropping privileges

Try to raise open files before dropping privileges

Merge branch 'master' of github.com:PowerDNS/pdns

clear up local socket in rec_control in case recursor is down, close #2061

finalize auth 3.4.2 docs

add auth-3.4.2 to secpoll

reinstate --loglevel=7 for access to DEBUG messages in recursor

update example in the Dockerfile for building the markdown docs

Merge pull request #2169 from mind04/upgrade

auth 3.4.0 - 3.4.2 upgrade notes

auth 3.4.0 - 3.4.2 upgrade notes

cleanup 3.4.2 log a bit; update to 0cdb3ab

partial, unclean 3.4.2 changelog, up to b4ec12d156404e239a1c356fc45de86c4a30fd60

typo

Merge pull request #2144 from rubenk/distribute-effective_tld_names.dat

Ship effective_tld_names.dat in tarball

Merge pull request #2155 from cmouse/fix-issue-1984

Implement CORS in WebServer, fixes #1984

Merge pull request #2159 from zeha/markup

Markdownify regression-tests/README

Markdownify regression-tests/README

Remove OPTIONS from webWrapper

Implement CORS in WebServer, fixes #1984

Merge pull request #2153 from pieterlexis/fixChangelogJumble

Unjumble the changelog

unshare g_now between threads, it was causing weirdness. Again thanks to Winfried for great debugging & solution!

Unjumble the changelog

Merge pull request #2152 from rubenk/build-ports+devpoll-on-sunos

Build devpoll and ports mplexer in on Solaris

Merge pull request #2148 from pieterlexis/documentRecursorSettings

Document all the recursor settings

Merge pull request #2150 from rubenk/build-kqueue-multiplexer-on-freebsd

Build kqueue mplexer into recursor on FreeBSD

Merge pull request #2149 from rubenk/pie-detector-test

Pie detector test

Build devpoll and ports mplexer in on Solaris

Merge pull request #2146 from rubenk/autoconf-recursor

Only build epollmultiplexer on Linux

Build kqueue mplexer into recursor on FreeBSD

Link only programs with -pie

Add a new variable, $PROGRAM_LDFLAGS
only meant for programs, not libraries.

Add PIE_LDFLAGS to this variable.

Since all programs need $THREADFLAGS,
add it to this variable too. This allows us
to remove a lot of program_LDFLAGS which contained only
$THREADFLAGS

An extra advantage is that we don't touch the user's LDFLAGS
anymore.