Merge pull request #2163 from mind04/auth-3.4.2-3

Auth API: fix missing abortTransaction() in error case

Merge pull request #2162 from cmouse/cors-3.4.2

Implement CORS for API in 3.4.2

Auth API: fix missing abortTransaction() in error case

Noticed by Aki Tuomi.
(cherry picked from commit d0f4bb3825281f6acb84477d6879cc494ffa1aaa)

Remove OPTIONS from webWrapper

Implement CORS in WebServer, fixes #1984

Merge pull request #2145 from mind04/auth-3.4.2-2

Auth 3.4.2 2

qtype is now case insensitive

Plus update JSON API tests to test for this (from @zeha).

Add an option to disable hardening

This makes debugging hardening problems easier

--disable-hardening disables PIE, -fstack-protector,
-D_FORTIFY_SOURCE and -z relro

Use correct methods, fixes #1874

Merge pull request #2143 from mind04/api-prio

remove priority in the json api

json-api: remove priority from json

remove priority from api tests
(cherry picked from commit 05cf6a71fc0434a307149163db6e99c1fc9e37e9)

Merge pull request #2140 from rubenk/netbsd-fixes-for-3.4.2

Netbsd fixes for 3.4.2

use uint32_t consistently, this makes the 'u_int32_t not defined on SunOS.' patch from pkgsrc obsolete

(cherry picked from commit e7e17863115ce2b6f97dae5ebfe51178600ca370)

use = instead of == in shell tests, this makes the configure 'Portability.' patch from pkgsrc obsolete

(cherry picked from commit 14cd37570e6772dc2bd866f503302c5eb46c7f11)

Conflicts:
m4/pdns_with_mysql.m4
m4/pdns_with_postgresql.m4

Merge pull request #2139 from zeha/replace-jsonstat-3.4.x

JSON API: provide flush-cache, notify, axfr-receive

import 'Add DragonFly support.' from pkgsrc

(cherry picked from commit 0c86d4c318018c34dc76419f4fcf8052d3e48008)

Conflicts:
pdns/dns.hh

JSON API: provide flush-cache, notify, axfr-receive

pdnscontrol used to send pdns/rec-control commands for those through
the jsonstat command tunnel, but jsonstat (on Auth at least) doesn't
do X-API-Key, so that functionality was broken.

Also removes jsonstat from Auth completely.

Cherry-pick conflicts:
pdns/ws-recursor.cc (kept jsonstat as is)

Merge pull request #2111 from mind04/label-3.4.2

check label and name length in xfrLabel()

Merge pull request #2114 from rubenk/make-executables-position-independent-for-3.4.2

Don't create PIE executables for semistatic builds

Don't create PIE executables for semistatic builds

Otherwise this happens:

/bin/bash ../libtool  --tag=CXX   --mode=link /var/lib/jenkins/jobs/auth-git-semistatic-rpm-amd64/workspace/pdns-git-20150106-5355-20d9693/build-scripts/semistaticg++ -DSYSCONFDIR=\"/etc/powerdns\" -DPKGLIBDIR=\"/usr/lib/pdns\" -DLOCALSTATEDIR=\"/var/run\" -fPIE -DPIE -D_FORTIFY_SOURCE=2 --param ssp-buffer-size=4 -fstack-protector -Wall -g -O2 -pthread -pie -Wl,-z -Wl,relro -Wl,-z -Wl,now -L/opt/postgresql/lib -Wl,-rpath,/opt/postgresql/lib -lpq -all-static  -o pdns_control arguments.o dynloader.o dynmessenger.o logger.o misc.o qtype.o statbag.o unix_utility.o  -lcrypt
libtool: link: /var/lib/jenkins/jobs/auth-git-semistatic-rpm-amd64/workspace/pdns-git-20150106-5355-20d9693/build-scripts/semistaticg++ -DSYSCONFDIR=\"/etc/powerdns\" -DPKGLIBDIR=\"/usr/lib/pdns\" -DLOCALSTATEDIR=\"/var/run\" -fPIE -DPIE -D_FORTIFY_SOURCE=2 --param ssp-buffer-size=4 -fstack-protector -Wall -g -O2 -pthread -pie -Wl,-z -Wl,relro -Wl,-z -Wl,now -Wl,-rpath -Wl,/opt/postgresql/lib -static -o pdns_control arguments.o dynloader.o dynmessenger.o logger.o misc.o qtype.o statbag.o unix_utility.o  -L/opt/postgresql/lib -lpq -lcrypt -pthread
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/4.7/libstdc++.a(compatibility.o): relocation R_X86_64_32 against `_ZTIN10__cxxabiv115__forced_unwindE' can not be used when making a shared object; recompile with -fPIC
/usr/lib/gcc/x86_64-linux-gnu/4.7/libstdc++.a: could not read symbols: Bad value
collect2: error: ld returned 1 exit status

(cherry picked from commit 62e6530a76a2accd997a287172e087ed46d03cf8)

Conflicts:
configure.ac

Merge pull request #2106 from rubenk/make-executables-position-independent-for-3.4.2

Make executables position independent for 3.4.2

Merge pull request #2108 from cmouse/yahttp-for-3.4.2

Upgrade to 0.1.5

tests for label and name length check in xfrLabel()

check label and name length in xfrLabel()

Merge pull request #2107 from rubenk/remotebackend-fixes-for-3.4.2

Remotebackend fixes for 3.4.2

Update to v0.1.5

Allow changing the Sockaddr in ComboAddress

(cherry picked from commit a7360cd9e1daeb99e0d0632b807e90fc34bedb65)

Properly handle read errors (EOF and errors)

(cherry picked from commit 974427fd0afc3bf858f7b0a38f626bc3fd17ae61)

Use NetworkError, remove redundant code

(cherry picked from commit 7731f6fff580fb5b2ac4863bb3ffb20112f5dbe8)

Check timeout since it seems that readWithTimeout not always works

(cherry picked from commit 24f62b51e277f996c5cbdcbff820580b7a424a68)

Reuse existing connection when possible

(cherry picked from commit 660dd268f667ea6ef7452a33fd0631cc687255a6)

Reconnect on read error, also fix whitespace

(cherry picked from commit 74d13635b99021efbccf8056ff1e56a9f03b7fe1)

Use zeromq library C API, based on work by @wtfuzz and @hexwave. Fixes #1760.

(cherry picked from commit 49e4360a664e68a62eda2101e9e6af9b18d6005f)

Conflicts:
.travis.yml

Use correct syntax for escapes

(cherry picked from commit a7424ff6089109e4f0089c212e733c4e30c25098)

Add json to the Gem bundle

This fixes the unit tests on Fedora Rawhide

unittest_pipe.rb:5:in `require': cannot load such file -- json
(LoadError)

(cherry picked from commit fd78ac1a5120ba12507d75658d3f6f761aecf9a3)

oops

move manpages to section 1

Append to PKG_CONFIG only after calling PKG_PROG_PKG_CONFIG

Otherwise PKG_CONFIG is not set yet.

(cherry picked from commit 27fe16bdc147c7010d40d4aed53143edd3fc9de2)

Override PKG_CONFIG sooner

We need to override PKG_CONFIG before any calls to PKG_PROG_PKG_CONFIG

(cherry picked from commit a49b335616721afc4b3ff250c2dad8bb8a0bac10)

Conflicts:
configure.ac

Make executables position-independent

Pass -pie to the linker

before:
ruben@yourmomma: pdns (master %=)$ checksec --file pdns/pdns_server
RELRO           STACK CANARY      NX            PIE             RPATH      RUNPATH      FILE
Full RELRO     Canary found     NX enabled   No PIE         No RPATH   No RUNPATH   pdns/pdns_server
ruben@yourmomma: pdns (master %=)$ checksec --file pdns/pdns_control
RELRO           STACK CANARY      NX            PIE             RPATH      RUNPATH      FILE
Full RELRO     Canary found     NX enabled   No PIE         No RPATH   No RUNPATH   pdns/pdns_control

after:
ruben@yourmomma: pdns (master *%=)$ checksec --file pdns/pdns_control
RELRO           STACK CANARY      NX            PIE             RPATH      RUNPATH      FILE
Full RELRO     Canary found     NX enabled   PIE enabled    No RPATH   No RUNPATH   pdns/pdns_control
ruben@yourmomma: pdns (master *%=)$ checksec --file pdns/pdns_server
RELRO           STACK CANARY      NX            PIE             RPATH      RUNPATH      FILE
Full RELRO     Canary found     NX enabled   PIE enabled    No RPATH   No RUNPATH   pdns/pdns_server

(cherry picked from commit c116f5d4a4e0d7a0cc22844cbd2a3cf267fb1a8e)

Conflicts:
configure.ac

adjust specfile manpath

Merge pull request #2054 from mind04/auth-3.4.2-1

Auth 3.4.2 1

Report correct chosen lua

use luaL_checkinteger for Lua 5.3

Lua 5.3 in recursor testbuild spec

auth: limit long version strings to 63 characters and catch exceptions in secpoll

support single-type ZSK signing

pdns_control make it posible to notify all zones at once

pdnssec: fix ttl ceck for RRSIG records

Merge pull request #1977 from mind04/auth-3.4.2

Auth 3.4.2

happy new year :)

better key for packetcache

fix up latency reporting for sub-millisecond latencies (would clip to 0)

make sure we don't throw an exception on "pdns_control show" of an unknown variable

fix startup race condition with carbon thread already trying to broadcast uninitialized data

add 'bench-db' to do very simple database backend performance benchmark

make qsize-q more robust

add signatures metric to auth, so we can plot signatures/second

don't do time(0) under signature cache lock

mind04 discovered we count corrupt packets and EAGAIN situations as validly received packets, skewing the udp questions/answers graphs on auth.

make latency & qsize reporting 'live'. Plus fix that we only reported the qsize of the first distributor.

fix up statbag for carbon protocol and function pointers

enable callback based metrics to statbas, and add 5 such metrics: uptime, sys-msec, user-msec, key-cache-size, meta-cache-size, signature-cache-size

fix up our packet cache unit tests plus add bunch more tests

add a bunch of packet based regression tests to the packetcache

make sure we lock the cache shards while we clean them, closing #1910. Plus add regression test that pretty reliably
detects us not locking.

add unit tests for new sharded packet cache

speed up the testbag test a bit (by doing smaller tests)

split up the packet & query cache into 1024 shards so our locks no longer collide

Conflicts:
pdns/packetcache.cc

disabling test if test environment does not define things we need to know..

this should fix our unit tests

a 32 bit regression test failure we don't understand..

actually writing some unit tests for the new 64 bit capable AtomicCounter found a pile of bugs!

Our "StatBag" statistics class was 1) 32 bit 2) heavily locked 3) still allowed for lock-free operations for high speed counters.
This commit 1) makes the StatBag 64 bit on 64 bit systems, 2) removes all locks and 3) has gone AtomicCounter 'native'
The upshot of this is that 64 bit users will suddenly get 64 bit counters. A second upshot is that multicore systems should now see consistent statistics again.
One important thing that changed is that the StatBag class used to be completely thread safe, and now it no longer is. You can't declare new counters while the StatBag is in use. This should not be happening, but you never know.
Finally, there is now a StatBag unit test.

make our AtomicCounter 64 bit on 64 bit machines

silence timeout error from webserver

Potential fix for #1907, we now try to trigger libgcc_s.so.1 to load before we chroot. I can't reproduce the bug on my local system,
but this "should" help. Seriously.

get priority from table in Lua axfrfilter
fixes #1857

with thanks to Jack Lloyd, this works around the default Botan allocator slowing down for us during production use.

oraclebackend: fix records pointing at root

lmdbbackend: fix types pointing at root

mydnsbackend: fix types pointing at root

no fancy-records in tinydns generate-data.sh

test NS and CNAME pointing at the root

root MX test

remove additional layer of trailing . stripping, which broke MX records to the root in the BIND backend. Should close #1243.

update polarssl to 1.3.9

Polarssl: disable padlock

cleanup polar update

Disable aesni for now

Upgrade to polarssl 1.3.8

Upstream commit 1910aa78a367

Rename polarssl-1.3.2 to polarssl

Makes upgrading in the future much easier
since we don't hardcode the version number everywhere.

secpoll: Replace ~ with _, too

Debian backports versions use '~' in the version number.

only zones with an active ksk are secure

api: show keys for zones without active ksk

api: use uncached results for getKeys()

read ALLOW-AXFR-FROM from the backend with the metadata

Merge pull request #1847 from mind04/ldns2

update test output for verify-zone version 1.6.17

update test output for verify-zone version 1.6.17