spiff up pdnsutil show-zone output even further

improve up some pdnsutil output, make show-zone list domain metadata

also list domains without a SOA record or disabled domains in pdnsutil list-all-zones closes #3318

we don't actually depend on curses.h

Merge pull request #3319 from ahupowerdns/enteractive

PDNSUTIL EDIT-ZONE

Merge pull request #3320 from Izlots/patch-1

Added Debian package 3.4.1-4+deb8u4.Debian to secpoll.powerdns.com

Added new Debian package 3.4.1-4+deb8u4.Debian

Both packages (3.4.1-4+deb8u4.Debian and 3.4.1-4+deb8u3) are fine from security point of view, see http://metadata.ftp-master.debian.org/changelogs/main/p/pdns/pdns_3.4.1-4+deb8u4_changelog

always rectify after edit-zone, make sure we clear the tmp file on (r)eedit, prevent user from applying no changes

turn out-of-zone data into an error for check-zone. I can't ever see why it makes sense but perhaps there was a reason.

Merge pull request #3315 from mind04/recursor-dist

add missing files to recursor tar.bz2

Merge pull request #3317 from tjikkun/add_to_dist

add incfiles and src_js/ to dnsdist dist tarball

some better reporting in create-slave-zone

add incfiles and src_js/ to dnsdist dist tarball

This allows to regenerate the js files

add create-slave-zone

Change 'split horizon' section into 'lua policy functoin' section

rectify-zone if required in edit-zone, clarify message about absolute paths, clarify error if editor not found

don't sweat tailing dots on SOA records in checkZone

add pdnsutil edit-zone

more methods to get line number of an error from the zoneparser

DNSRecords disregarded d_ttl in < comparison. Unsure if this will break things!

Merge pull request #3313 from ahupowerdns/ednsexpose

Ednsexpose: implement the logic we need to generate EDNS MAC fields in dnsdist & read them in recursor

add rrd/ directory to recursor tar.bz2

add NOTICE to recursor tar.bz2

Merge pull request #3223 from tjikkun/min_js

Min js

Merge pull request #17 from rgacogne/ednsexpose

dnsdist: Refactoring of EDNS code

dnsdist: Refactoring of EDNS code

implement mac address stuffing in dnsdist FOR QUERIES WITHOUT EDNS ALREADY.

Add src JS files

The reason for this is to make downstreams like Fedora happy. This makes
checking those files for changes against upstream for example easier.

In the progress I updated the js-libraries so I know which versions are used
for both src and minified version. This is noted in the file src_js/SOURCES

Also I deleted jsrender.js and purl.js because the were unused.

Finally I added a Makefile option to build the minified js files yourself if
you want to do so.

Merge pull request #3309 from rgacogne/dnsdist-tcp-leak

dnsdist: Fix TCP clients threads vector and counters initialization

Merge pull request #3301 from rgacogne/dnsdist-outstanding

dnsdist: Better handling of outstanding TCP queries

dnsdist: Fix TCP clients threads vector and counters initialization

By tracking the FD leak reported in #3300, I observed that:
* we could create up to g_maxTCPClientThreads TCP threads,
but the corresponding vector size was hardcoded at 1024
(which the default for g_maxTCPClientThreads)
* the counters were not explicitely initialized

This commit fixes that and adds some additional checks to make
sure we don't add more TCP client threads, as that could lead to
a race if the vector is resized.

add a sample MAC address extraction to powerdns example Lua script

hook up EDNS options infra to lua, provide getEDNSOptions to get all of them or getDNSOption to probe for 1

hook up edns options to prototypes

Merge pull request #3302 from rgacogne/auth-yeti

Fix bindbackend's feedRecord to handle being slave for the root

Fix bindbackend's feedRecord to handle being slave for the root

Replace the out-of-zone check by using DNSName isPartOf().
Without this commit, importing the Yeti root zone via AXFR fails
with:

"Unable to feed record during incoming AXFR of '.':
out-of-zone data 'aaa..' during AXFR of zone '..'

because stripDomainSuffix("aaa.", ".") returns false.

Merge pull request #3298 from ahupowerdns/zedit

implement pdnsutil create-zone zone nsname, add-record, delete-rrset, replace-rrset

explicitly print the new rrset which should be.. educational

make sure replace-rrset replaces the right type

implement pdnsutil create-zone zone nsname, add-record, delete-rrset, replace-rrset

Merge pull request #3199 from cmouse/remove-rapidjson

Remove rapidjson

Remove rapidjson

Merge pull request #3197 from cmouse/remotebackend-json11

Convert remotebackend to JSON11 and fix some small bugs

Merge pull request #3293 from ahupowerdns/udpasy

make asynchronous UDP Lua queries work again in 4.x

Merge pull request #3280 from pieterlexis/recursor-install-config

Install generated recursor.conf-dist in sysconfdir

Merge pull request #3292 from rgacogne/dnsdist-empty-queries

dnsdist: Drop queries with no question (qdcount == 0)

dnsdist: Drop queries with no question (qdcount == 0)

Added a counter for these dropped queries, `emptyQueries` too.
This might be an issue for DNS cookies some day, as it uses
query with no question [1].
Additionnaly drops queries with QR set over TCP too to be
consistent with UDP.
This might close #3290.

[1]: https://tools.ietf.org/html/draft-ietf-dnsop-cookies-09#section-5.4

dnsdist: Better handling of outstanding TCP queries

The outstanding count was incremented for every query processed
in a single TCP session but was only decremented once per session.
It could also have been decremented before being incremented
if setupTCPDownstream() failed.
It might close #3288.

Merge pull request #2591 from cmouse/notify-tsig

Sign NOTIFY with TSIG

improve kv-example script, make sure we honor variable in there

fix up asynchronous querying

Merge pull request #3287 from rgacogne/external-sodium

Temporarily use an external libsodium in travis, revert me later

Test if we can temporarily use external libsodium in travis

Install generated recursor.conf-dist in sysconfdir

Merge pull request #3278 from rgacogne/dnsdist-lock-exceed-respgen

dnsdist: Lock the response ring in exceedRespGen()

dnsdist: Lock the response ring in exceedRespGen()

Hopefully this should fix #3277.

Merge pull request #3242 from pieterlexis/zone2sql-json-comments-test

Add test for zone2sql --json-comments

Merge pull request #3166 from pieterlexis/db-exceptions

Make auth crash less on transient DB failures

Merge pull request #3275 from rgacogne/dnsdist-exceedservfails-typo

dnsdist: Fix exceedServFails() case. Add exceedQRate to completion

Merge pull request #3269 from rgacogne/dnsdist-incbin-unlicense

dnsdist: Include ext/incbin/UNLICENSE in the dnsdist tarball

dnsdist: Fix exceedServFails() case. Add exceedQRate to completion

Rename exceedServfails() to exceedServFails() to be consistent.
Closes #3273.

Update README-dnsdist.md

Merge pull request #3274 from ahupowerdns/recpack

redo packet cache to be simpler, have more features, testcases and still reduce lines of code!

Merge remote-tracking branch 'origin/master' into recpack

Fix auth make dist

also support running w/o lua

revamp recursor packet cache to be far less clever and simply hash its question case insensitively. Plus add testcases.

implement Lua gettag() which optionally tells you which part of the packet cache to look at

clarifying comment

Move pdns-recursor contrib to recursordist

recursor dist: add missing file

Merge pull request #3259 from pieterlexis/recursor-autotools

Fully autotoolize the recursor distribution!

Appease the license-gods

dnsdist: Include ext/incbin/UNLICENSE in the dnsdist tarball

Fix typos

Fix typos

nit

Update tests to match changes

Assert column count when result is not empty

Use pdnsutil instead of pdnssec

Use separate setting for supermaster and notify

This allows enforcing signed supermaster notifications,
but retains compability with possible external nameservers
that do not support signed notifications.

Minimize zones

Fix name handling for tsigkeyname and algorithm

Ignore artefacts from supermaster test

Supermaster feature test

Add documentation

Update pdnsdistconf test

Indicate signed NOTIFY

Add allow-insecure-notify

Fix log levels

use DNSName for tsig keyname

In supermaster mode, set TSIG key used as domain's TSIG key

Check for correct TSIG key for domain

Add accessor for d_tsigkeyname

Sign notifications with TSIG key associated with domain

Use int/number value instead of wrapper

Check account existence

Recursor: have buildscripts use new normal configure

Autotoolize the recursor

This is done similar to dnsdist.

This commit adds a pdns_check_os.m4 to set OS dependent options.

Merge pull request #3268 from ahupowerdns/adfilter

enhance recursor lua with a hashed IP set, plus addRecord which is more generic than addAnswer