read_callback: move to SessionHandle from connectdata

With many easy handles using the same connection for multiplexing, it is
important we store and keep the transfer-oriented stuff in the
SessionHandle so that callbacks and callback data work fine even when
many easy handles share the same physical connection.

http2: show stream IDs in decimal

It makes them easier to match output from the nghttpd test server.

http2: Faster http2 upload

Previously, when we send all given buffer in data_source_callback, we
return NGHTTP2_ERR_DEFERRED, and nghttp2 library removes this stream
temporarily for writing.  This itself is good.  If this is the sole
stream in the session, nghttp2_session_want_write() returns zero,
which means that libcurl does not check writeability of the underlying
socket.  This leads to very slow upload, because it seems curl only
upload 16k something per 1 second.  To fix this, if we still have data
to send, call nghttp2_session_resume_data after nghttp2_session_send.
This makes nghttp2_session_want_write() returns nonzero (if connection
window still opens), and as a result, socket writeability is checked,
and upload speed becomes normal.

gtls: don't fail on non-fatal alerts during handshake

Stop curl from failing when non-fatal alert is received during
handshake.  This e.g. fixes lots of problems when working with https
sites through proxies.

curl_easy_unescape.3: update RFC reference

Reported-by: bsammon
Bug: https://github.com/bagder/curl/issues/282

CURLOPT_POSTFIELDS.3: Mention curl_easy_escape

.. also correct some variable naming in curl_easy_escape.3

Bug: https://github.com/bagder/curl/issues/281
Reported-by: bsammon@users.noreply.github.com

openssl: Use SSL_CTX_set_msg_callback and SSL_CTX_set_msg_callback_arg

BoringSSL removed support for direct callers of SSL_CTX_callback_ctrl
and SSL_CTX_ctrl, so move to a way that should work on BoringSSL and
OpenSSL.

re #275

curl.1: fix missing space in section --data

transfer: remove erroneous and misleading comment

http: silence compile-time warnings without USE_NGHTTP2

Error: CLANG_WARNING:
lib/http.c:173:16: warning: Value stored to 'http' during its initialization is never read

Error: COMPILER_WARNING:
lib/http.c: scope_hint: In function ‘http_disconnect’
lib/http.c:173:16: warning: unused variable ‘http’ [-Wunused-variable]

transfer: Replace __func__ instances with function name

.. also make __func__ replacement in multi.

Prior to this change debug builds would fail to build if the compiler
was building pre-c99 and didn't support __func__.

build: bump version in default nghttp2 paths

INTERNALS: we require nghttp2 1.0.0+ now

http: Add some include guards for the new HTTP/2 stuff

http2: store upload state per stream

Use a curl_off_t for upload left

http2: fix build when NOT h2-enabled

http2: switch to use Curl_hash_destroy()

as after 4883f7019d3, the *_clean() function only flushes the hash.

curlver: restore LIBCURL_VERSION_NUM defined as a full number

As it breaks configure, curl-config and test 1023 if not.

hostip: fix unintended destruction of hash table

.. and added unit1602 for hash.c

curlver: introducing new version number (checking) macros

runtests.pl: use 'h2c' now, no -14 anymore

http2: Ignore if we have stream ID not in hash in on_stream_close

We could get stream ID not in the hash in on_stream_close.  For
example, if we decided to reject stream (e.g., PUSH_PROMISE), then we
don't create stream and store it in hash with its stream ID.

Require nghttp2 v1.0.0

This commit requires nghttp2 v1.0.0 to compile, and migrate to v1.0.0,
and utilize recent version of nghttp2 to simplify the code,

First we use nghttp2_option_set_no_recv_client_magic function to
detect nghttp2 v1.0.0.  That function only exists since v1.0.0.

Since nghttp2 v0.7.5, nghttp2 ensures header field ordering, and
validates received header field.  If it found error, RST_STREAM with
PROTOCOL_ERROR is issued.  Since we require v1.0.0, we can utilize
this feature to simplify libcurl code.  This commit does this.

Migration from 0.7 series are done based on nghttp2 migration
document.  For libcurl, we removed the code sending first 24 bytes
client magic.  It is now done by nghttp2 library.
on_invalid_frame_recv callback signature changed, and is updated
accordingly.

http2: infof length in on_frame_send()

pipeline: switch some code over to functions

... to "compartmentalize" a bit and make it easier to change behavior
when multiplexing is used instead of good old pipelining.

symbols-in-versions: add CURLOPT_PIPEWAIT

CURLOPT_PIPEWAIT: added

By setting this option to 1 libcurl will wait for a connection to reveal
if it is possible to pipeline/multiplex on before it continues.

Curl_http_readwrite_headers: minor code simplification

IsPipeliningPossible: fixed for http2

http2: bump the h2 buffer size to 32K for speed

http2: remove the stream from the hash in stream_close callback

... and suddenly things work much better!

http2: if there is paused data, do not clear the drain field

http2: rename s/data/pausedata

http2: "stream %x" in all outputs to make it easier to search for

http2: Curl_expire() all handles with incoming traffic

... so that they'll get handled next in the multi loop.

http2: don't signal settings change for same values

http2: set default concurrency, fix ConnectionExists for multiplex

bundles: store no/default/pipeline/multiplex

to allow code to act differently on the situation.

Also added some more info message for the connection re-use function to
make it clearer when connections are not re-used.

http2: lazy init header_recvbuf

It makes us use less memory when not doing HTTP/2 and subsequently also
makes us not have to cleanup HTTP/2 related data when not using HTTP/2!

http2: separate multiplex/pipelining + cleanup memory leaks

CURLMOPT_PIPELINE: bit 1 is for multiplexing

http2: Fix bug that data to be drained are overwritten by pending "paused" data

http2: Don't call nghttp2_session_mem_recv while it is paused by a stream

http2: Read data left in connection buffer after pause

Previously when we do pause because of out of buffer, we just throw
away unread data in connection buffer.  This just broke protocol
framing, and I saw occasional FRAME_SIZE_ERROR.  This commit fix this
issue by remembering how much data read, and in the next iteration, we
process remaining data.

http2: Fix streams get stuck

This commit fixes the bug that streams get stuck if stream gets some
DATA, and stream->closed becomes true at the same time.  Previously,
in this condition, after we processed DATA, we are going to try to
read data from underlying transport, but there is no data, and gets
EAGAIN.  There was no code path to evaludate stream->closed.

http2: store incoming h2 SETTINGS

pipeline: move function to pipeline.c and make static

... as it was only used from there.

IsPipeliningPossible: http2 can always "pipeline" (multiplex)

http2: remove debug logging from on_frame_recv

http2: remove the closed check in http2_recv

With the "drained" functionality we can get here slightly asynchronously
so the stream have have been closed but there is pending data left to
read.

http2: bump the h2 buffer to 8K

http2: Curl_read should not use the single buffer

... as it does for pipelining when we're multiplexing, as we need the
different buffers to store incoming data correctly for all streams.

http2: more debug outputs

http2: leave WAITPERFORM when conn is multiplexed

No need to wait for our "spot" like for pipelining

http2: force "drainage" of streams

... which is necessary since the socket won't be readable but there is
data waiting in the buffer.

http2: move the mem+len pair to the stream struct

http2: more stream-oriented data, stream ID 0 is for connections

http2: move lots of state data to the 'stream' struct

... from the connection struct. The stream one being the 'struct HTTP'
which is kept in the SessionHandle struct (easy handle).

lookup streams for incoming frames in the stream hash, hashing is based
on the stream id and we get the SessionHandle for the incoming stream
that way.

HTTP: partial start at fixing up hash-lookups on http2 frame receival

http: a stream hash for h2 multiplexing

http: a stream hash for h2 multiplexing

http2: debug log when receiving unexpected stream_id

http2: move stream_id to the HTTP struct (per-stream)

Curl_http2_setup: only do it once and enable multiplex on the server

Once we know we are HTTP/2 enabled we know the server can multiplex.

http: switch on "pipelining" (multiplexing) for HTTP/2 servers

... and do not blacklist any.

README.pipelining: removed

All the details mentioned here are better documented in man pages

build: removed bundles.c from make files

This file was removed in commit fd137786

Curl_conncache_add_conn: fix memory leak on OOM

CURLMOPT_MAX_HOST_CONNECTIONS: host = host name + port number

conncache: keep bundles on host+port bases, not only host names

Previously we counted all connections to a specific host name and that
would be used for the CURLMOPT_MAX_HOST_CONNECTIONS check for example,
while servers on different port numbers are normally considered
different "origins" on the web and should thus be considered different
hosts.

bundles: merged into conncache.c

All the existing Curl_bundle* functions were only ever used from within
the conncache.c file, so I moved them over and made them static (and
removed the Curl_ prefix).

hostcache: made all host caches use structs, not pointers

This avoids unnecessary dynamic allocs and as this also removed the last
users of *hash_alloc() and *hash_destroy(), those two functions are now
removed.

multi: converted socket hash into non-allocated struct

avoids extra dynamic allocation

connection cache: avoid Curl_hash_alloc()

... by using plain structs instead of pointers for the connection cache,
we can avoid several dynamic allocations that weren't necessary.

proxy: add newline to info message

FTP: fix dangling conn->ip_addr dereference on verbose EPSV.

FTP: Make EPSV use the control IP address rather than the original host.
This ensures an alternate address is not used.
Does not apply to proxy tunnel.

tool_help: fix formatting for --next option

opts: improved the TCP keepalive examples

winbuild: Document the option used to statically link the CRT

- Document option RTLIBCFG (runtime library configuration).

Bug: https://github.com/bagder/curl/issues/254
Reported-by: Bert Huijben

netrc: Read in text mode when cygwin

Use text mode when cygwin to eliminate trailing carriage returns.

Bug: https://github.com/bagder/curl/pull/258

OS400: Add SPNEGO service name options to ILE/RPG binding.

curl_multi_info_read.3: fix typo

Reported-by: Liviu Chircu

MANUAL: language fix

Reported-by: Fred Stluka
Bug: https://github.com/bagder/curl/issues/255

gtls: properly retrieve certificate status

Also print the revocation reason if appropriate.

OpenSSL: conditional check for SSL3_RT_HEADER

The symbol is fairly new.

Reported-by: Kamil Dudka

openssl: skip trace outputs for ssl_ver == 0

The OpenSSL trace callback is wonderfully undocumented but given a
journey in the source code, it seems the cases were ssl_ver is zero
doesn't follow the same pattern and thus turned out confusing and
misleading. For now, we skip doing any CURLINFO_TEXT logging on those
but keep sending them as CURLINFO_SSL_DATA_OUT/IN.

Also, I added direction to the text info and I edited some functions
slightly.

Bug: https://github.com/bagder/curl/issues/219
Reported-by: Jay Satiro, Ashish Shukla

schannel.c: Small changes

schannel.c: Improve code path and readability

schannel.c: Improve error and return code handling upon aa99a63f03

schannel: fix regression in schannel_recv

https://github.com/bagder/curl/issues/244

Commit 145c263 changed the behavior when Curl_read_plain returns
CURLE_AGAIN. We now handle CURLE_AGAIN and SEC_I_CONTEXT_EXPIRED
correctly.

Bug born in changes made several days ago 9a91e80.

Commit: https://github.com/bagder/curl/commit/926cb9f
Reported-by: Ray Satiro

configure: remove missing and make it autogenerate

The missing file has not been autogenerated because a temporary fix was
employed in acinclude.m4 which blocked update. Removed that fix and a recent
version of missing is copied to build root.

acinclude.m4: fix test for default CA cert bundle/path

test(1) on HP-UX requires a single equals sign and fails with two.
Let's use one and make every OS happy.

CONTRIBUTING.md: remove the sourceforge mention

Reported-By: Michael Osipov

http_negotiate_sspi: added missing data variable

configure: remove --automake from libtoolize call

That option is not mentioned in the man page of libtoolize 2.4.4.19-fda4.
Moveover, a comment in line 2623 says "--automake is for 1.5 compatibility".

This option is redundant now.

build: update depedency versions, urls, example makefiles

- update default versions of dependencies (except for rare/old platforms)
- update urls
- sync examples makefiles with main ones
- remove line ending space

configure: remove autogenerated files by autoconf

* install-sh is always regenerated
* mkinstalldirs was already redudant years ago. Automake uses install for
  that. See: http://lists.gnu.org/archive/html/automake/2007-03/msg00015.html

curl_multi_add_handle: next is already NULL