generate.bat: Use buildconf.bat for prerequisite file generation

buildconf.bat: Tidy up of comments after recent commits

buildconf.bat: Added full generation of src\tool_hugehelp.c

Added support for generating the full man page based on code from
generate.bat.

buildconf.bat: Added detection of groff, nroff, perl and gzip

To allow for the full generation of tool_hugehelp.c added detection of
the required programs - based on code from generate.bat.

buildconf.bat: Move DOS variable clean-up code to separate function

Rather than duplicate future variables, during clean-up of both success
and error conditions, use a common function that can be called by both.

RELEASE-NOTES: Synced with 39dcf352d2

buildconf.bat: Added error messages on failure

buildconf.bat: Generate and clean files in the same order

buildconf.bat: Maintain compatibility with DOS based systems

Commit f08e30d7bc broke compatibility with DOS and non Windows NT based
versions of Windows due to the use of the setlocal command.

CURLOPT_RESOLVE.3: Note removal support was added in 7.42

Bug: http://curl.haxx.se/mail/lib-2015-08/0019.html
Reported-by: Inca R

checksrc.bat: Fixed error when missing *.c and *.h files

File Not Found

checksrc.bat: Fixed incorrect 'lib\vtls' path check in commit 333c36b276

checksrc.bat: Fixed error when [directory] isn't a curl source directory

The system cannot find the file specified.

checksrc.bat: Added check for unknown arguments

scripts: Added missing comments

scripts: Always perform setlocal and endlocal calls in pairs

Ensure that there isn't a mismatch between setlocal and endlocal calls,
which could have happened due to setlocal being called after certain
error conditions were checked for.

scripts: Allow -help to be specified in any argument

Allow the -help command line argument to be specified in any argument
and not just as the first.

curl_multi_remove_handle.3: fix formatting

closes #366

README: Added notes about 'Running DLL based configurations'

...as well as a TODO for a future enhancement to the project files.

Thanks-to: Jay Satiro

RELEASE-NOTES: Synced with cf8975387f

buildconf.bat: Synchronise no repository error with generate.bat

generate.bat: Added a check for the presence of a git repository

build: Added wolfSSL configurations to VC10+ project files

URL: https://github.com/bagder/curl/pull/174

build: Added wolfSSL build script for Visual Studio projects

Added the wolfSSL build script, based on build-openssl.bat, as well as
the property sheet and header file required for the upcoming additions
to the Visual Studio project files.

CHANGES: refer to the online changelog

Suggested-by: mc0e

NTLM: handle auth for only a single request

Currently when the server responds with 401 on NTLM authenticated
connection (re-used) we consider it to have failed.  However this is
legitimate and may happen when for example IIS is set configured to
'authPersistSingleRequest' or when the request goes thru a proxy (with
'via' header).

Implemented by imploying an additional state once a connection is
re-used to indicate that if we receive 401 we need to restart
authentication.

Closes #363

RELEASE-NOTES: Synced with 473807b95f

generate.bat: Use buildconf.bat for prerequisite file clean-up

buildconf.bat: Added support for file clean-up via -clean

buildconf.bat: Added progress output

buildconf.bat: Avoid using goto for file not in repository

curl_slist_append.3: add error checking to the example

buildconf.bat: Added display of usage text with -help

buildconf.bat: Added exit codes for error handling

buildconf.bat: Added our standard copyright header

buildconf.bat: Use lower-case for commands and reserved keywords

generate.bat: Only clean prerequisite files when in ALL mode

generate.bat: Moved error messages out of sub-routines

generate.bat: More use of lower-case for commands and reserved keywords

libcurl.3: fix a single typo

Closes #361

RELEASE-NOTES: synced with c4eb10e2f06f

SSH: three state machine fixups

The SSH state machine didn't clear the 'rc' variable appropriately in a
two places which prevented it from looping the way it should. And it
lacked an 'else' statement that made it possible to erroneously get
stuck in the SSH_AUTH_AGENT state.

Reported-by: Tim Stack
Closes #357

curl_gssapi: remove 'const' to fix compiler warnings

initialization discards 'const' qualifier from pointer target type

docs: formpost needs the full size at start of upload

Closes #360

sspi: Fix typo from left over from old code which referenced NTLM

References to NTLM in the identity generation should have been removed
in commit c469941293 but not all were.

win32: Fix compilation warnings from commit 40c921f8b8

connect.c:953:5: warning: initializer element is not computable at load
                 time
connect.c:953:5: warning: missing initializer for field 'dwMinorVersion'
                 of 'OSVERSIONINFOEX'
curl_sspi.c:97:5: warning: initializer element is not computable at load
                  time
curl_sspi.c:97:5: warning: missing initializer for field 'szCSDVersion'
                  of 'OSVERSIONINFOEX'

schannel: Fix compilation warning from commit 7a8e861a56

schannel.c:1125:5: warning: missing initializer for field 'dwMinorVersion'
                   of 'OSVERSIONINFOEX' [-Wmissing-field-initializers

libcurl-thread.3: minor reformatting

curl_global_init_mem.3: Warn threaded resolver needs thread safe funcs

Bug: http://curl.haxx.se/mail/lib-2015-07/0149.html
Reported-by: Eric Ridge

libcurl-thread.3: Warn memory functions must be thread safe

Bug: http://curl.haxx.se/mail/lib-2015-07/0149.html
Reported-by: Eric Ridge

RELEASE-NOTES: Synced with 8b1d00ac1a

INSTALL: Minor formatting correction in 'Legacy Windows and SSL' section

...as well as some rewording.

http: move HTTP/2 cleanup code off http_disconnect()

Otherwise it would never be called for an HTTP/2 connection, which has
its own disconnect handler.

I spotted this while debugging <https://bugzilla.redhat.com/1248389>
where the http_disconnect() handler was called on an FTP session handle
causing 'dnf' to crash.  conn->data->req.protop of type (struct FTP *)
was reinterpreted as type (struct HTTP *) which resulted in SIGSEGV in
Curl_add_buffer_free() after printing the "Connection cache is full,
closing the oldest one." message.

A previously working version of libcurl started to crash after it was
recompiled with the HTTP/2 support despite the HTTP/2 protocol was not
actually used.  This commit makes it work again although I suspect the
root cause (reinterpreting session handle data of incompatible protocol)
still has to be fixed.  Otherwise the same will happen when mixing FTP
and HTTP/2 connections and exceeding the connection cache limit.

Reported-by: Tomas Tomecek
Bug: https://bugzilla.redhat.com/1248389

ABI doc: use secure URL

ABI: remove the ascii logo

and made the indent level to 1

libcurl-multi.3: mention curl_multi_wait

... and some general rewordings to improve this docs.

Reported-by: Tim Stack
Closes #356

maketgz: Fixed some VC makefiles missing from the release tarball

VC7, VC11, VC12 and VC14 makefiles were missing from the release
tarball.

RELEASE-NOTES: Synced with 2d7e165761

build: Added VC14 project files to Makefile.am

build: Added VC14 project files

Updates to Makefile.am for the generation of the project files in
the tarball to follow.

libcurl-thread.3: Clarify CURLOPT_NOSIGNAL takes long value 1L

generate.bat: Use lower-case for commands and reserved keywords

Whilst there are no coding standards for the batch files used in curl,
most tend to use lower-case for keywords and upper-case for variables.

build: Added initial VC14 support to generate.bat

Visual Studio project files and updates to makefile.am to follow.

build: Fixed missing .opensdf files from VC10+ .gitignore files

build: Use $(ProjectName) macro for curl.exe and curld.exe filenames

This wasn't possible with the old curlsrc project filenames, but like
commit 2a615a2b64 and 11397eb6dd for libcurl use the built in Visual
Studio macros for the output filenames.

build: Renamed curl src Visual Studio project files

Following commit 957fcd9049 and in preparation for adding the VC14
project files renamed the curl source project files.

libcurl-thread.3: Revert to stricter handle wording

.. also update formatting and add WinSSL and wolfSSL to the SSL/TLS
handlers list.

libcurl-thread.3: Consolidate thread safety info

This is a new document to consolidate our thread safety information from
several documents (curl-www:features, libcurl.3, libcurl-tutorial.3).
Each document's section on multi-threading will now point to this one.

README: Corrected formatting for 'Legacy Windows and SSL' section

...as well as some wording.

build-openssl.bat: Added support for VC14

RELEASE-NOTES: synced with 0f645adc95390e8

test1902: attempt to make the test more reliable

Closes #355

comment: fix comment about adding new option support

build-openssl.bat: Show syntax if required args are missing

TODO: improve how curl works in a windows console window

Closes #322 for now

1.11 minimize dependencies with dynamicly loaded modules

Closes #349 for now

tool_operate: Fix CURLOPT_SSL_OPTIONS for builds without HTTPS

- Set CURLOPT_SSL_OPTIONS only if the tool enabled an SSL option.

Broken by me several days ago in 172b2be.
https://github.com/bagder/curl/commit/172b2be#diff-70b44ee478e58d4e1ddcf9c9a73d257b

Bug: http://curl.haxx.se/mail/lib-2015-07/0119.html
Reported-by: Dan Fandrich

configure: check if OpenSSL linking wants -ldl

To make it easier to link with static versions of OpenSSL, the configure
script now checks if -ldl is needed for linking.

Help-by: TJ Saunders

HTTP: ignore "Content-Encoding: compress"

Currently, libcurl rejects responses with "Content-Encoding: compress"
when CURLOPT_ACCEPT_ENCODING is set to "". I think that libcurl should
treat the Content-Encoding "compress" the same as other
Content-Encodings that it does not support, e.g. "bzip2". That means
just ignoring it.

openssl: work around MSVC warning

MSVC 12 complains:

lib\vtls\openssl.c(1554): warning C4701: potentially uninitialized local
variable 'verstr' used It's a false positive, but as it's normally not,
I have enabled warning-as-error for that warning.

configure: add --disable-rt option

This option disables any attempts in configure to create dependency on
stuff requiring linking to librt.so and libpthread.so, in this case this
means clock_gettime(CLOCK_MONOTONIC, &mt).

We were in need to build curl which doesn't link libpthread.so to avoid
the following bug:
https://sourceware.org/bugzilla/show_bug.cgi?id=16628.

http2: verify success of strchr() in http2_send()

Detected by Coverity.

Error: NULL_RETURNS:
lib/http2.c:1301: returned_null: "strchr" returns null (checked 103 out of 109 times).
lib/http2.c:1301: var_assigned: Assigning: "hdbuf" = null return value from "strchr".
lib/http2.c:1302: dereference: Incrementing a pointer which might be null: "hdbuf".
1300|
1301|     hdbuf = strchr(hdbuf, 0x0a);
1302|->   ++hdbuf;
1303|
1304|     authority_idx = 0;

Windows: Fix VerifyVersionInfo calls

- Fix the VerifyVersionInfo calls, which we use to test for the OS major
version, to also test for the minor version as well as the service pack
major and minor versions.

MSDN: "If you are testing the major version, you must also test the
minor version and the service pack major and minor versions."

https://msdn.microsoft.com/en-us/library/windows/desktop/ms725492.aspx

Bug: https://github.com/bagder/curl/pull/353#issuecomment-123493098
Reported-by: Marcel Raad <MarcelRaad@users.noreply.github.com>

schannel: Replace deprecated GetVersion with VerifyVersionInfo

makefile: Added support for VC14

os400: ebcdic wrappers for new functions. Upgrade ILE/RPG bindings.

libcurl: VERSIONINFO update
Addition of new procedures curl_pushheader_bynum and curl_pushheader_byname
requires VERSIONINFO updating.

http2: satisfy external references even if http2 is not compiled in.

http2: add stream != NULL checks for reliability

They should not trigger, but in case of internal problems we at least
avoid crashes this way.

symbols-in-versions: Add new CURLSSLOPT_NO_REVOKE symbol

SSL: Add an option to disable certificate revocation checks

New tool option --ssl-no-revoke.
New value CURLSSLOPT_NO_REVOKE for CURLOPT_SSL_OPTIONS.

Currently this option applies only to WinSSL where we have automatic
certificate revocation checking by default. According to the
ssl-compared chart there are other backends that have automatic checking
(NSS, wolfSSL and DarwinSSL) so we could possibly accommodate them at
some later point.

Bug: https://github.com/bagder/curl/issues/264
Reported-by: zenden2k <zenden2k@gmail.com>

runtests: Allow for spaces in curl custom path

.. also fix some typos in test's FILEFORMAT spec.

ntlm_wb: Fix theoretical memory leak

Static analysis indicated that my commit 9008f3d564 ("ntlm_wb: Fix
hard-coded limit on NTLM auth packet size") introduced a potential
memory leak on an error path, because we forget to free the buffer
before returning an error.

Fix this.

Although actually, it never happens in practice because we never *get*
here with state == NTLMSTATE_TYPE1. The state is always zero. That
might want cleaning up in a separate patch.

Reported-by: Terri Oda

strerror: Add CRYPT_E_REVOKED to SSPI error strings

libtest: call PR_Cleanup() on exit if NSPR is used

This prevents valgrind from reporting possibly lost memory that NSPR
uses for file descriptor cache and other globally allocated internal
data structures.

Reported-by: Štefan Kremeň

openssl: VMS support for SHA256

setup-vms.h: More symbols for SHA256, hacks for older VAX

openssl.h: Use OpenSSL OPENSSL_NO_SHA256 macro to allow building on VAX.

openssl.c: Use OpenSSL version checks and OPENSSL_NO_SHA256 macro to
allow building on VAX and 64 bit VMS.

examples: Fix typo in multi-single.c

http2: Fix memory leak in push header array

test2041: fixed line endings in protocol part

cyassl: fixed mismatched sha256sum function prototype