]> granicus.if.org Git - apache/blob - server/protocol.c
Remove unused code. "Next week" hasn't happened in the last 10 years or so.
[apache] / server / protocol.c
1 /* Licensed to the Apache Software Foundation (ASF) under one or more
2  * contributor license agreements.  See the NOTICE file distributed with
3  * this work for additional information regarding copyright ownership.
4  * The ASF licenses this file to You under the Apache License, Version 2.0
5  * (the "License"); you may not use this file except in compliance with
6  * the License.  You may obtain a copy of the License at
7  *
8  *     http://www.apache.org/licenses/LICENSE-2.0
9  *
10  * Unless required by applicable law or agreed to in writing, software
11  * distributed under the License is distributed on an "AS IS" BASIS,
12  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
13  * See the License for the specific language governing permissions and
14  * limitations under the License.
15  */
16
17 /*
18  * protocol.c --- routines which directly communicate with the client.
19  *
20  * Code originally by Rob McCool; much redone by Robert S. Thau
21  * and the Apache Software Foundation.
22  */
23
24 #include "apr.h"
25 #include "apr_strings.h"
26 #include "apr_buckets.h"
27 #include "apr_lib.h"
28 #include "apr_signal.h"
29 #include "apr_strmatch.h"
30
31 #define APR_WANT_STDIO          /* for sscanf */
32 #define APR_WANT_STRFUNC
33 #define APR_WANT_MEMFUNC
34 #include "apr_want.h"
35
36 #include "util_filter.h"
37 #include "ap_config.h"
38 #include "httpd.h"
39 #include "http_config.h"
40 #include "http_core.h"
41 #include "http_protocol.h"
42 #include "http_main.h"
43 #include "http_request.h"
44 #include "http_vhost.h"
45 #include "http_log.h"           /* For errors detected in basic auth common
46                                  * support code... */
47 #include "mod_core.h"
48 #include "util_charset.h"
49 #include "util_ebcdic.h"
50 #include "scoreboard.h"
51
52 #if APR_HAVE_STDARG_H
53 #include <stdarg.h>
54 #endif
55 #if APR_HAVE_UNISTD_H
56 #include <unistd.h>
57 #endif
58
59 /* we know core's module_index is 0 */
60 #undef APLOG_MODULE_INDEX
61 #define APLOG_MODULE_INDEX AP_CORE_MODULE_INDEX
62
63 APR_HOOK_STRUCT(
64     APR_HOOK_LINK(pre_read_request)
65     APR_HOOK_LINK(post_read_request)
66     APR_HOOK_LINK(log_transaction)
67     APR_HOOK_LINK(http_scheme)
68     APR_HOOK_LINK(default_port)
69     APR_HOOK_LINK(note_auth_failure)
70 )
71
72 AP_DECLARE_DATA ap_filter_rec_t *ap_old_write_func = NULL;
73
74
75 /* Patterns to match in ap_make_content_type() */
76 static const char *needcset[] = {
77     "text/plain",
78     "text/html",
79     NULL
80 };
81 static const apr_strmatch_pattern **needcset_patterns;
82 static const apr_strmatch_pattern *charset_pattern;
83
84 AP_DECLARE(void) ap_setup_make_content_type(apr_pool_t *pool)
85 {
86     int i;
87     for (i = 0; needcset[i]; i++) {
88         continue;
89     }
90     needcset_patterns = (const apr_strmatch_pattern **)
91         apr_palloc(pool, (i + 1) * sizeof(apr_strmatch_pattern *));
92     for (i = 0; needcset[i]; i++) {
93         needcset_patterns[i] = apr_strmatch_precompile(pool, needcset[i], 0);
94     }
95     needcset_patterns[i] = NULL;
96     charset_pattern = apr_strmatch_precompile(pool, "charset=", 0);
97 }
98
99 /*
100  * Builds the content-type that should be sent to the client from the
101  * content-type specified.  The following rules are followed:
102  *    - if type is NULL or "", return NULL (do not set content-type).
103  *    - if charset adding is disabled, stop processing and return type.
104  *    - then, if there are no parameters on type, add the default charset
105  *    - return type
106  */
107 AP_DECLARE(const char *)ap_make_content_type(request_rec *r, const char *type)
108 {
109     const apr_strmatch_pattern **pcset;
110     core_dir_config *conf =
111         (core_dir_config *)ap_get_core_module_config(r->per_dir_config);
112     core_request_config *request_conf;
113     apr_size_t type_len;
114
115     if (!type || *type == '\0') {
116         return NULL;
117     }
118
119     if (conf->add_default_charset != ADD_DEFAULT_CHARSET_ON) {
120         return type;
121     }
122
123     request_conf = ap_get_core_module_config(r->request_config);
124     if (request_conf->suppress_charset) {
125         return type;
126     }
127
128     type_len = strlen(type);
129
130     if (apr_strmatch(charset_pattern, type, type_len) != NULL) {
131         /* already has parameter, do nothing */
132         /* XXX we don't check the validity */
133         ;
134     }
135     else {
136         /* see if it makes sense to add the charset. At present,
137          * we only add it if the Content-type is one of needcset[]
138          */
139         for (pcset = needcset_patterns; *pcset ; pcset++) {
140             if (apr_strmatch(*pcset, type, type_len) != NULL) {
141                 struct iovec concat[3];
142                 concat[0].iov_base = (void *)type;
143                 concat[0].iov_len = type_len;
144                 concat[1].iov_base = (void *)"; charset=";
145                 concat[1].iov_len = sizeof("; charset=") - 1;
146                 concat[2].iov_base = (void *)(conf->add_default_charset_name);
147                 concat[2].iov_len = strlen(conf->add_default_charset_name);
148                 type = apr_pstrcatv(r->pool, concat, 3, NULL);
149                 break;
150             }
151         }
152     }
153
154     return type;
155 }
156
157 AP_DECLARE(void) ap_set_content_length(request_rec *r, apr_off_t clength)
158 {
159     r->clength = clength;
160     apr_table_setn(r->headers_out, "Content-Length",
161                    apr_off_t_toa(r->pool, clength));
162 }
163
164 /*
165  * Return the latest rational time from a request/mtime (modification time)
166  * pair.  We return the mtime unless it's in the future, in which case we
167  * return the current time.  We use the request time as a reference in order
168  * to limit the number of calls to time().  We don't check for futurosity
169  * unless the mtime is at least as new as the reference.
170  */
171 AP_DECLARE(apr_time_t) ap_rationalize_mtime(request_rec *r, apr_time_t mtime)
172 {
173     apr_time_t now;
174
175     /* For all static responses, it's almost certain that the file was
176      * last modified before the beginning of the request.  So there's
177      * no reason to call time(NULL) again.  But if the response has been
178      * created on demand, then it might be newer than the time the request
179      * started.  In this event we really have to call time(NULL) again
180      * so that we can give the clients the most accurate Last-Modified.  If we
181      * were given a time in the future, we return the current time - the
182      * Last-Modified can't be in the future.
183      */
184     now = (mtime < r->request_time) ? r->request_time : apr_time_now();
185     return (mtime > now) ? now : mtime;
186 }
187
188 /* Min # of bytes to allocate when reading a request line */
189 #define MIN_LINE_ALLOC 80
190
191 /* Get a line of protocol input, including any continuation lines
192  * caused by MIME folding (or broken clients) if fold != 0, and place it
193  * in the buffer s, of size n bytes, without the ending newline.
194  *
195  * If s is NULL, ap_rgetline_core will allocate necessary memory from r->pool.
196  *
197  * Returns APR_SUCCESS if there are no problems and sets *read to be
198  * the full length of s.
199  *
200  * APR_ENOSPC is returned if there is not enough buffer space.
201  * Other errors may be returned on other errors.
202  *
203  * The LF is *not* returned in the buffer.  Therefore, a *read of 0
204  * indicates that an empty line was read.
205  *
206  * Notes: Because the buffer uses 1 char for NUL, the most we can return is
207  *        (n - 1) actual characters.
208  *
209  *        If no LF is detected on the last line due to a dropped connection
210  *        or a full buffer, that's considered an error.
211  */
212 AP_DECLARE(apr_status_t) ap_rgetline_core(char **s, apr_size_t n,
213                                           apr_size_t *read, request_rec *r,
214                                           int fold, apr_bucket_brigade *bb)
215 {
216     apr_status_t rv;
217     apr_bucket *e;
218     apr_size_t bytes_handled = 0, current_alloc = 0;
219     char *pos, *last_char = *s;
220     int do_alloc = (*s == NULL), saw_eos = 0;
221
222     /*
223      * Initialize last_char as otherwise a random value will be compared
224      * against APR_ASCII_LF at the end of the loop if bb only contains
225      * zero-length buckets.
226      */
227     if (last_char)
228         *last_char = '\0';
229
230     for (;;) {
231         apr_brigade_cleanup(bb);
232         rv = ap_get_brigade(r->input_filters, bb, AP_MODE_GETLINE,
233                             APR_BLOCK_READ, 0);
234         if (rv != APR_SUCCESS) {
235             return rv;
236         }
237
238         /* Something horribly wrong happened.  Someone didn't block! */
239         if (APR_BRIGADE_EMPTY(bb)) {
240             return APR_EGENERAL;
241         }
242
243         for (e = APR_BRIGADE_FIRST(bb);
244              e != APR_BRIGADE_SENTINEL(bb);
245              e = APR_BUCKET_NEXT(e))
246         {
247             const char *str;
248             apr_size_t len;
249
250             /* If we see an EOS, don't bother doing anything more. */
251             if (APR_BUCKET_IS_EOS(e)) {
252                 saw_eos = 1;
253                 break;
254             }
255
256             rv = apr_bucket_read(e, &str, &len, APR_BLOCK_READ);
257             if (rv != APR_SUCCESS) {
258                 return rv;
259             }
260
261             if (len == 0) {
262                 /* no use attempting a zero-byte alloc (hurts when
263                  * using --with-efence --enable-pool-debug) or
264                  * doing any of the other logic either
265                  */
266                 continue;
267             }
268
269             /* Would this overrun our buffer?  If so, we'll die. */
270             if (n < bytes_handled + len) {
271                 *read = bytes_handled;
272                 if (*s) {
273                     /* ensure this string is NUL terminated */
274                     if (bytes_handled > 0) {
275                         (*s)[bytes_handled-1] = '\0';
276                     }
277                     else {
278                         (*s)[0] = '\0';
279                     }
280                 }
281                 return APR_ENOSPC;
282             }
283
284             /* Do we have to handle the allocation ourselves? */
285             if (do_alloc) {
286                 /* We'll assume the common case where one bucket is enough. */
287                 if (!*s) {
288                     current_alloc = len;
289                     if (current_alloc < MIN_LINE_ALLOC) {
290                         current_alloc = MIN_LINE_ALLOC;
291                     }
292                     *s = apr_palloc(r->pool, current_alloc);
293                 }
294                 else if (bytes_handled + len > current_alloc) {
295                     /* Increase the buffer size */
296                     apr_size_t new_size = current_alloc * 2;
297                     char *new_buffer;
298
299                     if (bytes_handled + len > new_size) {
300                         new_size = (bytes_handled + len) * 2;
301                     }
302
303                     new_buffer = apr_palloc(r->pool, new_size);
304
305                     /* Copy what we already had. */
306                     memcpy(new_buffer, *s, bytes_handled);
307                     current_alloc = new_size;
308                     *s = new_buffer;
309                 }
310             }
311
312             /* Just copy the rest of the data to the end of the old buffer. */
313             pos = *s + bytes_handled;
314             memcpy(pos, str, len);
315             last_char = pos + len - 1;
316
317             /* We've now processed that new data - update accordingly. */
318             bytes_handled += len;
319         }
320
321         /* If we got a full line of input, stop reading */
322         if (last_char && (*last_char == APR_ASCII_LF)) {
323             break;
324         }
325     }
326
327     /* Now NUL-terminate the string at the end of the line;
328      * if the last-but-one character is a CR, terminate there */
329     if (last_char > *s && last_char[-1] == APR_ASCII_CR) {
330         last_char--;
331     }
332     *last_char = '\0';
333     bytes_handled = last_char - *s;
334
335     /* If we're folding, we have more work to do.
336      *
337      * Note that if an EOS was seen, we know we can't have another line.
338      */
339     if (fold && bytes_handled && !saw_eos) {
340         for (;;) {
341             const char *str;
342             apr_size_t len;
343             char c;
344
345             /* Clear the temp brigade for this filter read. */
346             apr_brigade_cleanup(bb);
347
348             /* We only care about the first byte. */
349             rv = ap_get_brigade(r->input_filters, bb, AP_MODE_SPECULATIVE,
350                                 APR_BLOCK_READ, 1);
351             if (rv != APR_SUCCESS) {
352                 return rv;
353             }
354
355             if (APR_BRIGADE_EMPTY(bb)) {
356                 break;
357             }
358
359             e = APR_BRIGADE_FIRST(bb);
360
361             /* If we see an EOS, don't bother doing anything more. */
362             if (APR_BUCKET_IS_EOS(e)) {
363                 break;
364             }
365
366             rv = apr_bucket_read(e, &str, &len, APR_BLOCK_READ);
367             if (rv != APR_SUCCESS) {
368                 apr_brigade_cleanup(bb);
369                 return rv;
370             }
371
372             /* Found one, so call ourselves again to get the next line.
373              *
374              * FIXME: If the folding line is completely blank, should we
375              * stop folding?  Does that require also looking at the next
376              * char?
377              */
378             /* When we call destroy, the buckets are deleted, so save that
379              * one character we need.  This simplifies our execution paths
380              * at the cost of one character read.
381              */
382             c = *str;
383             if (c == APR_ASCII_BLANK || c == APR_ASCII_TAB) {
384                 /* Do we have enough space? We may be full now. */
385                 if (bytes_handled >= n) {
386                     *read = n;
387                     /* ensure this string is terminated */
388                     (*s)[n-1] = '\0';
389                     return APR_ENOSPC;
390                 }
391                 else {
392                     apr_size_t next_size, next_len;
393                     char *tmp;
394
395                     /* If we're doing the allocations for them, we have to
396                      * give ourselves a NULL and copy it on return.
397                      */
398                     if (do_alloc) {
399                         tmp = NULL;
400                     } else {
401                         /* We're null terminated. */
402                         tmp = last_char;
403                     }
404
405                     next_size = n - bytes_handled;
406
407                     rv = ap_rgetline_core(&tmp, next_size,
408                                           &next_len, r, 0, bb);
409                     if (rv != APR_SUCCESS) {
410                         return rv;
411                     }
412
413                     if (do_alloc && next_len > 0) {
414                         char *new_buffer;
415                         apr_size_t new_size = bytes_handled + next_len + 1;
416
417                         /* we need to alloc an extra byte for a null */
418                         new_buffer = apr_palloc(r->pool, new_size);
419
420                         /* Copy what we already had. */
421                         memcpy(new_buffer, *s, bytes_handled);
422
423                         /* copy the new line, including the trailing null */
424                         memcpy(new_buffer + bytes_handled, tmp, next_len + 1);
425                         *s = new_buffer;
426                     }
427
428                     last_char += next_len;
429                     bytes_handled += next_len;
430                 }
431             }
432             else { /* next character is not tab or space */
433                 break;
434             }
435         }
436     }
437     *read = bytes_handled;
438
439     /* PR#43039: We shouldn't accept NULL bytes within the line */
440     if (strlen(*s) < bytes_handled) {
441         return APR_EINVAL;
442     }
443
444     return APR_SUCCESS;
445 }
446
447 #if APR_CHARSET_EBCDIC
448 AP_DECLARE(apr_status_t) ap_rgetline(char **s, apr_size_t n,
449                                      apr_size_t *read, request_rec *r,
450                                      int fold, apr_bucket_brigade *bb)
451 {
452     /* on ASCII boxes, ap_rgetline is a macro which simply invokes
453      * ap_rgetline_core with the same parms
454      *
455      * on EBCDIC boxes, each complete http protocol input line needs to be
456      * translated into the code page used by the compiler.  Since
457      * ap_rgetline_core uses recursion, we do the translation in a wrapper
458      * function to ensure that each input character gets translated only once.
459      */
460     apr_status_t rv;
461
462     rv = ap_rgetline_core(s, n, read, r, fold, bb);
463     if (rv == APR_SUCCESS) {
464         ap_xlate_proto_from_ascii(*s, *read);
465     }
466     return rv;
467 }
468 #endif
469
470 AP_DECLARE(int) ap_getline(char *s, int n, request_rec *r, int fold)
471 {
472     char *tmp_s = s;
473     apr_status_t rv;
474     apr_size_t len;
475     apr_bucket_brigade *tmp_bb;
476
477     tmp_bb = apr_brigade_create(r->pool, r->connection->bucket_alloc);
478     rv = ap_rgetline(&tmp_s, n, &len, r, fold, tmp_bb);
479     apr_brigade_destroy(tmp_bb);
480
481     /* Map the out-of-space condition to the old API. */
482     if (rv == APR_ENOSPC) {
483         return n;
484     }
485
486     /* Anything else is just bad. */
487     if (rv != APR_SUCCESS) {
488         return -1;
489     }
490
491     return (int)len;
492 }
493
494 /* parse_uri: break apart the uri
495  * Side Effects:
496  * - sets r->args to rest after '?' (or NULL if no '?')
497  * - sets r->uri to request uri (without r->args part)
498  * - sets r->hostname (if not set already) from request (scheme://host:port)
499  */
500 AP_CORE_DECLARE(void) ap_parse_uri(request_rec *r, const char *uri)
501 {
502     int status = HTTP_OK;
503
504     r->unparsed_uri = apr_pstrdup(r->pool, uri);
505
506     /* http://issues.apache.org/bugzilla/show_bug.cgi?id=31875
507      * http://issues.apache.org/bugzilla/show_bug.cgi?id=28450
508      *
509      * This is not in fact a URI, it's a path.  That matters in the
510      * case of a leading double-slash.  We need to resolve the issue
511      * by normalising that out before treating it as a URI.
512      */
513     while ((uri[0] == '/') && (uri[1] == '/')) {
514         ++uri ;
515     }
516     if (r->method_number == M_CONNECT) {
517         status = apr_uri_parse_hostinfo(r->pool, uri, &r->parsed_uri);
518     }
519     else {
520         status = apr_uri_parse(r->pool, uri, &r->parsed_uri);
521     }
522
523     if (status == APR_SUCCESS) {
524         /* if it has a scheme we may need to do absoluteURI vhost stuff */
525         if (r->parsed_uri.scheme
526             && !strcasecmp(r->parsed_uri.scheme, ap_http_scheme(r))) {
527             r->hostname = r->parsed_uri.hostname;
528         }
529         else if (r->method_number == M_CONNECT) {
530             r->hostname = r->parsed_uri.hostname;
531         }
532
533         r->args = r->parsed_uri.query;
534         r->uri = r->parsed_uri.path ? r->parsed_uri.path
535                  : apr_pstrdup(r->pool, "/");
536
537 #if defined(OS2) || defined(WIN32)
538         /* Handle path translations for OS/2 and plug security hole.
539          * This will prevent "http://www.wherever.com/..\..\/" from
540          * returning a directory for the root drive.
541          */
542         {
543             char *x;
544
545             for (x = r->uri; (x = strchr(x, '\\')) != NULL; )
546                 *x = '/';
547         }
548 #endif /* OS2 || WIN32 */
549     }
550     else {
551         r->args = NULL;
552         r->hostname = NULL;
553         r->status = HTTP_BAD_REQUEST;             /* set error status */
554         r->uri = apr_pstrdup(r->pool, uri);
555     }
556 }
557
558 static int read_request_line(request_rec *r, apr_bucket_brigade *bb)
559 {
560     const char *ll;
561     const char *uri;
562     const char *pro;
563
564     int major = 1, minor = 0;   /* Assume HTTP/1.0 if non-"HTTP" protocol */
565     char http[5];
566     apr_size_t len;
567     int num_blank_lines = 0;
568     int max_blank_lines = r->server->limit_req_fields;
569
570     if (max_blank_lines <= 0) {
571         max_blank_lines = DEFAULT_LIMIT_REQUEST_FIELDS;
572     }
573
574     /* Read past empty lines until we get a real request line,
575      * a read error, the connection closes (EOF), or we timeout.
576      *
577      * We skip empty lines because browsers have to tack a CRLF on to the end
578      * of POSTs to support old CERN webservers.  But note that we may not
579      * have flushed any previous response completely to the client yet.
580      * We delay the flush as long as possible so that we can improve
581      * performance for clients that are pipelining requests.  If a request
582      * is pipelined then we won't block during the (implicit) read() below.
583      * If the requests aren't pipelined, then the client is still waiting
584      * for the final buffer flush from us, and we will block in the implicit
585      * read().  B_SAFEREAD ensures that the BUFF layer flushes if it will
586      * have to block during a read.
587      */
588
589     do {
590         apr_status_t rv;
591
592         /* ensure ap_rgetline allocates memory each time thru the loop
593          * if there are empty lines
594          */
595         r->the_request = NULL;
596         rv = ap_rgetline(&(r->the_request), (apr_size_t)(r->server->limit_req_line + 2),
597                          &len, r, 0, bb);
598
599         if (rv != APR_SUCCESS) {
600             r->request_time = apr_time_now();
601
602             /* ap_rgetline returns APR_ENOSPC if it fills up the
603              * buffer before finding the end-of-line.  This is only going to
604              * happen if it exceeds the configured limit for a request-line.
605              */
606             if (APR_STATUS_IS_ENOSPC(rv)) {
607                 r->status    = HTTP_REQUEST_URI_TOO_LARGE;
608                 r->proto_num = HTTP_VERSION(1,0);
609                 r->protocol  = apr_pstrdup(r->pool, "HTTP/1.0");
610             }
611             else if (APR_STATUS_IS_TIMEUP(rv)) {
612                 r->status = HTTP_REQUEST_TIME_OUT;
613             }
614             else if (APR_STATUS_IS_EINVAL(rv)) {
615                 r->status = HTTP_BAD_REQUEST;
616             }
617             return 0;
618         }
619     } while ((len <= 0) && (++num_blank_lines < max_blank_lines));
620
621     if (APLOGrtrace5(r)) {
622         ap_log_rerror(APLOG_MARK, APLOG_TRACE5, 0, r,
623                       "Request received from client: %s",
624                       ap_escape_logitem(r->pool, r->the_request));
625     }
626
627     /* we've probably got something to do, ignore graceful restart requests */
628
629     r->request_time = apr_time_now();
630     ll = r->the_request;
631     r->method = ap_getword_white(r->pool, &ll);
632
633     uri = ap_getword_white(r->pool, &ll);
634
635     /* Provide quick information about the request method as soon as known */
636
637     r->method_number = ap_method_number_of(r->method);
638     if (r->method_number == M_GET && r->method[0] == 'H') {
639         r->header_only = 1;
640     }
641
642     ap_parse_uri(r, uri);
643
644     if (ll[0]) {
645         r->assbackwards = 0;
646         pro = ll;
647         len = strlen(ll);
648     } else {
649         core_server_config *conf;
650         conf = ap_get_core_module_config(r->server->module_config);
651         r->assbackwards = 1;
652         pro = "HTTP/0.9";
653         len = 8;
654         if (conf->http09_enable == AP_HTTP09_DISABLE) {
655                 r->status = HTTP_VERSION_NOT_SUPPORTED;
656                 r->protocol = apr_pstrmemdup(r->pool, pro, len);
657                 r->proto_num = HTTP_VERSION(0, 9);
658                 ap_log_rerror(APLOG_MARK, APLOG_DEBUG, 0, r, APLOGNO(02401)
659                               "HTTP/0.9 denied by server configuration");
660                 return 0;
661         }
662     }
663     r->protocol = apr_pstrmemdup(r->pool, pro, len);
664
665     /* XXX ap_update_connection_status(conn->id, "Protocol", r->protocol); */
666
667     /* Avoid sscanf in the common case */
668     if (len == 8
669         && pro[0] == 'H' && pro[1] == 'T' && pro[2] == 'T' && pro[3] == 'P'
670         && pro[4] == '/' && apr_isdigit(pro[5]) && pro[6] == '.'
671         && apr_isdigit(pro[7])) {
672         r->proto_num = HTTP_VERSION(pro[5] - '0', pro[7] - '0');
673     }
674     else if (3 == sscanf(r->protocol, "%4s/%u.%u", http, &major, &minor)
675              && (strcasecmp("http", http) == 0)
676              && (minor < HTTP_VERSION(1, 0)) ) /* don't allow HTTP/0.1000 */
677         r->proto_num = HTTP_VERSION(major, minor);
678     else
679         r->proto_num = HTTP_VERSION(1, 0);
680
681     return 1;
682 }
683
684 static int table_do_fn_check_lengths(void *r_, const char *key,
685                                      const char *value)
686 {
687     request_rec *r = r_;
688     if (value == NULL || r->server->limit_req_fieldsize >= strlen(value) )
689         return 1;
690
691     r->status = HTTP_BAD_REQUEST;
692     apr_table_setn(r->notes, "error-notes",
693                    apr_pstrcat(r->pool, "Size of a request header field "
694                                "after merging exceeds server limit.<br />"
695                                "\n<pre>\n",
696                                ap_escape_html(r->pool, key),
697                                "</pre>\n", NULL));
698     ap_log_rerror(APLOG_MARK, APLOG_INFO, 0, r, APLOGNO(00560) "Request header "
699                   "exceeds LimitRequestFieldSize after merging: %s", key);
700     return 0;
701 }
702
703 /* get the length of the field name for logging, but no more than 80 bytes */
704 #define LOG_NAME_MAX_LEN 80
705 static int field_name_len(const char *field)
706 {
707     const char *end = ap_strchr_c(field, ':');
708     if (end == NULL || end - field > LOG_NAME_MAX_LEN)
709         return LOG_NAME_MAX_LEN;
710     return end - field;
711 }
712
713 AP_DECLARE(void) ap_get_mime_headers_core(request_rec *r, apr_bucket_brigade *bb)
714 {
715     char *last_field = NULL;
716     apr_size_t last_len = 0;
717     apr_size_t alloc_len = 0;
718     char *field;
719     char *value;
720     apr_size_t len;
721     int fields_read = 0;
722     char *tmp_field;
723
724     /*
725      * Read header lines until we get the empty separator line, a read error,
726      * the connection closes (EOF), reach the server limit, or we timeout.
727      */
728     while(1) {
729         apr_status_t rv;
730         int folded = 0;
731
732         field = NULL;
733         rv = ap_rgetline(&field, r->server->limit_req_fieldsize + 2,
734                          &len, r, 0, bb);
735
736         if (rv != APR_SUCCESS) {
737             if (APR_STATUS_IS_TIMEUP(rv)) {
738                 r->status = HTTP_REQUEST_TIME_OUT;
739             }
740             else {
741                 r->status = HTTP_BAD_REQUEST;
742             }
743
744             /* ap_rgetline returns APR_ENOSPC if it fills up the buffer before
745              * finding the end-of-line.  This is only going to happen if it
746              * exceeds the configured limit for a field size.
747              */
748             if (rv == APR_ENOSPC) {
749                 const char *field_escaped;
750                 if (field) {
751                     /* ensure ap_escape_html will terminate correctly */
752                     field[len - 1] = '\0';
753                     field_escaped = ap_escape_html(r->pool, field);
754                 }
755                 else {
756                     field_escaped = field = "";
757                 }
758
759                 apr_table_setn(r->notes, "error-notes",
760                                apr_psprintf(r->pool,
761                                            "Size of a request header field "
762                                            "exceeds server limit.<br />\n"
763                                            "<pre>\n%.*s\n</pre>\n", 
764                                            field_name_len(field_escaped),
765                                            field_escaped));
766                 ap_log_rerror(APLOG_MARK, APLOG_INFO, 0, r, APLOGNO(00561)
767                               "Request header exceeds LimitRequestFieldSize%s"
768                               "%.*s",
769                               *field ? ": " : "",
770                               field_name_len(field), field);
771             }
772             return;
773         }
774
775         if (last_field != NULL) {
776             if ((len > 0) && ((*field == '\t') || *field == ' ')) {
777                 /* This line is a continuation of the preceding line(s),
778                  * so append it to the line that we've set aside.
779                  * Note: this uses a power-of-two allocator to avoid
780                  * doing O(n) allocs and using O(n^2) space for
781                  * continuations that span many many lines.
782                  */
783                 apr_size_t fold_len = last_len + len + 1; /* trailing null */
784
785                 if (fold_len >= (apr_size_t)(r->server->limit_req_fieldsize)) {
786                     r->status = HTTP_BAD_REQUEST;
787                     /* report what we have accumulated so far before the
788                      * overflow (last_field) as the field with the problem
789                      */
790                     apr_table_setn(r->notes, "error-notes",
791                                    apr_psprintf(r->pool,
792                                                "Size of a request header field "
793                                                "after folding "
794                                                "exceeds server limit.<br />\n"
795                                                "<pre>\n%.*s\n</pre>\n", 
796                                                field_name_len(last_field), 
797                                                ap_escape_html(r->pool, last_field)));
798                     ap_log_rerror(APLOG_MARK, APLOG_INFO, 0, r, APLOGNO(00562)
799                                   "Request header exceeds LimitRequestFieldSize "
800                                   "after folding: %.*s",
801                                   field_name_len(last_field), last_field);
802                     return;
803                 }
804
805                 if (fold_len > alloc_len) {
806                     char *fold_buf;
807                     alloc_len += alloc_len;
808                     if (fold_len > alloc_len) {
809                         alloc_len = fold_len;
810                     }
811                     fold_buf = (char *)apr_palloc(r->pool, alloc_len);
812                     memcpy(fold_buf, last_field, last_len);
813                     last_field = fold_buf;
814                 }
815                 memcpy(last_field + last_len, field, len +1); /* +1 for nul */
816                 last_len += len;
817                 folded = 1;
818             }
819             else /* not a continuation line */ {
820
821                 if (r->server->limit_req_fields
822                     && (++fields_read > r->server->limit_req_fields)) {
823                     r->status = HTTP_BAD_REQUEST;
824                     apr_table_setn(r->notes, "error-notes",
825                                    "The number of request header fields "
826                                    "exceeds this server's limit.");
827                     ap_log_rerror(APLOG_MARK, APLOG_INFO, 0, r, APLOGNO(00563)
828                                   "Number of request headers exceeds "
829                                   "LimitRequestFields");
830                     return;
831                 }
832
833                 if (!(value = strchr(last_field, ':'))) { /* Find ':' or    */
834                     r->status = HTTP_BAD_REQUEST;      /* abort bad request */
835                     apr_table_setn(r->notes, "error-notes",
836                                    apr_psprintf(r->pool,
837                                                "Request header field is "
838                                                "missing ':' separator.<br />\n"
839                                                "<pre>\n%.*s</pre>\n", 
840                                                (int)LOG_NAME_MAX_LEN,
841                                                ap_escape_html(r->pool,
842                                                               last_field)));
843                     ap_log_rerror(APLOG_MARK, APLOG_INFO, 0, r, APLOGNO(00564)
844                                   "Request header field is missing ':' "
845                                   "separator: %.*s", (int)LOG_NAME_MAX_LEN,
846                                   last_field);
847                     return;
848                 }
849
850                 tmp_field = value - 1; /* last character of field-name */
851
852                 *value++ = '\0'; /* NUL-terminate at colon */
853
854                 while (*value == ' ' || *value == '\t') {
855                     ++value;            /* Skip to start of value   */
856                 }
857
858                 /* Strip LWS after field-name: */
859                 while (tmp_field > last_field
860                        && (*tmp_field == ' ' || *tmp_field == '\t')) {
861                     *tmp_field-- = '\0';
862                 }
863
864                 /* Strip LWS after field-value: */
865                 tmp_field = last_field + last_len - 1;
866                 while (tmp_field > value
867                        && (*tmp_field == ' ' || *tmp_field == '\t')) {
868                     *tmp_field-- = '\0';
869                 }
870
871                 apr_table_addn(r->headers_in, last_field, value);
872
873                 /* reset the alloc_len so that we'll allocate a new
874                  * buffer if we have to do any more folding: we can't
875                  * use the previous buffer because its contents are
876                  * now part of r->headers_in
877                  */
878                 alloc_len = 0;
879
880             } /* end if current line is not a continuation starting with tab */
881         }
882
883         /* Found a blank line, stop. */
884         if (len == 0) {
885             break;
886         }
887
888         /* Keep track of this line so that we can parse it on
889          * the next loop iteration.  (In the folded case, last_field
890          * has been updated already.)
891          */
892         if (!folded) {
893             last_field = field;
894             last_len = len;
895         }
896     }
897
898     /* Combine multiple message-header fields with the same
899      * field-name, following RFC 2616, 4.2.
900      */
901     apr_table_compress(r->headers_in, APR_OVERLAP_TABLES_MERGE);
902
903     /* enforce LimitRequestFieldSize for merged headers */
904     apr_table_do(table_do_fn_check_lengths, r, r->headers_in, NULL);
905 }
906
907 AP_DECLARE(void) ap_get_mime_headers(request_rec *r)
908 {
909     apr_bucket_brigade *tmp_bb;
910     tmp_bb = apr_brigade_create(r->pool, r->connection->bucket_alloc);
911     ap_get_mime_headers_core(r, tmp_bb);
912     apr_brigade_destroy(tmp_bb);
913 }
914
915 request_rec *ap_read_request(conn_rec *conn)
916 {
917     request_rec *r;
918     apr_pool_t *p;
919     const char *expect;
920     int access_status = HTTP_OK;
921     apr_bucket_brigade *tmp_bb;
922     apr_socket_t *csd;
923     apr_interval_time_t cur_timeout;
924
925
926     apr_pool_create(&p, conn->pool);
927     apr_pool_tag(p, "request");
928     r = apr_pcalloc(p, sizeof(request_rec));
929     AP_READ_REQUEST_ENTRY((intptr_t)r, (uintptr_t)conn);
930     r->pool            = p;
931     r->connection      = conn;
932     r->server          = conn->base_server;
933
934     r->user            = NULL;
935     r->ap_auth_type    = NULL;
936
937     r->allowed_methods = ap_make_method_list(p, 2);
938
939     r->headers_in      = apr_table_make(r->pool, 25);
940     r->subprocess_env  = apr_table_make(r->pool, 25);
941     r->headers_out     = apr_table_make(r->pool, 12);
942     r->err_headers_out = apr_table_make(r->pool, 5);
943     r->notes           = apr_table_make(r->pool, 5);
944
945     r->request_config  = ap_create_request_config(r->pool);
946     /* Must be set before we run create request hook */
947
948     r->proto_output_filters = conn->output_filters;
949     r->output_filters  = r->proto_output_filters;
950     r->proto_input_filters = conn->input_filters;
951     r->input_filters   = r->proto_input_filters;
952     ap_run_create_request(r);
953     r->per_dir_config  = r->server->lookup_defaults;
954
955     r->sent_bodyct     = 0;                      /* bytect isn't for body */
956
957     r->read_length     = 0;
958     r->read_body       = REQUEST_NO_BODY;
959
960     r->status          = HTTP_OK;  /* Until further notice */
961     r->the_request     = NULL;
962
963     /* Begin by presuming any module can make its own path_info assumptions,
964      * until some module interjects and changes the value.
965      */
966     r->used_path_info = AP_REQ_DEFAULT_PATH_INFO;
967
968     r->useragent_addr = conn->client_addr;
969     r->useragent_ip = conn->client_ip;
970
971     tmp_bb = apr_brigade_create(r->pool, r->connection->bucket_alloc);
972
973     ap_run_pre_read_request(r, conn);
974
975     /* Get the request... */
976     if (!read_request_line(r, tmp_bb)) {
977         if (r->status == HTTP_REQUEST_URI_TOO_LARGE
978             || r->status == HTTP_BAD_REQUEST
979             || r->status == HTTP_VERSION_NOT_SUPPORTED) {
980             if (r->status == HTTP_REQUEST_URI_TOO_LARGE) {
981                 ap_log_rerror(APLOG_MARK, APLOG_INFO, 0, r, APLOGNO(00565)
982                               "request failed: URI too long (longer than %d)",
983                               r->server->limit_req_line);
984             }
985             else if (r->method == NULL) {
986                 ap_log_rerror(APLOG_MARK, APLOG_INFO, 0, r, APLOGNO(00566)
987                               "request failed: invalid characters in URI");
988             }
989             ap_send_error_response(r, 0);
990             ap_update_child_status(conn->sbh, SERVER_BUSY_LOG, r);
991             ap_run_log_transaction(r);
992             apr_brigade_destroy(tmp_bb);
993             goto traceout;
994         }
995         else if (r->status == HTTP_REQUEST_TIME_OUT) {
996             ap_update_child_status(conn->sbh, SERVER_BUSY_LOG, r);
997             if (!r->connection->keepalives) {
998                 ap_run_log_transaction(r);
999             }
1000             apr_brigade_destroy(tmp_bb);
1001             goto traceout;
1002         }
1003
1004         apr_brigade_destroy(tmp_bb);
1005         r = NULL;
1006         goto traceout;
1007     }
1008
1009     /* We may have been in keep_alive_timeout mode, so toggle back
1010      * to the normal timeout mode as we fetch the header lines,
1011      * as necessary.
1012      */
1013     csd = ap_get_conn_socket(conn);
1014     apr_socket_timeout_get(csd, &cur_timeout);
1015     if (cur_timeout != conn->base_server->timeout) {
1016         apr_socket_timeout_set(csd, conn->base_server->timeout);
1017         cur_timeout = conn->base_server->timeout;
1018     }
1019
1020     if (!r->assbackwards) {
1021         ap_get_mime_headers_core(r, tmp_bb);
1022         if (r->status != HTTP_OK) {
1023             ap_log_rerror(APLOG_MARK, APLOG_INFO, 0, r, APLOGNO(00567)
1024                           "request failed: error reading the headers");
1025             ap_send_error_response(r, 0);
1026             ap_update_child_status(conn->sbh, SERVER_BUSY_LOG, r);
1027             ap_run_log_transaction(r);
1028             apr_brigade_destroy(tmp_bb);
1029             goto traceout;
1030         }
1031
1032         if (apr_table_get(r->headers_in, "Transfer-Encoding")
1033             && apr_table_get(r->headers_in, "Content-Length")) {
1034             /* 2616 section 4.4, point 3: "if both Transfer-Encoding
1035              * and Content-Length are received, the latter MUST be
1036              * ignored"; so unset it here to prevent any confusion
1037              * later. */
1038             apr_table_unset(r->headers_in, "Content-Length");
1039         }
1040     }
1041     else {
1042         if (r->header_only) {
1043             /*
1044              * Client asked for headers only with HTTP/0.9, which doesn't send
1045              * headers! Have to dink things just to make sure the error message
1046              * comes through...
1047              */
1048             ap_log_rerror(APLOG_MARK, APLOG_INFO, 0, r, APLOGNO(00568)
1049                           "client sent invalid HTTP/0.9 request: HEAD %s",
1050                           r->uri);
1051             r->header_only = 0;
1052             r->status = HTTP_BAD_REQUEST;
1053             ap_send_error_response(r, 0);
1054             ap_update_child_status(conn->sbh, SERVER_BUSY_LOG, r);
1055             ap_run_log_transaction(r);
1056             apr_brigade_destroy(tmp_bb);
1057             goto traceout;
1058         }
1059     }
1060
1061     apr_brigade_destroy(tmp_bb);
1062
1063     /* update what we think the virtual host is based on the headers we've
1064      * now read. may update status.
1065      */
1066     ap_update_vhost_from_headers(r);
1067
1068     /* Toggle to the Host:-based vhost's timeout mode to fetch the
1069      * request body and send the response body, if needed.
1070      */
1071     if (cur_timeout != r->server->timeout) {
1072         apr_socket_timeout_set(csd, r->server->timeout);
1073         cur_timeout = r->server->timeout;
1074     }
1075
1076     /* we may have switched to another server */
1077     r->per_dir_config = r->server->lookup_defaults;
1078
1079     if ((!r->hostname && (r->proto_num >= HTTP_VERSION(1, 1)))
1080         || ((r->proto_num == HTTP_VERSION(1, 1))
1081             && !apr_table_get(r->headers_in, "Host"))) {
1082         /*
1083          * Client sent us an HTTP/1.1 or later request without telling us the
1084          * hostname, either with a full URL or a Host: header. We therefore
1085          * need to (as per the 1.1 spec) send an error.  As a special case,
1086          * HTTP/1.1 mentions twice (S9, S14.23) that a request MUST contain
1087          * a Host: header, and the server MUST respond with 400 if it doesn't.
1088          */
1089         access_status = HTTP_BAD_REQUEST;
1090         ap_log_rerror(APLOG_MARK, APLOG_INFO, 0, r, APLOGNO(00569)
1091                       "client sent HTTP/1.1 request without hostname "
1092                       "(see RFC2616 section 14.23): %s", r->uri);
1093     }
1094
1095     /*
1096      * Add the HTTP_IN filter here to ensure that ap_discard_request_body
1097      * called by ap_die and by ap_send_error_response works correctly on
1098      * status codes that do not cause the connection to be dropped and
1099      * in situations where the connection should be kept alive.
1100      */
1101
1102     ap_add_input_filter_handle(ap_http_input_filter_handle,
1103                                NULL, r, r->connection);
1104
1105     if (access_status != HTTP_OK
1106         || (access_status = ap_run_post_read_request(r))) {
1107         ap_die(access_status, r);
1108         ap_update_child_status(conn->sbh, SERVER_BUSY_LOG, r);
1109         ap_run_log_transaction(r);
1110         r = NULL;
1111         goto traceout;
1112     }
1113
1114     if (((expect = apr_table_get(r->headers_in, "Expect")) != NULL)
1115         && (expect[0] != '\0')) {
1116         /*
1117          * The Expect header field was added to HTTP/1.1 after RFC 2068
1118          * as a means to signal when a 100 response is desired and,
1119          * unfortunately, to signal a poor man's mandatory extension that
1120          * the server must understand or return 417 Expectation Failed.
1121          */
1122         if (strcasecmp(expect, "100-continue") == 0) {
1123             r->expecting_100 = 1;
1124         }
1125         else {
1126             r->status = HTTP_EXPECTATION_FAILED;
1127             ap_log_rerror(APLOG_MARK, APLOG_INFO, 0, r, APLOGNO(00570)
1128                           "client sent an unrecognized expectation value of "
1129                           "Expect: %s", expect);
1130             ap_send_error_response(r, 0);
1131             ap_update_child_status(conn->sbh, SERVER_BUSY_LOG, r);
1132             ap_run_log_transaction(r);
1133             goto traceout;
1134         }
1135     }
1136
1137     AP_READ_REQUEST_SUCCESS((uintptr_t)r, (char *)r->method, (char *)r->uri, (char *)r->server->defn_name, r->status);
1138     return r;
1139     traceout:
1140     AP_READ_REQUEST_FAILURE((uintptr_t)r);
1141     return r;
1142 }
1143
1144 /* if a request with a body creates a subrequest, remove original request's
1145  * input headers which pertain to the body which has already been read.
1146  * out-of-line helper function for ap_set_sub_req_protocol.
1147  */
1148
1149 static void strip_headers_request_body(request_rec *rnew)
1150 {
1151     apr_table_unset(rnew->headers_in, "Content-Encoding");
1152     apr_table_unset(rnew->headers_in, "Content-Language");
1153     apr_table_unset(rnew->headers_in, "Content-Length");
1154     apr_table_unset(rnew->headers_in, "Content-Location");
1155     apr_table_unset(rnew->headers_in, "Content-MD5");
1156     apr_table_unset(rnew->headers_in, "Content-Range");
1157     apr_table_unset(rnew->headers_in, "Content-Type");
1158     apr_table_unset(rnew->headers_in, "Expires");
1159     apr_table_unset(rnew->headers_in, "Last-Modified");
1160     apr_table_unset(rnew->headers_in, "Transfer-Encoding");
1161 }
1162
1163 /*
1164  * A couple of other functions which initialize some of the fields of
1165  * a request structure, as appropriate for adjuncts of one kind or another
1166  * to a request in progress.  Best here, rather than elsewhere, since
1167  * *someone* has to set the protocol-specific fields...
1168  */
1169
1170 AP_DECLARE(void) ap_set_sub_req_protocol(request_rec *rnew,
1171                                          const request_rec *r)
1172 {
1173     rnew->the_request     = r->the_request;  /* Keep original request-line */
1174
1175     rnew->assbackwards    = 1;   /* Don't send headers from this. */
1176     rnew->no_local_copy   = 1;   /* Don't try to send HTTP_NOT_MODIFIED for a
1177                                   * fragment. */
1178     rnew->method          = "GET";
1179     rnew->method_number   = M_GET;
1180     rnew->protocol        = "INCLUDED";
1181
1182     rnew->status          = HTTP_OK;
1183
1184     rnew->headers_in      = apr_table_copy(rnew->pool, r->headers_in);
1185
1186     /* did the original request have a body?  (e.g. POST w/SSI tags)
1187      * if so, make sure the subrequest doesn't inherit body headers
1188      */
1189     if (!r->kept_body && (apr_table_get(r->headers_in, "Content-Length")
1190         || apr_table_get(r->headers_in, "Transfer-Encoding"))) {
1191         strip_headers_request_body(rnew);
1192     }
1193     rnew->subprocess_env  = apr_table_copy(rnew->pool, r->subprocess_env);
1194     rnew->headers_out     = apr_table_make(rnew->pool, 5);
1195     rnew->err_headers_out = apr_table_make(rnew->pool, 5);
1196     rnew->notes           = apr_table_make(rnew->pool, 5);
1197
1198     rnew->expecting_100   = r->expecting_100;
1199     rnew->read_length     = r->read_length;
1200     rnew->read_body       = REQUEST_NO_BODY;
1201
1202     rnew->main = (request_rec *) r;
1203 }
1204
1205 static void end_output_stream(request_rec *r)
1206 {
1207     conn_rec *c = r->connection;
1208     apr_bucket_brigade *bb;
1209     apr_bucket *b;
1210
1211     bb = apr_brigade_create(r->pool, c->bucket_alloc);
1212     b = apr_bucket_eos_create(c->bucket_alloc);
1213     APR_BRIGADE_INSERT_TAIL(bb, b);
1214     ap_pass_brigade(r->output_filters, bb);
1215 }
1216
1217 AP_DECLARE(void) ap_finalize_sub_req_protocol(request_rec *sub)
1218 {
1219     /* tell the filter chain there is no more content coming */
1220     if (!sub->eos_sent) {
1221         end_output_stream(sub);
1222     }
1223 }
1224
1225 /* finalize_request_protocol is called at completion of sending the
1226  * response.  Its sole purpose is to send the terminating protocol
1227  * information for any wrappers around the response message body
1228  * (i.e., transfer encodings).  It should have been named finalize_response.
1229  */
1230 AP_DECLARE(void) ap_finalize_request_protocol(request_rec *r)
1231 {
1232     (void) ap_discard_request_body(r);
1233
1234     /* tell the filter chain there is no more content coming */
1235     if (!r->eos_sent) {
1236         end_output_stream(r);
1237     }
1238 }
1239
1240 /*
1241  * Support for the Basic authentication protocol, and a bit for Digest.
1242  */
1243 AP_DECLARE(void) ap_note_auth_failure(request_rec *r)
1244 {
1245     const char *type = ap_auth_type(r);
1246     if (type) {
1247         ap_run_note_auth_failure(r, type);
1248     }
1249     else {
1250         ap_log_rerror(APLOG_MARK, APLOG_ERR,
1251                       0, r, APLOGNO(00571) "need AuthType to note auth failure: %s", r->uri);
1252     }
1253 }
1254
1255 AP_DECLARE(void) ap_note_basic_auth_failure(request_rec *r)
1256 {
1257     ap_note_auth_failure(r);
1258 }
1259
1260 AP_DECLARE(void) ap_note_digest_auth_failure(request_rec *r)
1261 {
1262     ap_note_auth_failure(r);
1263 }
1264
1265 AP_DECLARE(int) ap_get_basic_auth_pw(request_rec *r, const char **pw)
1266 {
1267     const char *auth_line = apr_table_get(r->headers_in,
1268                                           (PROXYREQ_PROXY == r->proxyreq)
1269                                               ? "Proxy-Authorization"
1270                                               : "Authorization");
1271     const char *t;
1272
1273     if (!(t = ap_auth_type(r)) || strcasecmp(t, "Basic"))
1274         return DECLINED;
1275
1276     if (!ap_auth_name(r)) {
1277         ap_log_rerror(APLOG_MARK, APLOG_ERR,
1278                       0, r, APLOGNO(00572) "need AuthName: %s", r->uri);
1279         return HTTP_INTERNAL_SERVER_ERROR;
1280     }
1281
1282     if (!auth_line) {
1283         ap_note_auth_failure(r);
1284         return HTTP_UNAUTHORIZED;
1285     }
1286
1287     if (strcasecmp(ap_getword(r->pool, &auth_line, ' '), "Basic")) {
1288         /* Client tried to authenticate using wrong auth scheme */
1289         ap_log_rerror(APLOG_MARK, APLOG_INFO, 0, r, APLOGNO(00573)
1290                       "client used wrong authentication scheme: %s", r->uri);
1291         ap_note_auth_failure(r);
1292         return HTTP_UNAUTHORIZED;
1293     }
1294
1295     while (*auth_line == ' ' || *auth_line == '\t') {
1296         auth_line++;
1297     }
1298
1299     t = ap_pbase64decode(r->pool, auth_line);
1300     r->user = ap_getword_nulls (r->pool, &t, ':');
1301     r->ap_auth_type = "Basic";
1302
1303     *pw = t;
1304
1305     return OK;
1306 }
1307
1308 struct content_length_ctx {
1309     int data_sent;  /* true if the C-L filter has already sent at
1310                      * least one bucket on to the next output filter
1311                      * for this request
1312                      */
1313     apr_bucket_brigade *tmpbb;
1314 };
1315
1316 /* This filter computes the content length, but it also computes the number
1317  * of bytes sent to the client.  This means that this filter will always run
1318  * through all of the buckets in all brigades
1319  */
1320 AP_CORE_DECLARE_NONSTD(apr_status_t) ap_content_length_filter(
1321     ap_filter_t *f,
1322     apr_bucket_brigade *b)
1323 {
1324     request_rec *r = f->r;
1325     struct content_length_ctx *ctx;
1326     apr_bucket *e;
1327     int eos = 0;
1328     apr_read_type_e eblock = APR_NONBLOCK_READ;
1329
1330     ctx = f->ctx;
1331     if (!ctx) {
1332         f->ctx = ctx = apr_palloc(r->pool, sizeof(*ctx));
1333         ctx->data_sent = 0;
1334         ctx->tmpbb = apr_brigade_create(r->pool, r->connection->bucket_alloc);
1335     }
1336
1337     /* Loop through this set of buckets to compute their length
1338      */
1339     e = APR_BRIGADE_FIRST(b);
1340     while (e != APR_BRIGADE_SENTINEL(b)) {
1341         if (APR_BUCKET_IS_EOS(e)) {
1342             eos = 1;
1343             break;
1344         }
1345         if (e->length == (apr_size_t)-1) {
1346             apr_size_t len;
1347             const char *ignored;
1348             apr_status_t rv;
1349
1350             /* This is probably a pipe bucket.  Send everything
1351              * prior to this, and then read the data for this bucket.
1352              */
1353             rv = apr_bucket_read(e, &ignored, &len, eblock);
1354             if (rv == APR_SUCCESS) {
1355                 /* Attempt a nonblocking read next time through */
1356                 eblock = APR_NONBLOCK_READ;
1357                 r->bytes_sent += len;
1358             }
1359             else if (APR_STATUS_IS_EAGAIN(rv)) {
1360                 /* Output everything prior to this bucket, and then
1361                  * do a blocking read on the next batch.
1362                  */
1363                 if (e != APR_BRIGADE_FIRST(b)) {
1364                     apr_bucket *flush;
1365                     apr_brigade_split_ex(b, e, ctx->tmpbb);
1366                     flush = apr_bucket_flush_create(r->connection->bucket_alloc);
1367
1368                     APR_BRIGADE_INSERT_TAIL(b, flush);
1369                     rv = ap_pass_brigade(f->next, b);
1370                     if (rv != APR_SUCCESS || f->c->aborted) {
1371                         return rv;
1372                     }
1373                     apr_brigade_cleanup(b);
1374                     APR_BRIGADE_CONCAT(b, ctx->tmpbb);
1375                     e = APR_BRIGADE_FIRST(b);
1376
1377                     ctx->data_sent = 1;
1378                 }
1379                 eblock = APR_BLOCK_READ;
1380                 continue;
1381             }
1382             else {
1383                 ap_log_rerror(APLOG_MARK, APLOG_ERR, rv, r, APLOGNO(00574)
1384                               "ap_content_length_filter: "
1385                               "apr_bucket_read() failed");
1386                 return rv;
1387             }
1388         }
1389         else {
1390             r->bytes_sent += e->length;
1391         }
1392         e = APR_BUCKET_NEXT(e);
1393     }
1394
1395     /* If we've now seen the entire response and it's otherwise
1396      * okay to set the C-L in the response header, then do so now.
1397      *
1398      * We can only set a C-L in the response header if we haven't already
1399      * sent any buckets on to the next output filter for this request.
1400      */
1401     if (ctx->data_sent == 0 && eos &&
1402         /* don't whack the C-L if it has already been set for a HEAD
1403          * by something like proxy.  the brigade only has an EOS bucket
1404          * in this case, making r->bytes_sent zero.
1405          *
1406          * if r->bytes_sent > 0 we have a (temporary) body whose length may
1407          * have been changed by a filter.  the C-L header might not have been
1408          * updated so we do it here.  long term it would be cleaner to have
1409          * such filters update or remove the C-L header, and just use it
1410          * if present.
1411          */
1412         !(r->header_only && r->bytes_sent == 0 &&
1413             apr_table_get(r->headers_out, "Content-Length"))) {
1414         ap_set_content_length(r, r->bytes_sent);
1415     }
1416
1417     ctx->data_sent = 1;
1418     return ap_pass_brigade(f->next, b);
1419 }
1420
1421 /*
1422  * Send the body of a response to the client.
1423  */
1424 AP_DECLARE(apr_status_t) ap_send_fd(apr_file_t *fd, request_rec *r,
1425                                     apr_off_t offset, apr_size_t len,
1426                                     apr_size_t *nbytes)
1427 {
1428     conn_rec *c = r->connection;
1429     apr_bucket_brigade *bb = NULL;
1430     apr_status_t rv;
1431
1432     bb = apr_brigade_create(r->pool, c->bucket_alloc);
1433
1434     apr_brigade_insert_file(bb, fd, offset, len, r->pool);
1435
1436     rv = ap_pass_brigade(r->output_filters, bb);
1437     if (rv != APR_SUCCESS) {
1438         *nbytes = 0; /* no way to tell how many were actually sent */
1439     }
1440     else {
1441         *nbytes = len;
1442     }
1443
1444     return rv;
1445 }
1446
1447 #if APR_HAS_MMAP
1448 /* send data from an in-memory buffer */
1449 AP_DECLARE(apr_size_t) ap_send_mmap(apr_mmap_t *mm,
1450                                     request_rec *r,
1451                                     apr_size_t offset,
1452                                     apr_size_t length)
1453 {
1454     conn_rec *c = r->connection;
1455     apr_bucket_brigade *bb = NULL;
1456     apr_bucket *b;
1457
1458     bb = apr_brigade_create(r->pool, c->bucket_alloc);
1459     b = apr_bucket_mmap_create(mm, offset, length, c->bucket_alloc);
1460     APR_BRIGADE_INSERT_TAIL(bb, b);
1461     ap_pass_brigade(r->output_filters, bb);
1462
1463     return mm->size; /* XXX - change API to report apr_status_t? */
1464 }
1465 #endif /* APR_HAS_MMAP */
1466
1467 typedef struct {
1468     apr_bucket_brigade *bb;
1469     apr_bucket_brigade *tmpbb;
1470 } old_write_filter_ctx;
1471
1472 AP_CORE_DECLARE_NONSTD(apr_status_t) ap_old_write_filter(
1473     ap_filter_t *f, apr_bucket_brigade *bb)
1474 {
1475     old_write_filter_ctx *ctx = f->ctx;
1476
1477     AP_DEBUG_ASSERT(ctx);
1478
1479     if (ctx->bb != NULL) {
1480         /* whatever is coming down the pipe (we don't care), we
1481          * can simply insert our buffered data at the front and
1482          * pass the whole bundle down the chain.
1483          */
1484         APR_BRIGADE_PREPEND(bb, ctx->bb);
1485     }
1486
1487     return ap_pass_brigade(f->next, bb);
1488 }
1489
1490 static ap_filter_t *insert_old_write_filter(request_rec *r)
1491 {
1492     ap_filter_t *f;
1493     old_write_filter_ctx *ctx;
1494
1495     /* future optimization: record some flags in the request_rec to
1496      * say whether we've added our filter, and whether it is first.
1497      */
1498
1499     /* this will typically exit on the first test */
1500     for (f = r->output_filters; f != NULL; f = f->next) {
1501         if (ap_old_write_func == f->frec)
1502             break;
1503     }
1504
1505     if (f == NULL) {
1506         /* our filter hasn't been added yet */
1507         ctx = apr_pcalloc(r->pool, sizeof(*ctx));
1508         ctx->tmpbb = apr_brigade_create(r->pool, r->connection->bucket_alloc);
1509
1510         ap_add_output_filter("OLD_WRITE", ctx, r, r->connection);
1511         f = r->output_filters;
1512     }
1513
1514     return f;
1515 }
1516
1517 static apr_status_t buffer_output(request_rec *r,
1518                                   const char *str, apr_size_t len)
1519 {
1520     conn_rec *c = r->connection;
1521     ap_filter_t *f;
1522     old_write_filter_ctx *ctx;
1523
1524     if (len == 0)
1525         return APR_SUCCESS;
1526
1527     f = insert_old_write_filter(r);
1528     ctx = f->ctx;
1529
1530     /* if the first filter is not our buffering filter, then we have to
1531      * deliver the content through the normal filter chain
1532      */
1533     if (f != r->output_filters) {
1534         apr_status_t rv;
1535         apr_bucket *b = apr_bucket_transient_create(str, len, c->bucket_alloc);
1536         APR_BRIGADE_INSERT_TAIL(ctx->tmpbb, b);
1537
1538         rv = ap_pass_brigade(r->output_filters, ctx->tmpbb);
1539         apr_brigade_cleanup(ctx->tmpbb);
1540         return rv;
1541     }
1542
1543     if (ctx->bb == NULL) {
1544         ctx->bb = apr_brigade_create(r->pool, c->bucket_alloc);
1545     }
1546
1547     return ap_fwrite(f->next, ctx->bb, str, len);
1548 }
1549
1550 AP_DECLARE(int) ap_rputc(int c, request_rec *r)
1551 {
1552     char c2 = (char)c;
1553
1554     if (r->connection->aborted) {
1555         return -1;
1556     }
1557
1558     if (buffer_output(r, &c2, 1) != APR_SUCCESS)
1559         return -1;
1560
1561     return c;
1562 }
1563
1564 AP_DECLARE(int) ap_rwrite(const void *buf, int nbyte, request_rec *r)
1565 {
1566     if (r->connection->aborted)
1567         return -1;
1568
1569     if (buffer_output(r, buf, nbyte) != APR_SUCCESS)
1570         return -1;
1571
1572     return nbyte;
1573 }
1574
1575 struct ap_vrprintf_data {
1576     apr_vformatter_buff_t vbuff;
1577     request_rec *r;
1578     char *buff;
1579 };
1580
1581 static apr_status_t r_flush(apr_vformatter_buff_t *buff)
1582 {
1583     /* callback function passed to ap_vformatter to be called when
1584      * vformatter needs to write into buff and buff.curpos > buff.endpos */
1585
1586     /* ap_vrprintf_data passed as a apr_vformatter_buff_t, which is then
1587      * "downcast" to an ap_vrprintf_data */
1588     struct ap_vrprintf_data *vd = (struct ap_vrprintf_data*)buff;
1589
1590     if (vd->r->connection->aborted)
1591         return -1;
1592
1593     /* r_flush is called when vbuff is completely full */
1594     if (buffer_output(vd->r, vd->buff, AP_IOBUFSIZE)) {
1595         return -1;
1596     }
1597
1598     /* reset the buffer position */
1599     vd->vbuff.curpos = vd->buff;
1600     vd->vbuff.endpos = vd->buff + AP_IOBUFSIZE;
1601
1602     return APR_SUCCESS;
1603 }
1604
1605 AP_DECLARE(int) ap_vrprintf(request_rec *r, const char *fmt, va_list va)
1606 {
1607     apr_size_t written;
1608     struct ap_vrprintf_data vd;
1609     char vrprintf_buf[AP_IOBUFSIZE];
1610
1611     vd.vbuff.curpos = vrprintf_buf;
1612     vd.vbuff.endpos = vrprintf_buf + AP_IOBUFSIZE;
1613     vd.r = r;
1614     vd.buff = vrprintf_buf;
1615
1616     if (r->connection->aborted)
1617         return -1;
1618
1619     written = apr_vformatter(r_flush, &vd.vbuff, fmt, va);
1620
1621     if (written != -1) {
1622         int n = vd.vbuff.curpos - vrprintf_buf;
1623
1624         /* last call to buffer_output, to finish clearing the buffer */
1625         if (buffer_output(r, vrprintf_buf,n) != APR_SUCCESS)
1626             return -1;
1627
1628         written += n;
1629     }
1630
1631     return written;
1632 }
1633
1634 AP_DECLARE_NONSTD(int) ap_rprintf(request_rec *r, const char *fmt, ...)
1635 {
1636     va_list va;
1637     int n;
1638
1639     if (r->connection->aborted)
1640         return -1;
1641
1642     va_start(va, fmt);
1643     n = ap_vrprintf(r, fmt, va);
1644     va_end(va);
1645
1646     return n;
1647 }
1648
1649 AP_DECLARE_NONSTD(int) ap_rvputs(request_rec *r, ...)
1650 {
1651     va_list va;
1652     const char *s;
1653     apr_size_t len;
1654     apr_size_t written = 0;
1655
1656     if (r->connection->aborted)
1657         return -1;
1658
1659     /* ### TODO: if the total output is large, put all the strings
1660      * ### into a single brigade, rather than flushing each time we
1661      * ### fill the buffer
1662      */
1663     va_start(va, r);
1664     while (1) {
1665         s = va_arg(va, const char *);
1666         if (s == NULL)
1667             break;
1668
1669         len = strlen(s);
1670         if (buffer_output(r, s, len) != APR_SUCCESS) {
1671             return -1;
1672         }
1673
1674         written += len;
1675     }
1676     va_end(va);
1677
1678     return written;
1679 }
1680
1681 AP_DECLARE(int) ap_rflush(request_rec *r)
1682 {
1683     conn_rec *c = r->connection;
1684     apr_bucket *b;
1685     ap_filter_t *f;
1686     old_write_filter_ctx *ctx;
1687     apr_status_t rv;
1688
1689     f = insert_old_write_filter(r);
1690     ctx = f->ctx;
1691
1692     b = apr_bucket_flush_create(c->bucket_alloc);
1693     APR_BRIGADE_INSERT_TAIL(ctx->tmpbb, b);
1694
1695     rv = ap_pass_brigade(r->output_filters, ctx->tmpbb);
1696     apr_brigade_cleanup(ctx->tmpbb);
1697     if (rv != APR_SUCCESS)
1698         return -1;
1699
1700     return 0;
1701 }
1702
1703 /*
1704  * This function sets the Last-Modified output header field to the value
1705  * of the mtime field in the request structure - rationalized to keep it from
1706  * being in the future.
1707  */
1708 AP_DECLARE(void) ap_set_last_modified(request_rec *r)
1709 {
1710     if (!r->assbackwards) {
1711         apr_time_t mod_time = ap_rationalize_mtime(r, r->mtime);
1712         char *datestr = apr_palloc(r->pool, APR_RFC822_DATE_LEN);
1713
1714         apr_rfc822_date(datestr, mod_time);
1715         apr_table_setn(r->headers_out, "Last-Modified", datestr);
1716     }
1717 }
1718
1719 typedef struct hdr_ptr {
1720     ap_filter_t *f;
1721     apr_bucket_brigade *bb;
1722 } hdr_ptr;
1723 static int send_header(void *data, const char *key, const char *val)
1724 {
1725     ap_fputstrs(((hdr_ptr*)data)->f, ((hdr_ptr*)data)->bb,
1726                 key, ": ", val, CRLF, NULL);
1727     return 1;
1728 }
1729 AP_DECLARE(void) ap_send_interim_response(request_rec *r, int send_headers)
1730 {
1731     hdr_ptr x;
1732     char *status_line = NULL;
1733     request_rec *rr;
1734
1735     if (r->proto_num < 1001) {
1736         /* don't send interim response to HTTP/1.0 Client */
1737         return;
1738     }
1739     if (!ap_is_HTTP_INFO(r->status)) {
1740         ap_log_rerror(APLOG_MARK, APLOG_DEBUG, 0, r, APLOGNO(00575)
1741                       "Status is %d - not sending interim response", r->status);
1742         return;
1743     }
1744     if ((r->status == HTTP_CONTINUE) && !r->expecting_100) {
1745         /*
1746          * Don't send 100-Continue when there was no Expect: 100-continue
1747          * in the request headers. For origin servers this is a SHOULD NOT
1748          * for proxies it is a MUST NOT according to RFC 2616 8.2.3
1749          */
1750         return;
1751     }
1752
1753     /* if we send an interim response, we're no longer in a state of
1754      * expecting one.  Also, this could feasibly be in a subrequest,
1755      * so we need to propagate the fact that we responded.
1756      */
1757     for (rr = r; rr != NULL; rr = rr->main) {
1758         rr->expecting_100 = 0;
1759     }
1760
1761     status_line = apr_pstrcat(r->pool, AP_SERVER_PROTOCOL, " ", r->status_line, CRLF, NULL);
1762     ap_xlate_proto_to_ascii(status_line, strlen(status_line));
1763
1764     x.f = r->connection->output_filters;
1765     x.bb = apr_brigade_create(r->pool, r->connection->bucket_alloc);
1766
1767     ap_fputs(x.f, x.bb, status_line);
1768     if (send_headers) {
1769         apr_table_do(send_header, &x, r->headers_out, NULL);
1770         apr_table_clear(r->headers_out);
1771     }
1772     ap_fputs(x.f, x.bb, CRLF_ASCII);
1773     ap_fflush(x.f, x.bb);
1774     apr_brigade_destroy(x.bb);
1775 }
1776
1777
1778 AP_IMPLEMENT_HOOK_VOID(pre_read_request,
1779                        (request_rec *r, conn_rec *c),
1780                        (r, c))
1781 AP_IMPLEMENT_HOOK_RUN_ALL(int,post_read_request,
1782                           (request_rec *r), (r), OK, DECLINED)
1783 AP_IMPLEMENT_HOOK_RUN_ALL(int,log_transaction,
1784                           (request_rec *r), (r), OK, DECLINED)
1785 AP_IMPLEMENT_HOOK_RUN_FIRST(const char *,http_scheme,
1786                             (const request_rec *r), (r), NULL)
1787 AP_IMPLEMENT_HOOK_RUN_FIRST(unsigned short,default_port,
1788                             (const request_rec *r), (r), 0)
1789 AP_IMPLEMENT_HOOK_RUN_FIRST(int, note_auth_failure,
1790                             (request_rec *r, const char *auth_type),
1791                             (r, auth_type), DECLINED)