r7104: add support into the web server for session[] variables without cookies by...
[ira/wip.git] / source / web_server / http.c
1 /* 
2    Unix SMB/CIFS implementation.
3
4    http handling code
5
6    Copyright (C) Andrew Tridgell 2005
7    
8    This program is free software; you can redistribute it and/or modify
9    it under the terms of the GNU General Public License as published by
10    the Free Software Foundation; either version 2 of the License, or
11    (at your option) any later version.
12    
13    This program is distributed in the hope that it will be useful,
14    but WITHOUT ANY WARRANTY; without even the implied warranty of
15    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
16    GNU General Public License for more details.
17    
18    You should have received a copy of the GNU General Public License
19    along with this program; if not, write to the Free Software
20    Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
21 */
22
23 #include "includes.h"
24 #include "smbd/service_task.h"
25 #include "web_server/web_server.h"
26 #include "smbd/service_stream.h"
27 #include "lib/events/events.h"
28 #include "system/filesys.h"
29 #include "system/iconv.h"
30 #include "system/time.h"
31 #include "web_server/esp/esp.h"
32 #include "dlinklist.h"
33
34 #define SWAT_SESSION_KEY "SwatSessionId"
35 #define HTTP_PREAUTH_URI "/scripting/preauth.esp"
36
37 /* state of the esp subsystem for a specific request */
38 struct esp_state {
39         struct websrv_context *web;
40         struct EspRequest *req;
41         struct MprVar variables[ESP_OBJ_MAX];
42         struct session_data *session;
43 };
44
45 /* destroy a esp session */
46 static int esp_destructor(void *ptr)
47 {
48         struct esp_state *esp = talloc_get_type(ptr, struct esp_state);
49
50         if (esp->req) {
51                 espDestroyRequest(esp->req);
52         }
53         return 0;
54 }
55
56 /*
57   output the http headers
58 */
59 static void http_output_headers(struct websrv_context *web)
60 {
61         int i;
62         char *s;
63         DATA_BLOB b;
64         uint32_t content_length = 0;
65         const char *response_string = "Unknown Code";
66         const struct {
67                 unsigned code;
68                 const char *response_string;
69         } codes[] = {
70                 { 200, "OK" },
71                 { 301, "Moved" },
72                 { 302, "Found" },
73                 { 303, "Method" },
74                 { 304, "Not Modified" },
75                 { 400, "Bad request" },
76                 { 401, "Unauthorized" },
77                 { 403, "Forbidden" },
78                 { 404, "Not Found" },
79                 { 500, "Internal Server Error" },
80                 { 501, "Not implemented" }
81         };
82         for (i=0;i<ARRAY_SIZE(codes);i++) {
83                 if (codes[i].code == web->output.response_code) {
84                         response_string = codes[i].response_string;
85                 }
86         }
87
88         if (web->output.headers == NULL) return;
89         s = talloc_asprintf(web, "HTTP/1.0 %u %s\r\n", 
90                             web->output.response_code, response_string);
91         if (s == NULL) return;
92         for (i=0;web->output.headers[i];i++) {
93                 s = talloc_asprintf_append(s, "%s\r\n", web->output.headers[i]);
94         }
95
96         /* work out the content length */
97         content_length = web->output.content.length;
98         if (web->output.fd != -1) {
99                 struct stat st;
100                 fstat(web->output.fd, &st);
101                 content_length += st.st_size;
102         }
103         s = talloc_asprintf_append(s, "Content-Length: %u\r\n\r\n", content_length);
104         if (s == NULL) return;
105
106         b = web->output.content;
107         web->output.content.data = s;
108         web->output.content.length = strlen(s);
109         data_blob_append(web, &web->output.content, b.data, b.length);
110         data_blob_free(&b);
111 }
112
113 /*
114   return the local path for a URL
115 */
116 static const char *http_local_path(struct websrv_context *web, const char *url)
117 {
118         int i;
119         char *path;
120
121         /* check that the url is OK */
122         if (url[0] != '/') return NULL;
123
124         for (i=0;url[i];i++) {
125                 if ((!isalnum(url[i]) && !strchr("./_", url[i])) ||
126                     (url[i] == '.' && strchr("/.", url[i+1]))) {
127                         return NULL;
128                 }
129         }
130
131         path = talloc_asprintf(web, "%s/%s", lp_swat_directory(), url+1);
132         if (path == NULL) return NULL;
133
134         if (directory_exist(path)) {
135                 path = talloc_asprintf_append(path, "/index.esp");
136         }
137         return path;
138 }
139
140 /*
141   called when esp wants to read a file to support include() calls
142 */
143 static int http_readFile(EspHandle handle, char **buf, int *len, const char *path)
144 {
145         struct websrv_context *web = talloc_get_type(handle, struct websrv_context);
146         int fd = -1;
147         struct stat st;
148         *buf = NULL;
149
150         path = http_local_path(web, path);
151         if (path == NULL) goto failed;
152
153         fd = open(path, O_RDONLY);
154         if (fd == -1 || fstat(fd, &st) != 0 || !S_ISREG(st.st_mode)) goto failed;
155
156         *buf = talloc_size(handle, st.st_size+1);
157         if (*buf == NULL) goto failed;
158
159         if (read(fd, *buf, st.st_size) != st.st_size) goto failed;
160
161         (*buf)[st.st_size] = 0;
162
163         close(fd);
164         *len = st.st_size;
165         return 0;
166
167 failed:
168         DEBUG(0,("Failed to read file %s - %s\n", path, strerror(errno)));
169         if (fd != -1) close(fd);
170         talloc_free(*buf);
171         *buf = NULL;
172         return -1;
173 }
174
175 /*
176   called when esp wants to find the real path of a file
177 */
178 static int http_mapToStorage(EspHandle handle, char *path, int len, const char *uri, int flags)
179 {
180         if (uri == NULL || strlen(uri) >= len) return -1;
181         strncpy(path, uri, len);
182         return 0;
183 }
184
185 /*
186   called when esp wants to output something
187 */
188 static int http_writeBlock(EspHandle handle, char *buf, int size)
189 {
190         struct websrv_context *web = talloc_get_type(handle, struct websrv_context);
191         NTSTATUS status;
192         status = data_blob_append(web, &web->output.content, buf, size);
193         if (!NT_STATUS_IS_OK(status)) return -1;
194         return size;
195 }
196
197
198 /*
199   set a http header
200 */
201 static void http_setHeader(EspHandle handle, const char *value, bool allowMultiple)
202 {
203         struct websrv_context *web = talloc_get_type(handle, struct websrv_context);
204         char *p = strchr(value, ':');
205
206         if (p && !allowMultiple && web->output.headers) {
207                 int i;
208                 for (i=0;web->output.headers[i];i++) {
209                         if (strncmp(web->output.headers[i], value, (p+1)-value) == 0) {
210                                 web->output.headers[i] = talloc_strdup(web, value);
211                                 return;
212                         }
213                 }
214         }
215
216         web->output.headers = str_list_add(web->output.headers, value);
217         talloc_steal(web, web->output.headers);
218 }
219
220 /*
221   set a http response code
222 */
223 static void http_setResponseCode(EspHandle handle, int code)
224 {
225         struct websrv_context *web = talloc_get_type(handle, struct websrv_context);
226         web->output.response_code = code;
227 }
228
229 /*
230   redirect to another web page
231  */
232 static void http_redirect(EspHandle handle, int code, char *url)
233 {
234         struct websrv_context *web = talloc_get_type(handle, struct websrv_context);
235         const char *host = web->input.host;
236         
237         /* form the full url, unless it already looks like a url */
238         if (strchr(url, ':') == NULL) {
239                 if (host == NULL) {
240                         host = talloc_asprintf(web, "%s:%u",
241                                                socket_get_my_addr(web->conn->socket, web),
242                                                socket_get_my_port(web->conn->socket));
243                 }
244                 if (host == NULL) goto internal_error;
245                 if (url[0] != '/') {
246                         char *p = strrchr(web->input.url, '/');
247                         if (p == web->input.url) {
248                                 url = talloc_asprintf(web, "http%s://%s/%s", 
249                                                       web->tls_session?"s":"",
250                                                       host, url);
251                         } else {
252                                 int dirlen = p - web->input.url;
253                                 url = talloc_asprintf(web, "http%s://%s%*.*s/%s",
254                                                       web->tls_session?"s":"",
255                                                       host, 
256                                                       dirlen, dirlen, web->input.url,
257                                                       url);
258                         }
259                         if (url == NULL) goto internal_error;
260                 }
261         }
262
263         http_setHeader(handle, talloc_asprintf(web, "Location: %s", url), 0);
264
265         /* make sure we give a valid redirect code */
266         if (code >= 300 && code < 400) {
267                 http_setResponseCode(handle, code);
268         } else {
269                 http_setResponseCode(handle, 302);
270         }
271         return;
272
273 internal_error:
274         http_error(web, 500, "Internal server error");
275 }
276
277
278 /*
279   setup a cookie
280 */
281 static void http_setCookie(EspHandle handle, const char *name, const char *value, 
282                            int lifetime, const char *path, bool secure)
283 {
284         struct websrv_context *web = talloc_get_type(handle, struct websrv_context);
285         char *buf;
286         
287         if (lifetime > 0) {
288                 buf = talloc_asprintf(web, "Set-Cookie: %s=%s; path=%s; Expires=%s; %s",
289                                       name, value, path?path:"/", 
290                                       http_timestring(web, time(NULL)+lifetime),
291                                       secure?"secure":"");
292         } else {
293                 buf = talloc_asprintf(web, "Set-Cookie: %s=%s; path=%s; %s",
294                                       name, value, path?path:"/", 
295                                       secure?"secure":"");
296         }
297         http_setHeader(handle, "Cache-control: no-cache=\"set-cookie\"", 0);
298         http_setHeader(handle, buf, 0);
299         talloc_free(buf);
300 }
301
302 /*
303   return the session id
304 */
305 static const char *http_getSessionId(EspHandle handle)
306 {
307         struct websrv_context *web = talloc_get_type(handle, struct websrv_context);
308         return web->session->id;
309 }
310
311 /*
312   setup a session
313 */
314 static void http_createSession(EspHandle handle, int timeout)
315 {
316         struct websrv_context *web = talloc_get_type(handle, struct websrv_context);
317         if (web->session) {
318                 web->session->lifetime = timeout;
319                 http_setCookie(web, SWAT_SESSION_KEY, web->session->id, 
320                                web->session->lifetime, "/", 0);
321         }
322 }
323
324 /*
325   destroy a session
326 */
327 static void http_destroySession(EspHandle handle)
328 {
329         struct websrv_context *web = talloc_get_type(handle, struct websrv_context);
330         talloc_free(web->session);
331         web->session = NULL;
332 }
333
334
335 /*
336   setup for a raw http level error
337 */
338 void http_error(struct websrv_context *web, int code, const char *info)
339 {
340         char *s;
341         s = talloc_asprintf(web,"<HTML><HEAD><TITLE>Error %u</TITLE></HEAD><BODY><H1>Error %u</H1>%s<p></BODY></HTML>\r\n\r\n", 
342                             code, code, info);
343         if (s == NULL) {
344                 stream_terminate_connection(web->conn, "http_error: out of memory");
345                 return;
346         }
347         http_writeBlock(web, s, strlen(s));
348         http_setResponseCode(web, code);
349         http_output_headers(web);
350         EVENT_FD_NOT_READABLE(web->conn->event.fde);
351         EVENT_FD_WRITEABLE(web->conn->event.fde);
352         web->output.output_pending = True;
353 }
354
355 /*
356   map a unix error code to a http error
357 */
358 void http_error_unix(struct websrv_context *web, const char *info)
359 {
360         int code = 500;
361         switch (errno) {
362         case ENOENT:
363         case EISDIR:
364                 code = 404;
365                 break;
366         case EACCES:
367                 code = 403;
368                 break;
369         }
370         info = talloc_asprintf(web, "%s<p>%s<p>\n", info, strerror(errno));
371         http_error(web, code, info);
372 }
373
374
375 /*
376   a simple file request
377 */
378 static void http_simple_request(struct websrv_context *web)
379 {
380         const char *url = web->input.url;
381         const char *path;
382         struct stat st;
383
384         path = http_local_path(web, url);
385         if (path == NULL) goto invalid;
386
387         /* looks ok */
388         web->output.fd = open(path, O_RDONLY);
389         if (web->output.fd == -1) {
390                 DEBUG(0,("Failed to read file %s - %s\n", path, strerror(errno)));
391                 http_error_unix(web, path);
392                 return;
393         }
394
395         if (fstat(web->output.fd, &st) != 0 || !S_ISREG(st.st_mode)) {
396                 close(web->output.fd);
397                 goto invalid;
398         }
399
400         return;
401
402 invalid:
403         http_error(web, 400, "Malformed URL");
404 }
405
406 /*
407   setup the standard ESP arrays
408 */
409 static void http_setup_arrays(struct esp_state *esp)
410 {
411         struct websrv_context *web = esp->web;
412         struct esp_data *edata = talloc_get_type(web->task->private, struct esp_data);
413         struct EspRequest *req = esp->req;
414         char *p;
415
416 #define SETVAR(type, name, value) do { \
417                 const char *v = value; \
418                 if (v) espSetStringVar(req, type, name, v); \
419 } while (0)
420
421         SETVAR(ESP_REQUEST_OBJ, "CONTENT_LENGTH", 
422                talloc_asprintf(esp, "%u", web->input.content_length));
423         SETVAR(ESP_REQUEST_OBJ, "QUERY_STRING", web->input.query_string);
424         SETVAR(ESP_REQUEST_OBJ, "REQUEST_METHOD", web->input.post_request?"POST":"GET");
425         SETVAR(ESP_REQUEST_OBJ, "REQUEST_URI", web->input.url);
426         p = strrchr(web->input.url, '/');
427         SETVAR(ESP_REQUEST_OBJ, "SCRIPT_NAME", p+1);
428         SETVAR(ESP_REQUEST_OBJ, "SCRIPT_FILENAME", web->input.url);
429         p = socket_get_peer_name(web->conn->socket, esp);
430         SETVAR(ESP_REQUEST_OBJ, "REMOTE_HOST", p);
431         SETVAR(ESP_REQUEST_OBJ, "REMOTE_ADDR", p);
432         SETVAR(ESP_REQUEST_OBJ, "REMOTE_USER", "");
433         SETVAR(ESP_REQUEST_OBJ, "CONTENT_TYPE", web->input.content_type);
434         if (web->session) {
435                 SETVAR(ESP_REQUEST_OBJ, "SESSION_ID", web->session->id);
436         }
437         SETVAR(ESP_REQUEST_OBJ, "COOKIE_SUPPORT", web->input.cookie?"True":"False");
438
439         SETVAR(ESP_HEADERS_OBJ, "HTT_REFERER", web->input.referer);
440         SETVAR(ESP_HEADERS_OBJ, "HOST", web->input.host);
441         SETVAR(ESP_HEADERS_OBJ, "ACCEPT_ENCODING", web->input.accept_encoding);
442         SETVAR(ESP_HEADERS_OBJ, "ACCEPT_LANGUAGE", web->input.accept_language);
443         SETVAR(ESP_HEADERS_OBJ, "ACCEPT_CHARSET", web->input.accept_charset);
444         SETVAR(ESP_HEADERS_OBJ, "COOKIE", web->input.cookie);
445         SETVAR(ESP_HEADERS_OBJ, "USER_AGENT", web->input.user_agent);
446
447         SETVAR(ESP_SERVER_OBJ, "SERVER_ADDR", socket_get_my_addr(web->conn->socket, esp));
448         SETVAR(ESP_SERVER_OBJ, "SERVER_NAME", socket_get_my_addr(web->conn->socket, esp));
449         SETVAR(ESP_SERVER_OBJ, "SERVER_HOST", socket_get_my_addr(web->conn->socket, esp));
450         SETVAR(ESP_SERVER_OBJ, "DOCUMENT_ROOT", lp_swat_directory());
451         SETVAR(ESP_SERVER_OBJ, "SERVER_PORT", 
452                talloc_asprintf(esp, "%u", socket_get_my_port(web->conn->socket)));
453         SETVAR(ESP_SERVER_OBJ, "SERVER_PROTOCOL", web->tls_session?"https":"http");
454         SETVAR(ESP_SERVER_OBJ, "SERVER_SOFTWARE", "SWAT");
455         SETVAR(ESP_SERVER_OBJ, "GATEWAY_INTERFACE", "CGI/1.1");
456         SETVAR(ESP_SERVER_OBJ, "TLS_SUPPORT", edata->tls_data?"True":"False");
457 }
458
459 #if HAVE_SETJMP_H
460 /* the esp scripting lirary generates exceptions when
461    it hits a major error. We need to catch these and
462    report a internal server error via http
463 */
464 #include <setjmp.h>
465 static jmp_buf ejs_exception_buf;
466 static const char *exception_reason;
467
468 void ejs_exception(const char *reason)
469 {
470         exception_reason = reason;
471         DEBUG(0,("%s", reason));
472         longjmp(ejs_exception_buf, -1);
473 }
474 #else
475 void ejs_exception(const char *reason)
476 {
477         DEBUG(0,("%s", reason));
478         smb_panic(reason);
479 }
480 #endif
481
482 /*
483   process a esp request
484 */
485 static void esp_request(struct esp_state *esp, const char *url)
486 {
487         struct websrv_context *web = esp->web;
488         size_t size;
489         int res;
490         char *emsg = NULL, *buf;
491
492         if (http_readFile(web, &buf, &size, url) != 0) {
493                 http_error_unix(web, url);
494                 return;
495         }
496
497 #if HAVE_SETJMP_H
498         if (setjmp(ejs_exception_buf) != 0) {
499                 http_error(web, 500, exception_reason);
500                 return;
501         }
502 #endif
503         res = espProcessRequest(esp->req, url, buf, &emsg);
504         if (res != 0 && emsg) {
505                 http_writeBlock(web, emsg, strlen(emsg));
506         }
507         talloc_free(buf);
508 }
509
510
511 /*
512   perform pre-authentication on every page is /scripting/preauth.esp
513   exists.  If this script generates any non-whitepace output at all,
514   then we don't run the requested URL.
515
516   note that the preauth is run even for static pages such as images.
517 */
518 static BOOL http_preauth(struct esp_state *esp)
519 {
520         const char *path = http_local_path(esp->web, HTTP_PREAUTH_URI);
521         int i;
522         if (path == NULL) {
523                 http_error(esp->web, 500, "Internal server error");
524                 return False;
525         }
526         if (!file_exist(path)) {
527                 /* if the preath script is not installed then allow access */
528                 return True;
529         }
530         esp_request(esp, HTTP_PREAUTH_URI);
531         for (i=0;i<esp->web->output.content.length;i++) {
532                 if (!isspace(esp->web->output.content.data[i])) {
533                         /* if the preauth has generated content, then force it to be
534                            html, so that we can show the login page for failed
535                            access to images */
536                         http_setHeader(esp->web, "Content-Type: text/html", 0);
537                         return False;
538                 }
539         }
540         data_blob_free(&esp->web->output.content);
541         return True;
542 }
543
544
545 /* 
546    handling of + and % escapes in http variables 
547 */
548 static const char *http_unescape(TALLOC_CTX *mem_ctx, const char *p)
549 {
550         char *s0 = talloc_strdup(mem_ctx, p);
551         char *s = s0;
552         if (s == NULL) return NULL;
553
554         while (*s) {
555                 unsigned v;
556                 if (*s == '+') *s = ' ';
557                 if (*s == '%' && sscanf(s+1, "%02x", &v) == 1) {
558                         *s = (char)v;
559                         memmove(s+1, s+3, strlen(s+3)+1);
560                 }
561                 s++;
562         }
563
564         return s0;
565 }
566
567 /*
568   set a form or GET variable
569 */
570 static void esp_putvar(struct esp_state *esp, const char *var, const char *value)
571 {
572         if (strcasecmp(var, SWAT_SESSION_KEY) == 0) {
573                 /* special case support for browsers without cookie
574                  support */
575                 esp->web->input.session_key = talloc_strdup(esp, value);
576         } else {
577                 mprSetPropertyValue(&esp->variables[ESP_FORM_OBJ], 
578                                     http_unescape(esp, var),
579                                     mprCreateStringVar(http_unescape(esp, value), 0));
580         }
581 }
582
583
584 /*
585   parse the variables in a POST style request
586 */
587 static NTSTATUS http_parse_post(struct esp_state *esp)
588 {
589         DATA_BLOB b = esp->web->input.partial;
590
591         while (b.length) {
592                 char *p, *line;
593                 size_t len;
594
595                 p = memchr(b.data, '&', b.length);
596                 if (p == NULL) {
597                         len = b.length;
598                 } else {
599                         len = p - (char *)b.data;
600                 }
601                 line = talloc_strndup(esp, b.data, len);
602                 NT_STATUS_HAVE_NO_MEMORY(line);
603                                      
604                 p = strchr(line,'=');
605                 if (p) {
606                         *p = 0;
607                         esp_putvar(esp, line, p+1);
608                 }
609                 talloc_free(line);
610                 b.length -= len;
611                 b.data += len;
612                 if (b.length > 0) {
613                         b.length--;
614                         b.data++;
615                 }
616         }
617
618         return NT_STATUS_OK;
619 }
620
621 /*
622   parse the variables in a GET style request
623 */
624 static NTSTATUS http_parse_get(struct esp_state *esp)
625 {
626         struct websrv_context *web = esp->web;
627         char *p, *s, *tok;
628         char *pp;
629
630         p = strchr(web->input.url, '?');
631         web->input.query_string = p+1;
632         *p = 0;
633
634         s = talloc_strdup(esp, esp->web->input.query_string);
635         NT_STATUS_HAVE_NO_MEMORY(s);
636
637         for (tok=strtok_r(s,"&;", &pp);tok;tok=strtok_r(NULL,"&;", &pp)) {
638                 p = strchr(tok,'=');
639                 if (p) {
640                         *p = 0;
641                         esp_putvar(esp, tok, p+1);
642                 }
643         }
644         return NT_STATUS_OK;
645 }
646
647 /*
648   called when a session times out
649 */
650 static void session_timeout(struct event_context *ev, struct timed_event *te, 
651                             struct timeval t, void *private)
652 {
653         struct session_data *s = talloc_get_type(private, struct session_data);
654         talloc_free(s);
655 }
656
657 /*
658   destroy a session
659  */
660 static int session_destructor(void *ptr)
661 {
662         struct session_data *s = talloc_get_type(ptr, struct session_data);
663         DLIST_REMOVE(s->edata->sessions, s);
664         return 0;
665 }
666
667 /*
668   setup the session for this request
669 */
670 static void http_setup_session(struct esp_state *esp)
671 {
672         const char *session_key = SWAT_SESSION_KEY;
673         char *p;
674         const char *cookie = esp->web->input.cookie;
675         const char *key = NULL;
676         struct esp_data *edata = talloc_get_type(esp->web->task->private, struct esp_data);
677         struct session_data *s;
678
679         /* look for our session key */
680         if (cookie && (p = strstr(cookie, session_key)) && 
681             p[strlen(session_key)] == '=') {
682                 p += strlen(session_key)+1;
683                 key = talloc_strndup(esp, p, strcspn(p, ";"));
684         }
685
686         if (key == NULL && esp->web->input.session_key) {
687                 key = esp->web->input.session_key;
688         } else if (key == NULL) {
689                 key = generate_random_str_list(esp, 16, "0123456789ABCDEFGHIJKLMNOPQRSTUVWXYZ");
690         }
691
692         /* try to find this session in the existing session list */
693         for (s=edata->sessions;s;s=s->next) {
694                 if (strcmp(key, s->id) == 0) {
695                         break;
696                 }
697         }
698
699         if (s == NULL) {
700                 /* create a new session */
701                 s = talloc_zero(edata, struct session_data);
702                 s->id = talloc_steal(s, key);
703                 s->data = NULL;
704                 s->te = NULL;
705                 s->edata = edata;
706                 s->lifetime = lp_parm_int(-1, "web", "sessiontimeout", 300);
707                 DLIST_ADD(edata->sessions, s);
708                 talloc_set_destructor(s, session_destructor);
709         }
710
711         http_setCookie(esp->web, session_key, key, s->lifetime, "/", 0);
712
713         if (s->data) {
714                 mprCopyVar(&esp->variables[ESP_SESSION_OBJ], s->data, MPR_DEEP_COPY);
715         }
716
717         esp->web->session = s;
718 }
719
720
721 /* callbacks for esp processing */
722 static const struct Esp esp_control = {
723         .maxScriptSize   = 60000,
724         .writeBlock      = http_writeBlock,
725         .setHeader       = http_setHeader,
726         .redirect        = http_redirect,
727         .setResponseCode = http_setResponseCode,
728         .readFile        = http_readFile,
729         .mapToStorage    = http_mapToStorage,
730         .setCookie       = http_setCookie,
731         .createSession   = http_createSession,
732         .destroySession  = http_destroySession,
733         .getSessionId    = http_getSessionId
734 };
735
736 /*
737   process a complete http request
738 */
739 void http_process_input(struct websrv_context *web)
740 {
741         NTSTATUS status;
742         struct esp_state *esp;
743         struct esp_data *edata = talloc_get_type(web->task->private, struct esp_data);
744         char *p;
745         int i;
746         const char *file_type = NULL;
747         BOOL esp_enable = False;
748         const struct {
749                 const char *extension;
750                 const char *mime_type;
751                 BOOL esp_enable;
752         } mime_types[] = {
753                 {"gif",  "image/gif"},
754                 {"png",  "image/png"},
755                 {"jpg",  "image/jpeg"},
756                 {"txt",  "text/plain"},
757                 {"ico",  "image/x-icon"},
758                 {"css",  "text/css"},
759                 {"esp",  "text/html", True}
760         };
761
762         esp = talloc_zero(web, struct esp_state);
763         if (esp == NULL) goto internal_error;
764
765         esp->web = web;
766
767         mprSetCtx(esp);
768
769         if (espOpen(&esp_control) != 0) goto internal_error;
770
771         for (i=0;i<ARRAY_SIZE(esp->variables);i++) {
772                 esp->variables[i] = mprCreateUndefinedVar();
773         }
774         esp->variables[ESP_HEADERS_OBJ]     = mprCreateObjVar("headers", ESP_HASH_SIZE);
775         esp->variables[ESP_FORM_OBJ]        = mprCreateObjVar("form", ESP_HASH_SIZE);
776         esp->variables[ESP_APPLICATION_OBJ] = mprCreateObjVar("application", ESP_HASH_SIZE);
777         esp->variables[ESP_COOKIES_OBJ]     = mprCreateObjVar("cookies", ESP_HASH_SIZE);
778         esp->variables[ESP_FILES_OBJ]       = mprCreateObjVar("files", ESP_HASH_SIZE);
779         esp->variables[ESP_REQUEST_OBJ]     = mprCreateObjVar("request", ESP_HASH_SIZE);
780         esp->variables[ESP_SERVER_OBJ]      = mprCreateObjVar("server", ESP_HASH_SIZE);
781         esp->variables[ESP_SESSION_OBJ]     = mprCreateObjVar("session", ESP_HASH_SIZE);
782
783         if (edata->application_data) {
784                 mprCopyVar(&esp->variables[ESP_APPLICATION_OBJ], 
785                            edata->application_data, MPR_DEEP_COPY);
786         }
787
788         talloc_set_destructor(esp, esp_destructor);
789
790         smb_setup_ejs_functions();
791         http_setup_ejs_functions();
792
793         if (web->input.url == NULL) {
794                 http_error(web, 400, "You must specify a GET or POST request");
795                 return;
796         }
797         
798         /* parse any form or get variables */
799         if (web->input.post_request) {
800                 status = http_parse_post(esp);
801                 if (!NT_STATUS_IS_OK(status)) {
802                         http_error(web, 400, "Malformed POST data");
803                         return;
804                 }
805         } 
806         if (strchr(web->input.url, '?')) {
807                 status = http_parse_get(esp);
808                 if (!NT_STATUS_IS_OK(status)) {
809                         http_error(web, 400, "Malformed GET data");
810                         return;
811                 }
812         }
813
814         http_setup_session(esp);
815
816         esp->req = espCreateRequest(web, web->input.url, esp->variables);
817         if (esp->req == NULL) goto internal_error;
818
819         /* work out the mime type */
820         p = strrchr(web->input.url, '.');
821         if (p == NULL) {
822                 esp_enable = True;
823         }
824         for (i=0;p && i<ARRAY_SIZE(mime_types);i++) {
825                 if (strcmp(mime_types[i].extension, p+1) == 0) {
826                         file_type = mime_types[i].mime_type;
827                         esp_enable = mime_types[i].esp_enable;
828                 }
829         }
830         if (file_type == NULL) {
831                 file_type = "text/html";
832         }
833
834         /* setup basic headers */
835         http_setResponseCode(web, 200);
836         http_setHeader(web, talloc_asprintf(esp, "Date: %s", 
837                                             http_timestring(esp, time(NULL))), 0);
838         http_setHeader(web, "Server: Samba", 0);
839         http_setHeader(web, "Connection: close", 0);
840         http_setHeader(web, talloc_asprintf(esp, "Content-Type: %s", file_type), 0);
841
842         http_setup_arrays(esp);
843
844         /* possibly do pre-authentication */
845         if (http_preauth(esp)) {
846                 if (esp_enable) {
847                         esp_request(esp, web->input.url);
848                 } else {
849                         http_simple_request(web);
850                 }
851         }
852
853         if (!web->output.output_pending) {
854                 http_output_headers(web);
855                 EVENT_FD_WRITEABLE(web->conn->event.fde);
856                 web->output.output_pending = True;
857         }
858
859         /* copy any application data to long term storage in edata */
860         talloc_free(edata->application_data);
861         edata->application_data = talloc_zero(edata, struct MprVar);
862         mprSetCtx(edata->application_data);
863         mprCopyVar(edata->application_data, &esp->variables[ESP_APPLICATION_OBJ], 
864                    MPR_DEEP_COPY);
865
866         /* copy any session data */
867         if (web->session) {
868                 talloc_free(web->session->data);
869                 web->session->data = talloc_zero(web->session, struct MprVar);
870                 mprSetCtx(web->session->data);
871                 if (esp->variables[ESP_SESSION_OBJ].properties == NULL ||
872                     esp->variables[ESP_SESSION_OBJ].properties[0].numItems == 0) {
873                         talloc_free(web->session);
874                         web->session = NULL;
875                 } else {
876                         mprCopyVar(web->session->data, &esp->variables[ESP_SESSION_OBJ], 
877                                    MPR_DEEP_COPY);
878                         /* setup the timeout for the session data */
879                         talloc_free(web->session->te);
880                         web->session->te = event_add_timed(web->conn->event.ctx, web->session, 
881                                                            timeval_current_ofs(web->session->lifetime, 0), 
882                                                            session_timeout, web->session);
883                 }
884         }
885
886         talloc_free(esp);
887         return;
888         
889 internal_error:
890         talloc_free(esp);
891         http_error(web, 500, "Internal server error");
892 }
893
894
895 /*
896   parse one line of header input
897 */
898 NTSTATUS http_parse_header(struct websrv_context *web, const char *line)
899 {
900         if (line[0] == 0) {
901                 web->input.end_of_headers = True;
902         } else if (strncasecmp(line,"GET ", 4)==0) {
903                 web->input.url = talloc_strndup(web, &line[4], strcspn(&line[4], " \t"));
904         } else if (strncasecmp(line,"POST ", 5)==0) {
905                 web->input.post_request = True;
906                 web->input.url = talloc_strndup(web, &line[5], strcspn(&line[5], " \t"));
907         } else if (strchr(line, ':') == NULL) {
908                 http_error(web, 400, "This server only accepts GET and POST requests");
909                 return NT_STATUS_INVALID_PARAMETER;
910         } else if (strncasecmp(line,"Content-Length: ", 16)==0) {
911                 web->input.content_length = strtoul(&line[16], NULL, 10);
912         } else {
913 #define PULL_HEADER(v, s) do { \
914         if (strncmp(line, s, strlen(s)) == 0) { \
915                 web->input.v = talloc_strdup(web, &line[strlen(s)]); \
916                 return NT_STATUS_OK; \
917         } \
918 } while (0)
919                 PULL_HEADER(content_type, "Content-Type: ");
920                 PULL_HEADER(user_agent, "User-Agent: ");
921                 PULL_HEADER(referer, "Referer: ");
922                 PULL_HEADER(host, "Host: ");
923                 PULL_HEADER(accept_encoding, "Accept-Encoding: ");
924                 PULL_HEADER(accept_language, "Accept-Language: ");
925                 PULL_HEADER(accept_charset, "Accept-Charset: ");
926                 PULL_HEADER(cookie, "Cookie: ");
927         }
928
929         /* ignore all other headers for now */
930         return NT_STATUS_OK;
931 }
932
933
934 /*
935   setup the esp processor - called at task initialisation
936 */
937 NTSTATUS http_setup_esp(struct task_server *task)
938 {
939         struct esp_data *edata;
940
941         edata = talloc_zero(task, struct esp_data);
942         NT_STATUS_HAVE_NO_MEMORY(edata);
943
944         task->private = edata;
945
946         return NT_STATUS_OK;
947 }