Diff for /parser3/src/main/pa_request.C between versions 1.142 and 1.410

version 1.142, 2001/07/13 10:58:03 version 1.410, 2020/12/26 23:09:08
Line 1 Line 1
 /** @file  /** @file
         Parser: request class main part. @see compile.C and execute.C.          Parser: request class main part. @see compile.C and execute.C.
   
         Copyright (c) 2001 ArtLebedev Group (http://www.artlebedev.com)          Copyright (c) 2001-2020 Art. Lebedev Studio (http://www.artlebedev.com)
           Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)
         Author: Alexander Petrosyan <paf@design.ru> (http://design.ru/paf)  
 */  */
 static const char *RCSId="$Id$";   
   
 #include "pa_config_includes.h"  
   
 #include "pcre.h"  
 #include "internal.h"  
 extern "C" unsigned char pcre_default_tables[]; // pcre/chartables.c  
   
 #include "pa_sapi.h"  #include "pa_sapi.h"
 #include "pa_common.h"  #include "pa_common.h"
   #include "pa_os.h"
 #include "pa_request.h"  #include "pa_request.h"
 #include "pa_wwrapper.h"  #include "pa_wwrapper.h"
 #include "pa_vclass.h"  #include "pa_vclass.h"
Line 22  extern "C" unsigned char pcre_default_ta Line 15  extern "C" unsigned char pcre_default_ta
 #include "pa_vint.h"  #include "pa_vint.h"
 #include "pa_vmethod_frame.h"  #include "pa_vmethod_frame.h"
 #include "pa_types.h"  #include "pa_types.h"
   #include "pa_venv.h"
   #include "pa_vmath.h"
   #include "pa_vstatus.h"
   #include "pa_vrequest.h"
 #include "pa_vtable.h"  #include "pa_vtable.h"
 #include "pa_vfile.h"  #include "pa_vfile.h"
   #include "pa_dictionary.h"
   #include "pa_charset.h"
   #include "pa_charsets.h"
   #include "pa_cache_managers.h"
   #include "pa_http.h"
   #include "pa_vmail.h"
   #include "pa_vform.h"
   #include "pa_vcookie.h"
   #include "pa_vresponse.h"
   #include "pa_vmemory.h"
   #include "pa_vconsole.h"
   #include "pa_vdate.h"
   
   volatile const char * IDENT_PA_REQUEST_C="$Id$" IDENT_PA_REQUEST_H IDENT_PA_REQUEST_CHARSETS_H IDENT_PA_REQUEST_INFO_H IDENT_PA_VCONSOLE_H;
   
 /// content type of exception response, when no @MAIN:exception handler defined  // consts
 const char *UNHANDLED_EXCEPTION_CONTENT_TYPE="text/plain";  
   #define UNHANDLED_EXCEPTION_METHOD_NAME "unhandled_exception"
   
 /// content type of response when no $MAIN:defaults.content-type defined  /// content type of response when no $MAIN:defaults.content-type defined
 const char *DEFAULT_CONTENT_TYPE="text/html";  const char* DEFAULT_CONTENT_TYPE="text/html";
   
   const uint LOOP_LIMIT=20000;
   const uint EXECUTE_RECOURSION_LIMIT=1000;
   const uint HTTPD_TIMEOUT=4;
   const size_t FILE_SIZE_LIMIT=512*1024*1024;
   
   // defines for globals
   
   #define MAIN_METHOD_NAME "main"
   #define AUTO_METHOD_NAME "auto"
   #define USE_METHOD_NAME "use"
   #define AUTOUSE_METHOD_NAME "autouse"
   
   #define EXCEPTION_TYPE_PART_NAME "type"
   #define EXCEPTION_SOURCE_PART_NAME "source"
   #define EXCEPTION_COMMENT_PART_NAME "comment"
   
   #define ORIGIN_KEY "origin"
   
   // globals
   
   const String main_method_name(MAIN_METHOD_NAME);
   const String auto_method_name(AUTO_METHOD_NAME);
   static const String use_method_name(USE_METHOD_NAME);
   static const String autouse_method_name(AUTOUSE_METHOD_NAME);
   
   const String exception_type_part_name(EXCEPTION_TYPE_PART_NAME);
   const String exception_source_part_name(EXCEPTION_SOURCE_PART_NAME);
   const String exception_comment_part_name(EXCEPTION_COMMENT_PART_NAME);
   const String exception_handled_part_name(EXCEPTION_HANDLED_PART_NAME);
   
   static const String origin_key(ORIGIN_KEY);
   
   int pa_loop_limit=LOOP_LIMIT;
   int pa_execute_recoursion_limit=EXECUTE_RECOURSION_LIMIT;
   int pa_httpd_timeout=HTTPD_TIMEOUT;
   size_t pa_file_size_limit=FILE_SIZE_LIMIT;
   
 Methoded *MOP_create(Pool&);  // defines for statics
   
   #define MIME_TYPES_NAME "MIME-TYPES"
   #define CLASS_PATH_NAME "CLASS_PATH"
   
   #define DOWNLOAD_NAME_UPPER "DOWNLOAD"
   #define BODY_NAME_UPPER "BODY"
   
   // statics
   
   static const String main_class_name(MAIN_CLASS_NAME);
   static const String mime_types_name(MIME_TYPES_NAME);
   static const String class_path_name(CLASS_PATH_NAME);
   
   static const String charsets_name("CHARSETS");
   static const String strict_vars_name("STRICT-VARS");
   static const String prototype_name("OBJECT-PROTOTYPE");
   static const String limits_name("LIMITS");
   static const String loop_limit_name("max_loop");
   static const String recoursion_limit_name("max_recoursion");
   static const String file_size_limit_name("max_file_size");
   static const String lock_wait_timeout_name("lock_wait_timeout");
   static const String httpd_name("HTTPD");
   static const String httpd_timeout_name("timeout");
   static const String httpd_mode_name("mode");
   
   static const String conf_method_name("conf");
   static const String post_process_method_name("postprocess");
   static const String response_body_file_name("file");
   
   static const String download_name_upper(DOWNLOAD_NAME_UPPER);
   static const String body_name_upper(BODY_NAME_UPPER);
   
   // more static
   
   static const String content_type_name_upper(HTTP_CONTENT_TYPE_UPPER);
   static const String content_disposition_name_upper(CONTENT_DISPOSITION_UPPER);
   static const String content_disposition_inline(CONTENT_DISPOSITION_INLINE);
   static const String content_disposition_attachment(CONTENT_DISPOSITION_ATTACHMENT);
   
   // defines
   
   #define CHARSET_NAME_UPPER "CHARSET"
   #define LAST_MODIFIED_NAME_UPPER "LAST-MODIFIED"
   
   // op.C
   VStateless_class& VClassMAIN_create();
   
 //  //
 Request::Request(Pool& apool,  Request::Request(SAPI_Info& asapi_info, Request_info& arequest_info, String::Language adefault_lang):
                                  Info& ainfo,          // private
                                  String::Untaint_lang adefault_lang) : Pooled(apool),          anti_endless_execute_recoursion(0),
         stack(apool),  
         OP(*MOP_create(apool)),          // public
         env(apool),          allow_class_replace(false),
         form(apool),          method_frame(0),
         math(apool),          rcontext(0),
         request(apool, *this),          wcontext(0),
         response(apool),          flang(adefault_lang),
         cookie(apool),          fconnection(0),
         fclasses(apool),          fin_cycle(0),
         fdefault_lang(adefault_lang), flang(adefault_lang),          fskip(SKIP_NOTHING),
         info(ainfo),  
         post_data(0), post_size(0),          // public
         used_files(apool),          request_info(arequest_info),
         default_content_type(0),          sapi_info(asapi_info),
         mime_types(0),          charsets(pa_UTF8_charset, pa_UTF8_charset, pa_UTF8_charset), // default charsets
         main_class(0),  
         connection(0),          main_class(VClassMAIN_create()),
         pcre_tables(0),          form(*new VForm(charsets, arequest_info)),
         classes_conf(apool),          mail(*new VMail),
         anti_endless_execute_recoursion(0)          response(*new VResponse(arequest_info, charsets)),
           cookie(*new VCookie(charsets, arequest_info)),
           console(*new VConsole),
   
           // private
           configure_admin_done(false),
   
           // private defaults
           fdefault_lang(adefault_lang), 
           // private mime types
           mime_types(0)
 {  {
           pa_register_thread_request(*this);
   
           // file_no=0 => unknown
           file_list+="UNKNOWN";
           file_list+="-body of process-"; // pseudo_file_no__process
   
           // maybe expire old caches
           cache_managers->maybe_expire();
           
         /// directly used          /// directly used
         // operators          // MAIN class, operators
         OP.register_directly_used(*this);          put_class(&main_class);
         // classes:          // classes:
         // table, file, random, mail, image, ...          // table, file, random, mail, image, ...
         methoded_array->register_directly_used(*this);          methoded_array().register_directly_used(*this);
   
         /// methodless          /// methodless
   
         // env class          // env class
         classes().put(*NEW String(pool(), ENV_CLASS_NAME), &env);          put_class(new VEnv(asapi_info));
           // status class
           put_class(new VStatus());
         // request class          // request class
         classes().put(*NEW String(pool(), REQUEST_CLASS_NAME), &request);                 put_class(new VRequest(arequest_info, charsets, form, asapi_info));
         // cookie class          // cookie class
         classes().put(*NEW String(pool(), COOKIE_CLASS_NAME), &cookie);          put_class(&cookie);
           // console class
           put_class(&console);
   
         /// methoded          /// methoded
         // response class  
         classes().put(response.get_class()->name(), &response);   
   
         /// bases used          // response class
           put_class(&response);
         // form class          // form class
         classes().put(form.get_class()->base()->name(), &form);           put_class(&form);
           // mail class
           put_class(&mail);
         // math class          // math class
         classes().put(math.get_class()->base()->name(), &math);           put_class(new VMath);
           // memory class
           put_class(new VMemory);
 }  }
   
 static void element2ctypes(unsigned char *tables,   Request::~Request() {
         Value& ctype, const String& name,   #ifdef XML
         unsigned char bit,          // if for some strange reason xml generic errors failed to be reported, free them up
         int group_offset=-1,          if(const char* xml_generic_errors=xmlGenericErrors()) {
         bool skip_ws=true) {                  SAPI::log(sapi_info, "warning: unreported xmlGenericErrors: %s", xml_generic_errors);
         Value *value=ctype.get_element(name);                  pa_free((void *)xml_generic_errors);
         if(!value)          }
                 return;  #endif
   }
   
   Value& Request::get_self() { return method_frame/*always have!*/->self(); }
   
   VStateless_class* Request::get_class(const String& name){
           VStateless_class* result=classes().get(name);
           if(!result)
                   if(const Method *method=main_class.get_element_method(autouse_method_name)){
                           Value *vname=new VString(name);
                           CONSTRUCTOR_FRAME_ACTION(*method, 0 /*no parent*/, main_class, {
                                   frame.store_params(&vname, 1);
                                   // we don't need the result
                                   call(frame);
                           });
                           result=classes().get(name);
                   }
           return result;
   }
   
   static void load_charset(HashStringValue::key_type akey, HashStringValue::value_type avalue, Request_charsets* charsets) {
           pa_charsets.load_charset(*charsets, akey, avalue->as_string());
   }
   
         unsigned char *ctypes_table=tables+ctypes_offset;  
         const unsigned char *cstr=  
                 (const unsigned char *)value->as_string().cstr(String::UL_AS_IS);  
         for(; *cstr; cstr++) {  
                 unsigned char c=*cstr;  
                 if(skip_ws && (c=='\n' || c=='\t' || c==' '))  
                         continue;  
                 ctypes_table[c]|=bit;  
   
                 if(group_offset>=0)  
                         tables[cbits_offset+group_offset+c/8] |= 1 << (c%8);  
         }                                 
 }  
 static void cstr2ctypes(unsigned char *tables, const unsigned char *cstr,   
                                                 unsigned char bit) {  
         unsigned char *ctypes_table=tables+ctypes_offset;  
         ctypes_table[0]=bit;  
         for(; *cstr; cstr++) {  
                 unsigned char c=*cstr;  
                 ctypes_table[c]|=bit;  
         }  
 }  
 static void prepare_case_tables(unsigned char *tables) {  
         unsigned char *lcc_table=tables+lcc_offset;  
         unsigned char *fcc_table=tables+fcc_offset;  
         for(int i=0; i<0x100; i++)  
                 lcc_table[i]=fcc_table[i]=i;  
 }  
 static void element2case(unsigned char *tables, Value& ctype, const String& name) {  
         Value *value=ctype.get_element(name);  
         if(!value)  
                 return;  
   
         unsigned char *lcc_table=tables+lcc_offset;  #define CONF_OPTION(config, name, code, exception_name)         \
         unsigned char *fcc_table=tables+fcc_offset;          if(config)                                              \
         const unsigned char *cstr=                  if(Value* option=config->get_element(name)) {   \
                 (const unsigned char *)value->as_string().cstr(String::UL_AS_IS);                          if(option->is_evaluated_expr()) {       \
         unsigned char from=0;                                  code;                           \
         for(; *cstr; cstr++) {                          } else                                  \
                 unsigned char c=*cstr;                                  throw Exception(PARSER_RUNTIME, 0, "$main:" exception_name, name.cstr()); \
                 if(c=='\n' || c=='\t' || c==' ')                  }
                         continue;  
                 if(from) {  void Request::configure_admin(VStateless_class& conf_class) {
                         lcc_table[from]=c;          if(configure_admin_done)
                         fcc_table[from]=c; fcc_table[c]=from;                  throw Exception(PARSER_RUNTIME, 0, "parser already configured");
                         from=0;          configure_admin_done=true;
                 } else          
                         from=c;          // charsets must only be specified in method_frame config
           // so that users would not interfere
   
           /* $MAIN:CHARSETS[
                           $.charsetname1[/full/path/to/charset/file.cfg]
                           ...
                   ]
           */
           if(Value* vcharsets=conf_class.get_element(charsets_name)) {
                   if(!vcharsets->is_string()) {
                           if(HashStringValue* charsets=vcharsets->get_hash())
                                   charsets->for_each<Request_charsets*>(load_charset, &this->charsets);
                           else
                                   throw Exception(PARSER_RUNTIME, 0, "$main:%s must be hash", charsets_name.cstr());
                   }
           }
   
   #ifdef STRICT_VARS
           VVoid::strict_vars=false;
           if(Value* strict_vars=conf_class.get_element(strict_vars_name)) {
                   if(strict_vars->is_bool())
                           VVoid::strict_vars=strict_vars->as_bool();
                   else
                           throw Exception(PARSER_RUNTIME, 0, "$main:%s must be bool", strict_vars_name.cstr());
           }
   #endif
   
   #ifdef OBJECT_PROTOTYPE
           VClass::prototype=true;
           if(Value* prototype=conf_class.get_element(prototype_name)) {
                   if(prototype->is_bool())
                           VClass::prototype=prototype->as_bool();
                   else
                           throw Exception(PARSER_RUNTIME, 0, "$main:%s must be bool", prototype_name.cstr());
         }          }
   #endif
   
           Value* limits=conf_class.get_element(limits_name);
   
           pa_loop_limit=LOOP_LIMIT;
           CONF_OPTION(limits, loop_limit_name, {
                   pa_loop_limit=option->as_int();
                   if(pa_loop_limit==0) pa_loop_limit=INT_MAX;
           }, "LIMITS.%s must be int");
   
           pa_execute_recoursion_limit=EXECUTE_RECOURSION_LIMIT;
           CONF_OPTION(limits, recoursion_limit_name, {
                   pa_execute_recoursion_limit=option->as_int();
                   if(pa_execute_recoursion_limit==0) pa_execute_recoursion_limit=INT_MAX;
           }, "LIMITS.%s must be int");
   
           pa_file_size_limit=FILE_SIZE_LIMIT;
           CONF_OPTION(limits, file_size_limit_name, {
                   double limit=option->as_double();
                   if(limit >= (double)SSIZE_MAX)
                           throw Exception(PARSER_RUNTIME, 0, "$main:LIMITS.%s must be less then %.15g", file_size_limit_name.cstr(), (double)SSIZE_MAX);
                   pa_file_size_limit=(size_t)limit;
                   if(pa_file_size_limit==0)
                           pa_file_size_limit=SSIZE_MAX;
           }, "LIMITS.%s must be number");
   
           pa_lock_attempts=PA_LOCK_ATTEMPTS;
           CONF_OPTION(limits, lock_wait_timeout_name, {
                   double limit=option->as_double();
                   if(limit >= 3600*24)
                           throw Exception(PARSER_RUNTIME, 0, "$main:LIMITS.%s must be less then %d", lock_wait_timeout_name.cstr(), 3600*24);
                   pa_lock_attempts=(unsigned int)(limit*2)+1;
           }, "LIMITS.%s must be number");
   
           Value* httpd=conf_class.get_element(httpd_name);
   
           pa_httpd_timeout=HTTPD_TIMEOUT;
           CONF_OPTION(httpd, httpd_timeout_name, {
                   pa_httpd_timeout=option->as_int();
                   if(pa_httpd_timeout==0) pa_httpd_timeout=INT_MAX;
           }, "HTTPD.%s must be int");
   
           if(httpd)
                   if(Value* option=httpd->get_element( httpd_mode_name)) {
                           if(option->get_junction())
                                   throw Exception(PARSER_RUNTIME, 0, "$main:HTTPD:mode must be string");
                           HTTPD_Server::set_mode(option->as_string());
                   }
   
           // configure method_frame options
           //      until someone with less privileges have overriden them
           methoded_array().configure_admin(*this);
   }
   
   const char* Request::get_exception_cstr(const Exception& e, Request::Exception_details& details) {
   
   #define PA_URI_FORMAT "%s: "
   #define PA_COMMENT_TYPE_FORMAT "%s [%s]"
   
   #define PA_ORIGIN_FILE_POS_FORMAT "%s(%d:%d): "
   #define PA_SOURCE_FORMAT "'%s' "
   
   #define PA_ORIGIN_FILE_POS_VALUE file_list[details.origin.file_no].cstr(), 1+details.origin.line, 1+details.origin.col,
   #define PA_SOURCE_VALUE details.problem_source->cstr(),
   
   #define EXCEPTION_CSTR(f1,v1,f2,v2) \
                           snprintf(result, MAX_STRING, \
                                   PA_URI_FORMAT \
                                   f1 f2 \
                                   PA_COMMENT_TYPE_FORMAT, \
                                   request_info.uri, \
                                   v1 v2 \
                                   e.comment(), e.type() \
                           );
   
           char* result=new(PointerFreeGC) char[MAX_STRING];
   
           if(details.problem_source) { // do we know the guy?
                   if(details.origin.file_no) // do whe know where he came from?
                           EXCEPTION_CSTR(PA_ORIGIN_FILE_POS_FORMAT, PA_ORIGIN_FILE_POS_VALUE, PA_SOURCE_FORMAT, PA_SOURCE_VALUE)
                   else
                           EXCEPTION_CSTR(PA_SOURCE_FORMAT, PA_SOURCE_VALUE,,)
           } else {
                   if(details.origin.file_no) // do whe know where he came from?
                           EXCEPTION_CSTR(PA_ORIGIN_FILE_POS_FORMAT, PA_ORIGIN_FILE_POS_VALUE,,)
                   else
                           EXCEPTION_CSTR(,,,)
           }
   
           return result;
   }
   
   Table &Request::Exception_trace::table(Request &r){
           // $stack[^table::create{name   file    lineno  colno}]
           Table::columns_type stack_trace_columns(new ArrayString);
           *stack_trace_columns+=new String("name");
           *stack_trace_columns+=new String("file");
           *stack_trace_columns+=new String("lineno");
           *stack_trace_columns+=new String("colno");
           Table& stack_trace=*new Table(stack_trace_columns);
   
           if(!is_empty()/*signed!*/)
                   for(size_t i=bottom_index(); i<top_index(); i++) {
                           Trace trace=get(i);
                           Table::element_type row(new ArrayString);
   
                           *row+=trace.name(); // name column
                           Operation::Origin origin=trace.origin();
                           if(origin.file_no) {
                                   *row+=new String(r.file_list[origin.file_no], String::L_TAINTED); // 'file' column
                                   *row+=new String(String::Body::Format(1+origin.line), String::L_CLEAN); // 'lineno' column
                                   *row+=new String(String::Body::Format(1+origin.col), String::L_CLEAN); // 'colno' column
                           }
                           stack_trace+=row;
                   }
   
           return stack_trace;
 }  }
   
   void Request::configure() {
           // configure admin options if not configured yet
           if(!configure_admin_done)
                   configure_admin(main_class);
   
           // configure not-admin=user options
           methoded_array().configure_user(*this);
   
           // $MAIN:MIME-TYPES
           if(Value* element=main_class.get_element(mime_types_name))
                   if(Table *table=element->get_table())
                           mime_types=table;
   }
   
 /**  /**
         load MAIN class, execute @main.          load MAIN class, execute @main.
         MAIN class consists of all the auto.p files we'd manage to find          MAIN class consists of all the auto.p files we'd manage to find
Line 150  static void element2case(unsigned char * Line 427  static void element2case(unsigned char *
         the file user requested us to process          the file user requested us to process
         all located classes become children of one another,          all located classes become children of one another,
         composing class we name 'MAIN'          composing class we name 'MAIN'
 */  
 void Request::core(const char *root_auto_path, bool root_auto_fail,  
                                    const char *site_auto_path, bool site_auto_fail,  
                                    bool header_only) {  
         //_asm { int 3 }  
         bool need_rethrow=false;  Exception rethrow_me;  
         TRY {  
                 char *auto_filespec=(char *)malloc(MAX_STRING);  
                   
                 // loading root auto.p   
                 if(root_auto_path) {  
                         String& filespec=*NEW String(pool());  
                         filespec.APPEND_CLEAN(root_auto_path, 0, "root_auto", 0);  
                         filespec.APPEND_CONST("/" AUTO_FILE_NAME);  
                         main_class=use_file(  
                                 filespec, root_auto_fail,  
                                 main_class_name, main_class);  
                 }  
   
                 // configure root options  
                 //      until someone with less privileges have overriden them  
                 OP.configure_admin(*this);  
                 methoded_array->configure_admin(*this);  
   
                 // loading site auto.p  
                 if(site_auto_path) {  
                         String& filespec=*NEW String(pool());  
                         filespec.APPEND_CLEAN(site_auto_path, 0, "site_auto", 0);  
                         filespec.APPEND_CONST("/" AUTO_FILE_NAME);  
                         main_class=use_file(  
                                 filespec, site_auto_fail,  
                                 main_class_name, main_class);  
                 }  
   
                 // loading auto.p files from document_root/..   
                 // to the one beside requested file.  
                 // all assigned bases from upper dir  
                 {  
                         Array ladder(pool());  
                         const char *after=info.path_translated;  
                         size_t drlen=strlen(info.document_root);  
                         if(memcmp(after, info.document_root, drlen)==0) {  
                                 after+=drlen;  
                                 if(after[-1]=='/')   
                                         --after;  
                         }  
                           
                         while(const char *before=strchr(after, '/')) {  
                                 String& step=*NEW String(pool());  
                                 if(after!=info.path_translated) {  
                                         step.APPEND_CLEAN(  
                                                 info.path_translated, before+1/* / */-info.path_translated,  
                                                 "path-translated-scanned", ladder.size());  
                                         step << AUTO_FILE_NAME;  
                                         ladder+=&step;  
                                 }  
                                 after=before+1;  
                         }  
                         for(int i=0; i<ladder.size(); i++) {  
                                 const String& sfile_spec=*ladder.get_string(i);  
                                 main_class=use_file(sfile_spec, false/*ignore read problem*/,  
                                         main_class_name, main_class);  
                         }  
                 }  
   
                 // compile requested file          @test log stack trace
                 String& spath_translated=*NEW String(pool());  
                 spath_translated.APPEND_TAINTED(info.path_translated, 0, "user-request", 0);  
                 main_class=use_file(spath_translated, true/*don't ignore read problem*/,  
                         main_class_name, main_class);  
   
                 // configure not-root=user options  
                 OP.configure_user(*this);  
                 methoded_array->configure_user(*this);  
   
                 // $MAIN:DEFAULTS  
                 Value *defaults=main_class->get_element(*defaults_name);  
                 // value must be allocated on request's pool for that pool used on  
                 // meaning constructing @see attributed_meaning_to_string  
                 default_content_type=defaults?defaults->get_element(*content_type_name):0;  
                 if(Value *element=main_class->get_element(*user_html_name))  
                         if(Table *table=element->get_table())  
                                 pool().set_tag(table);  
   
                 // $MAIN:MIME-TYPES  
                 if(Value *element=main_class->get_element(*mime_types_name))  
                         if(Table *table=element->get_table())  
                                 mime_types=table;                         
   
                 /*  
                         $MAIN:CTYPE[  
                                 $white-space[  
                                         ^#09^#0A^#0B^#0C^#0D^#20]  
                                 $digit[  
                                         0123456789]  
                                 $hex-digit[  
                                         0123456789ABCDEFabcdef]  
                                 $letter[  
                                         ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz]  
                                 $word[  
                                         0123456789ABCDEFGHIJKLMNOPQRSTUVWXYZ_abcdefghijklmnopqrstuvwxyz]  
   
                                 $lowercase[  
                                         AaBbCcDdEeFfGgHhIiJjKkLlMmNnOoPpQqRrSsTtUuVvWwXxYyZz]  
                         ]  
                 */  
                 if(Value *ctype=main_class->get_element(*ctype_name)) {  
                         // lowcase, flipcase, bits digit+word+whitespace, masks  
                         pcre_tables=(unsigned char *)calloc(tables_length);  
                         prepare_case_tables(pcre_tables);  
   
                         element2ctypes(pcre_tables, *ctype, *ctype_white_space_name, ctype_space, cbit_space, false);  
                         element2ctypes(pcre_tables, *ctype, *ctype_digit_name, ctype_digit, cbit_digit);  
                         element2ctypes(pcre_tables, *ctype, *ctype_hex_digit_name, ctype_xdigit);  
                         element2ctypes(pcre_tables, *ctype, *ctype_letter_name, ctype_letter);  
                         element2ctypes(pcre_tables, *ctype, *ctype_word_name, ctype_word, cbit_word);  
                         cstr2ctypes(pcre_tables, (const unsigned char *)"*+?{^.$|()[", ctype_meta);  
   
                         element2case(pcre_tables, *ctype, *ctype_lowercase_name);  
                 } else  
                         pcre_tables=pcre_default_tables;  
   
                 // filling form fields  */
                 form.fill_fields(*this);  void Request::core(const char* config_filespec, bool header_only, const String &amain_method_name) {
           VFile* body_file=NULL;
                 // filling cookies          bool as_attachment=false;
                 cookie.fill_fields(*this);  
           try {
                   // loading config
                   if(config_filespec)
                           use_file_directly(*new String(config_filespec));
   
                   // filling mail received
                   mail.fill_received(*this);
   
                   try {
                           // compile requested file
                           if(request_info.path_translated)
                                   use_file_directly(*new String(request_info.path_translated, String::L_TAINTED), true, true /* load auto.p files */);
                           configure();
                   } catch(...) {
                           configure(); // configure anyway, useful in @unhandled_exception [say, if they would want to mail by SMTP something]
                           rethrow;
                   }
   
                 // execute @main[]                  // execute @main[]
                 const String *body_string=execute_method(*main_class, *main_method_name);                  const String* body_string=amain_method_name.is_empty() ? &String::Empty : execute_method(main_class, amain_method_name);
                 if(!body_string)                  if(!body_string)
                         THROW(0,0,                          throw Exception(PARSER_RUNTIME, 0, "'%s' method not found", amain_method_name.cstr());
                         0,   
                         "'"MAIN_METHOD_NAME"' method not found");                  // extract response body
                   Value* body_value=response.fields().get(download_name_upper); // $response:download?
                 VString body_vstring_before_post_process(*body_string);                  as_attachment=body_value!=0;
                 VString *body_vstring_after_post_process=&body_vstring_before_post_process;                  if(!body_value)
                                           body_value=response.fields().get(body_name_upper); // $response:body
                   if(!body_value)
                           body_value=new VString(*body_string); // just result of ^main[]
   
                 // @postprocess                  // @postprocess
                 if(Value *value=main_class->get_element(*post_process_method_name))                  if(const Method *method=main_class.get_method(post_process_method_name)) {
                         if(Junction *junction=value->get_junction())                          METHOD_FRAME_ACTION(*method, 0 /*no parent*/, main_class, {
                                 if(const Method *method=junction->method) {                                  frame.store_params(&body_value, 1);
                                         // preparing to pass parameters to                                   call(frame);
                                         //      @postprocess[data]                                  body_value=&frame.result();
                                         VMethodFrame frame(pool(), value->name(), *junction, false);                          });
                                         frame.set_self(*main_class);                  }
   
                                         frame.store_param(method->name,   
                                                 &body_vstring_before_post_process);  
                                         body_vstring_after_post_process=  
                                                 NEW VString(*execute_method(frame, *method));  
                                 }  
   
                 const VFile *body_file=body_vstring_after_post_process->as_vfile();                  body_file=body_value->as_vfile(flang, &charsets);
   
                 // extract response body          } catch(const Exception& e) { // request handling problem
                 Value *body_value=static_cast<Value *>(                  try {
                         response.fields().get(*body_name));                          // we're returning not result, but error explanation
                 if(body_value) // there is some $response.body  
                         body_file=body_value->as_vfile();                          Request::Exception_details details=get_details(e);
                           const char* exception_cstr=get_exception_cstr(e, details);
                 // OK. write out the result  
                 output_result(*body_file, header_only);  
         }   
         CATCH(e) { // request handling problem  
                 // we're returning not result, but error explanation  
                 TRY {  
                         // log the beast  
                         const String *problem_source=e.problem_source();  
                         if(problem_source && problem_source->size())  
                                 SAPI::log(pool(),  
 #ifndef NO_STRING_ORIGIN  
                                         "%s(%d): "  
 #endif  
                                         "'%s' %s [%s %s]",  
 #ifndef NO_STRING_ORIGIN  
                                         problem_source->origin().file?problem_source->origin().file:"global",  
                                         problem_source->origin().line,  
 #endif  
                                         problem_source->cstr(String::UL_AS_IS),  
                                         e.comment(),  
                                         e.type()?e.type()->cstr(String::UL_AS_IS):"-",  
                                         e.code()?e.code()->cstr(String::UL_AS_IS):"-"  
                                 );  
                         else  
                                 SAPI::log(pool(),  
                                         "%s [%s %s]",  
                                         e.comment(),  
                                         e.type()?e.type()->cstr(String::UL_AS_IS):"-",  
                                         e.code()?e.code()->cstr(String::UL_AS_IS):"-"  
                                         );  
   
                         // reset language to default                          // reset language to default
                         flang=fdefault_lang;                          flang=fdefault_lang;
                         if(flang==String::UL_USER_HTML)  
                                 flang=String::UL_HTML; // no _ & Co conversions in @exception[params]  
                           
                         // reset response                          // reset response
                         response.fields().clear();                          response.fields().clear();
   
                         // this is what we'd return in $response:body                          // this is what we'd return in $response:body
                         const String *body_string=0;                          const String* body_string=0;
   
                         if(main_class) { // we've managed to end up with some main_class                          // maybe we'd be lucky enough as to report an error in a gracefull way...
                                 // maybe we'd be lucky enough as to report an error                          if(const Method *method=main_class.get_method(*new String(UNHANDLED_EXCEPTION_METHOD_NAME))) {
                                 // in a gracefull way...                                  // preparing parameters to @unhandled_exception[exception;stack]
                                 if(Value *value=main_class->get_element(*exception_method_name))  
                                         if(Junction *junction=value->get_junction())                                  Table& stack_trace=exception_trace.table(*this);
                                                 if(const Method *method=junction->method) {                                  exception_trace.clear(); // forget all about previous life, in case there would be error inside of this method, error handled would not be mislead by old stack contents (see extract_origin)
                                                         // preparing to pass parameters to   
                                                         //      @exception[origin;source;comment;type;code]                                  Value *params[]={&details.vhash, new VTable(&stack_trace)};
                                                         VMethodFrame frame(pool(), value->name(), *junction, false);                                  METHOD_FRAME_ACTION(*method, 0 /*no caller*/, main_class, {
                                                         frame.set_self(*main_class);                                          frame.store_params(params, 2);
                                           call(frame);
                                                         const String *problem_source=e.problem_source();                                          body_string=&frame.result().as_string();
                                                         // origin                                  });
                                                         Value *origin_value=0;                          }
 #ifndef NO_STRING_ORIGIN  
                                                         if(problem_source && problem_source->size()) {  
                                                                 const Origin& origin=problem_source->origin();  
                                                                 if(origin.file) {  
                                                                         char *buf=(char *)malloc(MAX_STRING);  
                                                                         size_t buf_size=snprintf(buf, MAX_STRING, "%s(%d):",   
                                                                                 origin.file, 1+origin.line);  
                                                                         String *origin_file_line=NEW String(pool(),  
                                                                                 buf, buf_size, true);  
                                                                         origin_value=NEW VString(*origin_file_line);  
                                                                 }  
                                                         }  
 #endif  
                                                         frame.store_param(method->name,   
                                                                 origin_value?origin_value:NEW VVoid(pool()));  
   
                                                         // source                          // conditionally log it
                                                         Value *source_value=0;                          Value* vhandled=details.vhash.hash().get(exception_handled_part_name);
                                                         if(problem_source && problem_source->size()) {                          if(!vhandled || !vhandled->as_bool()) {
                                                                 String& problem_source_copy=*NEW String(pool());                                  SAPI::log(sapi_info, "%s", exception_cstr);
                                                                 problem_source_copy.append(*problem_source,   
                                                                         flang, true);  
                                                                 source_value=NEW VString(problem_source_copy);  
                                                         }  
                                                         frame.store_param(method->name,   
                                                                 source_value?source_value:NEW VVoid(pool()));  
   
                                                         // comment  
                                                         String *comment_value=NEW String(pool(),  
                                                                 e.comment(), 0, true);  
                                                         frame.store_param(method->name,   
                                                                 NEW VString(*comment_value));  
   
                                                         // type  
                                                         Value *type_value;  
                                                         if(e.type()) {  
                                                                 String& type_copy=*NEW String(pool());  
                                                                 type_value=NEW VString(type_copy.append(*e.type(),   
                                                                         flang, true));  
                                                         } else  
                                                                 type_value=NEW VVoid(pool());  
                                                         frame.store_param(method->name, type_value);  
   
                                                         // code  
                                                         Value *code_value;  
                                                         if(e.code()) {  
                                                                 String& code_copy=*NEW String(pool());  
                                                                 code_value=NEW VString(code_copy.append(*e.code(),   
                                                                         flang, true));  
                                                         } else  
                                                                 code_value=NEW VVoid(pool());  
                                                         frame.store_param(method->name, code_value);  
   
                                                         // future $response:body=  
                                                         //   execute ^exception[origin;source;comment;type;code]  
                                                         body_string=execute_method(frame, *method);  
                                                 }  
                         }                          }
                           
                         if(!body_string) {  // couldn't report an error beautifully?  
                                 // doing that ugly  
   
                                 // make up result: $origin $source $comment $type $code                          if(body_string) {  // could report an error beautifully?
                                 char *buf=(char *)malloc(MAX_STRING);                                  VString body_vstring(*body_string);
                                 size_t printed=0;  
                                 const String *problem_source=e.problem_source();  
                                 if(problem_source) {  
 #ifndef NO_STRING_ORIGIN  
                                         const Origin& origin=problem_source->origin();  
                                         if(origin.file)  
                                                 printed+=snprintf(buf+printed, MAX_STRING-printed, "%s(%d): ",   
                                                 origin.file, 1+origin.line);  
 #endif  
                                         printed+=snprintf(buf+printed, MAX_STRING-printed, "'%s' ",   
                                                 problem_source->cstr(String::UL_AS_IS));  
                                 }  
                                 printed+=snprintf(buf+printed, MAX_STRING-printed, "%s",   
                                         e.comment());  
                                 const String *type=e.type();  
                                 if(type) {  
                                         printed+=snprintf(buf+printed, MAX_STRING-printed, "  type: %s",   
                                                 type->cstr(String::UL_AS_IS));  
                                         const String *code=e.code();  
                                         if(code)  
                                                 printed+=snprintf(buf+printed, MAX_STRING-printed, ", code: %s",   
                                                 code->cstr(String::UL_AS_IS));  
                                 }  
   
                                 // future $response:content-type                                  body_file=body_vstring.as_vfile(flang, &charsets);
                                 response.fields().put(*content_type_name,                                   as_attachment=false;
                                         NEW VString(*NEW String(pool(), UNHANDLED_EXCEPTION_CONTENT_TYPE)));                          } else {
                                 // future $response:body                                  // doing that ugly
                                 body_string=NEW String(pool(), buf);                                  SAPI::send_error(sapi_info, exception_cstr, !strcmp(e.type(), "file.missing") ? "404" : "500");
                                   return;
                         }                          }
   
                         const VString body_vstring(*body_string);                  } catch(const Exception& e) { // exception in unhandled exception
                         const VFile *body_file=body_vstring.as_vfile();                          Request::Exception_details details=get_details(e);
                           // unconditionally log the beast in exception handler
                         // ERROR. write it out                          throw Exception(0, 0, "Unhandled exception in %s", get_exception_cstr(e, details));
                         output_result(*body_file, header_only);  
                 }                  }
                 CATCH(e) {  
                         // exception in request exception handler  
                         // remember to rethrow it  
                         rethrow_me=e;  need_rethrow=true;   
                 }  
                 END_CATCH  
         }          }
         END_CATCH // do not use pool() after this point - no exception handler set  
                   // any throw() would try to use zero exception() pointer   
   
         if(need_rethrow) // were there an exception for us to rethrow?          // write out the result outside of try as network exceptions should not be handled by parser code.
                 THROW(rethrow_me.type(), rethrow_me.code(),          output_result(body_file, header_only, as_attachment);
                         rethrow_me.problem_source(),  }
                         rethrow_me.comment());  
   uint Request::register_file(String::Body file_spec) {
           file_list+=file_spec;
           return file_list.count()-1;
 }  }
   
 VStateless_class *Request::use_file(const String& file_spec, bool fail_on_read_problem,  void Request::use_file_directly(const String& file_spec, bool fail_on_file_absence, bool with_auto_p) {
                                                                         const String *name,   
                                                                         VStateless_class *base_class) {  
         // cyclic dependence check          // cyclic dependence check
         if(used_files.get(file_spec))          if(used_files.get(file_spec))
                 return base_class;                  return;
         used_files.put(file_spec, (Hash::Val *)true);          used_files.put(file_spec, true);
   
           if(!fail_on_file_absence && !entry_exists(file_spec)) // ignore file absence if asked for
                   return;
   
         char *source=file_read_text(pool(), file_spec, fail_on_read_problem);          if(with_auto_p) {
         if(!source)                  // loading auto.p files from document_root/.. 
                 return base_class;                  // to the one beside requested file.
                   // all assigned bases from upper dir
                   const char* target=file_spec.cstr();
   
                   // all relative paths are calculated from main document
                   request_info.path_translated=target;
   
                   const char* after=target;
                   size_t drlen=strlen(request_info.document_root);
                   if(memcmp(after, request_info.document_root, drlen)==0) {
                           after+=drlen;
                           if(after[-1]=='/') 
                                   --after;
                   }
   
         return use_buf(source, file_spec.cstr(), 0/*new class*/, name, base_class);                  while(const char* before=strchr(after, '/')) {
                           String& sfile_spec=*new String;
                           if(after!=target) {
                                   sfile_spec.append_strdup(target, before-target, String::L_CLEAN);
                                   sfile_spec << "/" AUTO_FILE_NAME;
   
                                   use_file_directly(sfile_spec, false /*ignore absence, sole user*/);
                           }
                           for(after=before+1;*after=='/';after++);
                   }
           }
   
           if(const char* source=file_read_text(charsets, file_spec, true))
                   use_buf(main_class, source, 0, register_file(file_spec));
 }  }
   
 VStateless_class *Request::use_buf(const char *source, const char *file,  
                                                                    VStateless_class *aclass, const String *name,   
                                                                    VStateless_class *base_class) {  
         // compile loaded class  
         VStateless_class& cclass=COMPILE(source, aclass, name, base_class, file);  
   
         // locate and execute possible @auto[] static method  void Request::use_file(const String& file_name, const String* use_filespec/*absolute*/, bool with_auto_p) {
         execute_method(cclass, *auto_method_name, false /*no result needed*/);          if(file_name.is_empty())
         return &cclass;                  throw Exception(PARSER_RUNTIME, 0, "usage failed - no filename was specified");
   
           const String* filespec=0;
   
           if(file_name.first_char()=='/') //absolute path? [no need to scan MAIN:CLASS_PATH]
                   filespec=&full_disk_path(file_name);
           else if(use_filespec){ // search in current dir first
                   size_t last_slash_pos=use_filespec->strrpbrk("/");
                   if(last_slash_pos!=STRING_NOT_FOUND)
                           filespec=file_exist(use_filespec->mid(0, last_slash_pos), file_name); // found in current dir?
           }
   
           if(!filespec){
                   // prevent multiple scan CLASS_PATH for searching one file
                   if(searched_along_class_path.get(file_name))
                           return;
                   searched_along_class_path.put(file_name, true);
                   if(Value* element=main_class.get_element(class_path_name)) {
                           if(element->is_string()) {
                                   filespec=file_exist(full_disk_path(element->as_string()), file_name); // found at class_path?
                           } else if(Table *table=element->get_table()) {
                                   for(size_t i=table->count(); i--; ) {
                                           const String& path=*(*table->get(i))[0];
                                           if(filespec=file_exist(full_disk_path(path), file_name))
                                                   break; // found along class_path
                                   }
                           } else
                                   throw Exception(PARSER_RUNTIME, 0, "$" CLASS_PATH_NAME " must be string or table");
                           if(!filespec)
                                   throw Exception(PARSER_RUNTIME, &file_name, "not found along $main:" CLASS_PATH_NAME);
                   } else 
                           throw Exception(PARSER_RUNTIME, &file_name, "usage failed - no $main:" CLASS_PATH_NAME " were specified");
           }
   
           use_file_directly(*filespec, true, with_auto_p);
 }  }
   
 const String& Request::relative(const char *apath, const String& relative_name) {  void Request::use_file(const String& file_name, const String* use_filespec/*absolute*/, Operation::Origin origin) {
         int lpath_buf_size=strlen(apath)+1;          static String use("USE");
     char *lpath=(char *)malloc(lpath_buf_size);          try {
         memcpy(lpath, apath, lpath_buf_size);                  static VHash* voptions=new VHash();
     if(!rsplit(lpath, '/'))                  if(const Method *method=main_class.get_method(use_method_name)){
                 strcpy(lpath, ".");                          Value *params[]={new VString(file_name), voptions};
         String& result=*NEW String(pool(), lpath);                          voptions->hash().put(origin_key, new VString(*use_filespec));
     result << "/" << relative_name;  
     return result;                          CONSTRUCTOR_FRAME_ACTION(*method, 0 /*no parent*/, main_class, {
                                   frame.store_params(params, 2);
                                   // we don't need the result
                                   call(frame);
                           });
                   }
           } catch (...) {
                   exception_trace.push(Trace(&use, origin));
                   rethrow;
           }
   }
   
   void Request::use_buf(VStateless_class& aclass, const char* source, const String* main_alias, uint file_no, int line_no_offset) {
           // temporary zero @conf to avoid it second execution
           Temp_method temp_method_conf(aclass, conf_method_name, 0);
           // temporary zero @auto to avoid it second execution
           Temp_method temp_method_auto(aclass, auto_method_name, 0);
   
           // compile loaded classes
           ArrayClass& cclasses=compile(&aclass, source, main_alias, file_no, line_no_offset);
   
           VString* vfilespec=
                   new VString(*new String(file_list[file_no], String::L_TAINTED));
   
           for(size_t i=0; i<cclasses.count(); i++){
                   VStateless_class& cclass=*cclasses.get(i);
   
                   // locate and execute possible @conf[] static
                   if(execute_method_if_exists(cclass, conf_method_name, vfilespec))
                           configure_admin(cclass/*, executed.method->name*/);
   
                   // locate and execute possible @auto[] static
                   execute_method_if_exists(cclass, auto_method_name, vfilespec);
   
                   cclass.enable_default_setter();
           }
 }  }
   
 const String& Request::absolute(const String& relative_name) {  const String& Request::relative(const char* apath, const String& relative_name) {
         char *relative_name_cstr=relative_name.cstr();          char *hpath=pa_strdup(apath);
         if(relative_name_cstr[0]=='/') {          String& result=*new String;
                 String& result=*NEW String(pool(), info.document_root);          if(rsplit(hpath, '/')) // if something/splitted
                   result << hpath << "/";
           result << relative_name;
           return result;
   }
   
   const String& Request::full_disk_path(const String& relative_name) {
           if(relative_name.first_char()=='/') {
                   String& result=*new String(pa_strdup(request_info.document_root));
                 result << relative_name;                  result << relative_name;
                 return result;                  return result;
         } else           }
                 return relative(info.path_translated, relative_name);          if(relative_name.pos("://")!=STRING_NOT_FOUND // something like "http://xxx"
   #ifdef WIN32
                   || relative_name.pos(":")==1  // DRIVE:
                   || relative_name.starts_with("\\\\") // UNC1
                   || relative_name.starts_with("//") // UNC2
   #endif
                   )
                   return relative_name;
   
           return relative(request_info.path_translated ? request_info.path_translated : request_info.document_root, relative_name);
 }  }
   
 static void add_header_attribute(const Hash::Key& aattribute, Hash::Val *ameaning,   #ifndef DOXYGEN
                                                                  void *info) {  class Add_header_attribute_info
         String *attribute_to_exclude=static_cast<String *>(info);  {
         if(aattribute==*attribute_to_exclude)  public:
           Add_header_attribute_info(Request& ar) : r(ar), add_last_modified(true) {}
           Request& r;
           bool add_last_modified;
   };
   #endif
   static void add_header_attribute(HashStringValue::key_type name, HashStringValue::value_type value, Add_header_attribute_info* info) {
           if(name==BODY_NAME_UPPER || name==DOWNLOAD_NAME_UPPER || name==CHARSET_NAME_UPPER)
                 return;                  return;
           
           if(name==LAST_MODIFIED_NAME_UPPER)
                   info->add_last_modified=false;
   
           const char* aname=String(name, String::L_URI).untaint_and_transcode_cstr(String::L_URI, &info->r.charsets);
   
           SAPI::add_header_attribute(info->r.sapi_info,
                           aname,
                           attributed_meaning_to_string(*value, String::L_URI, false).untaint_and_transcode_cstr(String::L_URI, &info->r.charsets)
                   );
   }
   
   static void output_sole_piece(Request& r, bool header_only, VFile& body_file, Value* body_file_content_type) {
           // transcode text body when "text/*" or simple result
           String::C output(body_file.value_ptr(), body_file.value_size());
           if(!body_file_content_type/*vstring.as_vfile*/ || body_file_content_type->as_string().pos("text/")==0)
                   output=Charset::transcode(output, r.charsets.source(), r.charsets.client());
   
           // prepare header: Content-Length
           SAPI::add_header_attribute(r.sapi_info, HTTP_CONTENT_LENGTH, format(output.length, "%u"));
   
           // send header
           SAPI::send_header(r.sapi_info);
           
           // send body
           if(!header_only)
                   SAPI::send_body(r.sapi_info, output.str, output.length);
   }
   
   #ifndef DOXYGEN
   struct Range
   {
           uint64_t start;
           uint64_t end;
   };
   #endif
   
   #define UNSET ((uint64_t)-1)
   
   static void parse_range(const String* s, Array<Range> &ar) {
           const char *p = s->cstr();
           if(s->starts_with("bytes="))
                   p += 6;
           Range r;
           while(*p){
                   r.start = UNSET;
                   r.end = UNSET;
   
                   while(*p==' ' || *p=='\t') p++;
   
                   if(*p >= '0' && *p <= '9'){
                           const char *s=p;
                           while(*p>='0' && *p<='9') p++;
                           r.start = pa_atoul(pa_strdup(s,p-s));
                   }
   
                   while(*p==' ' || *p=='\t') p++;
   
                   if(*p++ != '-') break;
   
                   while(*p==' ' || *p=='\t') p++;
   
                   if(*p >= '0' && *p <= '9'){
                           const char *s=p;
                           while(*p>='0' && *p<='9') p++;
                           r.end = pa_atoul(pa_strdup(s,p-s));
                   }
   
                   while(*p==' ' || *p=='\t') p++;
   
                   if(*p)
                           if(*p++ != ',') break;
   
         Value& lmeaning=*static_cast<Value *>(ameaning);                  ar += r;
         Pool& pool=lmeaning.pool();          }
   }
   
         SAPI::add_header_attribute(pool,  struct Send_range_action_info {
                 aattribute.cstr(String::UL_AS_IS),           Request *r;
                 attributed_meaning_to_string(lmeaning, String::UL_HTTP_HEADER).cstr());          uint64_t offset;
           uint64_t part_length;
   };
   
   static void send_range(struct stat& /*finfo*/, int f, const String& /*file_spec*/, void *context){
           Send_range_action_info &info = *(Send_range_action_info*)context;
   
           pa_lseek(f, info.offset, SEEK_SET);
   
           const size_t BUFSIZE = 128*0x400;
           char buf[BUFSIZE];
           do{
                   size_t to_read = info.part_length < BUFSIZE ? (size_t)info.part_length : BUFSIZE;
                   size_t to_write = file_block_read(f, buf, to_read);
   
                   if(to_write == 0)
                           break;
   
                   size_t size = SAPI::send_body(info.r->sapi_info, buf, to_write);
                   if(size != to_write)
                           break;
   
                   info.part_length -= to_write;
           } while (info.part_length);
 }  }
 void Request::output_result(const VFile& body_file, bool header_only) {  
   static void output_pieces(Request& r, bool header_only, const String& filename, uint64_t content_length, Value& date, bool add_last_modified) {
           SAPI::add_header_attribute(r.sapi_info, "accept-ranges", "bytes");
   
           const char *range = SAPI::Env::get(r.sapi_info, "HTTP_RANGE");
           uint64_t offset=0;
           uint64_t part_length=content_length;
   
           if(range && content_length){
                   Array<Range> ar;
                   parse_range(new String(range), ar);
                   int count = ar.count();
                   if(count == 1){
                           Range &rg = ar.get_ref(0);
   
                           if(rg.start == UNSET && rg.end == UNSET)
                                   return SAPI::send_error(r.sapi_info, "", "416");
   
                           if(rg.start == UNSET && rg.end != UNSET){
                                   if(rg.end > content_length)
                                           rg.end = content_length;
                                   rg.start = content_length - rg.end;
                                   rg.end =  content_length-1;
                           } else if(rg.start != UNSET && rg.end == UNSET){
                                   if(rg.start >= content_length)
                                           return SAPI::send_error(r.sapi_info, "", "416");
                                   rg.end = content_length-1;
                           } else {
                                   if(rg.start >= content_length || rg.start > rg.end)
                                           return SAPI::send_error(r.sapi_info, "", "416");
                                   if(rg.end >= content_length)
                                           rg.end = content_length-1;
                           }
   
                           offset = rg.start;
                           part_length = rg.end-rg.start+1;
   
                           char buf[MAX_STRING];
                           snprintf(buf, MAX_STRING, "bytes %.15g-%.15g/%.15g", (double)rg.start, (double)rg.end, (double)content_length);
                           SAPI::add_header_attribute(r.sapi_info, HTTP_STATUS, "206");
                           SAPI::add_header_attribute(r.sapi_info, "content-range", buf);
                   } else {
                           return SAPI::send_error(r.sapi_info, count ? "Multiple ranges are not supported" : "Invalid range", count ? "501" : "400");
                   }
           }
   
           SAPI::add_header_attribute(r.sapi_info, HTTP_CONTENT_LENGTH, format((double)part_length, "%.15g"));
   
           if(add_last_modified)
                   SAPI::add_header_attribute(r.sapi_info, "last-modified", attributed_meaning_to_string(date, String::L_AS_IS, true).cstr());
   
           SAPI::send_header(r.sapi_info);
   
           if(!header_only){
                   Send_range_action_info info = { &r, offset, part_length};
                   file_read_action_under_lock(r.full_disk_path(filename), "send", send_range, &info);
           }
   }
   
   void Request::output_result(VFile* body_file, bool header_only, bool as_attachment) {
         // header: cookies          // header: cookies
         cookie.output_result();          cookie.output_result(sapi_info);
                   
         // set content-type          // $.file and $.name (when body is real vfile)
         if(String *body_file_content_type=static_cast<String *>(          Value* vfile = body_file->fields().get(response_body_file_name);
                 body_file.fields().get(*vfile_mime_type_name))) {          Value* vname = body_file->fields().get(name_name);
   
           const String* sfile = vfile ? &vfile->as_string() : NULL;
           const String* sname = vname ? &vname->as_string() : NULL;
   
           if(sname && *sname == NONAME_DAT)
                   sname = NULL;
   
           // Content-Disposition, use $.name[<empty>] to avoid
           const String* disposition_name = sname ? sname->is_empty() ? NULL : sname : sfile;
           if(disposition_name) {
                   VHash& hash=*new VHash();
                   hash.hash().put(value_name, new VString(as_attachment ? content_disposition_attachment : content_disposition_inline));
                   hash.hash().put(content_disposition_filename_name, new VString(*new String(*disposition_name, String::L_HTTP_HEADER)));
                   response.fields().put(content_disposition_name_upper, &hash);
           }
   
           // _file_ content-type might be specified
           Value* body_file_content_type = body_file->fields().get(content_type_name);
           if(!body_file_content_type){
                   const String* scontent_name = sname && !sname->is_empty() ? sname : sfile;
                   if(scontent_name)
                           body_file_content_type = new VString(mime_type_of(scontent_name->cstr()));
           }
   
           // set Content-Type
           if(body_file_content_type) {
                 // body file content type                  // body file content type
                 response.fields().put(*content_type_name, body_file_content_type);                  response.fields().put(content_type_name_upper, body_file_content_type);
         } else {          } else {
                 // default content type                  // default content type
                 response.fields().put_dont_replace(*content_type_name,                   response.fields().put_dont_replace(content_type_name_upper, new VString(*new String(DEFAULT_CONTENT_TYPE)));
                         default_content_type?default_content_type  
                         :NEW VString(*NEW String(pool(), DEFAULT_CONTENT_TYPE)));  
         }  
   
         // content-disposition  
         if(VString *vfile_name=static_cast<VString *>(body_file.fields().get(*name_name)))  
                 if(vfile_name->string()!=NONAME_DAT) {  
                         VHash& vhash=*NEW VHash(pool());  
                         vhash.hash().put(*content_disposition_filename_name, vfile_name);  
                         response.fields().put(*content_disposition_name, &vhash);  
                 }  
   
         // prepare header: $response:fields without :body  
         response.fields().for_each(add_header_attribute, /*excluding*/ body_name);  
   
         // prepare...  
         const void *body=body_file.value_ptr();  
         size_t content_length=body_file.value_size();  
   
         // prepare header: content-length  
         if(content_length) { // useful for redirecting [header "location: http://..."]  
                 char content_length_cstr[MAX_NUMBER];  
                 snprintf(content_length_cstr, MAX_NUMBER, "%u", content_length);  
                 SAPI::add_header_attribute(pool(), "content-length", content_length_cstr);  
         }          }
   
         // send header          // prepare header: $response:fields without :body, :download and :charset
         SAPI::send_header(pool());          Add_header_attribute_info info(*this);
                   response.fields().for_each<Add_header_attribute_info*>(add_header_attribute, &info);
         // send body  
         if(!header_only)          if(sfile) {
                 SAPI::send_body(pool(), body, content_length);                  // $response:[download|body][$.file[filespec]] -- optput specified file
                   uint64_t content_length=0;
                   time_t atime=0, mtime=0, ctime=0;
                   file_stat(full_disk_path(*sfile), content_length, atime, mtime, ctime);
   
                   VDate* vdate=0;
                   if(Value* v=body_file->fields().get("mdate")) {
                           if(Value* vdatep=v->as(VDATE_TYPE))
                                   vdate=static_cast<VDate*>(vdatep);
                           else 
                                   throw Exception(PARSER_RUNTIME, 0, "mdate must be a date");
                   }
                   if(!vdate)
                           vdate=new VDate((pa_time_t)mtime);
   
                   output_pieces(*this, header_only, *sfile, content_length, *vdate, info.add_last_modified);
           } else {
                   if(body_file_content_type)
                           if(HashStringValue *hash=body_file_content_type->get_hash())
                                   body_file_content_type=hash->get(value_name);
   
                   output_sole_piece(*this, header_only, *body_file, body_file_content_type);
           }
   }
   
   const String& Request::mime_type_of(const String* file_name) {
           return mime_type_of(file_name?file_name->taint_cstr(String::L_FILE_SPEC):0);
 }  }
   
 const String& Request::mime_type_of(const char *user_file_name_cstr) {  const String& Request::mime_type_of(const char* user_file_name_cstr) {
         if(mime_types)          if(mime_types)
                 if(const char *cext=strrchr(user_file_name_cstr, '.')) {                  if(const char* cext=strrchr(user_file_name_cstr, '.')) {
                         String sext(pool(), ++cext);                          String sext(++cext);
                         if(mime_types->locate(0, sext))                          Table::Action_options options;
                                 if(const String *result=mime_types->item(1))                          if(mime_types->locate(0, sext.change_case(charsets.source(), String::CC_LOWER), options)) {
                                   if(const String* result=mime_types->item(1))
                                         return *result;                                          return *result;
                                 else                                  else
                                         THROW(0, 0,                                          throw Exception(PARSER_RUNTIME, 0, MIME_TYPES_NAME " table column elements must not be empty");
                                                 mime_types->origin_string(),                          }
                                                 "MIME-TYPE table column elements must not be empty");                  }
   
           return *new String("application/octet-stream");
   }
   
   const String* Request::get_used_filespec(uint file_no){
           if(file_no < file_list.count())
                   return new String(file_list[file_no], String::L_TAINTED);
           return 0;
   }
   
   #ifdef XML
   xmlChar* Request::transcode(const String& s) {
           return charsets.source().transcode(s);
   }
   
   xmlChar* Request::transcode(const String::Body s) {
           return charsets.source().transcode(s);
   }
   
   const String& Request::transcode(const xmlChar* s) {
           return charsets.source().transcode(s);
   }
   #endif
   
   Request::Exception_details Request::get_details(const Exception& e) {
           const String* problem_source=e.problem_source();
           VHash& vhash=*new VHash;  HashStringValue& hash=vhash.hash();
           Operation::Origin origin={0, 0, 0};
   
           if(!exception_trace.is_empty()) {
                   Trace bottom=exception_trace.bottom_value();
                   origin=bottom.origin();
                   if(!problem_source) { // we don't know who trigged the bug
                           problem_source=bottom.name(); // we usually know source of next-from-throw-point exception did that
                           exception_trace.set_bottom_index(exception_trace.bottom_index()+1);
                   } else if (bottom.name()==problem_source) { // it is that same guy?
                           exception_trace.set_bottom_index(exception_trace.bottom_index()+1); // throw away that trace
                   } else {
                           // stack top contains not us, leaving intact to help ^throw
                 }                  }
         return *NEW String(pool(), "application/octet-stream");          }
   
           // $.type
           if(const char* type=e.type(true))
                   hash.put(exception_type_part_name, new VString(*new String(type)));
   
           // $.source
           if(problem_source)
                   hash.put(exception_source_part_name, new VString(*new String(*problem_source, String::L_TAINTED)));
   
           // $.file $.lineno $.colno
           if(origin.file_no){
                   hash.put("file", new VString(*new String(file_list[origin.file_no], String::L_TAINTED)));
                   hash.put("lineno", new VInt(1+origin.line));
                   hash.put("colno", new VInt(1+origin.col));
           }
   
           // $.comment
           if(const char* comment=e.comment(true))
                   hash.put(exception_comment_part_name, new VString(*new String(comment, String::L_TAINTED)));
   
           // $.handled(0)
           hash.put(exception_handled_part_name, &VBool::get(false));
   
           return Request::Exception_details(origin, problem_source, vhash);
   }
   
   Temp_value_element::Temp_value_element(Request& arequest, Value& awhere, const String& aname, Value* awhat) :
           frequest(arequest),
           fwhere(awhere),
           fname(aname),
           saved(awhere.get_element(aname))
   {
           Junction* junction;
           if(saved && (junction=saved->get_junction()) && junction->is_getter)
                   saved=0;
           frequest.put_element(fwhere, aname, awhat);
   }
   
   Temp_value_element::~Temp_value_element() {
           frequest.put_element(fwhere, fname, saved ? saved : VVoid::get());
 }  }

Removed from v.1.142  
changed lines
  Added in v.1.410


E-mail: