Diff for /parser3/src/main/pa_request.C between versions 1.325 and 1.409

version 1.325, 2010/11/22 22:24:23 version 1.409, 2020/12/21 14:12:57
Line 1 Line 1
 /** @file  /** @file
         Parser: request class main part. @see compile.C and execute.C.          Parser: request class main part. @see compile.C and execute.C.
   
         Copyright (c) 2001-2009 ArtLebedev Group (http://www.artlebedev.com)          Copyright (c) 2001-2020 Art. Lebedev Studio (http://www.artlebedev.com)
         Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)          Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)
 */  */
   
 static const char * const IDENT_REQUEST_C="$Date$";  
   
 #include "pa_sapi.h"  #include "pa_sapi.h"
 #include "pa_common.h"  #include "pa_common.h"
   #include "pa_os.h"
 #include "pa_request.h"  #include "pa_request.h"
 #include "pa_wwrapper.h"  #include "pa_wwrapper.h"
 #include "pa_vclass.h"  #include "pa_vclass.h"
Line 26  static const char * const IDENT_REQUEST_ Line 25  static const char * const IDENT_REQUEST_
 #include "pa_charset.h"  #include "pa_charset.h"
 #include "pa_charsets.h"  #include "pa_charsets.h"
 #include "pa_cache_managers.h"  #include "pa_cache_managers.h"
   #include "pa_http.h"
 #include "pa_vmail.h"  #include "pa_vmail.h"
 #include "pa_vform.h"  #include "pa_vform.h"
 #include "pa_vcookie.h"  #include "pa_vcookie.h"
Line 34  static const char * const IDENT_REQUEST_ Line 34  static const char * const IDENT_REQUEST_
 #include "pa_vconsole.h"  #include "pa_vconsole.h"
 #include "pa_vdate.h"  #include "pa_vdate.h"
   
   volatile const char * IDENT_PA_REQUEST_C="$Id$" IDENT_PA_REQUEST_H IDENT_PA_REQUEST_CHARSETS_H IDENT_PA_REQUEST_INFO_H IDENT_PA_VCONSOLE_H;
   
 // consts  // consts
   
 #define UNHANDLED_EXCEPTION_METHOD_NAME "unhandled_exception"  #define UNHANDLED_EXCEPTION_METHOD_NAME "unhandled_exception"
   
 /// content type of exception response, when no @MAIN:exception handler defined  
 const char* UNHANDLED_EXCEPTION_CONTENT_TYPE="text/plain";  
   
 /// content type of response when no $MAIN:defaults.content-type defined  /// content type of response when no $MAIN:defaults.content-type defined
 const char* DEFAULT_CONTENT_TYPE="text/html";  const char* DEFAULT_CONTENT_TYPE="text/html";
 const char* ORIGINS_CONTENT_TYPE="text/plain";  
   const uint LOOP_LIMIT=20000;
   const uint EXECUTE_RECOURSION_LIMIT=1000;
   const uint HTTPD_TIMEOUT=4;
   const size_t FILE_SIZE_LIMIT=512*1024*1024;
   
 // defines for globals  // defines for globals
   
 #define MAIN_METHOD_NAME "main"  #define MAIN_METHOD_NAME "main"
 #define AUTO_METHOD_NAME "auto"  #define AUTO_METHOD_NAME "auto"
   #define USE_METHOD_NAME "use"
 #define AUTOUSE_METHOD_NAME "autouse"  #define AUTOUSE_METHOD_NAME "autouse"
 #define BODY_NAME "body"  
 #define EXCEPTION_TYPE_PART_NAME "type"  #define EXCEPTION_TYPE_PART_NAME "type"
 #define EXCEPTION_SOURCE_PART_NAME "source"  #define EXCEPTION_SOURCE_PART_NAME "source"
 #define EXCEPTION_COMMENT_PART_NAME "comment"  #define EXCEPTION_COMMENT_PART_NAME "comment"
   
   #define ORIGIN_KEY "origin"
   
 // globals  // globals
   
 const String main_method_name(MAIN_METHOD_NAME);  const String main_method_name(MAIN_METHOD_NAME);
 const String auto_method_name(AUTO_METHOD_NAME);  const String auto_method_name(AUTO_METHOD_NAME);
 const String autouse_method_name(AUTOUSE_METHOD_NAME);  static const String use_method_name(USE_METHOD_NAME);
   static const String autouse_method_name(AUTOUSE_METHOD_NAME);
   
 const String body_name(BODY_NAME);  
 const String exception_type_part_name(EXCEPTION_TYPE_PART_NAME);  const String exception_type_part_name(EXCEPTION_TYPE_PART_NAME);
 const String exception_source_part_name(EXCEPTION_SOURCE_PART_NAME);  const String exception_source_part_name(EXCEPTION_SOURCE_PART_NAME);
 const String exception_comment_part_name(EXCEPTION_COMMENT_PART_NAME);  const String exception_comment_part_name(EXCEPTION_COMMENT_PART_NAME);
 const String exception_handled_part_name(EXCEPTION_HANDLED_PART_NAME);  const String exception_handled_part_name(EXCEPTION_HANDLED_PART_NAME);
   
   static const String origin_key(ORIGIN_KEY);
   
   int pa_loop_limit=LOOP_LIMIT;
   int pa_execute_recoursion_limit=EXECUTE_RECOURSION_LIMIT;
   int pa_httpd_timeout=HTTPD_TIMEOUT;
   size_t pa_file_size_limit=FILE_SIZE_LIMIT;
   
 // defines for statics  // defines for statics
   
 #define CHARSETS_NAME "CHARSETS"  
 #define MIME_TYPES_NAME "MIME-TYPES"  #define MIME_TYPES_NAME "MIME-TYPES"
 #define ORIGINS_MODE_NAME "ORIGINS"  
 #define CONF_METHOD_NAME "conf"  
 #define POST_PROCESS_METHOD_NAME "postprocess"  
 #define DOWNLOAD_NAME "download"  
 #define CLASS_PATH_NAME "CLASS_PATH"  #define CLASS_PATH_NAME "CLASS_PATH"
 #define RESPONSE_BODY_FILE_NAME "file"  
   #define DOWNLOAD_NAME_UPPER "DOWNLOAD"
   #define BODY_NAME_UPPER "BODY"
   
 // statics  // statics
   
 static const String charsets_name(CHARSETS_NAME);  
 static const String main_class_name(MAIN_CLASS_NAME);  static const String main_class_name(MAIN_CLASS_NAME);
 static const String mime_types_name(MIME_TYPES_NAME);  static const String mime_types_name(MIME_TYPES_NAME);
 static const String origins_mode_name(ORIGINS_MODE_NAME);  
 static const String conf_method_name(CONF_METHOD_NAME);  
 static const String post_process_method_name(POST_PROCESS_METHOD_NAME);  
 static const String download_name(DOWNLOAD_NAME);  
 static const String class_path_name(CLASS_PATH_NAME);  static const String class_path_name(CLASS_PATH_NAME);
 static const String response_body_file_name(RESPONSE_BODY_FILE_NAME);  
   static const String charsets_name("CHARSETS");
   static const String strict_vars_name("STRICT-VARS");
   static const String prototype_name("OBJECT-PROTOTYPE");
   static const String limits_name("LIMITS");
   static const String loop_limit_name("max_loop");
   static const String recoursion_limit_name("max_recoursion");
   static const String file_size_limit_name("max_file_size");
   static const String lock_wait_timeout_name("lock_wait_timeout");
   static const String httpd_name("HTTPD");
   static const String httpd_timeout_name("timeout");
   static const String httpd_mode_name("mode");
   
   static const String conf_method_name("conf");
   static const String post_process_method_name("postprocess");
   static const String response_body_file_name("file");
   
   static const String download_name_upper(DOWNLOAD_NAME_UPPER);
   static const String body_name_upper(BODY_NAME_UPPER);
   
   // more static
   
   static const String content_type_name_upper(HTTP_CONTENT_TYPE_UPPER);
   static const String content_disposition_name_upper(CONTENT_DISPOSITION_UPPER);
   static const String content_disposition_inline(CONTENT_DISPOSITION_INLINE);
   static const String content_disposition_attachment(CONTENT_DISPOSITION_ATTACHMENT);
   
 // defines  // defines
   
   #define CHARSET_NAME_UPPER "CHARSET"
   #define LAST_MODIFIED_NAME_UPPER "LAST-MODIFIED"
   
 // op.C  // op.C
 VStateless_class& VClassMAIN_create();  VStateless_class& VClassMAIN_create();
   
 //  //
 Request::Request(SAPI_Info& asapi_info, Request_info& arequest_info,   Request::Request(SAPI_Info& asapi_info, Request_info& arequest_info, String::Language adefault_lang):
                                  String::Language adefault_lang):  
         // private          // private
         anti_endless_execute_recoursion(0),          anti_endless_execute_recoursion(0),
         anti_endless_json_string_recoursion(0),  
   
         // public          // public
           allow_class_replace(false),
         method_frame(0),          method_frame(0),
         rcontext(0),          rcontext(0),
         wcontext(0),          wcontext(0),
         flang(adefault_lang),          flang(adefault_lang),
         fconnection(0),          fconnection(0),
         finterrupted(false),  
         fskip(SKIP_NOTHING),  
         fin_cycle(0),          fin_cycle(0),
           fskip(SKIP_NOTHING),
         // public  
 #ifdef RESOURCES_DEBUG  
         sql_connect_time(0),  
         sql_request_time(0),  
 #endif    
   
         // public          // public
         request_info(arequest_info),          request_info(arequest_info),
         sapi_info(asapi_info),          sapi_info(asapi_info),
         charsets(UTF8_charset, UTF8_charset, UTF8_charset), // default charsets          charsets(pa_UTF8_charset, pa_UTF8_charset, pa_UTF8_charset), // default charsets
   
         main_class(VClassMAIN_create()),          main_class(VClassMAIN_create()),
         form(*new VForm(charsets, arequest_info)),          form(*new VForm(charsets, arequest_info)),
Line 141  Request::Request(SAPI_Info& asapi_info, Line 166  Request::Request(SAPI_Info& asapi_info,
         pa_register_thread_request(*this);          pa_register_thread_request(*this);
   
         // file_no=0 => unknown          // file_no=0 => unknown
         file_list+=String::Body("UNKNOWN");          file_list+="UNKNOWN";
         file_list+=String::Body("-body of process-"); // pseudo_file_no__process          file_list+="-body of process-"; // pseudo_file_no__process
   
         // maybe expire old caches          // maybe expire old caches
         cache_managers->maybe_expire();          cache_managers->maybe_expire();
                   
         /// directly used          /// directly used
         // MAIN class, operators          // MAIN class, operators
         classes().put(main_class.name(), &main_class);          put_class(&main_class);
         // classes:          // classes:
         // table, file, random, mail, image, ...          // table, file, random, mail, image, ...
         methoded_array().register_directly_used(*this);          methoded_array().register_directly_used(*this);
   
         /// methodless          /// methodless
   
         // env class          // env class
         classes().put(String::Body(ENV_CLASS_NAME), new VEnv(asapi_info));          put_class(new VEnv(asapi_info));
         // status class          // status class
         classes().put(String::Body(STATUS_CLASS_NAME), new VStatus());          put_class(new VStatus());
         // request class          // request class
         classes().put(String::Body(REQUEST_CLASS_NAME), new VRequest(arequest_info, charsets, form));             put_class(new VRequest(arequest_info, charsets, form, asapi_info));
         // cookie class          // cookie class
         classes().put(String::Body(COOKIE_CLASS_NAME), &cookie);          put_class(&cookie);
         // console class          // console class
         classes().put(String::Body(CONSOLE_CLASS_NAME), &console);          put_class(&console);
   
         /// methoded          /// methoded
         // response class  
         classes().put(response.get_class()->name(), &response);  
   
         /// bases used          // response class
           put_class(&response);
         // form class          // form class
         classes().put(form.get_class()->base_class()->name(), &form);          put_class(&form);
         // mail class          // mail class
         classes().put(mail.get_class()->base_class()->name(), &mail);          put_class(&mail);
         // math class          // math class
         {          put_class(new VMath);
                 Value& math=*new VMath;  
                 classes().put(math.get_class()->base_class()->name(), &math);  
         }  
         // memory class          // memory class
         {          put_class(new VMemory);
                 Value& memory=*new VMemory;  
                 classes().put(memory.get_class()->base_class()->name(), &memory);  
         }  
 }  }
   
 Request::~Request() {  Request::~Request() {
Line 191  Request::~Request() { Line 211  Request::~Request() {
         // if for some strange reason xml generic errors failed to be reported, free them up          // if for some strange reason xml generic errors failed to be reported, free them up
         if(const char* xml_generic_errors=xmlGenericErrors()) {          if(const char* xml_generic_errors=xmlGenericErrors()) {
                 SAPI::log(sapi_info, "warning: unreported xmlGenericErrors: %s", xml_generic_errors);                  SAPI::log(sapi_info, "warning: unreported xmlGenericErrors: %s", xml_generic_errors);
                 free((void *)xml_generic_errors);                  pa_free((void *)xml_generic_errors);
         }          }
 #endif  #endif
 }  }
   
 Value& Request::get_self() { return method_frame/*always have!*/->self(); }  Value& Request::get_self() { return method_frame/*always have!*/->self(); }
   
 Value* Request::get_class(const String& name){  VStateless_class* Request::get_class(const String& name){
         Value* result=classes().get(name);          VStateless_class* result=classes().get(name);
         if(!result)          if(!result)
                 if(Value* value=main_class.get_element(autouse_method_name))                  if(const Method *method=main_class.get_element_method(autouse_method_name)){
                         if(Junction* junction=value->get_junction())                          Value *vname=new VString(name);
                                 if(const Method *method=junction->method) {                          CONSTRUCTOR_FRAME_ACTION(*method, 0 /*no parent*/, main_class, {
                                         Value *vname=new VString(name);                                  frame.store_params(&vname, 1);
                                         VMethodFrame frame(*method, 0 /*no parent*/, main_class);                                  // we don't need the result
                                   call(frame);
                                         frame.store_params(&vname, 1);                          });
                                         // we don't need the result                          result=classes().get(name);
                                         execute_method(frame);                  }
   
                                         result=classes().get(name);  
                                 }  
   
         return result;          return result;
 }  }
   
 static void load_charset(HashStringValue::key_type akey,   static void load_charset(HashStringValue::key_type akey, HashStringValue::value_type avalue, Request_charsets* charsets) {
                          HashStringValue::value_type avalue,           pa_charsets.load_charset(*charsets, akey, avalue->as_string());
                          Request_charsets* charsets) {  
         const String::Body NAME=String(akey, String::L_CLEAN).change_case(charsets->source(), String::CC_UPPER);  
         ::charsets.load_charset(*charsets, NAME, avalue->as_string());  
 }  }
   
   
   #define CONF_OPTION(config, name, code, exception_name)         \
           if(config)                                              \
                   if(Value* option=config->get_element(name)) {   \
                           if(option->is_evaluated_expr()) {       \
                                   code;                           \
                           } else                                  \
                                   throw Exception(PARSER_RUNTIME, 0, "$main:" exception_name, name.cstr()); \
                   }
   
 void Request::configure_admin(VStateless_class& conf_class) {  void Request::configure_admin(VStateless_class& conf_class) {
         if(configure_admin_done)          if(configure_admin_done)
                 throw Exception(PARSER_RUNTIME,                  throw Exception(PARSER_RUNTIME, 0, "parser already configured");
                 0,  
                 "parser already configured");  
         configure_admin_done=true;          configure_admin_done=true;
                   
         // charsets must only be specified in method_frame config          // charsets must only be specified in method_frame config
Line 239  void Request::configure_admin(VStateless Line 261  void Request::configure_admin(VStateless
                 ]                  ]
         */          */
         if(Value* vcharsets=conf_class.get_element(charsets_name)) {          if(Value* vcharsets=conf_class.get_element(charsets_name)) {
                 if(!vcharsets->is_string())                  if(!vcharsets->is_string()) {
                         if(HashStringValue* charsets=vcharsets->get_hash())                          if(HashStringValue* charsets=vcharsets->get_hash())
                                 charsets->for_each<Request_charsets*>(load_charset, &this->charsets);                                  charsets->for_each<Request_charsets*>(load_charset, &this->charsets);
                         else                          else
                                 throw Exception(PARSER_RUNTIME,                                  throw Exception(PARSER_RUNTIME, 0, "$main:%s must be hash", charsets_name.cstr());
                                         0,                  }
                                         "$" MAIN_CLASS_NAME ":" CHARSETS_NAME " must be hash");          }
   
   #ifdef STRICT_VARS
           VVoid::strict_vars=false;
           if(Value* strict_vars=conf_class.get_element(strict_vars_name)) {
                   if(strict_vars->is_bool())
                           VVoid::strict_vars=strict_vars->as_bool();
                   else
                           throw Exception(PARSER_RUNTIME, 0, "$main:%s must be bool", strict_vars_name.cstr());
           }
   #endif
   
   #ifdef OBJECT_PROTOTYPE
           VClass::prototype=true;
           if(Value* prototype=conf_class.get_element(prototype_name)) {
                   if(prototype->is_bool())
                           VClass::prototype=prototype->as_bool();
                   else
                           throw Exception(PARSER_RUNTIME, 0, "$main:%s must be bool", prototype_name.cstr());
         }          }
   #endif
   
           Value* limits=conf_class.get_element(limits_name);
   
           pa_loop_limit=LOOP_LIMIT;
           CONF_OPTION(limits, loop_limit_name, {
                   pa_loop_limit=option->as_int();
                   if(pa_loop_limit==0) pa_loop_limit=INT_MAX;
           }, "LIMITS.%s must be int");
   
           pa_execute_recoursion_limit=EXECUTE_RECOURSION_LIMIT;
           CONF_OPTION(limits, recoursion_limit_name, {
                   pa_execute_recoursion_limit=option->as_int();
                   if(pa_execute_recoursion_limit==0) pa_execute_recoursion_limit=INT_MAX;
           }, "LIMITS.%s must be int");
   
           pa_file_size_limit=FILE_SIZE_LIMIT;
           CONF_OPTION(limits, file_size_limit_name, {
                   double limit=option->as_double();
                   if(limit >= (double)SSIZE_MAX)
                           throw Exception(PARSER_RUNTIME, 0, "$main:LIMITS.%s must be less then %.15g", file_size_limit_name.cstr(), (double)SSIZE_MAX);
                   pa_file_size_limit=(size_t)limit;
                   if(pa_file_size_limit==0)
                           pa_file_size_limit=SSIZE_MAX;
           }, "LIMITS.%s must be number");
   
           pa_lock_attempts=PA_LOCK_ATTEMPTS;
           CONF_OPTION(limits, lock_wait_timeout_name, {
                   double limit=option->as_double();
                   if(limit >= 3600*24)
                           throw Exception(PARSER_RUNTIME, 0, "$main:LIMITS.%s must be less then %d", lock_wait_timeout_name.cstr(), 3600*24);
                   pa_lock_attempts=(unsigned int)(limit*2)+1;
           }, "LIMITS.%s must be number");
   
           Value* httpd=conf_class.get_element(httpd_name);
   
           pa_httpd_timeout=HTTPD_TIMEOUT;
           CONF_OPTION(httpd, httpd_timeout_name, {
                   pa_httpd_timeout=option->as_int();
                   if(pa_httpd_timeout==0) pa_httpd_timeout=INT_MAX;
           }, "HTTPD.%s must be int");
   
           if(httpd)
                   if(Value* option=httpd->get_element( httpd_mode_name)) {
                           if(option->get_junction())
                                   throw Exception(PARSER_RUNTIME, 0, "$main:HTTPD:mode must be string");
                           HTTPD_Server::set_mode(option->as_string());
                   }
   
         // configure method_frame options          // configure method_frame options
         //      until someone with less privileges have overriden them          //      until someone with less privileges have overriden them
         methoded_array().configure_admin(*this);          methoded_array().configure_admin(*this);
 }  }
   
 const char* Request::get_exception_cstr(  const char* Request::get_exception_cstr(const Exception& e, Request::Exception_details& details) {
                                                                                 const Exception& e,  
                                                                                 Request::Exception_details& details) {  
 #define PA_URI_FORMAT "%s: "  #define PA_URI_FORMAT "%s: "
   #define PA_COMMENT_TYPE_FORMAT "%s [%s]"
   
 #define PA_ORIGIN_FILE_POS_FORMAT "%s(%d:%d): "  #define PA_ORIGIN_FILE_POS_FORMAT "%s(%d:%d): "
 #define PA_SOURCE_FORMAT "'%s' "  #define PA_SOURCE_FORMAT "'%s' "
 #define PA_COMMENT_TYPE_FORMAT "%s [%s]"  
   #define PA_ORIGIN_FILE_POS_VALUE file_list[details.origin.file_no].cstr(), 1+details.origin.line, 1+details.origin.col,
   #define PA_SOURCE_VALUE details.problem_source->cstr(),
   
   #define EXCEPTION_CSTR(f1,v1,f2,v2) \
                           snprintf(result, MAX_STRING, \
                                   PA_URI_FORMAT \
                                   f1 f2 \
                                   PA_COMMENT_TYPE_FORMAT, \
                                   request_info.uri, \
                                   v1 v2 \
                                   e.comment(), e.type() \
                           );
   
         char* result=new(PointerFreeGC) char[MAX_STRING];          char* result=new(PointerFreeGC) char[MAX_STRING];
   
         if(details.problem_source) { // do we know the guy?          if(details.problem_source) { // do we know the guy?
                 if(details.trace) { // do whe know where he came from?                  if(details.origin.file_no) // do whe know where he came from?
                         Operation::Origin origin=details.trace.origin();                          EXCEPTION_CSTR(PA_ORIGIN_FILE_POS_FORMAT, PA_ORIGIN_FILE_POS_VALUE, PA_SOURCE_FORMAT, PA_SOURCE_VALUE)
                         snprintf(result, MAX_STRING,                   else
                                 PA_URI_FORMAT                           EXCEPTION_CSTR(PA_SOURCE_FORMAT, PA_SOURCE_VALUE,,)
                                 PA_ORIGIN_FILE_POS_FORMAT           } else {
                                 PA_SOURCE_FORMAT PA_COMMENT_TYPE_FORMAT,                  if(details.origin.file_no) // do whe know where he came from?
                                 request_info.uri,                          EXCEPTION_CSTR(PA_ORIGIN_FILE_POS_FORMAT, PA_ORIGIN_FILE_POS_VALUE,,)
                                 file_list[origin.file_no].cstr(), 1+origin.line, 1+origin.col,                  else
                                 details.problem_source->cstr(),                          EXCEPTION_CSTR(,,,)
                                 e.comment(), e.type()          }
                         );  
                 } else  
                         snprintf(result, MAX_STRING,   
                                 PA_URI_FORMAT   
                                 PA_SOURCE_FORMAT PA_COMMENT_TYPE_FORMAT,  
                                 request_info.uri,  
                                 details.problem_source->cstr(),  
                                 e.comment(), e.type()  
                         );  
         } else  
                 snprintf(result, MAX_STRING,   
                         PA_URI_FORMAT   
                         PA_COMMENT_TYPE_FORMAT,  
                         request_info.uri,  
                         e.comment(), e.type()  
                 );  
   
         return result;          return result;
 }  }
   
   Table &Request::Exception_trace::table(Request &r){
           // $stack[^table::create{name   file    lineno  colno}]
           Table::columns_type stack_trace_columns(new ArrayString);
           *stack_trace_columns+=new String("name");
           *stack_trace_columns+=new String("file");
           *stack_trace_columns+=new String("lineno");
           *stack_trace_columns+=new String("colno");
           Table& stack_trace=*new Table(stack_trace_columns);
   
           if(!is_empty()/*signed!*/)
                   for(size_t i=bottom_index(); i<top_index(); i++) {
                           Trace trace=get(i);
                           Table::element_type row(new ArrayString);
   
                           *row+=trace.name(); // name column
                           Operation::Origin origin=trace.origin();
                           if(origin.file_no) {
                                   *row+=new String(r.file_list[origin.file_no], String::L_TAINTED); // 'file' column
                                   *row+=new String(String::Body::Format(1+origin.line), String::L_CLEAN); // 'lineno' column
                                   *row+=new String(String::Body::Format(1+origin.col), String::L_CLEAN); // 'colno' column
                           }
                           stack_trace+=row;
                   }
   
           return stack_trace;
   }
   
 void Request::configure() {  void Request::configure() {
         // configure admin options if not configured yet          // configure admin options if not configured yet
         if(!configure_admin_done)          if(!configure_admin_done)
Line 304  void Request::configure() { Line 417  void Request::configure() {
         // $MAIN:MIME-TYPES          // $MAIN:MIME-TYPES
         if(Value* element=main_class.get_element(mime_types_name))          if(Value* element=main_class.get_element(mime_types_name))
                 if(Table *table=element->get_table())                  if(Table *table=element->get_table())
                         mime_types=table;                                                 mime_types=table;
 }  }
   
 /**  /**
         load MAIN class, execute @main.          load MAIN class, execute @main.
         MAIN class consists of all the auto.p files we'd manage to find          MAIN class consists of all the auto.p files we'd manage to find
Line 317  void Request::configure() { Line 431  void Request::configure() {
         @test log stack trace          @test log stack trace
   
 */  */
 void Request::core(const char* config_filespec, bool config_fail_on_read_problem, bool header_only) {  void Request::core(const char* config_filespec, bool header_only, const String &amain_method_name) {
 #ifdef RESOURCES_DEBUG          VFile* body_file=NULL;
 //measures          bool as_attachment=false;
 struct timeval mt[10];  
 //measure:before all  
 gettimeofday(&mt[0],NULL);  
 #endif  
         try {  
                 // filling mail received  
                 mail.fill_received(*this);  
   
           try {
                 // loading config                  // loading config
                 if(config_filespec) {                  if(config_filespec)
                         const String& filespec=*new String(config_filespec);                          use_file_directly(*new String(config_filespec));
                         use_file_directly(main_class,  
                                 filespec,  
                                 config_fail_on_read_problem,   
                                 true /*file must exist if 'fail on read problem' not set*/);  
                 }  
   
                 // loading auto.p files from document_root/..                   // filling mail received
                 // to the one beside requested file.                  mail.fill_received(*this);
                 // all assigned bases from upper dir  
                 {  
                         const char* after=request_info.path_translated;  
                         size_t drlen=strlen(request_info.document_root);  
                         if(memcmp(after, request_info.document_root, drlen)==0) {  
                                 after+=drlen;  
                                 if(after[-1]=='/')   
                                         --after;  
                         }  
                           
                         while(const char* before=strchr(after, '/')) {  
                                 String& sfile_spec=*new String;  
                                 if(after!=request_info.path_translated) {  
                                         sfile_spec.append_strdup(  
                                                 request_info.path_translated, before-request_info.path_translated,  
                                                 String::L_CLEAN);  
                                         sfile_spec << "/" AUTO_FILE_NAME;  
   
                                         use_file_directly(main_class,  
                                                 sfile_spec,   
                                                 true /*fail on read problem*/,   
                                                 false /*but ignore absence, sole user*/);  
                                 }  
                                 for(after=before+1;*after=='/';after++);  
                         }  
                 }  
   
                 try {                  try {
                         // compile requested file                          // compile requested file
                         String& spath_translated=*new String;                          if(request_info.path_translated)
                         spath_translated.append_help_length(request_info.path_translated, 0, String::L_TAINTED);                                  use_file_directly(*new String(request_info.path_translated, String::L_TAINTED), true, true /* load auto.p files */);
                         use_file_directly(main_class, spath_translated);  
   
                         configure();                          configure();
                 } catch(...) {                  } catch(...) {
                         configure(); // configure anyway, useful in @unhandled_exception [say, if they would want to mail by SMTP something]                          configure(); // configure anyway, useful in @unhandled_exception [say, if they would want to mail by SMTP something]
                         rethrow;                          rethrow;
                 }                  }
   
 #ifdef RESOURCES_DEBUG  
 //measure:after compile  
 gettimeofday(&mt[1],NULL);  
 #endif  
                 // execute @main[]                  // execute @main[]
                 const String* body_string=execute_virtual_method(main_class, main_method_name);                  const String* body_string=amain_method_name.is_empty() ? &String::Empty : execute_method(main_class, amain_method_name);
                 if(!body_string)                  if(!body_string)
                         throw Exception(PARSER_RUNTIME,                          throw Exception(PARSER_RUNTIME, 0, "'%s' method not found", amain_method_name.cstr());
                                 0,  
                                 "'"MAIN_METHOD_NAME"' method not found");  
   
 #ifdef RESOURCES_DEBUG  
                 //measure:after main  
 gettimeofday(&mt[2],NULL);  
 #endif  
   
                 // extract response body                  // extract response body
                 Value* body_value=response.fields().get(download_name); // $response:download?                  Value* body_value=response.fields().get(download_name_upper); // $response:download?
                 bool as_attachment=body_value!=0;                  as_attachment=body_value!=0;
                 if(!body_value)                  if(!body_value)
                         body_value=response.fields().get(body_name); // $response:body                          body_value=response.fields().get(body_name_upper); // $response:body
                 if(!body_value)                  if(!body_value)
                         body_value=new VString(*body_string); // just result of ^main[]                          body_value=new VString(*body_string); // just result of ^main[]
   
                 // @postprocess                  // @postprocess
                 if(Value* value=main_class.get_element(post_process_method_name))                  if(const Method *method=main_class.get_method(post_process_method_name)) {
                         if(Junction* junction=value->get_junction())                          METHOD_FRAME_ACTION(*method, 0 /*no parent*/, main_class, {
                                 if(const Method *method=junction->method) {                                  frame.store_params(&body_value, 1);
                                         // preparing to pass parameters to                                   call(frame);
                                         //      @postprocess[data]                                  body_value=&frame.result();
                                         VMethodFrame frame(*method, 0 /*no parent*/, main_class);                          });
                   }
                                         frame.store_params(&body_value, 1);  
                                         execute_method(frame);  
   
                                         body_value=&frame.result().as_value();  
                                 }  
   
                 VFile* body_file=body_value->as_vfile(flang, &charsets);  
   
 #ifdef RESOURCES_DEBUG  
 //measure:after postprocess  
 gettimeofday(&mt[3],NULL);                
 #endif  
   
                 // OK. write out the result                  body_file=body_value->as_vfile(flang, &charsets);
                 output_result(body_file, header_only, as_attachment);  
   
 #ifdef RESOURCES_DEBUG  
                 //measure:after output_result  
 gettimeofday(&mt[9],NULL);                
 t[9]=mt[9].tv_sec+mt[9].tv_usec/1000000.0;  
   
 double t[10];  
 for(int i=0;i<10;i++)  
     t[i]=mt[i].tv_sec+mt[i].tv_usec/1000000.0;  
 //measure:log2 compile,main,postprocess,output  
 SAPI::log("rmeasure: %s,%.2f,%.2f,%.2f %.2f,%.2f %.2f",   
 request_info.uri,  
 t[1]-t[0],  
 t[2]-t[1],  
 t[3]-t[2],  
 sql_connect_time,sql_request_time,  
 t[9]-t[3]  
 );  
 #endif  
         } catch(const Exception& e) { // request handling problem          } catch(const Exception& e) { // request handling problem
                 try {                  try {
                 // we're returning not result, but error explanation                          // we're returning not result, but error explanation
   
                 Request::Exception_details details=get_details(e);                          Request::Exception_details details=get_details(e);
                 const char* exception_cstr=get_exception_cstr(e, details);                          const char* exception_cstr=get_exception_cstr(e, details);
   
                 // reset language to default                          // reset language to default
                 flang=fdefault_lang;                          flang=fdefault_lang;
                                           // reset response
                 // reset response                          response.fields().clear();
                 response.fields().clear();  
                           // this is what we'd return in $response:body
                 // this is what we'd return in $response:body                          const String* body_string=0;
                 const String* body_string=0;  
                           // maybe we'd be lucky enough as to report an error in a gracefull way...
                 // maybe we'd be lucky enough as to report an error                          if(const Method *method=main_class.get_method(*new String(UNHANDLED_EXCEPTION_METHOD_NAME))) {
                 // in a gracefull way...                                  // preparing parameters to @unhandled_exception[exception;stack]
                 if(Value* value=main_class.get_element(*new String(UNHANDLED_EXCEPTION_METHOD_NAME))) {  
                         if(Junction* junction=value->get_junction()) {  
                                 if(const Method *method=junction->method) {  
                                         // preparing to pass parameters to   
                                         //      @unhandled_exception[exception;stack]  
   
                                         // $stack[^table::create{name   file    lineno  colno}]  
                                         Table::columns_type stack_trace_columns(new ArrayString);  
                                         *stack_trace_columns+=new String("name");  
                                         *stack_trace_columns+=new String("file");  
                                         *stack_trace_columns+=new String("lineno");  
                                         *stack_trace_columns+=new String("colno");  
                                         Table& stack_trace=*new Table(stack_trace_columns);  
                                         if(!exception_trace.is_empty()/*signed!*/)   
                                                 for(size_t i=exception_trace.bottom_index(); i<exception_trace.top_index(); i++) {  
                                                         Trace trace=exception_trace.get(i);  
                                                         Table::element_type row(new ArrayString);  
   
                                                         *row+=trace.name(); // name column  
                                                         Operation::Origin origin=trace.origin();  
                                                         if(origin.file_no) {  
                                                                 *row+=new String(file_list[origin.file_no], String::L_TAINTED); // 'file' column  
                                                                 *row+=new String(String::Body::Format(1+origin.line), String::L_CLEAN); // 'lineno' column  
                                                                 *row+=new String(String::Body::Format(1+origin.col), String::L_CLEAN); // 'colno' column  
                                                         }  
                                                         stack_trace+=row;  
                                                 }  
   
                                         // future $response:body=  
                                         //   execute ^unhandled_exception[exception;stack]  
                                         exception_trace.clear(); // forget all about previous life, in case there would be error inside of this method, error handled  would not be mislead by old stack contents (see extract_origin)  
   
                                         VMethodFrame frame(*method, 0 /*no caller*/, main_class);                                  Table& stack_trace=exception_trace.table(*this);
                                         Value *params[]={&details.vhash, new VTable(&stack_trace)};                                  exception_trace.clear(); // forget all about previous life, in case there would be error inside of this method, error handled would not be mislead by old stack contents (see extract_origin)
   
                                   Value *params[]={&details.vhash, new VTable(&stack_trace)};
                                   METHOD_FRAME_ACTION(*method, 0 /*no caller*/, main_class, {
                                         frame.store_params(params, 2);                                          frame.store_params(params, 2);
                                         execute_method(frame);                                          call(frame);
   
                                         body_string=&frame.result().as_string();                                          body_string=&frame.result().as_string();
                                 }                                  });
                         }                          }
                 }  
                   
                 if(!body_string) {  // couldn't report an error beautifully?  
                         // doing that ugly  
   
                         // future $response:content-type  
                         response.fields().put(http_content_type, new VString(*new String(UNHANDLED_EXCEPTION_CONTENT_TYPE)));  
                         // future $response:body  
                         body_string=new String(exception_cstr);  
                 }  
   
                 VString body_vstring(*body_string);                          // conditionally log it
                 VFile* body_file=body_vstring.as_vfile(flang, &charsets);                          Value* vhandled=details.vhash.hash().get(exception_handled_part_name);
                           if(!vhandled || !vhandled->as_bool()) {
                                   SAPI::log(sapi_info, "%s", exception_cstr);
                           }
   
                 // conditionally log it                          if(body_string) {  // could report an error beautifully?
                 Value* vhandled=details.vhash.hash().get(exception_handled_part_name);                                  VString body_vstring(*body_string);
                 if(!vhandled || !vhandled->as_bool()) {  
                         SAPI::log(sapi_info, "%s", exception_cstr);  
                 }  
   
                 // ERROR. write it out                                  body_file=body_vstring.as_vfile(flang, &charsets);
                 output_result(body_file, header_only, false);                                  as_attachment=false;
                           } else {
                                   // doing that ugly
                                   SAPI::send_error(sapi_info, exception_cstr, !strcmp(e.type(), "file.missing") ? "404" : "500");
                                   return;
                           }
   
                 } catch(const Exception& e) { // exception in unhandled exception                  } catch(const Exception& e) { // exception in unhandled exception
                         Request::Exception_details details=get_details(e);                          Request::Exception_details details=get_details(e);
                         const char* exception_cstr=get_exception_cstr(e, details);                          // unconditionally log the beast in exception handler
                         // unconditionally log the beast                          throw Exception(0, 0, "Unhandled exception in %s", get_exception_cstr(e, details));
                         SAPI::log(sapi_info, "%s", exception_cstr);  
   
                         throw Exception(0,  
                                 0,  
                                 "in %s",   
                                         exception_cstr);  
                 }                  }
         }          }
   
           // write out the result outside of try as network exceptions should not be handled by parser code.
           output_result(body_file, header_only, as_attachment);
 }  }
   
 uint Request::register_file(String::Body file_spec) {  uint Request::register_file(String::Body file_spec) {
Line 545  uint Request::register_file(String::Body Line 540  uint Request::register_file(String::Body
         return file_list.count()-1;          return file_list.count()-1;
 }  }
   
 void Request::use_file_directly(VStateless_class& aclass,  void Request::use_file_directly(const String& file_spec, bool fail_on_file_absence, bool with_auto_p) {
                                 const String& file_spec,  
                                 bool fail_on_read_problem,   
                                 bool fail_on_file_absence) {  
   
         // cyclic dependence check          // cyclic dependence check
         if(used_files.get(file_spec))          if(used_files.get(file_spec))
                 return;                  return;
         used_files.put(file_spec, true);          used_files.put(file_spec, true);
   
         if(fail_on_read_problem && !fail_on_file_absence) // ignore file absence if asked for          if(!fail_on_file_absence && !entry_exists(file_spec)) // ignore file absence if asked for
                 if(!entry_exists(file_spec))                  return;
                         return;  
           if(with_auto_p) {
                   // loading auto.p files from document_root/.. 
                   // to the one beside requested file.
                   // all assigned bases from upper dir
                   const char* target=file_spec.cstr();
   
                   // all relative paths are calculated from main document
                   request_info.path_translated=target;
   
                   const char* after=target;
                   size_t drlen=strlen(request_info.document_root);
                   if(memcmp(after, request_info.document_root, drlen)==0) {
                           after+=drlen;
                           if(after[-1]=='/') 
                                   --after;
                   }
   
                   while(const char* before=strchr(after, '/')) {
                           String& sfile_spec=*new String;
                           if(after!=target) {
                                   sfile_spec.append_strdup(target, before-target, String::L_CLEAN);
                                   sfile_spec << "/" AUTO_FILE_NAME;
   
         if(const char* source=file_read_text(charsets, file_spec, fail_on_read_problem))                                  use_file_directly(sfile_spec, false /*ignore absence, sole user*/);
                 use_buf(aclass, source, 0, register_file(file_spec));                          }
                           for(after=before+1;*after=='/';after++);
                   }
           }
   
           if(const char* source=file_read_text(charsets, file_spec, true))
                   use_buf(main_class, source, 0, register_file(file_spec));
 }  }
   
   
 void Request::use_file(VStateless_class& aclass,  void Request::use_file(const String& file_name, const String* use_filespec/*absolute*/, bool with_auto_p) {
                                 const String& file_name,          if(file_name.is_empty())
                                 const String* use_filespec/*absolute*/) {                  throw Exception(PARSER_RUNTIME, 0, "usage failed - no filename was specified");
   
         const String* filespec=0;          const String* filespec=0;
   
         if(file_name.first_char()=='/') //absolute path? [no need to scan MAIN:CLASS_PATH]          if(file_name.first_char()=='/') //absolute path? [no need to scan MAIN:CLASS_PATH]
                 filespec=&absolute(file_name);                  filespec=&full_disk_path(file_name);
         else if(use_filespec){ // search in current dir first          else if(use_filespec){ // search in current dir first
                 int afterslash=lastposafter(*use_filespec, 0, "/", 1, true);                  size_t last_slash_pos=use_filespec->strrpbrk("/");
                 if(afterslash>0)                  if(last_slash_pos!=STRING_NOT_FOUND)
                         filespec=file_exist(use_filespec->mid(0, afterslash-1), file_name); // found in current dir?                          filespec=file_exist(use_filespec->mid(0, last_slash_pos), file_name); // found in current dir?
         }          }
   
         if(!filespec){          if(!filespec){
Line 585  void Request::use_file(VStateless_class& Line 604  void Request::use_file(VStateless_class&
                 searched_along_class_path.put(file_name, true);                  searched_along_class_path.put(file_name, true);
                 if(Value* element=main_class.get_element(class_path_name)) {                  if(Value* element=main_class.get_element(class_path_name)) {
                         if(element->is_string()) {                          if(element->is_string()) {
                                 filespec=file_exist(absolute(element->as_string()), file_name); // found at class_path?                                  filespec=file_exist(full_disk_path(element->as_string()), file_name); // found at class_path?
                         } else if(Table *table=element->get_table()) {                          } else if(Table *table=element->get_table()) {
                                 for(size_t i=table->count(); i--; ) {                                  for(size_t i=table->count(); i--; ) {
                                         const String& path=*(*table->get(i))[0];                                          const String& path=*(*table->get(i))[0];
                                         if(filespec=file_exist(absolute(path), file_name))                                          if(filespec=file_exist(full_disk_path(path), file_name))
                                                 break; // found along class_path                                                  break; // found along class_path
                                 }                                  }
                         } else                          } else
                                 throw Exception(PARSER_RUNTIME,                                  throw Exception(PARSER_RUNTIME, 0, "$" CLASS_PATH_NAME " must be string or table");
                                         0,  
                                         "$" CLASS_PATH_NAME " must be string or table");  
                         if(!filespec)                          if(!filespec)
                                 throw Exception(PARSER_RUNTIME,                                  throw Exception(PARSER_RUNTIME, &file_name, "not found along $main:" CLASS_PATH_NAME);
                                         &file_name,  
                                         "not found along " MAIN_CLASS_NAME ":" CLASS_PATH_NAME);  
                 } else                   } else 
                         throw Exception(PARSER_RUNTIME,                          throw Exception(PARSER_RUNTIME, &file_name, "usage failed - no $main:" CLASS_PATH_NAME " were specified");
                                 &file_name,  
                                 "usage failed - no $" MAIN_CLASS_NAME  ":" CLASS_PATH_NAME " were specified");  
         }          }
   
         use_file_directly(aclass, *filespec);          use_file_directly(*filespec, true, with_auto_p);
 }  }
   
   void Request::use_file(const String& file_name, const String* use_filespec/*absolute*/, Operation::Origin origin) {
           static String use("USE");
           try {
                   static VHash* voptions=new VHash();
                   if(const Method *method=main_class.get_method(use_method_name)){
                           Value *params[]={new VString(file_name), voptions};
                           voptions->hash().put(origin_key, new VString(*use_filespec));
   
                           CONSTRUCTOR_FRAME_ACTION(*method, 0 /*no parent*/, main_class, {
                                   frame.store_params(params, 2);
                                   // we don't need the result
                                   call(frame);
                           });
                   }
           } catch (...) {
                   exception_trace.push(Trace(&use, origin));
                   rethrow;
           }
   }
   
 void Request::use_buf(VStateless_class& aclass,  void Request::use_buf(VStateless_class& aclass, const char* source, const String* main_alias, uint file_no, int line_no_offset) {
                                 const char* source, const String* main_alias,           // temporary zero @conf to avoid it second execution
                                 uint file_no,  
                                 int line_no_offset) {  
         // temporary zero @conf so to maybe-replace it in compiled code  
         Temp_method temp_method_conf(aclass, conf_method_name, 0);          Temp_method temp_method_conf(aclass, conf_method_name, 0);
         // temporary zero @auto so to maybe-replace it in compiled code          // temporary zero @auto to avoid it second execution
         Temp_method temp_method_auto(aclass, auto_method_name, 0);          Temp_method temp_method_auto(aclass, auto_method_name, 0);
   
         // compile loaded classes          // compile loaded classes
Line 629  void Request::use_buf(VStateless_class& Line 658  void Request::use_buf(VStateless_class&
                 VStateless_class& cclass=*cclasses.get(i);                  VStateless_class& cclass=*cclasses.get(i);
   
                 // locate and execute possible @conf[] static                  // locate and execute possible @conf[] static
                 Execute_nonvirtual_method_result executed=execute_nonvirtual_method(cclass,                   if(execute_method_if_exists(cclass, conf_method_name, vfilespec))
                         conf_method_name, vfilespec,  
                         false/*no string result needed*/);  
                 if(executed.method)  
                         configure_admin(cclass/*, executed.method->name*/);                          configure_admin(cclass/*, executed.method->name*/);
   
                 // locate and execute possible @auto[] static                  // locate and execute possible @auto[] static
                 execute_nonvirtual_method(cclass,                   execute_method_if_exists(cclass, auto_method_name, vfilespec);
                         auto_method_name, vfilespec,  
                         false/*no result needed*/);                  cclass.enable_default_setter();
         }          }
 }  }
   
 const String& Request::relative(const char* apath, const String& relative_name) {  const String& Request::relative(const char* apath, const String& relative_name) {
         char *hpath=strdup(apath);          char *hpath=pa_strdup(apath);
         String& result=*new String;          String& result=*new String;
         if(rsplit(hpath, '/')) // if something/splitted          if(rsplit(hpath, '/')) // if something/splitted
                 result << hpath << "/";                  result << hpath << "/";
Line 651  const String& Request::relative(const ch Line 677  const String& Request::relative(const ch
         return result;          return result;
 }  }
   
 const String& Request::absolute(const String& relative_name) {  const String& Request::full_disk_path(const String& relative_name) {
         if(relative_name.first_char()=='/') {          if(relative_name.first_char()=='/') {
                 String& result=*new String(strdup(request_info.document_root));                  String& result=*new String(pa_strdup(request_info.document_root));
                 result << relative_name;                  result << relative_name;
                 return result;                  return result;
         } else           }
                 if(relative_name.pos("://")!=STRING_NOT_FOUND // something like "http://xxx"          if(relative_name.pos("://")!=STRING_NOT_FOUND // something like "http://xxx"
 #ifdef WIN32  #ifdef WIN32
                         || relative_name.pos(":")==1  // DRIVE:                  || relative_name.pos(":")==1  // DRIVE:
                         || relative_name.starts_with("\\\\") // UNC1                  || relative_name.starts_with("\\\\") // UNC1
                         || relative_name.starts_with("//") // UNC2                  || relative_name.starts_with("//") // UNC2
 #endif  #endif
                         )                  )
                         return relative_name;                  return relative_name;
                 else  
                         return relative(request_info.path_translated, relative_name);          return relative(request_info.path_translated ? request_info.path_translated : request_info.document_root, relative_name);
 }  }
   
 #ifndef DOXYGEN  #ifndef DOXYGEN
Line 678  public: Line 704  public:
         bool add_last_modified;          bool add_last_modified;
 };  };
 #endif  #endif
 static void add_header_attribute(  static void add_header_attribute(HashStringValue::key_type name, HashStringValue::value_type value, Add_header_attribute_info* info) {
                                  HashStringValue::key_type name,           if(name==BODY_NAME_UPPER || name==DOWNLOAD_NAME_UPPER || name==CHARSET_NAME_UPPER)
                                  HashStringValue::value_type value,   
                                  Add_header_attribute_info* info) {  
         if(name==BODY_NAME  
                 || name==DOWNLOAD_NAME  
                 || name==CHARSET_NAME)  
                 return;                  return;
                   
           if(name==LAST_MODIFIED_NAME_UPPER)
                   info->add_last_modified=false;
   
         const char* aname=String(name, String::L_URI).untaint_and_transcode_cstr(String::L_URI, &info->r.charsets);          const char* aname=String(name, String::L_URI).untaint_and_transcode_cstr(String::L_URI, &info->r.charsets);
   
         SAPI::add_header_attribute(info->r.sapi_info,          SAPI::add_header_attribute(info->r.sapi_info,
                         aname,                           aname,
                         attributed_meaning_to_string(*value, String::L_URI, false).untaint_and_transcode_cstr(String::L_URI, &info->r.charsets)                          attributed_meaning_to_string(*value, String::L_URI, false).untaint_and_transcode_cstr(String::L_URI, &info->r.charsets)
                 );                  );
   
         if(strcasecmp(aname, "last-modified")==0)  
                 info->add_last_modified=false;  
 }  }
   
 static void output_sole_piece(Request& r,  static void output_sole_piece(Request& r, bool header_only, VFile& body_file, Value* body_file_content_type) {
                                                           bool header_only,   
                                                           VFile& body_file,  
                                                           Value* body_file_content_type) {  
         // transcode text body when "text/*" or simple result          // transcode text body when "text/*" or simple result
         String::C output(body_file.value_ptr(), body_file.value_size());          String::C output(body_file.value_ptr(), body_file.value_size());
         if(!body_file_content_type/*vstring.as_vfile*/ || body_file_content_type->as_string().pos("text/")==0)          if(!body_file_content_type/*vstring.as_vfile*/ || body_file_content_type->as_string().pos("text/")==0)
                 output=Charset::transcode(output,                   output=Charset::transcode(output, r.charsets.source(), r.charsets.client());
                         r.charsets.source(),   
                         r.charsets.client());  
   
         // prepare header: Content-Length          // prepare header: Content-Length
         SAPI::add_header_attribute(r.sapi_info, HTTP_CONTENT_LENGTH, format(output.length, "%u"));          SAPI::add_header_attribute(r.sapi_info, HTTP_CONTENT_LENGTH, format(output.length, "%u"));
Line 723  static void output_sole_piece(Request& r Line 739  static void output_sole_piece(Request& r
 #ifndef DOXYGEN  #ifndef DOXYGEN
 struct Range  struct Range
 {  {
         size_t start;          uint64_t start;
         size_t end;          uint64_t end;
 };  };
 #endif  #endif
   
   #define UNSET ((uint64_t)-1)
   
 static void parse_range(const String* s, Array<Range> &ar) {  static void parse_range(const String* s, Array<Range> &ar) {
         const char *p = s->cstr();          const char *p = s->cstr();
         if(s->starts_with("bytes="))          if(s->starts_with("bytes="))
                 p += 6;                  p += 6;
         Range r;          Range r;
         while(*p){          while(*p){
                 r.start = (size_t)-1;                  r.start = UNSET;
                 r.end = (size_t)-1;                  r.end = UNSET;
   
                   while(*p==' ' || *p=='\t') p++;
   
                 if(*p >= '0' && *p <= '9'){                  if(*p >= '0' && *p <= '9'){
                         r.start = atol(p);                          const char *s=p;
                         while(*p>='0' && *p<='9') ++p;                          while(*p>='0' && *p<='9') p++;
                           r.start = pa_atoul(pa_strdup(s,p-s));
                 }                  }
   
                   while(*p==' ' || *p=='\t') p++;
   
                 if(*p++ != '-') break;                  if(*p++ != '-') break;
   
                   while(*p==' ' || *p=='\t') p++;
   
                 if(*p >= '0' && *p <= '9'){                  if(*p >= '0' && *p <= '9'){
                         r.end = atol(p);                          const char *s=p;
                         while(*p>='0' && *p<='9') ++p;                          while(*p>='0' && *p<='9') p++;
                           r.end = pa_atoul(pa_strdup(s,p-s));
                 }                  }
                 if(*p == ',') ++p;  
                   while(*p==' ' || *p=='\t') p++;
   
                   if(*p)
                           if(*p++ != ',') break;
   
                 ar += r;                  ar += r;
         }          }
 }  }
   
 static void output_pieces(Request& r,  struct Send_range_action_info {
                                                   bool header_only,           Request *r;
                                                   const String& filename,          uint64_t offset;
                                                   size_t content_length,          uint64_t part_length;
                                                   Value& date,  };
                                                   bool add_last_modified)   
 {  
         SAPI::add_header_attribute(r.sapi_info, "accept-ranges", "bytes");  
   
         const size_t BUFSIZE = 10*0x400;  static void send_range(struct stat& /*finfo*/, int f, const String& /*file_spec*/, void *context){
           Send_range_action_info &info = *(Send_range_action_info*)context;
   
           pa_lseek(f, info.offset, SEEK_SET);
   
           const size_t BUFSIZE = 128*0x400;
         char buf[BUFSIZE];          char buf[BUFSIZE];
         const char *range = SAPI::get_env(r.sapi_info, "HTTP_RANGE");          do{
         size_t offset=0;                  size_t to_read = info.part_length < BUFSIZE ? (size_t)info.part_length : BUFSIZE;
         size_t part_length=content_length;                  size_t to_write = file_block_read(f, buf, to_read);
         if(range){  
                   if(to_write == 0)
                           break;
   
                   size_t size = SAPI::send_body(info.r->sapi_info, buf, to_write);
                   if(size != to_write)
                           break;
   
                   info.part_length -= to_write;
           } while (info.part_length);
   }
   
   static void output_pieces(Request& r, bool header_only, const String& filename, uint64_t content_length, Value& date, bool add_last_modified) {
           SAPI::add_header_attribute(r.sapi_info, "accept-ranges", "bytes");
   
           const char *range = SAPI::Env::get(r.sapi_info, "HTTP_RANGE");
           uint64_t offset=0;
           uint64_t part_length=content_length;
   
           if(range && content_length){
                 Array<Range> ar;                  Array<Range> ar;
                 parse_range(new String(range), ar);                  parse_range(new String(range), ar);
                 size_t count = ar.count();                  int count = ar.count();
                 if(count == 1){                  if(count == 1){
                         Range &rg = ar.get_ref(0);                          Range &rg = ar.get_ref(0);
                         if(rg.start == (size_t)-1 && rg.end == (size_t)-1){  
                                 SAPI::add_header_attribute(r.sapi_info, HTTP_STATUS, "416 Requested Range Not Satisfiable");                          if(rg.start == UNSET && rg.end == UNSET)
                                 return;                                  return SAPI::send_error(r.sapi_info, "", "416");
                         }  
                         if(rg.start == (size_t)-1 && rg.end != (size_t)-1){                          if(rg.start == UNSET && rg.end != UNSET){
                                   if(rg.end > content_length)
                                           rg.end = content_length;
                                 rg.start = content_length - rg.end;                                  rg.start = content_length - rg.end;
                                 rg.end = content_length;                                  rg.end =  content_length-1;
                                 offset += rg.start;                          } else if(rg.start != UNSET && rg.end == UNSET){
                                 part_length = rg.end-rg.start;                                  if(rg.start >= content_length)
                         }else if(rg.start != (size_t)-1 && rg.end == (size_t)-1){                                          return SAPI::send_error(r.sapi_info, "", "416");
                                 rg.end = content_length-1;                                  rg.end = content_length-1;
                                 offset += rg.start;                          } else {
                                 part_length -= rg.start;                                  if(rg.start >= content_length || rg.start > rg.end)
                         }                                          return SAPI::send_error(r.sapi_info, "", "416");
                         if(part_length == 0){                                  if(rg.end >= content_length)
                                 SAPI::add_header_attribute(r.sapi_info, HTTP_STATUS, "204 No Content");                                          rg.end = content_length-1;
                                 return;  
                         }                          }
                         SAPI::add_header_attribute(r.sapi_info, HTTP_STATUS, "206 Partial Content");  
                         snprintf(buf, BUFSIZE, "bytes %u-%u/%u", rg.start, rg.end, content_length);                          offset = rg.start;
                           part_length = rg.end-rg.start+1;
   
                           char buf[MAX_STRING];
                           snprintf(buf, MAX_STRING, "bytes %.15g-%.15g/%.15g", (double)rg.start, (double)rg.end, (double)content_length);
                           SAPI::add_header_attribute(r.sapi_info, HTTP_STATUS, "206");
                         SAPI::add_header_attribute(r.sapi_info, "content-range", buf);                          SAPI::add_header_attribute(r.sapi_info, "content-range", buf);
                 }else if(count != 0){                  } else {
                         SAPI::add_header_attribute(r.sapi_info, HTTP_STATUS, "501 Not Implemented");                          return SAPI::send_error(r.sapi_info, count ? "Multiple ranges not supported" : "Invalid range", count ? "501" : "400");
                         return;  
                 }                  }
         }          }
   
           SAPI::add_header_attribute(r.sapi_info, HTTP_CONTENT_LENGTH, format((double)part_length, "%.15g"));
         SAPI::add_header_attribute(r.sapi_info, HTTP_CONTENT_LENGTH, format(part_length, "%u"));  
   
         if(add_last_modified)          if(add_last_modified)
                 SAPI::add_header_attribute(r.sapi_info, "last-modified", attributed_meaning_to_string(date, String::L_AS_IS, true).cstr());                  SAPI::add_header_attribute(r.sapi_info, "last-modified", attributed_meaning_to_string(date, String::L_AS_IS, true).cstr());
   
         SAPI::send_header(r.sapi_info);          SAPI::send_header(r.sapi_info);
   
         const String& filespec=r.absolute(filename);  
   
         size_t sent = 0;  
         if(!header_only){          if(!header_only){
                 size_t to_read = 0;                  Send_range_action_info info = { &r, offset, part_length};
                 size_t size = 0;                  file_read_action_under_lock(r.full_disk_path(filename), "send", send_range, &info);
                 do{  
                         to_read = part_length<BUFSIZE?part_length:BUFSIZE;  
                         File_read_result read_result=file_read(r.charsets, filespec,   
                                 false /*as text*/,  0/*params*/, true/*fail on problem*/,  
                                 buf, offset, to_read);  
                         to_read=read_result.length;  
                         if(to_read == 0)  
                                 break;  
                         offset += to_read;  
   
                         size = SAPI::send_body(r.sapi_info, read_result.str, to_read);  
                         sent += size;  
                         if(size != to_read)  
                                 break;  
                         part_length -= to_read;  
                 }while(part_length);  
         }          }
 }  }
   
Line 833  void Request::output_result(VFile* body_ Line 874  void Request::output_result(VFile* body_
         // header: cookies          // header: cookies
         cookie.output_result(sapi_info);          cookie.output_result(sapi_info);
                   
         // _file_ content-type might be specified          // $.file and $.name (when body is real vfile)
         Value* body_file_content_type=body_file->fields().get(content_type_name);          Value* vfile = body_file->fields().get(response_body_file_name);
           Value* vname = body_file->fields().get(name_name);
         // Content-Disposition  
         Value* vfile_name=body_file->fields().get(name_name);          const String* sfile = vfile ? &vfile->as_string() : NULL;
         if(!vfile_name) {          const String* sname = vname ? &vname->as_string() : NULL;
                 vfile_name=body_file->fields().get(response_body_file_name);  
                 if(vfile_name) {          if(sname && *sname == NONAME_DAT)
                         char* name_cstr=vfile_name->as_string().cstrm();                  sname = NULL;
                         if(char *after_slash=rsplit(name_cstr, '\\'))  
                                 name_cstr=after_slash;          // Content-Disposition, use $.name[<empty>] to avoid
                         if(char *after_slash=rsplit(name_cstr, '/'))          const String* disposition_name = sname ? sname->is_empty() ? NULL : sname : sfile;
                                 name_cstr=after_slash;          if(disposition_name) {
                         vfile_name=new VString(*new String(name_cstr));                   VHash& hash=*new VHash();
                 }                  hash.hash().put(value_name, new VString(as_attachment ? content_disposition_attachment : content_disposition_inline));
         }                  hash.hash().put(content_disposition_filename_name, new VString(*new String(*disposition_name, String::L_HTTP_HEADER)));
         if(vfile_name) {                  response.fields().put(content_disposition_name_upper, &hash);
                 const String& sfile_name=vfile_name->as_string();          }
                 if(sfile_name!=NONAME_DAT) {  
                         VHash& hash=*new VHash();  
                         HashStringValue &h=hash.hash();  
                         h.put(value_name, new VString( as_attachment ? content_disposition_attachment : content_disposition_inline ));  
                         h.put(content_disposition_filename_name, vfile_name);  
   
                         response.fields().put(content_disposition, &hash);  
   
                         if(!body_file_content_type)          // _file_ content-type might be specified
                                 body_file_content_type=new VString(mime_type_of(sfile_name.cstr()));          Value* body_file_content_type = body_file->fields().get(content_type_name);
                 }          if(!body_file_content_type){
                   const String* scontent_name = sname && !sname->is_empty() ? sname : sfile;
                   if(scontent_name)
                           body_file_content_type = new VString(mime_type_of(scontent_name->cstr()));
         }          }
   
         // set Content-Type          // set Content-Type
         if(body_file_content_type) {          if(body_file_content_type) {
                 // body file content type                  // body file content type
                 response.fields().put(content_type_name, body_file_content_type);                  response.fields().put(content_type_name_upper, body_file_content_type);
         } else {          } else {
                 // default content type                  // default content type
                 response.fields().put_dont_replace(content_type_name, new VString(*new String(DEFAULT_CONTENT_TYPE)));                  response.fields().put_dont_replace(content_type_name_upper, new VString(*new String(DEFAULT_CONTENT_TYPE)));
         }          }
   
         // prepare header: $response:fields without :body, :download and :charset          // prepare header: $response:fields without :body, :download and :charset
         Add_header_attribute_info info(*this);          Add_header_attribute_info info(*this);
         response.fields().for_each<Add_header_attribute_info*>(add_header_attribute, &info);          response.fields().for_each<Add_header_attribute_info*>(add_header_attribute, &info);
   
         if(Value* vresponse_body_file=body_file->fields().get(response_body_file_name)) {          if(sfile) {
                 // $response:[download|body][$.file[filespec]] -- optput specified file                  // $response:[download|body][$.file[filespec]] -- optput specified file
                 const String& sresponse_body_file=vresponse_body_file->as_string();                  uint64_t content_length=0;
                 size_t content_length=0;  
                 time_t atime=0, mtime=0, ctime=0;                  time_t atime=0, mtime=0, ctime=0;
                 file_stat(absolute(sresponse_body_file),                  file_stat(full_disk_path(*sfile), content_length, atime, mtime, ctime);
                         content_length,  
                         atime, mtime, ctime);  
   
                 VDate* vdate=0;                  VDate* vdate=0;
                 if(Value* v=body_file->fields().get("mdate")) {                  if(Value* v=body_file->fields().get("mdate")) {
Line 894  void Request::output_result(VFile* body_ Line 928  void Request::output_result(VFile* body_
                                 throw Exception(PARSER_RUNTIME, 0, "mdate must be a date");                                  throw Exception(PARSER_RUNTIME, 0, "mdate must be a date");
                 }                  }
                 if(!vdate)                  if(!vdate)
                         vdate=new VDate(mtime);                          vdate=new VDate((pa_time_t)mtime);
   
                 output_pieces(*this, header_only,                   output_pieces(*this, header_only, *sfile, content_length, *vdate, info.add_last_modified);
                         sresponse_body_file,  
                         content_length,  
                         *vdate,  
                         info.add_last_modified);  
         } else {          } else {
                 if(body_file_content_type)                  if(body_file_content_type)
                         if(HashStringValue *hash=body_file_content_type->get_hash())                          if(HashStringValue *hash=body_file_content_type->get_hash())
                                 body_file_content_type=hash->get(value_name);                                  body_file_content_type=hash->get(value_name);
   
                 output_sole_piece(*this, header_only,                   output_sole_piece(*this, header_only, *body_file, body_file_content_type);
                         *body_file, body_file_content_type);  
         }          }
 }  }
   
   const String& Request::mime_type_of(const String* file_name) {
           return mime_type_of(file_name?file_name->taint_cstr(String::L_FILE_SPEC):0);
   }
   
 const String& Request::mime_type_of(const char* user_file_name_cstr) {  const String& Request::mime_type_of(const char* user_file_name_cstr) {
         if(mime_types)          if(mime_types)
                 if(const char* cext=strrchr(user_file_name_cstr, '.')) {                  if(const char* cext=strrchr(user_file_name_cstr, '.')) {
                         String sext(++cext);                          String sext(++cext);
                         Table::Action_options options;                          Table::Action_options options;
                         if(mime_types->locate(0, sext.change_case(charsets.source(), String::CC_LOWER), options))                          if(mime_types->locate(0, sext.change_case(charsets.source(), String::CC_LOWER), options)) {
                                 if(const String* result=mime_types->item(1))                                  if(const String* result=mime_types->item(1))
                                         return *result;                                          return *result;
                                 else                                  else
                                         throw Exception(PARSER_RUNTIME,                                          throw Exception(PARSER_RUNTIME, 0, MIME_TYPES_NAME " table column elements must not be empty");
                                                 0,                          }
                                                 MIME_TYPES_NAME  " table column elements must not be empty");  
                 }                  }
   
         return *new String("application/octet-stream");          return *new String("application/octet-stream");
 }  }
   
 const String* Request::get_used_filename(uint file_no){  const String* Request::get_used_filespec(uint file_no){
         if(file_no < file_list.count())          if(file_no < file_list.count())
                 return new String(file_list[file_no], String::L_TAINTED);                  return new String(file_list[file_no], String::L_TAINTED);
         return 0;          return 0;
Line 948  const String& Request::transcode(const x Line 980  const String& Request::transcode(const x
 }  }
 #endif  #endif
   
   
 const Request::Trace Request::Exception_trace::extract_origin(const String*& problem_source) {  
         Trace result;  
         if(!is_empty()) {  
                 result=bottom_value();  
                 if(!problem_source) { // we don't know who trigged the bug?  
                         problem_source=result.name(); // consider the stack-top-guy (we usually know source of next-from-throw-point exception) did that  
                         fbottom++;  
                 } else if(result.name()==problem_source) // it is that same guy?  
                         fbottom++; // throw away that trace  
                 else {  
                         // stack top contains not us,   
                         //      leaving result intact  
                         //      it would help ^throw  
                 }  
         }  
   
         return result;  
 }  
   
 Request::Exception_details Request::get_details(const Exception& e) {  Request::Exception_details Request::get_details(const Exception& e) {
         const String* problem_source=e.problem_source();          const String* problem_source=e.problem_source();
         Trace trace=exception_trace.extract_origin(problem_source);  
           
         VHash& vhash=*new VHash;  HashStringValue& hash=vhash.hash();          VHash& vhash=*new VHash;  HashStringValue& hash=vhash.hash();
           Operation::Origin origin={0, 0, 0};
   
           if(!exception_trace.is_empty()) {
                   Trace bottom=exception_trace.bottom_value();
                   origin=bottom.origin();
                   if(!problem_source) { // we don't know who trigged the bug
                           problem_source=bottom.name(); // we usually know source of next-from-throw-point exception did that
                           exception_trace.set_bottom_index(exception_trace.bottom_index()+1);
                   } else if (bottom.name()==problem_source) { // it is that same guy?
                           exception_trace.set_bottom_index(exception_trace.bottom_index()+1); // throw away that trace
                   } else {
                           // stack top contains not us, leaving intact to help ^throw
                   }
           }
   
         // $.type          // $.type
         if(const char* type=e.type(true))          if(const char* type=e.type(true))
                 hash.put(exception_type_part_name, new VString(*new String(type)));                  hash.put(exception_type_part_name, new VString(*new String(type)));
   
         // $.source          // $.source
         if(problem_source) {          if(problem_source)
                 String& source=*new String(*problem_source, String::L_TAINTED);                  hash.put(exception_source_part_name, new VString(*new String(*problem_source, String::L_TAINTED)));
                 hash.put(exception_source_part_name, new VString(source));  
         }  
   
         // $.file lineno colno          // $.file $.lineno $.colno
         if(trace) {          if(origin.file_no){
                 const Operation::Origin origin=trace.origin();                  hash.put("file", new VString(*new String(file_list[origin.file_no], String::L_TAINTED)));
                 hash.put(String::Body("file"),                  hash.put("lineno", new VInt(1+origin.line));
                         new VString(*new String(file_list[origin.file_no], String::L_TAINTED)));                  hash.put("colno", new VInt(1+origin.col));
                 hash.put(String::Body("lineno"), new VInt(1+origin.line));  
                 hash.put(String::Body("colno"), new VInt(1+origin.col));  
         }          }
   
         // $.comment          // $.comment
         if(const char* comment=e.comment(true))          if(const char* comment=e.comment(true))
                 hash.put(exception_comment_part_name,                   hash.put(exception_comment_part_name, new VString(*new String(comment, String::L_TAINTED)));
                         new VString(*new String(comment, String::L_TAINTED)));  
   
         // $.handled(0)          // $.handled(0)
         hash.put(exception_handled_part_name, &VBool::get(false));          hash.put(exception_handled_part_name, &VBool::get(false));
   
         return Request::Exception_details(trace, problem_source, vhash);          return Request::Exception_details(origin, problem_source, vhash);
   }
   
   Temp_value_element::Temp_value_element(Request& arequest, Value& awhere, const String& aname, Value* awhat) :
           frequest(arequest),
           fwhere(awhere),
           fname(aname),
           saved(awhere.get_element(aname))
   {
           Junction* junction;
           if(saved && (junction=saved->get_junction()) && junction->is_getter)
                   saved=0;
           frequest.put_element(fwhere, aname, awhat);
   }
   
   Temp_value_element::~Temp_value_element() {
           frequest.put_element(fwhere, fname, saved ? saved : VVoid::get());
 }  }

Removed from v.1.325  
changed lines
  Added in v.1.409


E-mail: