Diff for /parser3/src/classes/op.C between versions 1.147 and 1.194

version 1.147, 2004/03/23 09:43:44 version 1.194, 2009/07/14 11:14:34
Line 1 Line 1
 /** @file  /** @file
         Parser: parser @b operators.          Parser: parser @b operators.
   
         Copyright (c) 2001-2004 ArtLebedev Group (http://www.artlebedev.com)          Copyright (c) 2001-2009 ArtLebedev Group (http://www.artlebedev.com)
         Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)          Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)
 */  */
   
Line 22  static const char * const IDENT_OP_C="$D Line 22  static const char * const IDENT_OP_C="$D
   
 // limits  // limits
   
 #define MAX_LOOPS 10000  #define MAX_LOOPS 20000
   
 // defines  // defines
   
Line 38  public: Line 38  public:
         VClassMAIN();          VClassMAIN();
 };  };
   
   // defines for globals
   
   #define CYCLE_DATA_NAME "CYCLE-DATA"
   
   // globals
   
   //^for & co
   String cycle_data_name(CYCLE_DATA_NAME);
   
 // defines for statics  // defines for statics
   
 #define SWITCH_DATA_NAME "SWITCH-DATA"  #define SWITCH_DATA_NAME "SWITCH-DATA"
 #define CACHE_DATA_NAME "CACHE-DATA"  #define CACHE_DATA_NAME "CACHE-DATA"
   
 #define EXCEPTION_VAR_NAME "exception"  #define EXCEPTION_VAR_NAME "exception"
   
 // statics  // statics
Line 53  static const String cache_data_name(CACH Line 63  static const String cache_data_name(CACH
   
 static const String exception_var_name(EXCEPTION_VAR_NAME);  static const String exception_var_name(EXCEPTION_VAR_NAME);
   
   
 // local defines  // local defines
   
 #define CACHE_EXCEPTION_HANDLED_CACHE_NAME "cache"  #define CACHE_EXCEPTION_HANDLED_CACHE_NAME "cache"
   
 // helpers  // helpers
   
 class Untaint_lang_name2enum: public Hash<const String::Body, String::Language> {  class Untaint_lang_name2enum: public HashString<String::Language> {
 public:  public:
         Untaint_lang_name2enum() {          Untaint_lang_name2enum() {
                 #define ULN(name, LANG) \                  #define ULN(name, LANG) \
Line 70  public: Line 81  public:
                 ULN("http-header", HTTP_HEADER);                  ULN("http-header", HTTP_HEADER);
                 ULN("mail-header", MAIL_HEADER);                  ULN("mail-header", MAIL_HEADER);
                 ULN("uri", URI);                  ULN("uri", URI);
                 ULN("table", TABLE);  
                 ULN("sql", SQL);                  ULN("sql", SQL);
                 ULN("js", JS);                  ULN("js", JS);
                 ULN("xml", XML);                  ULN("xml", XML);
                 ULN("optimized-xml", XML|String::L_OPTIMIZE_BIT);                  ULN("optimized-xml", XML|String::L_OPTIMIZE_BIT);
                 ULN("html", HTML);                  ULN("html", HTML);
                 ULN("optimized-html", HTML|String::L_OPTIMIZE_BIT);                  ULN("optimized-html", HTML|String::L_OPTIMIZE_BIT);
                   ULN("regex", REGEX);
                   ULN("parser-code", PARSER_CODE);
                 #undef ULN                  #undef ULN
         }          }
 } untaint_lang_name2enum;  } untaint_lang_name2enum;
Line 84  public: Line 96  public:
 // methods  // methods
   
 static void _if(Request& r, MethodParams& params) {  static void _if(Request& r, MethodParams& params) {
         Value& condition_code=params.as_junction(0, "condition must be expression");          bool condition=params.as_bool(0, "condition must be expression", r);
   
         bool condition=r.process_to_value(condition_code,   
                 false/*don't intercept string*/).as_bool();  
         if(condition)          if(condition)
                 r.write_pass_lang(r.process(params.as_junction(1, "'then' parameter must be code")));                  r.process_write(*params.get(1));
         else if(params.count()>2)          else if(params.count()>2)
                 r.write_pass_lang(r.process(params.as_junction(2, "'else' parameter must be code")));                  r.process_write(*params.get(2));
 }  }
   
 static void _untaint(Request& r, MethodParams& params) {  static String::Language get_untaint_lang(MethodParams& params, int index){
           const String& lang_name=params.as_string(index, "lang must be string");
           String::Language lang=untaint_lang_name2enum.get(lang_name);
           if(!lang)
                   throw Exception(PARSER_RUNTIME,
                           &lang_name,
                           "invalid taint language");
           return lang;
   }
   
   static void _untaint(Request& r, MethodParams& params) {
         String::Language lang;          String::Language lang;
         if(params.count()==1)          if(params.count()==1)
                 lang=String::L_AS_IS; // mark as simply 'tainted'. useful in html from sql                   lang=String::L_AS_IS; // mark as simply 'as-is'. useful in html from sql 
         else {          else
                 const String& lang_name=params.as_string(0, "lang must be string");                  lang=get_untaint_lang(params, 0);
                 lang=untaint_lang_name2enum.get(lang_name);  
                 if(!lang)  
                         throw Exception(0,  
                                 &lang_name,  
                                 "invalid taint language");  
         }  
   
         {          {
                 Value& vbody=params.as_junction(params.count()-1, "body must be code");                  Value& vbody=params.as_junction(params.count()-1, "body must be code");
                                   
                 Temp_lang temp_lang(r, lang); // set temporarily specified ^untaint[language;                  Temp_lang temp_lang(r, lang); // set temporarily specified ^untaint[language;
                 r.write_pass_lang(r.process(vbody)); // process marking tainted with that lang                  StringOrValue result=r.process(vbody); // process marking tainted with that lang
                   r.write_assign_lang(result);
         }          }
 }  }
   
 static void _taint(Request& r, MethodParams& params) {  static void _taint(Request& r, MethodParams& params) {
         String::Language lang;          String::Language lang;
         if(params.count()==1)          if(params.count()==1)
                 lang=String::L_TAINTED; // mark as simply 'tainted'. useful in table:set                  lang=String::L_TAINTED; // mark as simply 'tainted'. useful in table:create
         else {          else
                 const String& lang_name=params.as_string(0, "lang must be string");                  lang=get_untaint_lang(params, 0);
                 lang=untaint_lang_name2enum.get(lang_name);  
                 if(!lang)  
                         throw Exception(0,  
                                 &lang_name,  
                                 "invalid taint language");  
         }  
   
         {          {
                 Value& vbody=params.as_no_junction(params.count()-1, "body must not be code");                  Value& vbody=params.as_no_junction(params.count()-1, "body must not be code");
                                   
                 String result;                  String result(vbody.as_string(), lang); // force result language to specified
                 result.append(                  r.write_assign_lang(result);
                         vbody.as_string(),  // process marking tainted with that lang  
                         lang, true);  // force result language to specified  
                 r.write_pass_lang(result);  
         }          }
 }  }
   
Line 155  static void _process(Request& r, MethodP Line 159  static void _process(Request& r, MethodP
         {          {
                 VStateless_class *target_class=target_self->get_last_derived_class();                  VStateless_class *target_class=target_self->get_last_derived_class();
                 if(!target_class)                  if(!target_class)
                         throw Exception("parser.runtime",                          throw Exception(PARSER_RUNTIME,
                                 0,                                  0,
                                 "no target class");                                  "no target class");
   
                 // temporary remove language change                  // temporary remove language change
                 Temp_lang temp_lang(r, String::L_PASS_APPENDED);                  Temp_lang temp_lang(r, String::L_PARSER_CODE);
                 // temporary zero @main so to maybe-replace it in processed code                  // temporary zero @main so to maybe-replace it in processed code
                 Temp_method temp_method_main(*target_class, main_method_name, 0);                  Temp_method temp_method_main(*target_class, main_method_name, 0);
                 // temporary zero @auto so it wouldn't be auto-called in Request::use_buf                  // temporary zero @auto so it wouldn't be auto-called in Request::use_buf
Line 172  static void _process(Request& r, MethodP Line 176  static void _process(Request& r, MethodP
                         Value& voptions=params.as_no_junction(options_index, "options must not be code");                          Value& voptions=params.as_no_junction(options_index, "options must not be code");
                         options=voptions.get_hash();                          options=voptions.get_hash();
                         if(!options)                          if(!options)
                                 throw Exception("parser.runtime",                                  throw Exception(PARSER_RUNTIME,
                                         0,                                          0,
                                         "options must be hash");                                          "options must be hash");
                 }                  }
Line 196  static void _process(Request& r, MethodP Line 200  static void _process(Request& r, MethodP
                         }                          }
                   
                         if(valid_options!=options->count())                          if(valid_options!=options->count())
                                 throw Exception("parser.runtime",                                  throw Exception(PARSER_RUNTIME,
                                         0,                                          0,
                                         "called with invalid option");                                          "called with invalid option");
                 }                  }
Line 209  static void _process(Request& r, MethodP Line 213  static void _process(Request& r, MethodP
                 // evaluate source to process                  // evaluate source to process
                 const String& source=r.process_to_string(vjunction);                  const String& source=r.process_to_string(vjunction);
                 r.use_buf(*target_class,                  r.use_buf(*target_class,
                         source.cstr(String::L_UNSPECIFIED, r.connection(false)),                          source.untaint_cstr(String::L_AS_IS, r.connection(false)),
                         main_alias,                          main_alias,
                         processe_file_no,                          processe_file_no,
                         line_no_alias_offset);                          line_no_alias_offset);
Line 232  static void _rem(Request&, MethodParams& Line 236  static void _rem(Request&, MethodParams&
 }  }
   
 static void _while(Request& r, MethodParams& params) {  static void _while(Request& r, MethodParams& params) {
         Value& vcondition=params.as_junction(0, "condition must be expression");          Temp_hash_value<const String::Body, void*> 
         Value& body=params.as_junction(1, "body must be code");                  cycle_data_setter(r.classes_conf, cycle_data_name, /*any not null flag*/&r);
   
           Value& vcondition=params.as_expression(0, "condition must be number, bool or expression");
   
           Value& body_code=params.as_junction(1, "body must be code");
           Value* delim_maybe_code=params.count()>2?&params[2]:0;
   
         // while...          // while...
         int endless_loop_count=0;          int endless_loop_count=0;
         while(true) {          if(delim_maybe_code){ // delimiter set
                 if(++endless_loop_count>=MAX_LOOPS) // endless loop?                  bool need_delim=false;
                         throw Exception("parser.runtime",                  while(true) {
                                 0,                          if(++endless_loop_count>=MAX_LOOPS) // endless loop?
                                 "endless loop detected");                                  throw Exception(PARSER_RUNTIME,
                                           0,
                                           "endless loop detected");
   
                 bool condition=r.process_to_value(vcondition,                           if(!r.process_to_value(vcondition, false/*don't intercept string*/).as_bool())
                                 false/*don't intercept string*/).as_bool();                                  break;
                 if(!condition) // ...condition is true  
                         break;                          StringOrValue sv_processed=r.process(body_code);
                           Request::Skip lskip=r.get_skip(); r.set_skip(Request::SKIP_NOTHING);
   
                 // write processed body                          const String* s_processed=sv_processed.get_string();
                 r.write_pass_lang(r.process(body));                          if(s_processed && !s_processed->is_empty()) { // we have body
                                   if(need_delim) // need delim & iteration produced string?
                                           r.write_pass_lang(r.process(*delim_maybe_code));
                                   else
                                           need_delim=true;
                           }
                           r.write_pass_lang(sv_processed);
   
                           if(lskip==Request::SKIP_BREAK)
                                   break;
                   }
           } else {
                   while(true) {
                           if(++endless_loop_count>=MAX_LOOPS) // endless loop?
                                   throw Exception(PARSER_RUNTIME,
                                           0,
                                           "endless loop detected");
   
                           if(!r.process_to_value(vcondition, false/*don't intercept string*/).as_bool())
                                   break;
   
                           r.process_write(body_code);
                           Request::Skip lskip=r.get_skip(); r.set_skip(Request::SKIP_NOTHING);
   
                           if(lskip==Request::SKIP_BREAK)
                                   break;
                   }
         }          }
 }  }
   
 static void _use(Request& r, MethodParams& params) {  static void _use(Request& r, MethodParams& params) {
         Value& vfile=params.as_no_junction(0, "file name must not be code");          Value& vfile=params.as_no_junction(0, FILE_NAME_MUST_NOT_BE_CODE);
         r.use_file(r.main_class, vfile.as_string());          r.use_file(r.main_class, vfile.as_string());
 }  }
   
   static void set_skip(Request& r, Request::Skip askip) {
           void* data=r.classes_conf.get(cycle_data_name);
           if(!data)
                   throw Exception(PARSER_RUNTIME,
                           0,
                           "without cycle");
   
           r.set_skip(askip);
   }
   
   static void _break(Request& r, MethodParams&) {
           set_skip(r, Request::SKIP_BREAK);
   }
   
   static void _continue(Request& r, MethodParams&) {
           set_skip(r, Request::SKIP_CONTINUE);
   }
   
 static void _for(Request& r, MethodParams& params) {  static void _for(Request& r, MethodParams& params) {
           Temp_hash_value<const String::Body, void*> 
                   cycle_data_setter(r.classes_conf, cycle_data_name, /*any not null flag*/&r);
   
         const String& var_name=params.as_string(0, "var name must be string");          const String& var_name=params.as_string(0, "var name must be string");
         int from=params.as_int(1, "from must be int", r);          int from=params.as_int(1, "from must be int", r);
         int to=params.as_int(2, "to must be int", r);          int to=params.as_int(2, "to must be int", r);
         Value&  body_code=params.as_junction(3, "body must be code");          Value& body_code=params.as_junction(3, "body must be code");
         Value* delim_maybe_code=params.count()>4?&params[4]:0;          Value* delim_maybe_code=params.count()>4?&params[4]:0;
   
         if(to-from>=MAX_LOOPS) // too long loop?          if(to-from>=MAX_LOOPS) // too long loop?
                 throw Exception("parser.runtime",                  throw Exception(PARSER_RUNTIME,
                         0,                          0,
                         "endless loop detected");                          "endless loop detected");
   
         bool need_delim=false;  
         VInt* vint=new VInt(0);          VInt* vint=new VInt(0);
         r.get_method_frame()->caller()->put_element(var_name, vint, false);  
         for(int i=from; i<=to; i++) {          VMethodFrame& caller=*r.get_method_frame()->caller();
                 vint->set_int(i);          caller.put_element(caller, var_name, vint, false);
           if(delim_maybe_code){ // delimiter set 
                 StringOrValue sv_processed=r.process(body_code);                  bool need_delim=false;
                 const String* s_processed=sv_processed.get_string();  
                 if(delim_maybe_code && s_processed && s_processed->length()) { // delimiter set and we have body                  for(int i=from; i<=to; i++) {
                         if(need_delim) // need delim & iteration produced string?                          vint->set_int(i);
                                 r.write_pass_lang(r.process(*delim_maybe_code));  
                         need_delim=true;                          StringOrValue sv_processed=r.process(body_code);
                           Request::Skip lskip=r.get_skip(); r.set_skip(Request::SKIP_NOTHING);
   
                           const String* s_processed=sv_processed.get_string();
                           if(s_processed && !s_processed->is_empty()) { // we have body
                                   if(need_delim) // need delim & iteration produced string?
                                           r.write_pass_lang(r.process(*delim_maybe_code));
                                   else
                                           need_delim=true;
                           }
                           r.write_pass_lang(sv_processed);
   
                           if(lskip==Request::SKIP_BREAK)
                                   break;
                   }
           } else {
                   for(int i=from; i<=to; i++) {
                           vint->set_int(i);
    
                           r.process_write(body_code);
                           Request::Skip lskip=r.get_skip(); r.set_skip(Request::SKIP_NOTHING);
   
                           if(lskip==Request::SKIP_BREAK)
                                   break;
                 }                  }
                 r.write_pass_lang(sv_processed);  
         }          }
 }  }
   
Line 291  static void _eval(Request& r, MethodPara Line 371  static void _eval(Request& r, MethodPara
         Value& expr=params.as_junction(0, "need expression");          Value& expr=params.as_junction(0, "need expression");
         // evaluate expresion          // evaluate expresion
         Value& value_result=r.process_to_value(expr,           Value& value_result=r.process_to_value(expr, 
                 true/*don't intercept string*/).as_expr_result();                  false/*don't intercept string*/).as_expr_result();
         if(params.count()>1) {          if(params.count()>1) {
                 Value& fmt=params.as_no_junction(1, "fmt must not be code");                  const String& fmt=params.as_string(1, "fmt must be string").trim();
                 r.write_no_lang(String(format(value_result.as_double(), fmt.as_string().cstrm())));                  if(fmt.is_empty()){
                           r.write_no_lang(value_result);
                   } else {
                           r.write_no_lang(String(format(value_result.as_double(), fmt.cstrm())));
                   }
         } else          } else
                 r.write_no_lang(value_result);                  r.write_no_lang(value_result);
 }  }
Line 320  gettimeofday(&mt[0],NULL); Line 404  gettimeofday(&mt[0],NULL);
         // connect          // connect
         SQL_Connection* connection=SQL_driver_manager->get_connection(url.as_string(),           SQL_Connection* connection=SQL_driver_manager->get_connection(url.as_string(), 
                 protocol2driver_and_client,                  protocol2driver_and_client,
                 r.charsets.source().NAME().cstr());                  r.charsets.source().NAME().cstr(),
                   r.request_info.document_root);
   
 #ifdef RESOURCES_DEBUG  #ifdef RESOURCES_DEBUG
 //measure:after connect  //measure:after connect
Line 335  r.sql_connect_time+=t[1]-t[0]; Line 420  r.sql_connect_time+=t[1]-t[0];
         Temp_connection temp_connection(r, connection);          Temp_connection temp_connection(r, connection);
         // execute body          // execute body
         try {          try {
                 r.write_assign_lang(r.process(body_code));                  r.process_write(body_code);
                 connection->commit();                  connection->commit();
                 connection->close();                  connection->close();
         } catch(...) { // process problem          } catch(...) { // process problem
Line 349  r.sql_connect_time+=t[1]-t[0]; Line 434  r.sql_connect_time+=t[1]-t[0];
 class Switch_data: public PA_Object {  class Switch_data: public PA_Object {
 public:  public:
         Request& r;          Request& r;
         Value& searching;          const String* searching_string;
           double searching_double;
         Value* found;          Value* found;
         Value* _default;          Value* _default;
 public:  public:
         Switch_data(Request& ar, Value& asearching):           Switch_data(Request& ar, Value& asearching): 
           r(ar), searching(asearching) {}                  r(ar)
           {
                   if(asearching.is_string() || asearching.is_void()){
                           searching_string=&asearching.as_string();
                           searching_double=0;
                   } else {
                           searching_string=0;
                           searching_double=asearching.as_double();
                   }
           }
 };  };
 #endif  #endif
 static void _switch(Request& r, MethodParams& params) {  static void _switch(Request& r, MethodParams& params) {
Line 373  static void _switch(Request& r, MethodPa Line 468  static void _switch(Request& r, MethodPa
 static void _case(Request& r, MethodParams& params) {  static void _case(Request& r, MethodParams& params) {
         Switch_data* data=static_cast<Switch_data*>(r.classes_conf.get(switch_data_name));          Switch_data* data=static_cast<Switch_data*>(r.classes_conf.get(switch_data_name));
         if(!data)          if(!data)
                 throw Exception("parser.runtime",                  throw Exception(PARSER_RUNTIME,
                         0,                          0,
                         "without switch");                          "without switch");
   
           if(data->found) // matches already was found
                   return;
   
         int count=params.count();          int count=params.count();
         Value& code=params.as_junction(--count, "case result must be code");          Value* code=&params.as_expression(--count, "case result must be code");
   
   #ifdef USE_DESTRUCTORS
           Junction *j=code->get_junction();
           if (j){
                   code=new VJunction(j->self,j->method,j->method_frame,j->rcontext,j->wcontext,j->code);
                   if (j->wcontext) j->wcontext->attach_junction((VJunction *)code);
           }
   #endif
                   
         for(int i=0; i<count; i++) {          for(int i=0; i<count; i++){
                 Value& value=r.process_to_value(params[i]);                  Value& value=r.process_to_value(params[i]);
   
                 if(value.as_string() == CASE_DEFAULT_VALUE) {                  if(value.is_string() && value.as_string() == CASE_DEFAULT_VALUE){
                         data->_default=&code;                          data->_default=code;
                         break;                          continue;
                 }                  }
   
                 bool matches;                  bool matches;
                 if(data->searching.is_string())                  if(data->searching_string)
                         matches=data->searching.as_string() == value.as_string();                          matches=(*data->searching_string) == value.as_string();
                 else                  else
                         matches=data->searching.as_double() == value.as_double();                          matches=data->searching_double == value.as_double();
   
                 if(matches) {  
                         if(data->found)  
                                 throw Exception("parser.runtime",  
                                         0,  
                                         "duplicate found");  
   
                         data->found=&code;                  if(matches){
                           data->found=code;
                         break;                          break;
                 }                  }
         }          }
Line 418  struct Try_catch_result { Line 519  struct Try_catch_result {
 template<class I>  template<class I>
 static Try_catch_result try_catch(Request& r,   static Try_catch_result try_catch(Request& r, 
                   StringOrValue body_code(Request&, I), I info,                     StringOrValue body_code(Request&, I), I info, 
                   Value* catch_code)                     Value* catch_code,
                     bool could_be_handled_by_caller=false) 
 {  {
         Try_catch_result result;          Try_catch_result result;
   
         if(!catch_code) {          if(!catch_code) {
                 result.processed_code=body_code(r, info);                  result.processed_code=body_code(r, info);
                 return result;                  return result;
Line 438  static Try_catch_result try_catch(Reques Line 541  static Try_catch_result try_catch(Reques
                 Junction* junction=catch_code->get_junction();                  Junction* junction=catch_code->get_junction();
                 Value* method_frame=junction->method_frame;                  Value* method_frame=junction->method_frame;
                 Value* saved_exception_var_value=method_frame->get_element(exception_var_name, *method_frame, false);                  Value* saved_exception_var_value=method_frame->get_element(exception_var_name, *method_frame, false);
                 junction->method_frame->put_element(exception_var_name, &details.vhash, false);                  VMethodFrame& frame=*junction->method_frame;
                   frame.put_element(frame, exception_var_name, &details.vhash, false);
   
                 result.processed_code=r.process(*catch_code);                  result.processed_code=r.process(*catch_code);
                                   
                 // retriving $exception.handled, restoring $exception var                  // retriving $exception.handled, restoring $exception var
                 Value* vhandled=details.vhash.hash().get(exception_handled_part_name);                  Value* vhandled=details.vhash.hash().get(exception_handled_part_name);
                 junction->method_frame->put_element(exception_var_name, saved_exception_var_value, false);                  frame.put_element(frame, exception_var_name, saved_exception_var_value, false);
   
                 bool bhandled=false;                  bool bhandled=false;
                 if(vhandled) {                  if(vhandled) {
                         if(vhandled->is_string()) { // not simple $exception.handled(1/0)?                          if(vhandled->is_string()) { // not simple $exception.handled(1/0)?
                                 result.exception_should_be_handled=vhandled->get_string(); // considering 'recovered' and let the caller recover                                  if(could_be_handled_by_caller) { // and we can possibly handle it
                                 return result;                                          result.exception_should_be_handled=vhandled->get_string(); // considering 'recovered' and let the caller recover
                         }                                          return result;
                                   }
                         bhandled=vhandled->as_bool();                                             
                                   bhandled=false;
                           } else
                                   bhandled=vhandled->as_bool();
                 }                  }
   
                 if(!bhandled) {                  if(!bhandled) {
Line 460  static Try_catch_result try_catch(Reques Line 568  static Try_catch_result try_catch(Reques
                         rethrow;                          rethrow;
                 }                  }
         }          }
   
         return result;          return result;
 }  }
   
Line 467  static Try_catch_result try_catch(Reques Line 576  static Try_catch_result try_catch(Reques
   
 // consts  // consts
   
 const int DATA_STRING_SERIALIZED_VERSION=0x0005;  const int DATA_STRING_SERIALIZED_VERSION=0x0006;
   
 // helper types  // helper types
   
Line 479  struct Data_string_serialized_prolog { Line 588  struct Data_string_serialized_prolog {
 #endif  #endif
   
 void cache_delete(const String& file_spec) {  void cache_delete(const String& file_spec) {
         file_delete(file_spec, false/*fail_on_read_problem*/);          file_delete(file_spec, false/*fail_on_problem*/);
 }  }
   
 #ifndef DOXYGEN  #ifndef DOXYGEN
Line 491  public: Line 600  public:
 struct Locked_process_and_cache_put_action_info {  struct Locked_process_and_cache_put_action_info {
         Request *r;          Request *r;
         Cache_scope *scope;          Cache_scope *scope;
         Value* body_code; Value* catch_code;           Value* body_code;
           Value* catch_code; 
         const String* processed_code;          const String* processed_code;
 };  };
 #endif  #endif
Line 499  struct Locked_process_and_cache_put_acti Line 609  struct Locked_process_and_cache_put_acti
   
   
 static StringOrValue process_cache_body_code(Request& r, Value* body_code) {  static StringOrValue process_cache_body_code(Request& r, Value* body_code) {
         return StringOrValue(&r.process_to_string(*body_code), 0);          return StringOrValue(r.process_to_string(*body_code));
 }  }
   
 /* @todo maybe network order worth spending some effort?  /* @todo maybe network order worth spending some effort?
Line 510  static void locked_process_and_cache_put Line 620  static void locked_process_and_cache_put
         Locked_process_and_cache_put_action_info& info=          Locked_process_and_cache_put_action_info& info=
                 *static_cast<Locked_process_and_cache_put_action_info *>(context);                  *static_cast<Locked_process_and_cache_put_action_info *>(context);
   
           const String* body_from_disk=info.scope->body_from_disk;
         // body->process           // body->process 
         Try_catch_result result=try_catch(*info.r,           Try_catch_result result=try_catch(*info.r, 
                 process_cache_body_code, info.body_code,                  process_cache_body_code, info.body_code,
                 info.catch_code);                  info.catch_code, body_from_disk!=0 /*we have something old=we can handle=recover later*/);
   
         if(result.exception_should_be_handled) {          if(result.exception_should_be_handled) {
                 if(*result.exception_should_be_handled==CACHE_EXCEPTION_HANDLED_CACHE_NAME) {                  if(*result.exception_should_be_handled==CACHE_EXCEPTION_HANDLED_CACHE_NAME) {
                         if(const String* body_from_disk=info.scope->body_from_disk) // we have something old?                          assert(body_from_disk);
                                 info.processed_code=body_from_disk;                          info.processed_code=body_from_disk;
                         else  
                                 throw Exception(0,  
                                         new String("$"EXCEPTION_VAR_NAME"."EXCEPTION_HANDLED_PART_NAME"["CACHE_EXCEPTION_HANDLED_CACHE_NAME"]"),  
                                         "fallback failed - there is no old cached body");  
                 } else                  } else
                         throw Exception("parser.runtime",                          throw Exception(PARSER_RUNTIME,
                                 result.exception_should_be_handled,                                  result.exception_should_be_handled,
                                 "$"EXCEPTION_VAR_NAME"."EXCEPTION_HANDLED_PART_NAME" value must be "                                  "$"EXCEPTION_VAR_NAME"."EXCEPTION_HANDLED_PART_NAME" value must be "
                                 "either boolean or string '"CACHE_EXCEPTION_HANDLED_CACHE_NAME"'");                                  "either boolean or string '"CACHE_EXCEPTION_HANDLED_CACHE_NAME"'");
Line 556  const String* locked_process_and_cache_p Line 663  const String* locked_process_and_cache_p
   
         const String* result=file_write_action_under_lock(          const String* result=file_write_action_under_lock(
                 file_spec,                   file_spec, 
                 "cache_put", locked_process_and_cache_put_action, &info,                  "cache_put",
                   locked_process_and_cache_put_action,
                   &info,
                 false/*as_text*/,                  false/*as_text*/,
                 false/*do_append*/,                  false/*do_append*/,
                 false/*block*/,                  false/*block == don't wait till other thread release lock*/,
                 false/*fail on lock problem*/) ? info.processed_code: 0;                  false/*dun throw exception if lock failed*/) ? info.processed_code: 0;
   
         time_t now=time(0);          time_t now=time(0);
         if(scope.expires<=now)          if(scope.expires<=now)
                 cache_delete(file_spec);                  cache_delete(file_spec);
Line 612  static const String& as_file_spec(Reques Line 722  static const String& as_file_spec(Reques
         return r.absolute(params.as_string(index, "filespec must be string"));          return r.absolute(params.as_string(index, "filespec must be string"));
 }  }
 static void _cache(Request& r, MethodParams& params) {  static void _cache(Request& r, MethodParams& params) {
           if(params.count()==0) {
                   // ^cache[] -- return current expiration time
                   Cache_scope* scope=static_cast<Cache_scope*>(r.classes_conf.get(cache_data_name));
                   if(!scope)
                           throw Exception(PARSER_RUNTIME,
                                   0,
                                   "expire-time get without cache");
                   r.write_no_lang(*new VDate(scope->expires));
                   return;
           }
   
         time_t now=time(0);          time_t now=time(0);
   
         // ^cache[filename] ^cache(seconds) ^cache[expires date]  
         if(params.count()==1) {          if(params.count()==1) {
                   // ^cache[filename] ^cache(seconds) ^cache[expires date]
                 if(params[0].is_string()) { // filename?                  if(params[0].is_string()) { // filename?
                         cache_delete(as_file_spec(r, params, 0));                          cache_delete(as_file_spec(r, params, 0));
                         return;                          return;
Line 624  static void _cache(Request& r, MethodPar Line 745  static void _cache(Request& r, MethodPar
                 // secods|expires date                  // secods|expires date
                 Cache_scope* scope=static_cast<Cache_scope*>(r.classes_conf.get(cache_data_name));                  Cache_scope* scope=static_cast<Cache_scope*>(r.classes_conf.get(cache_data_name));
                 if(!scope)                  if(!scope)
                         throw Exception("parser.runtime",                          throw Exception(PARSER_RUNTIME,
                                 0,                                  0,
                                 "expire-time reducing instruction without cache");                                  "expire-time reducing instruction without cache");
                                   
Line 633  static void _cache(Request& r, MethodPar Line 754  static void _cache(Request& r, MethodPar
                         scope->expires=expires;                          scope->expires=expires;
   
                 return;                  return;
         }          } else if(params.count()<3)
                   throw Exception(PARSER_RUNTIME,
                           0,
                           "invalid number of parameters"); 
                   
         // file_spec, expires, body code          // file_spec, expires, body code
         const String& file_spec=r.absolute(params.as_string(0, "filespec must be string"));          const String& file_spec=as_file_spec(r, params, 0);
   
         Cache_scope scope={as_expires(r, params, 1, now), 0};          Cache_scope scope={as_expires(r, params, 1, now), 0};
   
Line 647  static void _cache(Request& r, MethodPar Line 771  static void _cache(Request& r, MethodPar
         if(params.count()>3)          if(params.count()>3)
                 catch_code=&params.as_junction(3, "catch_code must be code");                  catch_code=&params.as_junction(3, "catch_code must be code");
   
         if(scope.expires>now) { // valid 'expires' specified? try cached copy...          if(scope.expires>now) {
                 // hence we don't hope to have unary create/lockEX                  Cache_get_result cached=cache_get(r.charsets, file_spec, now);
                 // we need some plan to live in a life like that, so...   
                 // worst races plan:  
                 // A        B  
                 // open  
                 //          |open  
                 // lockSH  
                 //          |nonblocking-lockEX fails  
                 // unlockSH  
                 // close, cache_get returns 0  
                 // open  
                 // nonblocking-lockEX succeeds; process, write, close  
                 //          |retry1: open  
                 // ...  
                 //          |lockSH succeeds; ...  
   
                 for(int retry=0; retry<2; retry++) {  
                         Cache_get_result cached=cache_get(r.charsets, file_spec, now);  
                         if(cached.body) { // have cached copy  
                                 if(cached.expired)   
                                         scope.body_from_disk=cached.body; // storing for user to retrive it with ^cache[]  
                                 else // and it's not expired yet  
                                 {  
                                 // write it out   
                                 r.write_assign_lang(*cached.body);  
                                 // happy with it  
                                 return;  
                         }  
                         }  
   
                 // non-blocked lock; process; cache it                  if(cached.body) { // have cached copy
                 if(const String* processed_body=                          if(cached.expired) {
                         locked_process_and_cache_put(r, body_code, catch_code, scope, file_spec)) {                                  scope.body_from_disk=cached.body; // storing for user to retrive it with ^cache[]
                         // write it out                           } else {
                         r.write_assign_lang(*processed_body);                                  // and it's not expired yet write it out 
                         // happy with it                                  r.write_assign_lang(*cached.body);
                         return;                                  // happy with it
                 } else { // somebody writing result right now                                  return;
                         pa_sleep(0, 500000); // waiting half a second                          }
                         retry=0; // prolonging our wait, than could cache_get it, without processing body_code                  }
                 }  
                 }                  // no cached info or it's already expired
                 throw Exception(0,  
                         &file_spec,                  // trying to process it under lock and store result in file
                         "locking problem");                  const String* processed_body=locked_process_and_cache_put(r, body_code, catch_code, scope, file_spec);
                   if(processed_body){
                           // write it out 
                           r.write_assign_lang(*processed_body);
                           // happy with it
                           return;
                   } else {
                           // we fail while get exclusive lock. nvm, we just execute body_code a bit later
                   }
         } else {           } else { 
                 // instructed not to cache; forget cached copy                  // instructed not to cache; forget cached copy
                 cache_delete(file_spec);                  cache_delete(file_spec);
                 // process  
                 const String& processed_body=r.process_to_string(body_code);  
                 // write it out   
                 r.write_assign_lang(processed_body);  
                 // happy with it  
                 return;  
         }          }
         // never reached          
           // process without cacheing
           const String& processed_body=r.process_to_string(body_code);
           // write it out 
           r.write_assign_lang(processed_body);
 }  }
   
 static StringOrValue process_try_body_code(Request& r, Value* body_code) {  static StringOrValue process_try_body_code(Request& r, Value* body_code) {
Line 712  static StringOrValue process_try_body_co Line 814  static StringOrValue process_try_body_co
 static void _try_operator(Request& r, MethodParams& params) {  static void _try_operator(Request& r, MethodParams& params) {
         Value& body_code=params.as_junction(0, "body_code must be code");          Value& body_code=params.as_junction(0, "body_code must be code");
         Value& catch_code=params.as_junction(1, "catch_code must be code");          Value& catch_code=params.as_junction(1, "catch_code must be code");
           Value* finally_code=(params.count()==3) ? &params.as_junction(2, "finally_code must be code") : 0;
   
         Try_catch_result result=try_catch(r,           Try_catch_result result;
                 process_try_body_code, &body_code,          StringOrValue finally_result;
                 &catch_code);          try{
                           result=try_catch(r, 
         if(result.exception_should_be_handled)                          process_try_body_code, &body_code,
                 throw Exception("parser.runtime",                          &catch_code);
                         result.exception_should_be_handled,                  if(result.exception_should_be_handled)
                         "catch block must set $exception.handled to some boolean value, not string");                          throw Exception(PARSER_RUNTIME,
                                   result.exception_should_be_handled,
                                   "catch block must set $exception.handled to some boolean value, not string");
           } catch(...){
                   if(finally_code)
                           finally_result=r.process(*finally_code);
                   rethrow;
           }
   
           if(finally_code)
                   finally_result=r.process(*finally_code);
   
         // write out processed body_code or catch_code          // write out processed body_code or catch_code
         r.write_pass_lang(result.processed_code);          r.write_pass_lang(result.processed_code);
   
           // write out processed finally code
           if(finally_code)
                   r.write_pass_lang(finally_result);
 }  }
   
 static void _throw_operator(Request&, MethodParams& params) {  static void _throw_operator(Request&, MethodParams& params) {
         if(params.count()==1) {          if(params.count()==1 && !params[0].is_string()) {
                 if(HashStringValue *hash=params[0].get_hash()) {                  if(HashStringValue *hash=params[0].get_hash()) {
                         const char* type=0;                          const char* type=0;
                         if(Value* value=hash->get(exception_type_part_name))                          if(Value* value=hash->get(exception_type_part_name))
Line 743  static void _throw_operator(Request&, Me Line 860  static void _throw_operator(Request&, Me
                                 source?source:0,                                  source?source:0,
                                 "%s", comment?comment:"");                                  "%s", comment?comment:"");
                 } else                  } else
                         throw Exception("parser.runtime",                          throw Exception(PARSER_RUNTIME,
                                 0,                                  0,
                                 "one-param version has hash param");                                  "one-param version has hash or string param");
         } else {          } else {
                 const char* type=params.as_string(0, "type must be string").cstr();                  const char* type=params.as_string(0, "type must be string").cstr();
                 const String& source=params.as_string(1, "source must be string");                  const String* source=params.count()>1? &params.as_string(1, "source must be string"):0;
                 const char* comment=params.count()>2? params.as_string(2, "comment must be string").cstr()                  const char* comment=params.count()>2? params.as_string(2, "comment must be string").cstr():0;
                         :0;                  throw Exception(type, source, "%s", comment?comment:"");
                 throw Exception(type, &source, "%s", comment?comment:"");  
         }          }
  }   }
   
   static void _sleep_operator(Request& r, MethodParams& params) {
           double seconds=params.as_double(0, "seconds must be double", r);
           pa_sleep((int)trunc(seconds), (int)trunc(seconds*1000));
    }
   
 #if defined(WIN32) && defined(_DEBUG)  #if defined(WIN32) && defined(_DEBUG)
 #       define PA_BPT  #       define PA_BPT
 static void _bpt(Request&, MethodParams&) {  static void _bpt(Request&, MethodParams&) {
Line 774  VClassMAIN::VClassMAIN(): VClass() { Line 895  VClassMAIN::VClassMAIN(): VClass() {
   
         // ^if(condition){code-when-true}          // ^if(condition){code-when-true}
         // ^if(condition){code-when-true}{code-when-false}          // ^if(condition){code-when-true}{code-when-false}
         add_native_method("if", Method::CT_ANY, _if, 2, 3);          add_native_method("if", Method::CT_ANY, _if, 2, 3, Method::CO_WITHOUT_FRAME);
   
         // ^untaint[as-is|uri|sql|js|html|html-typo]{code}          // ^untaint[as-is|uri|sql|js|html|html-typo|regex|parser-code]{code}
         add_native_method("untaint", Method::CT_ANY, _untaint, 1, 2);          add_native_method("untaint", Method::CT_ANY, _untaint, 1, 2, Method::CO_WITHOUT_FRAME);
   
         // ^taint[as-is|uri|sql|js|html|html-typo]{code}          // ^taint[as-is|uri|sql|js|html|html-typo|regex|parser-code]{code}
         add_native_method("taint", Method::CT_ANY, _taint, 1, 2);          add_native_method("taint", Method::CT_ANY, _taint, 1, 2, Method::CO_WITHOUT_FRAME);
   
         // ^process[code]          // ^process[code]
         add_native_method("process", Method::CT_ANY, _process, 1, 3);          add_native_method("process", Method::CT_ANY, _process, 1, 3);
   
         // ^rem{code}          // ^rem{code}
         add_native_method("rem", Method::CT_ANY, _rem, 1, 10000);          add_native_method("rem", Method::CT_ANY, _rem, 1, 10000, Method::CO_WITHOUT_FRAME);
   
         // ^while(condition){code}          // ^while(condition){code}
         add_native_method("while", Method::CT_ANY, _while, 2, 2);          add_native_method("while", Method::CT_ANY, _while, 2, 3, Method::CO_WITHOUT_FRAME);
   
         // ^use[file]          // ^use[file]
         add_native_method("use", Method::CT_ANY, _use, 1, 1);          add_native_method("use", Method::CT_ANY, _use, 1, 1);
   
           // ^break[]
           add_native_method("break", Method::CT_ANY, _break, 0, 0, Method::CO_WITHOUT_FRAME);
   
           // ^continue[]
           add_native_method("continue", Method::CT_ANY, _continue, 0, 0, Method::CO_WITHOUT_FRAME);
   
         // ^for[i](from-number;to-number-inclusive){code}[delim]          // ^for[i](from-number;to-number-inclusive){code}[delim]
         add_native_method("for", Method::CT_ANY, _for, 3+1, 3+1+1);          add_native_method("for", Method::CT_ANY, _for, 3+1, 3+1+1, Method::CO_WITHOUT_WCONTEXT);
   
         // ^eval(expr)          // ^eval(expr)
         // ^eval(expr)[format]          // ^eval(expr)[format]
         add_native_method("eval", Method::CT_ANY, _eval, 1, 2);          add_native_method("eval", Method::CT_ANY, _eval, 1, 2, Method::CO_WITHOUT_FRAME);
   
         // ^connect[protocol://user:pass@host[:port]/database]{code with ^sql-s}          // ^connect[protocol://user:pass@host[:port]/database]{code with ^sql-s}
         add_native_method("connect", Method::CT_ANY, _connect, 2, 2);          add_native_method("connect", Method::CT_ANY, _connect, 2, 2);
Line 807  VClassMAIN::VClassMAIN(): VClass() { Line 934  VClassMAIN::VClassMAIN(): VClass() {
   
         // ^cache[file_spec](time){code}[{catch code}] time=0 no cache          // ^cache[file_spec](time){code}[{catch code}] time=0 no cache
         // ^cache[file_spec] delete cache          // ^cache[file_spec] delete cache
         add_native_method("cache", Method::CT_ANY, _cache, 1, 4);          // ^cache[] get current expiration time
           add_native_method("cache", Method::CT_ANY, _cache, 0, 4);
                   
         // switch          // switch
   
         // ^switch[value]{cases}          // ^switch[value]{cases}
         add_native_method("switch", Method::CT_ANY, _switch, 2, 2);          add_native_method("switch", Method::CT_ANY, _switch, 2, 2, Method::CO_WITHOUT_FRAME);
   
         // ^case[value]{code}          // ^case[value]{code}
         add_native_method("case", Method::CT_ANY, _case, 2, 10000);          add_native_method("case", Method::CT_ANY, _case, 2, 10000, Method::CO_WITHOUT_FRAME);
   
         // try-catch          // try-catch
   
         // ^try{code}{catch code}          // ^try{code}{catch code}
         add_native_method("try", Method::CT_ANY, _try_operator, 2, 2);          add_native_method("try", Method::CT_ANY, _try_operator, 2, 3, Method::CO_WITHOUT_FRAME);
         // ^throw[$exception hash]          // ^throw[$exception hash]
         // ^throw[type;source;comment]          // ^throw[type;source;comment]
         add_native_method("throw", Method::CT_ANY, _throw_operator, 1, 3);          add_native_method("throw", Method::CT_ANY, _throw_operator, 1, 3);
   
           add_native_method("sleep", Method::CT_ANY, _sleep_operator, 1, 1);
 }  }
   
 // constructor & configurator  // constructor & configurator

Removed from v.1.147  
changed lines
  Added in v.1.194


E-mail: