Annotation of parser3/src/classes/op.C, revision 1.254

1.1       paf         1: /** @file
1.9       paf         2:        Parser: parser @b operators.
1.1       paf         3: 
1.251     moko        4:        Copyright (c) 2001-2017 Art. Lebedev Studio (http://www.artlebedev.com)
1.71      paf         5:        Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)
1.98      paf         6: */
1.1       paf         7: 
1.13      paf         8: #include "classes.h"
1.129     paf         9: #include "pa_vmethod_frame.h"
                     10: 
1.1       paf        11: #include "pa_common.h"
1.134     paf        12: #include "pa_os.h"
1.1       paf        13: #include "pa_request.h"
                     14: #include "pa_vint.h"
                     15: #include "pa_sql_connection.h"
1.79      paf        16: #include "pa_vdate.h"
1.105     paf        17: #include "pa_vmethod_frame.h"
1.129     paf        18: #include "pa_vclass.h"
1.144     paf        19: #include "pa_charset.h"
1.1       paf        20: 
1.254   ! moko       21: volatile const char * IDENT_OP_C="$Id: op.C,v 1.253 2019/11/22 23:11:24 moko Exp $";
1.18      parser     22: 
1.10      paf        23: // defines
                     24: 
1.82      paf        25: #define CASE_DEFAULT_VALUE "DEFAULT"
1.11      paf        26: 
1.10      paf        27: // class
                     28: 
1.113     paf        29: class VClassMAIN: public VClass {
1.10      paf        30: public:
1.129     paf        31:        VClassMAIN();
1.10      paf        32: };
                     33: 
1.129     paf        34: // defines for statics
                     35: 
                     36: #define SWITCH_DATA_NAME "SWITCH-DATA"
                     37: #define CACHE_DATA_NAME "CACHE-DATA"
1.164     paf        38: 
1.129     paf        39: #define EXCEPTION_VAR_NAME "exception"
                     40: 
                     41: // statics
                     42: 
                     43: //^switch ^case
                     44: static const String switch_data_name(SWITCH_DATA_NAME);
                     45: //^cache
                     46: static const String cache_data_name(CACHE_DATA_NAME);
                     47: 
                     48: static const String exception_var_name(EXCEPTION_VAR_NAME);
                     49: 
1.164     paf        50: 
1.136     paf        51: // local defines
                     52: 
                     53: #define CACHE_EXCEPTION_HANDLED_CACHE_NAME "cache"
                     54: 
1.129     paf        55: // helpers
                     56: 
1.187     misha      57: class Untaint_lang_name2enum: public HashString<String::Language> {
1.129     paf        58: public:
                     59:        Untaint_lang_name2enum() {
1.223     moko       60:                #define ULN(name, LANG) put(name, (value_type)(String::L_##LANG));
1.198     misha      61:                ULN("clean", CLEAN);
1.129     paf        62:                ULN("as-is", AS_IS);
                     63:                ULN("optimized-as-is", AS_IS|String::L_OPTIMIZE_BIT);
                     64:                ULN("file-spec", FILE_SPEC);
                     65:                ULN("http-header", HTTP_HEADER);
                     66:                ULN("mail-header", MAIL_HEADER);
                     67:                ULN("uri", URI);
                     68:                ULN("sql", SQL);
                     69:                ULN("js", JS);
                     70:                ULN("xml", XML);
                     71:                ULN("optimized-xml", XML|String::L_OPTIMIZE_BIT);
                     72:                ULN("html", HTML);
                     73:                ULN("optimized-html", HTML|String::L_OPTIMIZE_BIT);
1.159     paf        74:                ULN("regex", REGEX);
1.193     misha      75:                ULN("parser-code", PARSER_CODE);
1.204     misha      76:                ULN("json", JSON);
1.129     paf        77:                #undef ULN
                     78:        }
                     79: } untaint_lang_name2enum;
                     80: 
1.10      paf        81: // methods
                     82: 
1.129     paf        83: static void _if(Request& r, MethodParams& params) {
1.200     moko       84:        size_t max_param=params.count()-1;
                     85:        size_t i=0;
                     86:        do {
                     87:                bool condition=params.as_bool(i, "condition must be expression", r);
                     88:                if(condition) {
1.238     moko       89:                        r.process_write(params[i+1]);
1.200     moko       90:                        return;
                     91:                }
                     92:                i+=2;
                     93:        } while (i < max_param);
                     94: 
                     95:        if(i == max_param)
1.238     moko       96:                r.process_write(params[i]);
1.1       paf        97: }
                     98: 
1.210     moko       99: String::Language get_untaint_lang(const String& lang_name){
1.175     misha     100:        String::Language lang=untaint_lang_name2enum.get(lang_name);
                    101:        if(!lang)
1.210     moko      102:                throw Exception(PARSER_RUNTIME, &lang_name, "invalid taint language");
1.175     misha     103:        return lang;
                    104: }
                    105: 
1.129     paf       106: static void _untaint(Request& r, MethodParams& params) {
                    107:        String::Language lang;
                    108:        if(params.count()==1)
1.241     moko      109:                lang=String::L_AS_IS; // mark as simply 'as-is'. useful in html from sql
1.175     misha     110:        else
1.210     moko      111:                lang=get_untaint_lang(params.as_string(0, "lang must be string"));
1.1       paf       112: 
1.241     moko      113:        Value& vbody=params.as_junction(params.count()-1, "body must be code");
                    114:        Value& result=r.process(vbody);
                    115: 
                    116:        if(const String* string=result.get_string()){
                    117:                String &untainted=*new String();
                    118:                string->append_to(untainted, lang); // mark all tainted to specified language
1.243     moko      119:                r.write(untainted);
1.241     moko      120:        } else
1.243     moko      121:                r.write(result); // this is not normal, just backward compatibility
1.1       paf       122: }
                    123: 
1.129     paf       124: static void _taint(Request& r, MethodParams& params) {
                    125:        String::Language lang;
                    126:        if(params.count()==1)
1.175     misha     127:                lang=String::L_TAINTED; // mark as simply 'tainted'. useful in table:create
                    128:        else
1.210     moko      129:                lang=get_untaint_lang(params.as_string(0, "lang must be string"));
1.1       paf       130: 
                    131:        {
1.129     paf       132:                Value& vbody=params.as_no_junction(params.count()-1, "body must not be code");
1.1       paf       133:                
1.191     misha     134:                String result(vbody.as_string(), lang); // force result language to specified
1.243     moko      135:                r.write(result);
1.1       paf       136:        }
                    137: }
                    138: 
1.205     moko      139: static void _apply_taint(Request& r, MethodParams& params) {
1.210     moko      140:        String::Language lang=params.count()==1 ? String::L_AS_IS : get_untaint_lang(params.as_string(0, "lang must be string"));
1.205     moko      141:        const String &sbody=params.as_string(params.count()-1, "body must be string");
1.213     moko      142:        String::Body result_body=sbody.cstr_to_string_body_untaint(lang, r.connection(false), &r.charsets);
1.243     moko      143:        r.write(*new String(result_body, String::L_AS_IS));
1.205     moko      144: }
                    145: 
1.129     paf       146: static void _process(Request& r, MethodParams& params) {
                    147:        Method* main_method;
                    148: 
                    149:        size_t index=0;
                    150:        Value* target_self;
                    151:        Value& maybe_target_self=params[index];
                    152:        if(maybe_target_self.get_string() || maybe_target_self.get_junction())
                    153:                target_self=&r.get_method_frame()->caller()->self();
                    154:        else {
1.233     moko      155:                target_self=&maybe_target_self;
                    156:                if(params.count()==1)
                    157:                        throw Exception(PARSER_RUNTIME, 0, "no body specified");
                    158:                index++;
1.129     paf       159:        }
                    160: 
1.1       paf       161:        {
1.197     misha     162:                VStateless_class *target_class=target_self->get_class();
1.116     paf       163:                if(!target_class)
1.232     moko      164:                        throw Exception(PARSER_RUNTIME, 0, "no target class");
1.114     paf       165: 
1.1       paf       166:                // temporary zero @main so to maybe-replace it in processed code
1.129     paf       167:                Temp_method temp_method_main(*target_class, main_method_name, 0);
                    168: 
                    169:                const String* main_alias=0;
1.146     paf       170:                const String* file_alias=0;
                    171:                int line_no_alias_offset=0;
1.216     moko      172:                bool allow_class_replace=false;
1.211     misha     173: 
                    174:                size_t options_index=index+1;
                    175:                if(options_index<params.count())
                    176:                        if(HashStringValue* options=params.as_hash(options_index)) {
1.216     moko      177: 
1.211     misha     178:                                int valid_options=0;
1.216     moko      179:                                for(HashStringValue::Iterator i(*options); i; i.next() ){
                    180: 
                    181:                                        String::Body key=i.key();
                    182:                                        Value* value=i.value();
                    183: 
                    184:                                        if(key == "main") {
                    185:                                                valid_options++;
                    186:                                                main_alias=&value->as_string();
                    187:                                        } else if(key == "file") {
                    188:                                                valid_options++;
                    189:                                                file_alias=&value->as_string();
                    190:                                        } else if(key == "lineno") {
                    191:                                                valid_options++;
                    192:                                                line_no_alias_offset=value->as_int();
                    193:                                        } else if(key == "replace") {
                    194:                                                valid_options++;
1.236     moko      195:                                                allow_class_replace=r.process(*value).as_bool();
1.216     moko      196:                                        }
1.211     misha     197:                                }
1.216     moko      198: 
1.211     misha     199:                                if(valid_options!=options->count())
                    200:                                        throw Exception(PARSER_RUNTIME, 0, CALLED_WITH_INVALID_OPTION);
1.146     paf       201:                        }
1.129     paf       202: 
1.232     moko      203:                uint processe_file_no=file_alias ? r.register_file(r.absolute(*file_alias)) : pseudo_file_no__process;
1.146     paf       204:                // process...{string}
                    205:                Value& vjunction=params.as_junction(index, "body must be code");
                    206:                // evaluate source to process
                    207:                const String& source=r.process_to_string(vjunction);
1.216     moko      208: 
                    209:                Temp_class_replace class_replace(r, allow_class_replace);
                    210: 
1.241     moko      211:                r.use_buf(*target_class, source.untaint_cstr(String::L_PARSER_CODE, r.connection(false)), main_alias, processe_file_no, line_no_alias_offset);
1.1       paf       212: 
1.73      paf       213:                // main_method
1.129     paf       214:                main_method=target_class->get_method(main_method_name);
1.73      paf       215:        }
                    216:        // after restoring current-request-lang
                    217:        // maybe-execute @main[]
                    218:        if(main_method) {
1.244     moko      219:                METHOD_FRAME_ACTION(*main_method, r.get_method_frame()->caller(), *target_self, {
                    220:                        frame.empty_params();
                    221:                        r.call(frame);
                    222:                        r.write(frame.result());
                    223:                });
1.1       paf       224:        }
                    225: }
                    226:        
1.138     paf       227: static void _rem(Request&, MethodParams& params) {
1.129     paf       228:        params.as_junction(0, "body must be code");
1.1       paf       229: }
                    230: 
1.129     paf       231: static void _while(Request& r, MethodParams& params) {
1.196     misha     232:        InCycle temp(r);
1.164     paf       233: 
1.170     misha     234:        Value& vcondition=params.as_expression(0, "condition must be number, bool or expression");
                    235: 
1.162     paf       236:        Value& body_code=params.as_junction(1, "body must be code");
                    237:        Value* delim_maybe_code=params.count()>2?&params[2]:0;
1.1       paf       238: 
                    239:        // while...
                    240:        int endless_loop_count=0;
1.186     misha     241:        if(delim_maybe_code){ // delimiter set
1.185     misha     242:                bool need_delim=false;
                    243:                while(true) {
1.235     moko      244:                        if(++endless_loop_count>=pa_loop_limit) // endless loop?
                    245:                                throw Exception(PARSER_RUNTIME, 0, "endless loop detected");
1.185     misha     246: 
1.237     moko      247:                        if(!r.process(vcondition).as_bool())
1.185     misha     248:                                break;
1.1       paf       249: 
1.234     moko      250:                        Value& sv_processed=r.process(body_code);
1.249     moko      251:                        TempSkip4Delimiter skip(r);
1.186     misha     252: 
1.185     misha     253:                        const String* s_processed=sv_processed.get_string();
1.186     misha     254:                        if(s_processed && !s_processed->is_empty()) { // we have body
1.185     misha     255:                                if(need_delim) // need delim & iteration produced string?
1.243     moko      256:                                        r.write(r.process(*delim_maybe_code));
1.185     misha     257:                                else
                    258:                                        need_delim=true;
                    259:                        }
1.243     moko      260:                        r.write(sv_processed);
1.1       paf       261: 
1.249     moko      262:                        if(skip.check_break())
1.185     misha     263:                                break;
1.162     paf       264:                }
1.185     misha     265:        } else {
                    266:                while(true) {
1.235     moko      267:                        if(++endless_loop_count>=pa_loop_limit) // endless loop?
                    268:                                throw Exception(PARSER_RUNTIME, 0, "endless loop detected");
1.185     misha     269: 
1.237     moko      270:                        if(!r.process(vcondition).as_bool())
1.185     misha     271:                                break;
1.164     paf       272: 
1.185     misha     273:                        r.process_write(body_code);
                    274: 
1.249     moko      275:                        if(r.check_skip_break())
1.185     misha     276:                                break;
                    277:                }
1.1       paf       278:        }
                    279: }
                    280: 
1.129     paf       281: static void _use(Request& r, MethodParams& params) {
1.171     misha     282:        Value& vfile=params.as_no_junction(0, FILE_NAME_MUST_NOT_BE_CODE);
1.199     misha     283: 
1.216     moko      284:        bool allow_class_replace=false;
1.246     moko      285:        const String* use_origin=0;
1.216     moko      286: 
                    287:        if(params.count()==2)
                    288:                if(HashStringValue* options=params.as_hash(1)) {
                    289:                        int valid_options=0;
                    290:                        for(HashStringValue::Iterator i(*options); i; i.next() ){
                    291: 
                    292:                                String::Body key=i.key();
                    293:                                Value* value=i.value();
                    294: 
                    295:                                if(key == "replace") {
                    296:                                        valid_options++;
1.236     moko      297:                                        allow_class_replace=r.process(*value).as_bool();
1.216     moko      298:                                }
                    299: 
1.246     moko      300:                                if(key == "origin") {
                    301:                                        valid_options++;
                    302:                                        use_origin=&value->as_string();
                    303:                                }
                    304: 
                    305:                                if(valid_options!=options->count())
                    306:                                        throw Exception(PARSER_RUNTIME, 0, CALLED_WITH_INVALID_OPTION);
1.216     moko      307:                        }
                    308:                }
                    309: 
1.246     moko      310:        if(!use_origin)
                    311:                if(VMethodFrame* caller=r.get_method_frame()->caller())
1.247     moko      312:                        use_origin=r.get_method_filespec(&caller->method);
1.246     moko      313: 
1.216     moko      314:        Temp_class_replace class_replace(r, allow_class_replace);
                    315: 
1.246     moko      316:        r.use_file(r.main_class, vfile.as_string(), use_origin);
1.1       paf       317: }
                    318: 
1.164     paf       319: static void set_skip(Request& r, Request::Skip askip) {
1.196     misha     320:        if(!r.get_in_cycle())
1.227     moko      321:                throw Exception(askip==Request::SKIP_BREAK ? "parser.break" : "parser.continue", 0, "without cycle");
1.164     paf       322:        r.set_skip(askip);
                    323: }
                    324: 
1.227     moko      325: static void _break(Request& r, MethodParams& params) {
                    326:        if(!params.count() || params.as_bool(0, "condition must be expression", r)) set_skip(r, Request::SKIP_BREAK);
1.164     paf       327: }
                    328: 
1.227     moko      329: static void _continue(Request& r, MethodParams& params) {
                    330:        if(!params.count() || params.as_bool(0, "condition must be expression", r)) set_skip(r, Request::SKIP_CONTINUE);
1.164     paf       331: }
                    332: 
1.249     moko      333: static void _return(Request& r, MethodParams& params) {
1.250     moko      334:        VMethodFrame& caller=*r.get_method_frame()->caller();
1.249     moko      335:        if(params.count())
1.250     moko      336:                r.put_element(caller, Symbols::RESULT_SYMBOL, &params[0]);
                    337:        r.set_skip_return(caller);
1.249     moko      338: }
                    339: 
1.129     paf       340: static void _for(Request& r, MethodParams& params) {
1.196     misha     341:        InCycle temp(r);
1.164     paf       342: 
1.129     paf       343:        const String& var_name=params.as_string(0, "var name must be string");
                    344:        int from=params.as_int(1, "from must be int", r);
                    345:        int to=params.as_int(2, "to must be int", r);
1.186     misha     346:        Value& body_code=params.as_junction(3, "body must be code");
1.129     paf       347:        Value* delim_maybe_code=params.count()>4?&params[4]:0;
1.1       paf       348: 
1.235     moko      349:        if(to-from>=pa_loop_limit) // too long loop?
                    350:                throw Exception(PARSER_RUNTIME, 0, "endless loop detected");
1.57      paf       351: 
1.129     paf       352:        VInt* vint=new VInt(0);
1.154     paf       353: 
                    354:        VMethodFrame& caller=*r.get_method_frame()->caller();
1.218     moko      355:        r.put_element(caller, var_name, vint);
1.186     misha     356:        if(delim_maybe_code){ // delimiter set 
1.185     misha     357:                bool need_delim=false;
                    358: 
                    359:                for(int i=from; i<=to; i++) {
                    360:                        vint->set_int(i);
                    361: 
1.234     moko      362:                        Value& sv_processed=r.process(body_code);
1.249     moko      363:                        TempSkip4Delimiter skip(r);
1.186     misha     364: 
1.185     misha     365:                        const String* s_processed=sv_processed.get_string();
1.186     misha     366:                        if(s_processed && !s_processed->is_empty()) { // we have body
1.185     misha     367:                                if(need_delim) // need delim & iteration produced string?
1.243     moko      368:                                        r.write(r.process(*delim_maybe_code));
1.185     misha     369:                                else
                    370:                                        need_delim=true;
                    371:                        }
1.243     moko      372:                        r.write(sv_processed);
1.1       paf       373: 
1.249     moko      374:                        if(skip.check_break())
1.185     misha     375:                                break;
1.1       paf       376:                }
1.185     misha     377:        } else {
                    378:                for(int i=from; i<=to; i++) {
                    379:                        vint->set_int(i);
                    380:  
                    381:                        r.process_write(body_code);
1.164     paf       382: 
1.249     moko      383:                        if(r.check_skip_break())
1.185     misha     384:                                break;
                    385:                }
1.1       paf       386:        }
                    387: }
                    388: 
1.129     paf       389: static void _eval(Request& r, MethodParams& params) {
                    390:        Value& expr=params.as_junction(0, "need expression");
1.1       paf       391:        // evaluate expresion
1.237     moko      392:        Value& value_result=r.process(expr).as_expr_result();
1.129     paf       393:        if(params.count()>1) {
1.177     misha     394:                const String& fmt=params.as_string(1, "fmt must be string").trim();
                    395:                if(fmt.is_empty()){
1.243     moko      396:                        r.write(value_result);
1.177     misha     397:                } else {
1.243     moko      398:                        r.write(String(format(value_result.as_double(), fmt.cstrm())));
1.177     misha     399:                }
1.91      paf       400:        } else
1.243     moko      401:                r.write(value_result);
1.1       paf       402: }
                    403: 
1.129     paf       404: static void _connect(Request& r, MethodParams& params) {
                    405:        Value& url=params.as_no_junction(0, "url must not be code");
                    406:        Value& body_code=params.as_junction(1, "body must be code");
1.1       paf       407: 
1.129     paf       408:        Table* protocol2driver_and_client=0;
1.197     misha     409:        if(Value* sql=r.main_class.get_element(String(MAIN_SQL_NAME))) {
                    410:                if(Value* element=sql->get_element(String(MAIN_SQL_DRIVERS_NAME))) {
1.113     paf       411:                        protocol2driver_and_client=element->get_table();
                    412:                }
                    413:        }
1.11      paf       414: 
1.1       paf       415:        // connect
1.142     paf       416:        SQL_Connection* connection=SQL_driver_manager->get_connection(url.as_string(), 
1.144     paf       417:                protocol2driver_and_client,
1.180     misha     418:                r.charsets.source().NAME().cstr(),
                    419:                r.request_info.document_root);
1.1       paf       420: 
1.214     moko      421:        Temp_connection temp_connection(r, connection);
1.63      paf       422: 
1.1       paf       423:        // execute body
1.53      parser    424:        try {
1.189     misha     425:                r.process_write(body_code);
1.129     paf       426:                connection->commit();
                    427:                connection->close();
1.75      paf       428:        } catch(...) { // process problem
1.129     paf       429:                connection->rollback();
                    430:                connection->close();
                    431:                rethrow;
1.1       paf       432:        }
                    433: }
                    434: 
1.41      parser    435: #ifndef DOXYGEN
1.129     paf       436: class Switch_data: public PA_Object {
                    437: public:
                    438:        Request& r;
1.181     misha     439:        const String* searching_string;
                    440:        double searching_double;
1.207     misha     441:        bool searching_bool;
1.129     paf       442:        Value* found;
                    443:        Value* _default;
                    444: public:
                    445:        Switch_data(Request& ar, Value& asearching): 
1.181     misha     446:                r(ar)
                    447:        {
                    448:                if(asearching.is_string() || asearching.is_void()){
                    449:                        searching_string=&asearching.as_string();
                    450:                        searching_double=0;
1.207     misha     451:                        searching_bool=false;
1.181     misha     452:                } else {
                    453:                        searching_string=0;
                    454:                        searching_double=asearching.as_double();
1.207     misha     455:                        searching_bool=asearching.is_bool();
1.181     misha     456:                }
                    457:        }
1.28      parser    458: };
1.41      parser    459: #endif
1.129     paf       460: static void _switch(Request& r, MethodParams& params) {
1.236     moko      461:        Switch_data* data=new Switch_data(r, r.process(params[0]));
1.215     moko      462:        Temp_hash_value<HashString<void*>, void*> switch_data_setter(&r.classes_conf, switch_data_name, data);
1.28      parser    463: 
1.129     paf       464:        Value& cases_code=params.as_junction(1, "switch cases must be code");
1.82      paf       465:        // execution of found ^case[...]{code} must be in context of ^switch[...]{code}
                    466:        // because of stacked WWrapper used there as wcontext
1.237     moko      467:        r.process(cases_code);
1.147     paf       468:        if(Value* selected_code=data->found? data->found: data->_default)
1.245     moko      469:                r.process_write(*selected_code);
1.28      parser    470: }
                    471: 
1.129     paf       472: static void _case(Request& r, MethodParams& params) {
                    473:        Switch_data* data=static_cast<Switch_data*>(r.classes_conf.get(switch_data_name));
1.38      parser    474:        if(!data)
1.166     misha     475:                throw Exception(PARSER_RUNTIME,
1.129     paf       476:                        0,
1.38      parser    477:                        "without switch");
1.28      parser    478: 
1.181     misha     479:        if(data->found) // matches already was found
                    480:                return;
                    481: 
1.129     paf       482:        int count=params.count();
1.184     misha     483:        Value* code=&params.as_expression(--count, "case result must be code");
                    484: 
                    485: #ifdef USE_DESTRUCTORS
                    486:        Junction *j=code->get_junction();
                    487:        if (j){
                    488:                code=new VJunction(j->self,j->method,j->method_frame,j->rcontext,j->wcontext,j->code);
                    489:                if (j->wcontext) j->wcontext->attach_junction((VJunction *)code);
                    490:        }
                    491: #endif
1.83      paf       492:        
1.181     misha     493:        for(int i=0; i<count; i++){
1.236     moko      494:                Value& value=r.process(params[i]);
1.28      parser    495: 
1.181     misha     496:                if(value.is_string() && value.as_string() == CASE_DEFAULT_VALUE){
1.184     misha     497:                        data->_default=code;
1.181     misha     498:                        continue;
1.28      parser    499:                }
                    500: 
                    501:                bool matches;
1.181     misha     502:                if(data->searching_string)
                    503:                        matches=(*data->searching_string) == value.as_string();
1.207     misha     504:                else if(data->searching_bool || value.is_bool())
                    505:                        matches=(data->searching_double != 0) == value.as_bool();
1.28      parser    506:                else
1.181     misha     507:                        matches=data->searching_double == value.as_double();
1.82      paf       508: 
1.181     misha     509:                if(matches){
1.184     misha     510:                        data->found=code;
1.28      parser    511:                        break;
                    512:                }
                    513:        }
                    514: }
1.136     paf       515: #ifndef DOXYGEN
                    516: struct Try_catch_result {
1.234     moko      517:        ValueRef processed_code;
1.136     paf       518:        const String* exception_should_be_handled;
                    519: 
                    520:        Try_catch_result(): exception_should_be_handled(0) {}
                    521: };
1.229     moko      522: 
                    523: /// Auto-object used for temporary changing Request::skip.
                    524: class Temp_skip {
                    525:        Request& frequest;
                    526:        Request::Skip saved_skip;
                    527: public:
                    528:        Temp_skip(Request& arequest) : frequest(arequest), saved_skip(arequest.get_skip()) {
                    529:                arequest.set_skip(Request::SKIP_NOTHING);
                    530:        }
                    531:        ~Temp_skip() {
                    532:                if(frequest.get_skip() == Request::SKIP_NOTHING)
                    533:                        frequest.set_skip(saved_skip);
                    534:        }
                    535: };
1.136     paf       536: #endif
                    537: 
                    538: /// used by ^try and ^cache, @returns $exception.handled[string] if any
                    539: template<class I>
1.234     moko      540: static Try_catch_result try_catch(Request& r, Value& body_code(Request&, I), I info, Value* catch_code, bool could_be_handled_by_caller=false) {
1.136     paf       541:        Try_catch_result result;
1.179     misha     542: 
1.228     moko      543:        // minor bug: context not restored if only finally code is present, see #1062
1.136     paf       544:        if(!catch_code) {
                    545:                result.processed_code=body_code(r, info);
                    546:                return result;
                    547:        }
                    548: 
                    549:        // taking snapshot of try-context
                    550:        Request_context_saver try_context(r);
                    551:        try {
                    552:                result.processed_code=body_code(r, info);
                    553:        } catch(const Exception& e) {
1.230     moko      554:                Request_context_saver throw_context(r); // remembering exception stack trace
                    555: 
1.136     paf       556:                Request::Exception_details details=r.get_details(e);
1.230     moko      557: 
1.228     moko      558:                try_context.restore(); // restoring try-context for code after try and catch-code
1.136     paf       559: 
1.228     moko      560:                {
                    561:                        Temp_value_element temp(r, *catch_code->get_junction()->method_frame, exception_var_name, &details.vhash);
1.229     moko      562:                        Temp_skip temp_skip(r);
1.228     moko      563:                        result.processed_code=r.process(*catch_code);
                    564:                }
1.136     paf       565:                
1.228     moko      566:                // retriving $exception.handled
1.136     paf       567:                Value* vhandled=details.vhash.hash().get(exception_handled_part_name);
                    568: 
                    569:                bool bhandled=false;
                    570:                if(vhandled) {
                    571:                        if(vhandled->is_string()) { // not simple $exception.handled(1/0)?
1.228     moko      572:                                if(bhandled=could_be_handled_by_caller) { // and we can possibly handle it
1.160     paf       573:                                        result.exception_should_be_handled=vhandled->get_string(); // considering 'recovered' and let the caller recover
                    574:                                }
                    575:                        } else
1.179     misha     576:                                bhandled=vhandled->as_bool();
1.136     paf       577:                }
                    578: 
1.230     moko      579:                if(!bhandled){
                    580:                        throw_context.restore(); // restoring exception stack trace creared by try_context.restore()
1.136     paf       581:                        rethrow;
1.230     moko      582:                }
1.136     paf       583:        }
1.179     misha     584: 
1.136     paf       585:        return result;
                    586: }
1.28      parser    587: 
1.234     moko      588: static Value& process_try_body_code(Request& r, Value* body_code) {
1.222     moko      589:        return r.process(*body_code);
                    590: }
                    591: 
1.63      paf       592: // cache--
                    593: 
                    594: // consts
                    595: 
1.152     paf       596: const int DATA_STRING_SERIALIZED_VERSION=0x0006;
1.63      paf       597: 
                    598: // helper types
                    599: 
                    600: #ifndef DOXYGEN
                    601: struct Data_string_serialized_prolog {
                    602:        int version;
1.79      paf       603:        time_t expires;
1.63      paf       604: };
                    605: #endif
                    606: 
1.68      paf       607: void cache_delete(const String& file_spec) {
1.167     misha     608:        file_delete(file_spec, false/*fail_on_problem*/);
1.63      paf       609: }
1.69      paf       610: 
                    611: #ifndef DOXYGEN
1.135     paf       612: struct Cache_scope {
1.129     paf       613: public:
1.79      paf       614:        time_t expires;
1.135     paf       615:        const String* body_from_disk;
1.79      paf       616: };
1.69      paf       617: struct Locked_process_and_cache_put_action_info {
                    618:        Request *r;
1.136     paf       619:        Cache_scope *scope;
1.167     misha     620:        Value* body_code;
                    621:        Value* catch_code; 
1.136     paf       622:        const String* processed_code;
1.69      paf       623: };
                    624: #endif
1.136     paf       625: 
                    626: 
                    627: 
1.234     moko      628: static Value& process_cache_body_code(Request& r, Value* body_code) {
                    629:        return r.process(*body_code);
1.136     paf       630: }
                    631: 
1.129     paf       632: /* @todo maybe network order worth spending some effort?
                    633:        don't bothering myself with network byte order,
                    634:        am not planning to be able to move resulting file across platforms
                    635: */
1.69      paf       636: static void locked_process_and_cache_put_action(int f, void *context) {
                    637:        Locked_process_and_cache_put_action_info& info=
                    638:                *static_cast<Locked_process_and_cache_put_action_info *>(context);
1.129     paf       639: 
1.160     paf       640:        const String* body_from_disk=info.scope->body_from_disk;
1.69      paf       641:        // body->process 
1.136     paf       642:        Try_catch_result result=try_catch(*info.r, 
                    643:                process_cache_body_code, info.body_code,
1.160     paf       644:                info.catch_code, body_from_disk!=0 /*we have something old=we can handle=recover later*/);
1.136     paf       645: 
                    646:        if(result.exception_should_be_handled) {
                    647:                if(*result.exception_should_be_handled==CACHE_EXCEPTION_HANDLED_CACHE_NAME) {
1.160     paf       648:                        assert(body_from_disk);
                    649:                        info.processed_code=body_from_disk;
1.136     paf       650:                } else
1.166     misha     651:                        throw Exception(PARSER_RUNTIME,
1.136     paf       652:                                result.exception_should_be_handled,
1.219     moko      653:                                "$" EXCEPTION_VAR_NAME "." EXCEPTION_HANDLED_PART_NAME " value must be "
                    654:                                "either boolean or string '" CACHE_EXCEPTION_HANDLED_CACHE_NAME "'");
1.136     paf       655:        } else
1.234     moko      656:                info.processed_code=&((Value &)result.processed_code).as_string();
1.69      paf       657: 
1.79      paf       658:        // expiration time not spoiled by ^cache(0) or something?
1.136     paf       659:        if(info.scope->expires > time(0)) {
1.79      paf       660:                // string -serialize> buffer
1.136     paf       661:                String::Cm serialized=info.processed_code->serialize(
1.129     paf       662:                        sizeof(Data_string_serialized_prolog));
1.79      paf       663:                Data_string_serialized_prolog& prolog=
1.129     paf       664:                        *reinterpret_cast<Data_string_serialized_prolog *>(serialized.str);
1.79      paf       665:                prolog.version=DATA_STRING_SERIALIZED_VERSION;
1.136     paf       666:                prolog.expires=info.scope->expires;
1.79      paf       667:                
                    668:                // buffer -write> file
1.129     paf       669:                write(f, serialized.str, serialized.length);
1.79      paf       670:        } else // expired!
1.136     paf       671:                info.scope->expires=0; // flag it so that could be easily checked by caller
1.69      paf       672: }
1.129     paf       673: const String* locked_process_and_cache_put(Request& r, 
1.128     paf       674:                                           Value& body_code,
1.136     paf       675:                                           Value* catch_code,
                    676:                                           Cache_scope& scope,
                    677:                                           const String& file_spec) 
                    678: {
1.140     paf       679:        Locked_process_and_cache_put_action_info info={&r, &scope, &body_code, catch_code, 0};
1.69      paf       680: 
1.129     paf       681:        const String* result=file_write_action_under_lock(
1.69      paf       682:                file_spec, 
1.168     misha     683:                "cache_put",
                    684:                locked_process_and_cache_put_action,
                    685:                &info,
1.69      paf       686:                false/*as_text*/,
                    687:                false/*do_append*/,
1.173     misha     688:                false/*block == don't wait till other thread release lock*/,
                    689:                false/*dun throw exception if lock failed*/) ? info.processed_code: 0;
1.168     misha     690: 
1.100     paf       691:        time_t now=time(0);
1.136     paf       692:        if(scope.expires<=now)
1.79      paf       693:                cache_delete(file_spec);
                    694:        return result;
1.63      paf       695: }
1.229     moko      696: 
1.137     paf       697: #ifndef DOXYGEN
1.135     paf       698: struct Cache_get_result {
                    699:        const String* body;
                    700:        bool expired;
1.137     paf       701: };
                    702: #endif
1.229     moko      703: 
1.137     paf       704: static Cache_get_result cache_get(Request_charsets& charsets, const String& file_spec, time_t now) {
1.140     paf       705:        Cache_get_result result={0, false};
1.135     paf       706: 
1.253     moko      707:        File_read_result file=file_read_binary(file_spec, false /*fail_on_read_problem*/);
1.252     moko      708:        if(file.success && file.length /*ignore reads which are empty due to non-unary open+lockEX conflict with lockSH*/) {
                    709:                
                    710:                Data_string_serialized_prolog& prolog = *reinterpret_cast<Data_string_serialized_prolog *>(file.str);
                    711:                
1.135     paf       712:                String* body=new String;
1.252     moko      713:                if(file.length>=sizeof(Data_string_serialized_prolog) && prolog.version==DATA_STRING_SERIALIZED_VERSION) {
1.135     paf       714:                        if(body->deserialize(sizeof(Data_string_serialized_prolog),  file.str, file.length)) {
                    715:                                result.body=body;
                    716:                                result.expired=prolog.expires <= now;
                    717:                        }
                    718:                }
1.72      paf       719:        }
1.63      paf       720: 
1.135     paf       721:        return result;
1.63      paf       722: }
1.252     moko      723: 
                    724: static time_t as_expires(Request& r, MethodParams& params, int index, time_t now) {
1.79      paf       725:        time_t result;
1.197     misha     726:        if(Value* vdate=params[index].as(VDATE_TYPE))
1.220     moko      727:                result=(time_t)(static_cast<VDate*>(vdate)->get_time());
1.79      paf       728:        else
1.129     paf       729:                result=now+(time_t)params.as_double(index, "lifespan must be date or number", r);
1.79      paf       730:        
                    731:        return result;
                    732: }
1.229     moko      733: 
1.129     paf       734: static const String& as_file_spec(Request& r, MethodParams& params, int index) {
                    735:        return r.absolute(params.as_string(index, "filespec must be string"));
1.79      paf       736: }
1.229     moko      737: 
1.129     paf       738: static void _cache(Request& r, MethodParams& params) {
1.173     misha     739:        if(params.count()==0) {
                    740:                // ^cache[] -- return current expiration time
1.158     paf       741:                Cache_scope* scope=static_cast<Cache_scope*>(r.classes_conf.get(cache_data_name));
                    742:                if(!scope)
1.221     moko      743:                        throw Exception(PARSER_RUNTIME, 0, "expire-time get without cache");
1.243     moko      744:                r.write(*new VDate((pa_time_t)scope->expires));
1.158     paf       745:                return;
                    746:        }
                    747: 
1.79      paf       748:        time_t now=time(0);
                    749: 
1.129     paf       750:        if(params.count()==1) {
1.173     misha     751:                // ^cache[filename] ^cache(seconds) ^cache[expires date]
1.129     paf       752:                if(params[0].is_string()) { // filename?
1.79      paf       753:                        cache_delete(as_file_spec(r, params, 0));
                    754:                        return;
                    755:                }
                    756: 
                    757:                // secods|expires date
1.135     paf       758:                Cache_scope* scope=static_cast<Cache_scope*>(r.classes_conf.get(cache_data_name));
                    759:                if(!scope)
1.166     misha     760:                        throw Exception(PARSER_RUNTIME,
1.129     paf       761:                                0,
1.79      paf       762:                                "expire-time reducing instruction without cache");
                    763:                
1.129     paf       764:                time_t expires=as_expires(r, params, 0, now);
1.135     paf       765:                if(expires < scope->expires)
                    766:                        scope->expires=expires;
1.79      paf       767: 
                    768:                return;
1.149     paf       769:        } else if(params.count()<3)
1.166     misha     770:                throw Exception(PARSER_RUNTIME,
1.149     paf       771:                        0,
                    772:                        "invalid number of parameters"); 
1.63      paf       773:        
                    774:        // file_spec, expires, body code
1.172     misha     775:        const String& file_spec=as_file_spec(r, params, 0);
1.65      paf       776: 
1.141     paf       777:        Cache_scope scope={as_expires(r, params, 1, now), 0};
1.135     paf       778: 
1.215     moko      779:        Temp_hash_value<HashString<void*>, void*> cache_scope_setter(&r.classes_conf, cache_data_name, &scope);
1.136     paf       780:        Value& body_code=params.as_junction(2, "body_code must be code");
                    781:        Value* catch_code=0;
                    782:        if(params.count()>3)
                    783:                catch_code=&params.as_junction(3, "catch_code must be code");
1.63      paf       784: 
1.168     misha     785:        if(scope.expires>now) {
                    786:                Cache_get_result cached=cache_get(r.charsets, file_spec, now);
1.69      paf       787: 
1.168     misha     788:                if(cached.body) { // have cached copy
1.174     misha     789:                        if(cached.expired) {
                    790:                                scope.body_from_disk=cached.body; // storing for user to retrive it with ^cache[]
                    791:                        } else {
                    792:                                // and it's not expired yet write it out 
1.243     moko      793:                                r.write(*cached.body);
1.168     misha     794:                                // happy with it
                    795:                                return;
                    796:                        }
                    797:                }
                    798: 
                    799:                // no cached info or it's already expired
1.173     misha     800: 
                    801:                // trying to process it under lock and store result in file
1.174     misha     802:                const String* processed_body=locked_process_and_cache_put(r, body_code, catch_code, scope, file_spec);
1.173     misha     803:                if(processed_body){
1.174     misha     804:                        // write it out 
1.243     moko      805:                        r.write(*processed_body);
1.174     misha     806:                        // happy with it
                    807:                        return;
1.173     misha     808:                } else {
                    809:                        // we fail while get exclusive lock. nvm, we just execute body_code a bit later
1.174     misha     810:                }
1.69      paf       811:        } else { 
1.79      paf       812:                // instructed not to cache; forget cached copy
1.68      paf       813:                cache_delete(file_spec);
1.69      paf       814:        }
1.168     misha     815:        
1.222     moko      816:        // process without caching
                    817:        if(catch_code){
                    818:                Try_catch_result result=try_catch(r, process_try_body_code, &body_code, catch_code);
1.243     moko      819:                r.write(result.processed_code);
1.222     moko      820:        } else {
1.243     moko      821:                r.write(r.process_to_string(body_code));
1.222     moko      822:        }
1.63      paf       823: }
                    824: 
1.129     paf       825: static void _try_operator(Request& r, MethodParams& params) {
                    826:        Value& body_code=params.as_junction(0, "body_code must be code");
                    827:        Value& catch_code=params.as_junction(1, "catch_code must be code");
1.179     misha     828:        Value* finally_code=(params.count()==3) ? &params.as_junction(2, "finally_code must be code") : 0;
                    829: 
                    830:        Try_catch_result result;
1.229     moko      831: 
1.179     misha     832:        try{
1.229     moko      833:                // process try and catch code
1.222     moko      834:                result=try_catch(r, process_try_body_code, &body_code, &catch_code);
1.179     misha     835:        } catch(...){
1.229     moko      836:                // process finally code but ignore the result
                    837:                if(finally_code){
                    838:                        Temp_skip temp(r);
1.248     moko      839:                        /* Value &finally_result= */ r.process(*finally_code);
1.229     moko      840:                }
1.179     misha     841:                rethrow;
                    842:        }
1.74      paf       843: 
1.229     moko      844:        // process finally code
                    845:        if(finally_code){
                    846:                Temp_skip temp(r);
1.234     moko      847:                Value& finally_result=r.process(*finally_code);
1.229     moko      848: 
1.234     moko      849:                // no exception in try/catch or finally, writing processed body_code or catch_code
1.243     moko      850:                r.write(result.processed_code);
1.123     paf       851: 
1.234     moko      852:                // write out processed finally code
1.243     moko      853:                r.write(finally_result);
1.234     moko      854:        } else {
                    855:                // no exception in try/catch, writing processed body_code or catch_code
1.243     moko      856:                r.write(result.processed_code);
1.234     moko      857:        }
1.179     misha     858: 
1.74      paf       859: }
                    860: 
1.138     paf       861: static void _throw_operator(Request&, MethodParams& params) {
1.178     misha     862:        if(params.count()==1 && !params[0].is_string()) {
1.129     paf       863:                if(HashStringValue *hash=params[0].get_hash()) {
                    864:                        const char* type=0;
                    865:                        if(Value* value=hash->get(exception_type_part_name))
1.78      paf       866:                                type=value->as_string().cstr();
1.129     paf       867:                        const String* source=0;
                    868:                        if(Value* value=hash->get(exception_source_part_name))
1.74      paf       869:                                source=&value->as_string();
1.138     paf       870:                        const char* comment=0;
1.129     paf       871:                        if(Value* value=hash->get(exception_comment_part_name))
1.74      paf       872:                                comment=value->as_string().cstr();
                    873: 
1.78      paf       874:                        throw Exception(type,
1.129     paf       875:                                source?source:0,
                    876:                                "%s", comment?comment:"");
1.74      paf       877:                } else
1.166     misha     878:                        throw Exception(PARSER_RUNTIME,
1.129     paf       879:                                0,
1.178     misha     880:                                "one-param version has hash or string param");
1.74      paf       881:        } else {
1.129     paf       882:                const char* type=params.as_string(0, "type must be string").cstr();
1.178     misha     883:                const String* source=params.count()>1? &params.as_string(1, "source must be string"):0;
                    884:                const char* comment=params.count()>2? params.as_string(2, "comment must be string").cstr():0;
                    885:                throw Exception(type, source, "%s", comment?comment:"");
1.74      paf       886:        }
1.132     paf       887:  }
1.129     paf       888: 
1.150     paf       889: static void _sleep_operator(Request& r, MethodParams& params) {
                    890:        double seconds=params.as_double(0, "seconds must be double", r);
1.206     moko      891:        if(seconds>0)
                    892:                pa_sleep((int)trunc(seconds), (int)trunc((seconds-trunc(seconds))*1000000));
1.150     paf       893:  }
                    894: 
1.254   ! moko      895: #if defined(WIN32) && defined(_DEBUG) && !defined(_WIN64)
1.129     paf       896: #      define PA_BPT
1.138     paf       897: static void _bpt(Request&, MethodParams&) {
1.129     paf       898:        _asm int 3;
                    899: }
                    900: #endif
                    901: 
1.10      paf       902: // constructor
                    903: 
1.226     moko      904: VClassMAIN::VClassMAIN(): VClass(MAIN_CLASS_NAME) {
1.129     paf       905: 
                    906: #ifdef PA_BPT
                    907:        // ^bpt[]
                    908:        add_native_method("bpt", Method::CT_ANY, _bpt, 0, 0);
                    909: #endif
1.121     paf       910: 
1.1       paf       911:        // ^if(condition){code-when-true}
                    912:        // ^if(condition){code-when-true}{code-when-false}
1.200     moko      913:        // ^if(condition){code-when-true} (another condition){code-when-true} ... {code-when-false}
                    914:        add_native_method("if", Method::CT_ANY, _if, 2, 10000, Method::CO_WITHOUT_FRAME);
1.1       paf       915: 
1.194     misha     916:        // ^untaint[as-is|uri|sql|js|html|html-typo|regex|parser-code]{code}
                    917:        add_native_method("untaint", Method::CT_ANY, _untaint, 1, 2, Method::CO_WITHOUT_FRAME);
1.1       paf       918: 
1.194     misha     919:        // ^taint[as-is|uri|sql|js|html|html-typo|regex|parser-code]{code}
                    920:        add_native_method("taint", Method::CT_ANY, _taint, 1, 2, Method::CO_WITHOUT_FRAME);
1.1       paf       921: 
1.205     moko      922:        // ^apply-taint[untaint lang][string]
                    923:        add_native_method("apply-taint", Method::CT_ANY, _apply_taint, 1, 2, Method::CO_WITHOUT_FRAME);
                    924: 
1.216     moko      925:        // ^process{code}
                    926:        // ^process[context]{code}[options hash]
1.146     paf       927:        add_native_method("process", Method::CT_ANY, _process, 1, 3);
1.1       paf       928: 
                    929:        // ^rem{code}
1.185     misha     930:        add_native_method("rem", Method::CT_ANY, _rem, 1, 10000, Method::CO_WITHOUT_FRAME);
1.1       paf       931: 
                    932:        // ^while(condition){code}
1.185     misha     933:        add_native_method("while", Method::CT_ANY, _while, 2, 3, Method::CO_WITHOUT_FRAME);
1.1       paf       934: 
1.216     moko      935:        // ^use[file[;options hash]]
                    936:        add_native_method("use", Method::CT_ANY, _use, 1, 2);
1.1       paf       937: 
1.164     paf       938:        // ^break[]
1.227     moko      939:        // ^break(condition)
                    940:        add_native_method("break", Method::CT_ANY, _break, 0, 1, Method::CO_WITHOUT_FRAME);
1.185     misha     941: 
1.164     paf       942:        // ^continue[]
1.227     moko      943:        // ^continue(condition)
                    944:        add_native_method("continue", Method::CT_ANY, _continue, 0, 1, Method::CO_WITHOUT_FRAME);
1.185     misha     945: 
1.249     moko      946:        // ^return[]
                    947:        // ^return[result]
1.250     moko      948:        add_native_method("return", Method::CT_ANY, _return, 0, 1);
1.249     moko      949: 
1.54      paf       950:        // ^for[i](from-number;to-number-inclusive){code}[delim]
1.239     moko      951:        add_native_method("for", Method::CT_ANY, _for, 3+1, 3+1+1);
1.1       paf       952: 
                    953:        // ^eval(expr)
                    954:        // ^eval(expr)[format]
1.185     misha     955:        add_native_method("eval", Method::CT_ANY, _eval, 1, 2, Method::CO_WITHOUT_FRAME);
1.52      parser    956: 
1.1       paf       957:        // ^connect[protocol://user:pass@host[:port]/database]{code with ^sql-s}
1.10      paf       958:        add_native_method("connect", Method::CT_ANY, _connect, 2, 2);
                    959: 
1.63      paf       960: 
1.136     paf       961:        // ^cache[file_spec](time){code}[{catch code}] time=0 no cache
1.65      paf       962:        // ^cache[file_spec] delete cache
1.161     paf       963:        // ^cache[] get current expiration time
                    964:        add_native_method("cache", Method::CT_ANY, _cache, 0, 4);
1.63      paf       965:        
1.28      parser    966:        // switch
                    967: 
                    968:        // ^switch[value]{cases}
1.185     misha     969:        add_native_method("switch", Method::CT_ANY, _switch, 2, 2, Method::CO_WITHOUT_FRAME);
1.28      parser    970: 
                    971:        // ^case[value]{code}
1.185     misha     972:        add_native_method("case", Method::CT_ANY, _case, 2, 10000, Method::CO_WITHOUT_FRAME);
1.74      paf       973: 
                    974:        // try-catch
                    975: 
                    976:        // ^try{code}{catch code}
1.185     misha     977:        add_native_method("try", Method::CT_ANY, _try_operator, 2, 3, Method::CO_WITHOUT_FRAME);
1.74      paf       978:        // ^throw[$exception hash]
                    979:        // ^throw[type;source;comment]
                    980:        add_native_method("throw", Method::CT_ANY, _throw_operator, 1, 3);
                    981: 
1.150     paf       982:        add_native_method("sleep", Method::CT_ANY, _sleep_operator, 1, 1);
1.10      paf       983: }
1.11      paf       984: 
                    985: // constructor & configurator
1.1       paf       986: 
1.129     paf       987: VStateless_class& VClassMAIN_create() {
                    988:        return *new VClassMAIN;
1.1       paf       989: }

E-mail: