Annotation of parser3/src/classes/op.C, revision 1.152.4.10

1.1       paf         1: /** @file
1.9       paf         2:        Parser: parser @b operators.
1.1       paf         3: 
1.152.4.1  paf         4:        Copyright (c) 2001-2005 ArtLebedev Group (http://www.artlebedev.com)
1.71      paf         5:        Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)
1.98      paf         6: */
1.1       paf         7: 
1.152.4.10! paf         8: static const char * const IDENT_OP_C="$Date: 2005/12/01 15:51:33 $";
1.1       paf         9: 
1.13      paf        10: #include "classes.h"
1.129     paf        11: #include "pa_vmethod_frame.h"
                     12: 
1.1       paf        13: #include "pa_common.h"
1.134     paf        14: #include "pa_os.h"
1.1       paf        15: #include "pa_request.h"
                     16: #include "pa_vint.h"
                     17: #include "pa_sql_connection.h"
1.79      paf        18: #include "pa_vdate.h"
1.105     paf        19: #include "pa_vmethod_frame.h"
1.129     paf        20: #include "pa_vclass.h"
1.144     paf        21: #include "pa_charset.h"
1.1       paf        22: 
1.18      parser     23: // limits
                     24: 
1.152.4.8  paf        25: #define MAX_LOOPS 20000
1.18      parser     26: 
1.10      paf        27: // defines
                     28: 
1.82      paf        29: #define CASE_DEFAULT_VALUE "DEFAULT"
1.146     paf        30: #define PROCESS_MAIN_OPTION_NAME "main"
                     31: #define PROCESS_FILE_OPTION_NAME "file"
                     32: #define PROCESS_LINENO_OPTION_NAME "lineno"
1.11      paf        33: 
1.10      paf        34: // class
                     35: 
1.113     paf        36: class VClassMAIN: public VClass {
1.10      paf        37: public:
1.129     paf        38:        VClassMAIN();
1.10      paf        39: };
                     40: 
1.129     paf        41: // defines for statics
                     42: 
                     43: #define SWITCH_DATA_NAME "SWITCH-DATA"
                     44: #define CACHE_DATA_NAME "CACHE-DATA"
                     45: #define EXCEPTION_VAR_NAME "exception"
                     46: 
                     47: // statics
                     48: 
                     49: //^switch ^case
                     50: static const String switch_data_name(SWITCH_DATA_NAME);
                     51: //^cache
                     52: static const String cache_data_name(CACHE_DATA_NAME);
                     53: 
                     54: static const String exception_var_name(EXCEPTION_VAR_NAME);
                     55: 
1.136     paf        56: // local defines
                     57: 
                     58: #define CACHE_EXCEPTION_HANDLED_CACHE_NAME "cache"
                     59: 
1.129     paf        60: // helpers
                     61: 
1.130     paf        62: class Untaint_lang_name2enum: public Hash<const String::Body, String::Language> {
1.129     paf        63: public:
                     64:        Untaint_lang_name2enum() {
                     65:                #define ULN(name, LANG) \
1.130     paf        66:                        put(String::Body(name), (value_type)(String::L_##LANG));
1.129     paf        67:                ULN("as-is", AS_IS);
                     68:                ULN("optimized-as-is", AS_IS|String::L_OPTIMIZE_BIT);
                     69:                ULN("file-spec", FILE_SPEC);
                     70:                ULN("http-header", HTTP_HEADER);
                     71:                ULN("mail-header", MAIL_HEADER);
                     72:                ULN("uri", URI);
                     73:                ULN("sql", SQL);
                     74:                ULN("js", JS);
                     75:                ULN("xml", XML);
                     76:                ULN("optimized-xml", XML|String::L_OPTIMIZE_BIT);
                     77:                ULN("html", HTML);
                     78:                ULN("optimized-html", HTML|String::L_OPTIMIZE_BIT);
1.152.4.5  paf        79:                ULN("regex", REGEX);
1.129     paf        80:                #undef ULN
                     81:        }
                     82: } untaint_lang_name2enum;
                     83: 
1.10      paf        84: // methods
                     85: 
1.129     paf        86: static void _if(Request& r, MethodParams& params) {
1.152.4.2  paf        87:        bool condition=params.as_bool(0, "condition must be expression", r);
1.6       paf        88:        if(condition)
1.152.4.2  paf        89:                r.write_pass_lang(r.process(*params.get(1)));
1.129     paf        90:        else if(params.count()>2)
1.152.4.2  paf        91:                r.write_pass_lang(r.process(*params.get(2)));
1.1       paf        92: }
                     93: 
1.129     paf        94: static void _untaint(Request& r, MethodParams& params) {
1.1       paf        95: 
1.129     paf        96:        String::Language lang;
                     97:        if(params.count()==1)
                     98:                lang=String::L_AS_IS; // mark as simply 'tainted'. useful in html from sql 
1.59      paf        99:        else {
1.129     paf       100:                const String& lang_name=params.as_string(0, "lang must be string");
                    101:                lang=untaint_lang_name2enum.get(lang_name);
1.59      paf       102:                if(!lang)
1.78      paf       103:                        throw Exception(0,
1.59      paf       104:                                &lang_name,
                    105:                                "invalid taint language");
                    106:        }
1.1       paf       107: 
                    108:        {
1.129     paf       109:                Value& vbody=params.as_junction(params.count()-1, "body must be code");
1.1       paf       110:                
                    111:                Temp_lang temp_lang(r, lang); // set temporarily specified ^untaint[language;
1.86      paf       112:                r.write_pass_lang(r.process(vbody)); // process marking tainted with that lang
1.1       paf       113:        }
                    114: }
                    115: 
1.129     paf       116: static void _taint(Request& r, MethodParams& params) {
                    117:        String::Language lang;
                    118:        if(params.count()==1)
                    119:                lang=String::L_TAINTED; // mark as simply 'tainted'. useful in table:set
1.1       paf       120:        else {
1.129     paf       121:                const String& lang_name=params.as_string(0, "lang must be string");
                    122:                lang=untaint_lang_name2enum.get(lang_name);
1.1       paf       123:                if(!lang)
1.78      paf       124:                        throw Exception(0,
1.3       paf       125:                                &lang_name,
                    126:                                "invalid taint language");
1.1       paf       127:        }
                    128: 
                    129:        {
1.129     paf       130:                Value& vbody=params.as_no_junction(params.count()-1, "body must not be code");
1.1       paf       131:                
1.129     paf       132:                String result;
1.1       paf       133:                result.append(
                    134:                        vbody.as_string(),  // process marking tainted with that lang
                    135:                        lang, true);  // force result language to specified
                    136:                r.write_pass_lang(result);
                    137:        }
                    138: }
                    139: 
1.129     paf       140: static void _process(Request& r, MethodParams& params) {
                    141:        Method* main_method;
                    142: 
                    143:        size_t index=0;
                    144:        Value* target_self;
                    145:        Value& maybe_target_self=params[index];
                    146:        if(maybe_target_self.get_string() || maybe_target_self.get_junction())
                    147:                target_self=&r.get_method_frame()->caller()->self();
                    148:        else {
                    149:                target_self=&maybe_target_self;  index++;
                    150:        }
                    151: 
1.1       paf       152:        {
1.129     paf       153:                VStateless_class *target_class=target_self->get_last_derived_class();
1.116     paf       154:                if(!target_class)
                    155:                        throw Exception("parser.runtime",
1.129     paf       156:                                0,
1.116     paf       157:                                "no target class");
1.114     paf       158: 
1.73      paf       159:                // temporary remove language change
1.129     paf       160:                Temp_lang temp_lang(r, String::L_PASS_APPENDED);
1.1       paf       161:                // temporary zero @main so to maybe-replace it in processed code
1.129     paf       162:                Temp_method temp_method_main(*target_class, main_method_name, 0);
1.1       paf       163:                // temporary zero @auto so it wouldn't be auto-called in Request::use_buf
1.129     paf       164:                Temp_method temp_method_auto(*target_class, auto_method_name, 0);
                    165: 
1.146     paf       166:                size_t options_index=index+1;
                    167:                HashStringValue* options=0;
                    168:                if(options_index<params.count()) {
                    169:                        Value& voptions=params.as_no_junction(options_index, "options must not be code");
                    170:                        options=voptions.get_hash();
                    171:                        if(!options)
                    172:                                throw Exception("parser.runtime",
                    173:                                        0,
                    174:                                        "options must be hash");
                    175:                }
                    176: 
1.129     paf       177:                const String* main_alias=0;
1.146     paf       178:                const String* file_alias=0;
                    179:                int line_no_alias_offset=0;
                    180:                if(options) {
                    181:                        int valid_options=0;
                    182:                        if(Value* vmain_alias=options->get(PROCESS_MAIN_OPTION_NAME)) {
                    183:                                valid_options++;
                    184:                                main_alias=&vmain_alias->as_string();
                    185:                        }
                    186:                        if(Value* vfile_alias=options->get(PROCESS_FILE_OPTION_NAME)) {
                    187:                                valid_options++;
                    188:                                file_alias=&vfile_alias->as_string();
                    189:                        }
                    190:                        if(Value* vline_no_alias_offset=options->get(PROCESS_LINENO_OPTION_NAME)) {
                    191:                                valid_options++;
                    192:                                line_no_alias_offset=vline_no_alias_offset->as_int();
                    193:                        }
                    194:        
                    195:                        if(valid_options!=options->count())
                    196:                                throw Exception("parser.runtime",
                    197:                                        0,
                    198:                                        "called with invalid option");
                    199:                }
1.129     paf       200: 
1.146     paf       201:                uint processe_file_no=file_alias?
                    202:                        r.register_file(r.absolute(*file_alias))
                    203:                        : pseudo_file_no__process;
                    204:                // process...{string}
                    205:                Value& vjunction=params.as_junction(index, "body must be code");
                    206:                // evaluate source to process
                    207:                const String& source=r.process_to_string(vjunction);
                    208:                r.use_buf(*target_class,
                    209:                        source.cstr(String::L_UNSPECIFIED, r.connection(false)),
                    210:                        main_alias,
                    211:                        processe_file_no,
                    212:                        line_no_alias_offset);
1.1       paf       213: 
1.73      paf       214:                // main_method
1.129     paf       215:                main_method=target_class->get_method(main_method_name);
1.73      paf       216:        }
                    217:        // after restoring current-request-lang
                    218:        // maybe-execute @main[]
                    219:        if(main_method) {
1.119     paf       220:                // temporarily set method_frame's self to target_self
1.129     paf       221:                Temp_method_frame_self tmfs(*r.get_method_frame(), *target_self);
1.73      paf       222:                // execute!     
                    223:                r.execute(*main_method->parser_code);
1.1       paf       224:        }
                    225: }
                    226:        
1.138     paf       227: static void _rem(Request&, MethodParams& params) {
1.129     paf       228:        params.as_junction(0, "body must be code");
1.1       paf       229: }
                    230: 
1.129     paf       231: static void _while(Request& r, MethodParams& params) {
                    232:        Value& vcondition=params.as_junction(0, "condition must be expression");
1.152.4.8  paf       233:        Value& body_code=params.as_junction(1, "body must be code");
                    234:        Value* delim_maybe_code=params.count()>2?&params[2]:0;
1.1       paf       235: 
                    236:        // while...
                    237:        int endless_loop_count=0;
1.152.4.8  paf       238:        bool need_delim=false;
1.1       paf       239:        while(true) {
1.18      parser    240:                if(++endless_loop_count>=MAX_LOOPS) // endless loop?
1.78      paf       241:                        throw Exception("parser.runtime",
1.129     paf       242:                                0,
1.1       paf       243:                                "endless loop detected");
                    244: 
1.86      paf       245:                bool condition=r.process_to_value(vcondition, 
1.1       paf       246:                                false/*don't intercept string*/).as_bool();
                    247:                if(!condition) // ...condition is true
                    248:                        break;
                    249: 
1.152.4.8  paf       250:                StringOrValue sv_processed=r.process(body_code);
                    251:                const String* s_processed=sv_processed.get_string();
                    252:                if(delim_maybe_code && s_processed && s_processed->length()) { // delimiter set and we have body
                    253:                        if(need_delim) // need delim & iteration produced string?
                    254:                                r.write_pass_lang(r.process(*delim_maybe_code));
                    255:                        need_delim=true;
                    256:                }
                    257:                r.write_pass_lang(sv_processed);
1.1       paf       258:        }
                    259: }
                    260: 
1.129     paf       261: static void _use(Request& r, MethodParams& params) {
                    262:        Value& vfile=params.as_no_junction(0, "file name must not be code");
1.113     paf       263:        r.use_file(r.main_class, vfile.as_string());
1.1       paf       264: }
                    265: 
1.129     paf       266: static void _for(Request& r, MethodParams& params) {
                    267:        const String& var_name=params.as_string(0, "var name must be string");
                    268:        int from=params.as_int(1, "from must be int", r);
                    269:        int to=params.as_int(2, "to must be int", r);
                    270:        Value&  body_code=params.as_junction(3, "body must be code");
                    271:        Value* delim_maybe_code=params.count()>4?&params[4]:0;
1.1       paf       272: 
1.57      paf       273:        if(to-from>=MAX_LOOPS) // too long loop?
1.78      paf       274:                throw Exception("parser.runtime",
1.129     paf       275:                        0,
1.57      paf       276:                        "endless loop detected");
                    277: 
1.1       paf       278:        bool need_delim=false;
1.129     paf       279:        VInt* vint=new VInt(0);
1.152.4.6  paf       280: 
                    281:        VMethodFrame& caller=*r.get_method_frame()->caller();
1.152.4.7  paf       282:        caller.put_element(var_name, vint, false);
1.1       paf       283:        for(int i=from; i<=to; i++) {
                    284:                vint->set_int(i);
                    285: 
1.108     paf       286:                StringOrValue sv_processed=r.process(body_code);
1.129     paf       287:                const String* s_processed=sv_processed.get_string();
                    288:                if(delim_maybe_code && s_processed && s_processed->length()) { // delimiter set and we have body
1.108     paf       289:                        if(need_delim) // need delim & iteration produced string?
1.86      paf       290:                                r.write_pass_lang(r.process(*delim_maybe_code));
1.1       paf       291:                        need_delim=true;
                    292:                }
1.108     paf       293:                r.write_pass_lang(sv_processed);
1.1       paf       294:        }
                    295: }
                    296: 
1.129     paf       297: static void _eval(Request& r, MethodParams& params) {
                    298:        Value& expr=params.as_junction(0, "need expression");
1.1       paf       299:        // evaluate expresion
1.129     paf       300:        Value& value_result=r.process_to_value(expr, 
1.1       paf       301:                true/*don't intercept string*/).as_expr_result();
1.129     paf       302:        if(params.count()>1) {
                    303:                Value& fmt=params.as_no_junction(1, "fmt must not be code");
                    304:                r.write_no_lang(String(format(value_result.as_double(), fmt.as_string().cstrm())));
1.91      paf       305:        } else
1.129     paf       306:                r.write_no_lang(value_result);
1.1       paf       307: }
                    308: 
1.129     paf       309: static void _connect(Request& r, MethodParams& params) {
1.63      paf       310: #ifdef RESOURCES_DEBUG
                    311: struct timeval mt[2];
                    312: #endif
1.129     paf       313:        Value& url=params.as_no_junction(0, "url must not be code");
                    314:        Value& body_code=params.as_junction(1, "body must be code");
1.1       paf       315: 
1.129     paf       316:        Table* protocol2driver_and_client=0;
                    317:        if(Value* sql=r.main_class.get_element(String(MAIN_SQL_NAME), r.main_class, false)) {
                    318:                if(Value* element=sql->get_element(String(MAIN_SQL_DRIVERS_NAME), *sql, false)) {
1.113     paf       319:                        protocol2driver_and_client=element->get_table();
                    320:                }
                    321:        }
1.11      paf       322: 
1.63      paf       323: #ifdef RESOURCES_DEBUG
                    324: //measure:before
                    325: gettimeofday(&mt[0],NULL);
                    326: #endif
1.1       paf       327:        // connect
1.142     paf       328:        SQL_Connection* connection=SQL_driver_manager->get_connection(url.as_string(), 
1.144     paf       329:                protocol2driver_and_client,
                    330:                r.charsets.source().NAME().cstr());
1.1       paf       331: 
1.63      paf       332: #ifdef RESOURCES_DEBUG
                    333: //measure:after connect
                    334: gettimeofday(&mt[1],NULL);
                    335: 
                    336: double t[2];
                    337: for(int i=0;i<2;i++)
                    338:     t[i]=mt[i].tv_sec+mt[i].tv_usec/1000000.0;
                    339: 
                    340: r.sql_connect_time+=t[1]-t[0];
                    341: #endif
1.129     paf       342:        Temp_connection temp_connection(r, connection);
1.1       paf       343:        // execute body
1.53      parser    344:        try {
1.86      paf       345:                r.write_assign_lang(r.process(body_code));
1.129     paf       346:                connection->commit();
                    347:                connection->close();
1.75      paf       348:        } catch(...) { // process problem
1.129     paf       349:                connection->rollback();
                    350:                connection->close();
                    351:                rethrow;
1.1       paf       352:        }
                    353: }
                    354: 
1.41      parser    355: #ifndef DOXYGEN
1.129     paf       356: class Switch_data: public PA_Object {
                    357: public:
                    358:        Request& r;
                    359:        Value& searching;
                    360:        Value* found;
                    361:        Value* _default;
                    362: public:
                    363:        Switch_data(Request& ar, Value& asearching): 
                    364:          r(ar), searching(asearching) {}
1.28      parser    365: };
1.41      parser    366: #endif
1.129     paf       367: static void _switch(Request& r, MethodParams& params) {
                    368:        Switch_data* data=new Switch_data(r, r.process_to_value(params[0]));
1.135     paf       369:        Temp_hash_value<const String::Body, void*> 
1.129     paf       370:                switch_data_setter(r.classes_conf, switch_data_name, data);
1.28      parser    371: 
1.129     paf       372:        Value& cases_code=params.as_junction(1, "switch cases must be code");
1.82      paf       373:        // execution of found ^case[...]{code} must be in context of ^switch[...]{code}
                    374:        // because of stacked WWrapper used there as wcontext
1.84      paf       375:        r.process(cases_code, true/*intercept_string*/);
1.147     paf       376:        if(Value* selected_code=data->found? data->found: data->_default)
1.107     paf       377:                r.write_pass_lang(r.process(*selected_code));
1.28      parser    378: }
                    379: 
1.129     paf       380: static void _case(Request& r, MethodParams& params) {
                    381:        Switch_data* data=static_cast<Switch_data*>(r.classes_conf.get(switch_data_name));
1.38      parser    382:        if(!data)
1.78      paf       383:                throw Exception("parser.runtime",
1.129     paf       384:                        0,
1.38      parser    385:                        "without switch");
1.28      parser    386: 
1.129     paf       387:        int count=params.count();
                    388:        Value& code=params.as_junction(--count, "case result must be code");
1.83      paf       389:        
1.152.4.9  paf       390:        Value& searching=data->searching;
1.152.4.10! paf       391:        bool we_are_searching_string=searching.is_string();
1.28      parser    392:        for(int i=0; i<count; i++) {
1.129     paf       393:                Value& value=r.process_to_value(params[i]);
1.28      parser    394: 
1.152.4.3  paf       395:                if(value.is_string() && value.as_string() == CASE_DEFAULT_VALUE) {
1.129     paf       396:                        data->_default=&code;
1.28      parser    397:                        break;
                    398:                }
                    399: 
                    400:                bool matches;
1.152.4.10! paf       401:                if(we_are_searching_string)
1.152.4.9  paf       402:                        matches=searching.as_string() == value.as_string();
1.28      parser    403:                else
1.152.4.9  paf       404:                        matches=searching.as_double() == value.as_double();
1.28      parser    405: 
                    406:                if(matches) {
1.82      paf       407:                        if(data->found)
                    408:                                throw Exception("parser.runtime",
1.129     paf       409:                                        0,
1.82      paf       410:                                        "duplicate found");
                    411: 
1.129     paf       412:                        data->found=&code;
1.28      parser    413:                        break;
                    414:                }
                    415:        }
                    416: }
1.136     paf       417: #ifndef DOXYGEN
                    418: struct Try_catch_result {
                    419:        StringOrValue processed_code;
                    420:        const String* exception_should_be_handled;
                    421: 
                    422:        Try_catch_result(): exception_should_be_handled(0) {}
                    423: };
                    424: #endif
                    425: 
                    426: /// used by ^try and ^cache, @returns $exception.handled[string] if any
                    427: template<class I>
                    428: static Try_catch_result try_catch(Request& r, 
                    429:                  StringOrValue body_code(Request&, I), I info, 
1.152.4.6  paf       430:                  Value* catch_code, bool could_be_handled_by_caller=false) 
1.136     paf       431: {
                    432:        Try_catch_result result;
                    433:        if(!catch_code) {
                    434:                result.processed_code=body_code(r, info);
                    435:                return result;
                    436:        }
                    437: 
                    438:        // taking snapshot of try-context
                    439:        Request_context_saver try_context(r);
                    440:        try {
                    441:                result.processed_code=body_code(r, info);
                    442:        } catch(const Exception& e) {
                    443:                Request_context_saver throw_context(r); // taking snapshot of throw-context [stack trace contains error]
                    444:                Request::Exception_details details=r.get_details(e);
                    445:                try_context.restore(); // restoring try-context to perform catch-code
                    446: 
                    447:                Junction* junction=catch_code->get_junction();
                    448:                Value* method_frame=junction->method_frame;
                    449:                Value* saved_exception_var_value=method_frame->get_element(exception_var_name, *method_frame, false);
1.152.4.6  paf       450:                VMethodFrame& frame=*junction->method_frame;
1.152.4.7  paf       451:                frame.put_element(exception_var_name, &details.vhash, false);
1.136     paf       452:                result.processed_code=r.process(*catch_code);
                    453:                
                    454:                // retriving $exception.handled, restoring $exception var
                    455:                Value* vhandled=details.vhash.hash().get(exception_handled_part_name);
1.152.4.7  paf       456:                frame.put_element(exception_var_name, saved_exception_var_value, false);
1.136     paf       457: 
                    458:                bool bhandled=false;
                    459:                if(vhandled) {
                    460:                        if(vhandled->is_string()) { // not simple $exception.handled(1/0)?
1.152.4.6  paf       461:                                if(could_be_handled_by_caller) { // and we can possibly handle it
1.136     paf       462:                                result.exception_should_be_handled=vhandled->get_string(); // considering 'recovered' and let the caller recover
                    463:                                return result;
                    464:                        }
                    465: 
1.152.4.6  paf       466:                                bhandled=false;
                    467:                        } else
1.136     paf       468:                        bhandled=vhandled->as_bool();           
                    469:                }
                    470: 
                    471:                if(!bhandled) {
                    472:                        throw_context.restore(); // restoring throw-context [exception were not handled]
                    473:                        rethrow;
                    474:                }
                    475:        }
                    476:        return result;
                    477: }
1.28      parser    478: 
1.63      paf       479: // cache--
                    480: 
                    481: // consts
                    482: 
1.152     paf       483: const int DATA_STRING_SERIALIZED_VERSION=0x0006;
1.63      paf       484: 
                    485: // helper types
                    486: 
                    487: #ifndef DOXYGEN
                    488: struct Data_string_serialized_prolog {
                    489:        int version;
1.79      paf       490:        time_t expires;
1.63      paf       491: };
                    492: #endif
                    493: 
1.68      paf       494: void cache_delete(const String& file_spec) {
                    495:        file_delete(file_spec, false/*fail_on_read_problem*/);
1.63      paf       496: }
1.69      paf       497: 
                    498: #ifndef DOXYGEN
1.135     paf       499: struct Cache_scope {
1.129     paf       500: public:
1.79      paf       501:        time_t expires;
1.135     paf       502:        const String* body_from_disk;
1.79      paf       503: };
1.69      paf       504: struct Locked_process_and_cache_put_action_info {
                    505:        Request *r;
1.136     paf       506:        Cache_scope *scope;
                    507:        Value* body_code; Value* catch_code; 
                    508:        const String* processed_code;
1.69      paf       509: };
                    510: #endif
1.136     paf       511: 
                    512: 
                    513: 
                    514: static StringOrValue process_cache_body_code(Request& r, Value* body_code) {
                    515:        return StringOrValue(&r.process_to_string(*body_code), 0);
                    516: }
                    517: 
1.129     paf       518: /* @todo maybe network order worth spending some effort?
                    519:        don't bothering myself with network byte order,
                    520:        am not planning to be able to move resulting file across platforms
                    521: */
1.69      paf       522: static void locked_process_and_cache_put_action(int f, void *context) {
                    523:        Locked_process_and_cache_put_action_info& info=
                    524:                *static_cast<Locked_process_and_cache_put_action_info *>(context);
1.129     paf       525: 
1.152.4.6  paf       526: 
                    527:        const String* body_from_disk=info.scope->body_from_disk;
1.69      paf       528:        // body->process 
1.136     paf       529:        Try_catch_result result=try_catch(*info.r, 
                    530:                process_cache_body_code, info.body_code,
1.152.4.6  paf       531:                info.catch_code, body_from_disk!=0 /*we have something old=we can handle=recover later*/);
1.136     paf       532: 
                    533:        if(result.exception_should_be_handled) {
                    534:                if(*result.exception_should_be_handled==CACHE_EXCEPTION_HANDLED_CACHE_NAME) {
1.152.4.6  paf       535:                        assert(body_from_disk);
1.136     paf       536:                                info.processed_code=body_from_disk;
                    537:                } else
                    538:                        throw Exception("parser.runtime",
                    539:                                result.exception_should_be_handled,
                    540:                                "$"EXCEPTION_VAR_NAME"."EXCEPTION_HANDLED_PART_NAME" value must be "
                    541:                                "either boolean or string '"CACHE_EXCEPTION_HANDLED_CACHE_NAME"'");
                    542:        } else
                    543:                info.processed_code=&result.processed_code.as_string();
1.69      paf       544: 
1.79      paf       545:        // expiration time not spoiled by ^cache(0) or something?
1.136     paf       546:        if(info.scope->expires > time(0)) {
1.79      paf       547:                // string -serialize> buffer
1.136     paf       548:                String::Cm serialized=info.processed_code->serialize(
1.129     paf       549:                        sizeof(Data_string_serialized_prolog));
1.79      paf       550:                Data_string_serialized_prolog& prolog=
1.129     paf       551:                        *reinterpret_cast<Data_string_serialized_prolog *>(serialized.str);
1.79      paf       552:                prolog.version=DATA_STRING_SERIALIZED_VERSION;
1.136     paf       553:                prolog.expires=info.scope->expires;
1.79      paf       554:                
                    555:                // buffer -write> file
1.129     paf       556:                write(f, serialized.str, serialized.length);
1.79      paf       557:        } else // expired!
1.136     paf       558:                info.scope->expires=0; // flag it so that could be easily checked by caller
1.69      paf       559: }
1.129     paf       560: const String* locked_process_and_cache_put(Request& r, 
1.128     paf       561:                                           Value& body_code,
1.136     paf       562:                                           Value* catch_code,
                    563:                                           Cache_scope& scope,
                    564:                                           const String& file_spec) 
                    565: {
1.140     paf       566:        Locked_process_and_cache_put_action_info info={&r, &scope, &body_code, catch_code, 0};
1.69      paf       567: 
1.129     paf       568:        const String* result=file_write_action_under_lock(
1.69      paf       569:                file_spec, 
                    570:                "cache_put", locked_process_and_cache_put_action, &info,
                    571:                false/*as_text*/,
                    572:                false/*do_append*/,
1.96      paf       573:                false/*block*/,
1.136     paf       574:                false/*fail on lock problem*/) ? info.processed_code: 0;
1.100     paf       575:        time_t now=time(0);
1.136     paf       576:        if(scope.expires<=now)
1.79      paf       577:                cache_delete(file_spec);
                    578:        return result;
1.63      paf       579: }
1.137     paf       580: #ifndef DOXYGEN
1.135     paf       581: struct Cache_get_result {
                    582:        const String* body;
                    583:        bool expired;
1.137     paf       584: };
                    585: #endif
                    586: static Cache_get_result cache_get(Request_charsets& charsets, const String& file_spec, time_t now) {
1.140     paf       587:        Cache_get_result result={0, false};
1.135     paf       588: 
1.129     paf       589:        File_read_result file=file_read(charsets, file_spec, 
1.63      paf       590:                           false/*as_text*/, 
1.129     paf       591:                           0, //no params
                    592:                           false/*fail_on_read_problem*/);
                    593:        if(file.success && file.length/* ignore reads which are empty due to 
1.72      paf       594:                        non-unary open+lockEX conflict with lockSH */) {
1.129     paf       595:                        
1.72      paf       596:                Data_string_serialized_prolog& prolog=
1.129     paf       597:                        *reinterpret_cast<Data_string_serialized_prolog *>(file.str);
1.63      paf       598: 
1.135     paf       599:                String* body=new String;
1.72      paf       600:                if(
1.129     paf       601:                        file.length>=sizeof(Data_string_serialized_prolog)
1.135     paf       602:                        && prolog.version==DATA_STRING_SERIALIZED_VERSION) {
                    603:                        if(body->deserialize(sizeof(Data_string_serialized_prolog),  file.str, file.length)) {
                    604:                                result.body=body;
                    605:                                result.expired=prolog.expires <= now;
                    606:                        }
                    607:                }
1.72      paf       608:        }
1.63      paf       609: 
1.135     paf       610:        return result;
1.63      paf       611: }
1.129     paf       612: static time_t as_expires(Request& r, MethodParams& params, 
1.79      paf       613:                                                int index, time_t now) {
                    614:        time_t result;
1.129     paf       615:        if(Value* vdate=params[index].as(VDATE_TYPE, false))
                    616:                result=static_cast<VDate*>(vdate)->get_time();
1.79      paf       617:        else
1.129     paf       618:                result=now+(time_t)params.as_double(index, "lifespan must be date or number", r);
1.79      paf       619:        
                    620:        return result;
                    621: }
1.129     paf       622: static const String& as_file_spec(Request& r, MethodParams& params, int index) {
                    623:        return r.absolute(params.as_string(index, "filespec must be string"));
1.79      paf       624: }
1.129     paf       625: static void _cache(Request& r, MethodParams& params) {
1.152.4.4  paf       626:        if(params.count()==0)
                    627:        {
                    628:                // return current expiration time
                    629:                Cache_scope* scope=static_cast<Cache_scope*>(r.classes_conf.get(cache_data_name));
                    630:                if(!scope)
                    631:                        throw Exception("parser.runtime",
                    632:                                0,
                    633:                                "expire-time get without cache");
                    634:                r.write_no_lang(*new VDate(scope->expires));
                    635:                return;
                    636:        }
                    637: 
1.79      paf       638:        time_t now=time(0);
                    639: 
                    640:        // ^cache[filename] ^cache(seconds) ^cache[expires date]
1.129     paf       641:        if(params.count()==1) {
                    642:                if(params[0].is_string()) { // filename?
1.79      paf       643:                        cache_delete(as_file_spec(r, params, 0));
                    644:                        return;
                    645:                }
                    646: 
                    647:                // secods|expires date
1.135     paf       648:                Cache_scope* scope=static_cast<Cache_scope*>(r.classes_conf.get(cache_data_name));
                    649:                if(!scope)
1.79      paf       650:                        throw Exception("parser.runtime",
1.129     paf       651:                                0,
1.79      paf       652:                                "expire-time reducing instruction without cache");
                    653:                
1.129     paf       654:                time_t expires=as_expires(r, params, 0, now);
1.135     paf       655:                if(expires < scope->expires)
                    656:                        scope->expires=expires;
1.79      paf       657: 
                    658:                return;
1.149     paf       659:        } else if(params.count()<3)
                    660:                throw Exception("parser.runtime",
                    661:                        0,
                    662:                        "invalid number of parameters"); 
1.63      paf       663:        
                    664:        // file_spec, expires, body code
1.129     paf       665:        const String& file_spec=r.absolute(params.as_string(0, "filespec must be string"));
1.65      paf       666: 
1.141     paf       667:        Cache_scope scope={as_expires(r, params, 1, now), 0};
1.135     paf       668: 
                    669:        Temp_hash_value<const String::Body, void*> 
                    670:                cache_scope_setter(r.classes_conf, cache_data_name, &scope);
1.136     paf       671:        Value& body_code=params.as_junction(2, "body_code must be code");
                    672:        Value* catch_code=0;
                    673:        if(params.count()>3)
                    674:                catch_code=&params.as_junction(3, "catch_code must be code");
1.63      paf       675: 
1.135     paf       676:        if(scope.expires>now) { // valid 'expires' specified? try cached copy...
1.69      paf       677:                // hence we don't hope to have unary create/lockEX
                    678:                // we need some plan to live in a life like that, so... 
                    679:                // worst races plan:
                    680:                // A        B
                    681:                // open
                    682:                //          |open
                    683:                // lockSH
                    684:                //          |nonblocking-lockEX fails
                    685:                // unlockSH
                    686:                // close, cache_get returns 0
                    687:                // open
                    688:                // nonblocking-lockEX succeeds; process, write, close
                    689:                //          |retry1: open
                    690:                // ...
                    691:                //          |lockSH succeeds; ...
                    692: 
                    693:                for(int retry=0; retry<2; retry++) {
1.135     paf       694:                        Cache_get_result cached=cache_get(r.charsets, file_spec, now);
1.136     paf       695:                        if(cached.body) { // have cached copy
1.135     paf       696:                                if(cached.expired) 
                    697:                                        scope.body_from_disk=cached.body; // storing for user to retrive it with ^cache[]
1.136     paf       698:                                else // and it's not expired yet
                    699:                                {
1.135     paf       700:                                // write it out 
                    701:                                r.write_assign_lang(*cached.body);
                    702:                                // happy with it
                    703:                                return;
                    704:                        }
1.79      paf       705:                        }
1.69      paf       706: 
1.135     paf       707:                // non-blocked lock; process; cache it
                    708:                if(const String* processed_body=
1.136     paf       709:                        locked_process_and_cache_put(r, body_code, catch_code, scope, file_spec)) {
1.135     paf       710:                        // write it out 
                    711:                        r.write_assign_lang(*processed_body);
                    712:                        // happy with it
                    713:                        return;
                    714:                } else { // somebody writing result right now
                    715:                        pa_sleep(0, 500000); // waiting half a second
                    716:                        retry=0; // prolonging our wait, than could cache_get it, without processing body_code
                    717:                }
1.69      paf       718:                }
1.78      paf       719:                throw Exception(0,
1.69      paf       720:                        &file_spec,
                    721:                        "locking problem");
                    722:        } else { 
1.79      paf       723:                // instructed not to cache; forget cached copy
1.68      paf       724:                cache_delete(file_spec);
1.69      paf       725:                // process
1.81      paf       726:                const String& processed_body=r.process_to_string(body_code);
1.69      paf       727:                // write it out 
                    728:                r.write_assign_lang(processed_body);
                    729:                // happy with it
                    730:                return;
                    731:        }
                    732:        // never reached
1.63      paf       733: }
                    734: 
1.136     paf       735: static StringOrValue process_try_body_code(Request& r, Value* body_code) {
                    736:        return r.process(*body_code);
                    737: }
1.129     paf       738: static void _try_operator(Request& r, MethodParams& params) {
                    739:        Value& body_code=params.as_junction(0, "body_code must be code");
                    740:        Value& catch_code=params.as_junction(1, "catch_code must be code");
1.74      paf       741: 
1.136     paf       742:        Try_catch_result result=try_catch(r, 
                    743:                process_try_body_code, &body_code,
                    744:                &catch_code);
                    745:        
                    746:        if(result.exception_should_be_handled)
                    747:                throw Exception("parser.runtime",
                    748:                        result.exception_should_be_handled,
                    749:                        "catch block must set $exception.handled to some boolean value, not string");
1.123     paf       750: 
1.136     paf       751:        // write out processed body_code or catch_code
                    752:        r.write_pass_lang(result.processed_code);
1.74      paf       753: }
                    754: 
1.138     paf       755: static void _throw_operator(Request&, MethodParams& params) {
1.129     paf       756:        if(params.count()==1) {
                    757:                if(HashStringValue *hash=params[0].get_hash()) {
                    758:                        const char* type=0;
                    759:                        if(Value* value=hash->get(exception_type_part_name))
1.78      paf       760:                                type=value->as_string().cstr();
1.129     paf       761:                        const String* source=0;
                    762:                        if(Value* value=hash->get(exception_source_part_name))
1.74      paf       763:                                source=&value->as_string();
1.138     paf       764:                        const char* comment=0;
1.129     paf       765:                        if(Value* value=hash->get(exception_comment_part_name))
1.74      paf       766:                                comment=value->as_string().cstr();
                    767: 
1.78      paf       768:                        throw Exception(type,
1.129     paf       769:                                source?source:0,
                    770:                                "%s", comment?comment:"");
1.74      paf       771:                } else
1.78      paf       772:                        throw Exception("parser.runtime",
1.129     paf       773:                                0,
1.74      paf       774:                                "one-param version has hash param");
                    775:        } else {
1.129     paf       776:                const char* type=params.as_string(0, "type must be string").cstr();
                    777:                const String& source=params.as_string(1, "source must be string");
                    778:                const char* comment=params.count()>2? params.as_string(2, "comment must be string").cstr()
                    779:                        :0;
1.97      paf       780:                throw Exception(type, &source, "%s", comment?comment:"");
1.74      paf       781:        }
1.132     paf       782:  }
1.129     paf       783: 
1.150     paf       784: static void _sleep_operator(Request& r, MethodParams& params) {
                    785:        double seconds=params.as_double(0, "seconds must be double", r);
1.151     paf       786:        pa_sleep((int)trunc(seconds), (int)trunc(seconds*1000));
1.150     paf       787:  }
                    788: 
1.129     paf       789: #if defined(WIN32) && defined(_DEBUG)
                    790: #      define PA_BPT
1.138     paf       791: static void _bpt(Request&, MethodParams&) {
1.129     paf       792:        _asm int 3;
                    793: }
                    794: #endif
                    795: 
1.10      paf       796: // constructor
                    797: 
1.129     paf       798: VClassMAIN::VClassMAIN(): VClass() {
                    799:        set_name(*new String(MAIN_CLASS_NAME));
                    800: 
                    801: #ifdef PA_BPT
                    802:        // ^bpt[]
                    803:        add_native_method("bpt", Method::CT_ANY, _bpt, 0, 0);
                    804: #endif
1.121     paf       805: 
1.1       paf       806:        // ^if(condition){code-when-true}
                    807:        // ^if(condition){code-when-true}{code-when-false}
1.10      paf       808:        add_native_method("if", Method::CT_ANY, _if, 2, 3);
1.1       paf       809: 
                    810:        // ^untaint[as-is|uri|sql|js|html|html-typo]{code}
1.59      paf       811:        add_native_method("untaint", Method::CT_ANY, _untaint, 1, 2);
1.1       paf       812: 
                    813:        // ^taint[as-is|uri|sql|js|html|html-typo]{code}
1.10      paf       814:        add_native_method("taint", Method::CT_ANY, _taint, 1, 2);
1.1       paf       815: 
                    816:        // ^process[code]
1.146     paf       817:        add_native_method("process", Method::CT_ANY, _process, 1, 3);
1.1       paf       818: 
                    819:        // ^rem{code}
1.51      parser    820:        add_native_method("rem", Method::CT_ANY, _rem, 1, 10000);
1.1       paf       821: 
                    822:        // ^while(condition){code}
1.10      paf       823:        add_native_method("while", Method::CT_ANY, _while, 2, 2);
1.1       paf       824: 
                    825:        // ^use[file]
1.10      paf       826:        add_native_method("use", Method::CT_ANY, _use, 1, 1);
1.1       paf       827: 
1.54      paf       828:        // ^for[i](from-number;to-number-inclusive){code}[delim]
1.10      paf       829:        add_native_method("for", Method::CT_ANY, _for, 3+1, 3+1+1);
1.1       paf       830: 
                    831:        // ^eval(expr)
                    832:        // ^eval(expr)[format]
1.10      paf       833:        add_native_method("eval", Method::CT_ANY, _eval, 1, 2);
1.52      parser    834: 
1.1       paf       835:        // ^connect[protocol://user:pass@host[:port]/database]{code with ^sql-s}
1.10      paf       836:        add_native_method("connect", Method::CT_ANY, _connect, 2, 2);
                    837: 
1.63      paf       838: 
1.136     paf       839:        // ^cache[file_spec](time){code}[{catch code}] time=0 no cache
1.65      paf       840:        // ^cache[file_spec] delete cache
1.152.4.4  paf       841:        // ^cache[] get current expiration time
                    842:        add_native_method("cache", Method::CT_ANY, _cache, 0, 4);
1.63      paf       843:        
1.28      parser    844:        // switch
                    845: 
                    846:        // ^switch[value]{cases}
                    847:        add_native_method("switch", Method::CT_ANY, _switch, 2, 2);
                    848: 
                    849:        // ^case[value]{code}
1.51      parser    850:        add_native_method("case", Method::CT_ANY, _case, 2, 10000);
1.74      paf       851: 
                    852:        // try-catch
                    853: 
                    854:        // ^try{code}{catch code}
                    855:        add_native_method("try", Method::CT_ANY, _try_operator, 2, 2);
                    856:        // ^throw[$exception hash]
                    857:        // ^throw[type;source;comment]
                    858:        add_native_method("throw", Method::CT_ANY, _throw_operator, 1, 3);
                    859: 
1.150     paf       860:        add_native_method("sleep", Method::CT_ANY, _sleep_operator, 1, 1);
1.10      paf       861: }
1.11      paf       862: 
                    863: // constructor & configurator
1.1       paf       864: 
1.129     paf       865: VStateless_class& VClassMAIN_create() {
                    866:        return *new VClassMAIN;
1.1       paf       867: }

E-mail: