Annotation of parser3/src/main/compile.y, revision 1.263

1.168     parser      1: %{
1.105     paf         2: /** @file
1.106     paf         3:        Parser: compiler(lexical parser and grammar).
                      4: 
1.262     moko        5:        Copyright (c) 2001-2012 Art. Lebedev Studio (http://www.artlebedev.com)
1.168     parser      6:        Author: Alexander Petrosyan <paf@design.ru> (http://design.ru/paf)
1.217     paf         7: 
1.262     moko        8:        
1.88      paf         9: */
                     10: 
1.263   ! misha      11: volatile const char * IDENT_COMPILE_Y = "$Id: compile.y,v 1.262 2012-03-16 09:24:12 moko Exp $";
1.262     moko       12: 
1.106     paf        13: /**
                     14:        @todo parser4: 
                     15:        - cache compiled code from request to request. to do that...
                     16:                -#:     make method definitions, @CLASS, @BASE, @USE instructions,
1.88      paf        17:                        which would be executed afterwards, and actions
                     18:                        now performed at compile time would be delayed to run time.
1.106     paf        19:                -#:     make cache expiration on time and on disk-change of class source
                     20:                -#:     in apache use subpools for compiled class storage
                     21:                -#:     in iis make up specialized Pool object for that
1.24      paf        22: */
                     23: 
1.206     paf        24: #define YYSTYPE  ArrayOperation* 
1.9       paf        25: #define YYPARSE_PARAM  pc
                     26: #define YYLEX_PARAM  pc
                     27: #define YYDEBUG  1
1.106     paf        28: #define YYERROR_VERBOSE        1
1.206     paf        29: #define yyerror(msg)  real_yyerror((Parse_control *)pc, msg)
1.9       paf        30: #define YYPRINT(file, type, value)  yyprint(file, type, value)
1.1       paf        31: 
1.206     paf        32: // includes
                     33: 
1.1       paf        34: #include "compile_tools.h"
1.8       paf        35: #include "pa_value.h"
1.12      paf        36: #include "pa_request.h"
1.39      paf        37: #include "pa_vobject.h"
1.52      paf        38: #include "pa_vdouble.h"
1.98      paf        39: #include "pa_globals.h"
1.200     paf        40: #include "pa_vmethod_frame.h"
1.39      paf        41: 
1.206     paf        42: // defines
                     43: 
1.97      paf        44: #define USE_CONTROL_METHOD_NAME "USE"
1.226     misha      45: #define OPTIONS_CONTROL_METHOD_NAME "OPTIONS"
                     46: #define OPTION_ALL_VARS_LOCAL_NAME "locals"
1.230     misha      47: #define OPTION_PARTIAL_CLASS "partial"
1.238     misha      48: #define REM_OPERATOR_NAME "rem"
1.1       paf        49: 
1.206     paf        50: // forwards
                     51: 
                     52: static int real_yyerror(Parse_control* pc, char* s);
                     53: static void yyprint(FILE* file, int type, YYSTYPE value);
                     54: static int yylex(YYSTYPE* lvalp, void* pc);
1.1       paf        55: 
1.216     paf        56: static const VBool vfalse(false);
                     57: static const VBool vtrue(true);
1.261     moko       58: static const VString vempty;
1.216     paf        59: 
1.8       paf        60: // local convinient inplace typecast & var
1.205     paf        61: #undef PC
1.206     paf        62: #define PC  (*(Parse_control *)pc)
                     63: #undef POOL
1.114     paf        64: #define POOL  (*PC.pool)
1.107     paf        65: #ifndef DOXYGEN
1.1       paf        66: %}
                     67: 
                     68: %pure_parser
                     69: 
1.13      paf        70: %token EON
1.4       paf        71: %token STRING
1.1       paf        72: %token BOGUS
1.55      paf        73: 
1.58      paf        74: %token BAD_STRING_COMPARISON_OPERATOR
1.114     paf        75: %token BAD_HEX_LITERAL
1.171     parser     76: %token BAD_METHOD_DECL_START
1.193     paf        77: %token BAD_METHOD_PARAMETER_NAME_CHARACTER
1.209     paf        78: %token BAD_NONWHITESPACE_CHARACTER_IN_EXPLICIT_RESULT_MODE
1.58      paf        79: 
1.59      paf        80: %token LAND "&&"
1.58      paf        81: %token LOR "||"
1.193     paf        82: %token LXOR "!||"
                     83: %token NXOR "!|"
1.58      paf        84: 
                     85: %token NLE "<="
                     86: %token NGE ">="
                     87: %token NEQ "=="
                     88: %token NNE "!="
1.195     paf        89: %token NSL "<<"
                     90: %token NSR ">>"
1.58      paf        91: 
                     92: %token SLT "lt"
                     93: %token SGT "gt"
                     94: %token SLE "le"
                     95: %token SGE "ge"
                     96: %token SEQ "eq"
                     97: %token SNE "ne"
                     98: 
1.67      paf        99: %token DEF "def"
                    100: %token IN "in"
                    101: %token FEXISTS "-f"
1.127     paf       102: %token DEXISTS "-d"
1.95      paf       103: %token IS "is"
1.67      paf       104: 
1.216     paf       105: %token LITERAL_TRUE "true"
                    106: %token LITERAL_FALSE "false"
                    107: 
1.57      paf       108: /* logical */
1.193     paf       109: %left "!||"
1.57      paf       110: %left "||"
                    111: %left "&&"
1.131     paf       112: %left '<' '>' "<=" ">="   "lt" "gt" "le" "ge"
                    113: %left "==" "!="  "eq" "ne"
                    114: %left "is" "def" "in" "-f" "-d"
1.57      paf       115: 
                    116: /* bitwise */
1.193     paf       117: %left "!|"
1.131     paf       118: %left '|'
                    119: %left '&' 
1.202     paf       120: %left "<<"  ">>"
1.57      paf       121: 
1.56      paf       122: /* numerical */
1.202     paf       123: %left '+' '-'
                    124: %left '*' '/' '\\' '%'
                    125: %left NUNARY   /* unary - + */
                    126: 
                    127: /* out-of-group */
                    128: %left '~' /* bitwise */
                    129: %left '!'  /* logical */
1.1       paf       130: 
                    131: %%
1.195     paf       132: all:
1.10      paf       133:        one_big_piece {
1.251     misha     134:        Method* method=new Method(Method::CT_ANY,
1.81      paf       135:                0, 0, /*min, max numbered_params_count*/
1.75      paf       136:                0/*param_names*/, 0/*local_names*/, 
                    137:                $1/*parser_code*/, 0/*native_code*/);
1.251     misha     138:        PC.cclass->set_method(PC.alias_method(main_method_name), method);
1.10      paf       139: }
                    140: |      methods;
                    141: 
                    142: methods: method | methods method;
                    143: one_big_piece: maybe_codes;
                    144: 
1.34      paf       145: method: control_method | code_method;
                    146: 
                    147: control_method: '@' STRING '\n' 
1.132     paf       148:                                maybe_control_strings {
1.260     misha     149:        const String& command=LA2S(*$2)->trim(String::TRIM_END);
1.34      paf       150:        YYSTYPE strings_code=$4;
1.206     paf       151:        if(strings_code->count()<1*OPERATIONS_PER_OPVALUE) {
1.114     paf       152:                strcpy(PC.error, "@");
                    153:                strcat(PC.error, command.cstr());
                    154:                strcat(PC.error, " is empty");
1.37      paf       155:                YYERROR;
                    156:        }
1.74      paf       157:        if(command==CLASS_NAME) {
1.206     paf       158:                if(strings_code->count()==1*OPERATIONS_PER_OPVALUE) {
1.263   ! misha     159:                        PC.class_add();
1.73      paf       160:                        // new class' name
1.260     misha     161:                        const String& name=LA2S(*strings_code)->trim(String::TRIM_END);
1.73      paf       162:                        // creating the class
1.206     paf       163:                        VStateless_class* cclass=new VClass;
1.226     misha     164:                        PC.cclass_new=cclass;
                    165:                        PC.cclass_new->set_name(name);
1.73      paf       166:                } else {
1.206     paf       167:                        strcpy(PC.error, "@"CLASS_NAME" must contain only one line with class name (contains more then one)");
1.34      paf       168:                        YYERROR;
                    169:                }
1.130     paf       170:        } else if(command==USE_CONTROL_METHOD_NAME) {
1.263   ! misha     171:                PC.class_add();
1.206     paf       172:                for(size_t i=0; i<strings_code->count(); i+=OPERATIONS_PER_OPVALUE) 
1.260     misha     173:                        PC.request.use_file(PC.request.main_class, LA2S(*strings_code, i)->trim(String::TRIM_END), PC.request.get_used_filename(PC.file_no));
1.130     paf       174:        } else if(command==BASE_NAME) {
1.226     misha     175:                if(PC.append){
                    176:                        strcpy(PC.error, "can't set base while appending methods to class '");
                    177:                        strncat(PC.error, PC.cclass->name().cstr(), MAX_STRING/2);
                    178:                        strcat(PC.error, "'");
                    179:                        YYERROR;
                    180:                }
                    181:                PC.class_add();
1.188     paf       182:                if(PC.cclass->base_class()) { // already changed from default?
1.130     paf       183:                        strcpy(PC.error, "class already have a base '");
1.226     misha     184:                        strncat(PC.error, PC.cclass->base_class()->name().cstr(), MAX_STRING/2);
1.130     paf       185:                        strcat(PC.error, "'");
                    186:                        YYERROR;
                    187:                }
1.206     paf       188:                if(strings_code->count()==1*OPERATIONS_PER_OPVALUE) {
1.260     misha     189:                        const String& base_name=LA2S(*strings_code)->trim(String::TRIM_END);
1.252     misha     190:                        if(Value* base_class_value=PC.request.get_class(base_name)) {
1.206     paf       191:                                // @CLASS == @BASE sanity check
                    192:                                if(VStateless_class *base_class=base_class_value->get_class()) {
                    193:                                        if(PC.cclass==base_class) {
                    194:                                                strcpy(PC.error, "@"CLASS_NAME" equals @"BASE_NAME);
                    195:                                                YYERROR;
                    196:                                        }
                    197:                                        PC.cclass->get_class()->set_base(base_class);
                    198:                                } else { // they asked to derive from a class without methods ['env' & co]
                    199:                                        strcpy(PC.error, base_name.cstr());
                    200:                                        strcat(PC.error, ": you can not derive from this class in @"BASE_NAME);
                    201:                                        YYERROR;
                    202:                                }
                    203:                        } else {
1.130     paf       204:                                strcpy(PC.error, base_name.cstr());
                    205:                                strcat(PC.error, ": undefined class in @"BASE_NAME);
1.73      paf       206:                                YYERROR;
                    207:                        }
1.34      paf       208:                } else {
1.130     paf       209:                        strcpy(PC.error, "@"BASE_NAME" must contain sole name");
1.34      paf       210:                        YYERROR;
                    211:                }
1.223     misha     212:        } else if(command==OPTIONS_CONTROL_METHOD_NAME) {
                    213:                for(size_t i=0; i<strings_code->count(); i+=OPERATIONS_PER_OPVALUE) {
1.260     misha     214:                        const String& option=LA2S(*strings_code, i)->trim(String::TRIM_END);
1.226     misha     215:                        if(option==OPTION_ALL_VARS_LOCAL_NAME){
                    216:                                PC.set_all_vars_local();
1.230     misha     217:                        } else if(option==OPTION_PARTIAL_CLASS){
                    218:                                if(PC.cclass_new){
                    219:                                        if(VStateless_class* existed=PC.get_existed_class(PC.cclass_new)){
                    220:                                                if(!PC.reuse_existed_class(existed)){
                    221:                                                        strcpy(PC.error, "can't append methods to '");
                    222:                                                        strncat(PC.error, PC.cclass_new->name().cstr(), MAX_STRING/2);
                    223:                                                        strcat(PC.error, "' - the class wasn't marked as partial");
                    224:                                                        YYERROR;
                    225:                                                }
1.226     misha     226:                                        } else {
1.256     misha     227:                                                // marks the new class as partial. we will be able to add methods here later.
1.230     misha     228:                                                PC.cclass_new->set_partial();
1.226     misha     229:                                        }
1.230     misha     230:                                } else {
                    231:                                        strcpy(PC.error, "'"OPTION_PARTIAL_CLASS"' option should be used straight after @"CLASS_NAME);
1.226     misha     232:                                        YYERROR;
                    233:                                }
1.256     misha     234:                        } else if(option==method_call_type_static){
                    235:                                PC.set_methods_call_type(Method::CT_STATIC);
                    236:                        } else if(option==method_call_type_dynamic){
                    237:                                PC.set_methods_call_type(Method::CT_DYNAMIC);
1.223     misha     238:                        } else {
1.226     misha     239:                                strcpy(PC.error, "'");
                    240:                                strncat(PC.error, option.cstr(), MAX_STRING/2);
                    241:                                strcat(PC.error, "' invalid option. valid options are "
1.256     misha     242:                                        "'"OPTION_PARTIAL_CLASS"', '"OPTION_ALL_VARS_LOCAL_NAME"'"
                    243:                                        ", '"METHOD_CALL_TYPE_STATIC"' and '"METHOD_CALL_TYPE_DYNAMIC"'"
                    244:                                        );
1.223     misha     245:                                YYERROR;
                    246:                        }
                    247:                }
1.130     paf       248:        } else {
                    249:                strcpy(PC.error, "'");
                    250:                strncat(PC.error, command.cstr(), MAX_STRING/2);
                    251:                strcat(PC.error, "' invalid special name. valid names are "
1.223     misha     252:                        "'"CLASS_NAME"', '"USE_CONTROL_METHOD_NAME"', '"BASE_NAME"' and '"OPTIONS_CONTROL_METHOD_NAME"'.");
1.130     paf       253:                YYERROR;
1.34      paf       254:        }
                    255: };
1.132     paf       256: maybe_control_strings: empty | control_strings;
1.259     misha     257: control_strings: control_string | control_strings control_string { $$=$1; P(*$$, *$2); };
1.37      paf       258: control_string: maybe_string '\n';
                    259: maybe_string: empty | STRING;
1.34      paf       260: 
1.222     misha     261: code_method: '@' STRING bracketed_maybe_strings maybe_bracketed_strings maybe_comment '\n' { 
1.226     misha     262:        PC.class_add();
1.208     paf       263:        PC.explicit_result=false;
1.10      paf       264: 
                    265:        YYSTYPE params_names_code=$3;
1.206     paf       266:        ArrayString* params_names=0;
                    267:        if(int size=params_names_code->count()) {
                    268:                params_names=new ArrayString;
                    269:                for(int i=0; i<size; i+=OPERATIONS_PER_OPVALUE)
                    270:                        *params_names+=LA2S(*params_names_code, i);
1.75      paf       271:        }
1.10      paf       272: 
                    273:        YYSTYPE locals_names_code=$4;
1.206     paf       274:        ArrayString* locals_names=0;
1.223     misha     275:        bool all_vars_local=false;
1.206     paf       276:        if(int size=locals_names_code->count()) {
                    277:                locals_names=new ArrayString;
1.208     paf       278:                for(int i=0; i<size; i+=OPERATIONS_PER_OPVALUE) {
                    279:                        const String* local_name=LA2S(*locals_names_code, i);
                    280:                        if(*local_name==RESULT_VAR_NAME)
                    281:                                PC.explicit_result=true;
1.226     misha     282:                        else if(*local_name==OPTION_ALL_VARS_LOCAL_NAME)
1.223     misha     283:                                all_vars_local=true;
1.208     paf       284:                        else
                    285:                                *locals_names+=local_name;
                    286:                }
1.75      paf       287:        }
1.231     misha     288:        if(!all_vars_local && PC.cclass && PC.cclass->is_vars_local())
1.223     misha     289:                all_vars_local=true;
1.10      paf       290: 
1.208     paf       291:        Method* method=new Method(
1.206     paf       292:                //name, 
1.257     misha     293:                GetMethodCallType(PC, *$2),
1.81      paf       294:                0, 0/*min,max numbered_params_count*/, 
1.76      paf       295:                params_names, locals_names, 
1.223     misha     296:                0/*to be filled later in next {} */, 0, all_vars_local);
1.221     misha     297: 
1.208     paf       298:        *reinterpret_cast<Method**>(&$$)=method;
1.222     misha     299: } maybe_codes {
1.251     misha     300:                Method* method=reinterpret_cast<Method*>($7);
1.231     misha     301:                // fill in the code
1.251     misha     302:                method->parser_code=$8;
1.231     misha     303: 
                    304:                // register in class
                    305:                const String& name=*LA2S(*$2);
1.251     misha     306:                PC.cclass->set_method(PC.alias_method(name), method);
1.8       paf       307: };
1.10      paf       308: 
                    309: maybe_bracketed_strings: empty | bracketed_maybe_strings;
1.259     misha     310: bracketed_maybe_strings: '[' maybe_strings ']' {$$=$2;};
1.10      paf       311: maybe_strings: empty | strings;
1.259     misha     312: strings: STRING | strings ';' STRING { $$=$1; P(*$$, *$3); };
1.10      paf       313: 
                    314: maybe_comment: empty | STRING;
1.1       paf       315: 
                    316: /* codes */
                    317: 
1.10      paf       318: maybe_codes: empty | codes;
                    319: 
1.259     misha     320: codes: code | codes code { $$=$1; P(*$$, *$2); };
1.81      paf       321: code: write_string | action;
1.209     paf       322: action: get | put | call;
1.1       paf       323: 
                    324: /* get */
                    325: 
1.64      paf       326: get: get_value {
1.238     misha     327:        $$=N();
                    328:        YYSTYPE code=$1;
1.247     misha     329:        size_t count=code->count();
1.245     misha     330: 
1.235     misha     331: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
1.247     misha     332:        if(
                    333:                count!=3
                    334:                || !maybe_change_first_opcode(*code, OP::OP_VALUE__GET_ELEMENT, /*=>*/OP::OP_VALUE__GET_ELEMENT__WRITE)
                    335:        )
1.238     misha     336: #endif
1.247     misha     337: 
1.245     misha     338: #ifdef OPTIMIZE_BYTECODE_GET_SELF_ELEMENT
1.247     misha     339:        if(
                    340:                count!=3
                    341:                || !maybe_change_first_opcode(*code, OP::OP_WITH_SELF__VALUE__GET_ELEMENT, /*=>*/OP::OP_WITH_SELF__VALUE__GET_ELEMENT__WRITE)
                    342:        )
1.245     misha     343: #endif
                    344: 
1.239     misha     345: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_ELEMENT
1.247     misha     346:        if(
                    347:                count!=5
                    348:                || !maybe_change_first_opcode(*code, OP::OP_GET_OBJECT_ELEMENT, /*=>*/OP::OP_GET_OBJECT_ELEMENT__WRITE)
                    349:        )
1.239     misha     350: #endif
                    351: 
                    352: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_VAR_ELEMENT
1.247     misha     353:        if(
                    354:                count!=5
                    355:                || !maybe_change_first_opcode(*code, OP::OP_GET_OBJECT_VAR_ELEMENT, /*=>*/OP::OP_GET_OBJECT_VAR_ELEMENT__WRITE)
                    356:        )
1.238     misha     357: #endif
1.247     misha     358:        {
                    359:                changetail_or_append(*code,
                    360:                        OP::OP_GET_ELEMENT, false,  /*=>*/OP::OP_GET_ELEMENT__WRITE,
                    361:                        /*or */OP::OP_WRITE_VALUE
                    362:                        ); /* value=pop; wcontext.write(value) */
1.246     misha     363:        }
1.247     misha     364: 
1.238     misha     365:        P(*$$, *code);
1.1       paf       366: };
1.259     misha     367: get_value: '$' get_name_value { $$=$2; };
1.64      paf       368: get_name_value: name_without_curly_rdive EON | name_in_curly_rdive;
1.259     misha     369: name_in_curly_rdive: '{' name_without_curly_rdive '}' { $$=$2; };
1.44      paf       370: name_without_curly_rdive: 
                    371:        name_without_curly_rdive_read 
                    372: |      name_without_curly_rdive_class;
1.19      paf       373: name_without_curly_rdive_read: name_without_curly_rdive_code {
1.206     paf       374:        $$=N(); 
1.238     misha     375:        YYSTYPE diving_code=$1;
1.239     misha     376:        size_t count=diving_code->count();
1.247     misha     377: 
                    378:        if(maybe_make_self(*$$, *diving_code, count)) {
                    379:                // $self.
                    380:        } else
1.239     misha     381: 
                    382: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_ELEMENT
1.247     misha     383:        if(maybe_make_get_object_element(*$$, *diving_code, count)){
1.245     misha     384:                // optimization for $object.field + ^object.method[
1.247     misha     385:        } else
1.238     misha     386: #endif
1.239     misha     387: 
                    388: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_VAR_ELEMENT
1.247     misha     389:        if(maybe_make_get_object_var_element(*$$, *diving_code, count)){
1.245     misha     390:                // optimization for $object.$var
1.247     misha     391:        } else
1.238     misha     392: #endif
1.239     misha     393: 
                    394: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
1.248     misha     395:        if(
                    396:                count>=4
                    397:                && (*diving_code)[0].code==OP::OP_VALUE
                    398:                && (*diving_code)[3].code==OP::OP_GET_ELEMENT
                    399:        ){
                    400:                 // optimization
1.239     misha     401:                O(*$$,
1.247     misha     402:                        (PC.in_call_value && count==4)
1.239     misha     403:                        ? OP::OP_VALUE__GET_ELEMENT_OR_OPERATOR // ^object[ : OP_VALUE+origin+string+OP_GET_ELEMENT => OP_VALUE__GET_ELEMENT_OR_OPERATOR+origin+string
                    404:                        : OP::OP_VALUE__GET_ELEMENT             // $object  : OP_VALUE+origin+string+OP_GET_ELEMENT => OP_VALUE__GET_ELEMENT+origin+string
                    405:                );
                    406:                P(*$$, *diving_code, 1/*offset*/, 2/*limit*/); // copy origin+value
1.247     misha     407:                if(count>4)
                    408:                        P(*$$, *diving_code, 4); // copy tail
1.239     misha     409:        } else {
                    410:                O(*$$, OP::OP_WITH_READ); /* stack: starting context */
                    411:                P(*$$, *diving_code);
                    412:        }
1.233     misha     413: #else
1.247     misha     414:        {
1.238     misha     415:                O(*$$, OP::OP_WITH_READ); /* stack: starting context */
1.179     paf       416: 
1.238     misha     417:                // ^if OP_ELEMENT => ^if OP_ELEMENT_OR_OPERATOR
                    418:                // optimized OP_VALUE+origin+string+OP_GET_ELEMENT. => OP_VALUE+origin+string+OP_GET_ELEMENT_OR_OPERATOR.
1.239     misha     419:                if(PC.in_call_value && count==4)
                    420:                        diving_code->put(count-1, OP::OP_GET_ELEMENT_OR_OPERATOR);
1.206     paf       421:                P(*$$, *diving_code);
1.239     misha     422:        }
1.233     misha     423: #endif
1.22      paf       424:        /* diving code; stack: current context */
1.1       paf       425: };
1.259     misha     426: name_without_curly_rdive_class: class_prefix name_without_curly_rdive_code { $$=$1; P(*$$, *$2); };
                    427: name_without_curly_rdive_code: name_advance2 | name_path name_advance2 { $$=$1; P(*$$, *$2); };
1.1       paf       428: 
                    429: /* put */
                    430: 
1.81      paf       431: put: '$' name_expr_wdive construct {
1.241     misha     432:        $$=N();
1.244     misha     433: #ifdef OPTIMIZE_BYTECODE_CONSTRUCT
                    434:        if(maybe_optimize_construct(*$$, *$2, *$3)){
1.246     misha     435:                // $a(expr), $.a(expr), $a[value], $.a[value], $self.a[value], $self.a(expr)
1.241     misha     436:        } else 
                    437: #endif
                    438:        {
                    439:                P(*$$, *$2); /* stack: context,name */
                    440:                P(*$$, *$3); /* stack: context,name,constructor_value */
                    441:        }
1.20      paf       442: };
1.44      paf       443: name_expr_wdive: 
1.157     parser    444:        name_expr_wdive_root
                    445: |      name_expr_wdive_write
1.44      paf       446: |      name_expr_wdive_class;
1.157     parser    447: name_expr_wdive_root: name_expr_dive_code {
1.206     paf       448:        $$=N();
1.238     misha     449:        YYSTYPE diving_code=$1;
1.247     misha     450:        size_t count=diving_code->count();
                    451: 
                    452:        if(maybe_make_self(*$$, *diving_code, count)) {
                    453:                // $self.
                    454:        } else
                    455: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
                    456:        if(
                    457:                count>=4
                    458:                && (*diving_code)[0].code==OP::OP_VALUE
                    459:                && (*diving_code)[3].code==OP::OP_GET_ELEMENT
                    460:        ){
                    461:                O(*$$, OP::OP_WITH_ROOT__VALUE__GET_ELEMENT);
                    462:                P(*$$, *diving_code, 1/*offset*/, 2/*limit*/); // copy origin+value
                    463:                if(count>4)
                    464:                        P(*$$, *diving_code, 4); // tail
                    465:        } else
                    466: #endif
                    467:        {
1.229     misha     468:                O(*$$, OP::OP_WITH_ROOT); /* stack: starting context */
1.206     paf       469:                P(*$$, *diving_code);
1.23      paf       470:        }
                    471:        /* diving code; stack: current context */
1.156     parser    472: };
1.157     parser    473: name_expr_wdive_write: '.' name_expr_dive_code {
1.206     paf       474:        $$=N(); 
1.229     misha     475:        O(*$$, OP::OP_WITH_WRITE); /* stack: starting context */
1.206     paf       476:        P(*$$, *$2); /* diving code; stack: context,name */
1.20      paf       477: };
1.259     misha     478: name_expr_wdive_class: class_prefix name_expr_dive_code { $$=$1; P(*$$, *$2); };
1.20      paf       479: 
1.244     misha     480: construct:
1.163     parser    481:        construct_square
                    482: |      construct_round
                    483: |      construct_curly
1.149     parser    484: ;
1.211     paf       485: construct_square: '[' {
                    486:        // allow $result_or_other_variable[ letters here any time ]
                    487:        *reinterpret_cast<bool*>(&$$)=PC.explicit_result; PC.explicit_result=false;
                    488: } any_constructor_code_value {
1.213     paf       489:        PC.explicit_result=*reinterpret_cast<bool*>(&$2);
1.211     paf       490: } ']' {
1.149     parser    491:        // stack: context, name
1.211     paf       492:        $$=$3; // stack: context, name, value
1.229     misha     493:        O(*$$, OP::OP_CONSTRUCT_VALUE); /* value=pop; name=pop; context=pop; construct(context,name,value) */
1.81      paf       494: }
                    495: ;
1.149     parser    496: construct_round: '(' expr_value ')' { 
1.206     paf       497:        $$=N(); 
1.229     misha     498:        O(*$$, OP::OP_PREPARE_TO_EXPRESSION);
1.149     parser    499:        // stack: context, name
1.206     paf       500:        P(*$$, *$2); // stack: context, name, value
1.229     misha     501:        O(*$$, OP::OP_CONSTRUCT_EXPR); /* value=pop->as_expr_result; name=pop; context=pop; construct(context,name,value) */
1.81      paf       502: }
1.52      paf       503: ;
1.149     parser    504: construct_curly: '{' maybe_codes '}' {
                    505:        // stack: context, name
1.206     paf       506:        $$=N(); 
1.229     misha     507:        OA(*$$, OP::OP_CURLY_CODE__CONSTRUCT, $2); /* code=pop; name=pop; context=pop; construct(context,name,junction(code)) */
1.149     parser    508: };
                    509: 
1.55      paf       510: any_constructor_code_value: 
1.261     moko      511:        empty_value /* optimized $var[] case */
1.52      paf       512: |      STRING /* optimized $var[STRING] case */
1.55      paf       513: |      constructor_code_value /* $var[something complex] */
1.1       paf       514: ;
1.55      paf       515: constructor_code_value: constructor_code {
1.206     paf       516:        $$=N(); 
1.229     misha     517:        OA(*$$, OP::OP_OBJECT_POOL, $1); /* stack: empty write context */
1.183     paf       518:        /* some code that writes to that context */
                    519:        /* context=pop; stack: context.value() */
1.1       paf       520: };
1.55      paf       521: constructor_code: codes__excluding_sole_str_literal;
1.259     misha     522: codes__excluding_sole_str_literal: action | code codes { $$=$1; P(*$$, *$2); };
1.27      paf       523: 
1.1       paf       524: /* call */
                    525: 
1.66      paf       526: call: call_value {
1.238     misha     527: #ifdef OPTIMIZE_BYTECODE_CUT_REM_OPERATOR
                    528:        if((*$1).count())
                    529: #endif
                    530:        {
                    531:                $$=$1; /* stack: value */
1.249     misha     532:                if(!maybe_change_first_opcode(*$$, OP::OP_CONSTRUCT_OBJECT, /*=>*/OP::OP_CONSTRUCT_OBJECT__WRITE))
                    533:                        changetail_or_append(*$$, 
                    534:                                OP::OP_CALL, true,  /*=>*/ OP::OP_CALL__WRITE,
                    535:                                /*or */OP::OP_WRITE_VALUE); /* value=pop; wcontext.write(value) */
1.238     misha     536:        }
1.66      paf       537: };
1.177     paf       538: call_value: '^' { 
1.180     paf       539:                                        PC.in_call_value=true; 
1.177     paf       540:                        }
                    541:                        call_name {
1.180     paf       542:                                PC.in_call_value=false;
1.177     paf       543:                        } 
1.154     parser    544:                        store_params EON { /* ^field.$method{vasya} */
1.238     misha     545: #ifdef OPTIMIZE_BYTECODE_CUT_REM_OPERATOR
1.242     misha     546: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
1.238     misha     547:        const String* operator_name=LA2S(*$3, 0, OP::OP_VALUE__GET_ELEMENT_OR_OPERATOR);
1.242     misha     548: #else
                    549:        const String* operator_name=LA2S(*$3, 1);
                    550: #endif
1.249     misha     551:        if(operator_name && *operator_name==REM_OPERATOR_NAME){
1.238     misha     552:                $$=N();
                    553:        } else 
                    554: #endif
                    555:                {
                    556:                        YYSTYPE params_code=$5;
                    557:                        if(params_code->count()==3) { // probably [] case. [OP::OP_VALUE+origin+Void]
                    558:                                if(Value* value=LA2V(*params_code)) // it is OP_VALUE+origin+value?
1.261     moko      559:                                        if(const String * string=value->get_string())
                    560:                                                if(string->is_empty()) // value is empty string?
                    561:                                                        params_code=0; // ^zzz[] case. don't append lone empty param.
1.238     misha     562:                        }
                    563:                        /* stack: context, method_junction */
1.249     misha     564: 
                    565:                        YYSTYPE var_code=$3;
                    566:                        if(
                    567:                                var_code->count()==8
                    568:                                && (*var_code)[0].code==OP::OP_VALUE__GET_CLASS
                    569:                                && (*var_code)[3].code==OP::OP_PREPARE_TO_CONSTRUCT_OBJECT
                    570:                                && (*var_code)[4].code==OP::OP_VALUE
                    571:                                && (*var_code)[7].code==OP::OP_GET_ELEMENT
                    572:                        ){
                    573:                                yyval=N();
                    574:                                O(*$$, OP::OP_CONSTRUCT_OBJECT);
                    575:                                P(*$$, *var_code, 1/*offset*/, 2/*limit*/); // class name
                    576:                                P(*$$, *var_code, 5/*offset*/, 2/*limit*/); // constructor name
                    577:                                OA(*$$, params_code);
                    578:                        } else 
                    579:                                {
                    580:                                        $$=var_code; /* with_xxx,diving code; stack: context,method_junction */
                    581:                                        OA(*$$, OP::OP_CALL, params_code); // method_frame=make frame(pop junction); ncontext=pop; call(ncontext,method_frame) stack: value
                    582:                                }
1.238     misha     583:                }
1.1       paf       584: };
                    585: 
1.43      paf       586: call_name: name_without_curly_rdive;
1.38      paf       587: 
1.259     misha     588: store_params: store_param | store_params store_param { $$=$1; P(*$$, *$2); };
1.69      paf       589: store_param: 
                    590:        store_square_param
                    591: |      store_round_param
                    592: |      store_curly_param
1.31      paf       593: ;
1.210     paf       594: store_square_param: '[' {
1.211     paf       595:        // allow ^call[ letters here any time ]
1.210     paf       596:        *reinterpret_cast<bool*>(&$$)=PC.explicit_result; PC.explicit_result=false;
                    597: } store_code_param_parts {
1.213     paf       598:        PC.explicit_result=*reinterpret_cast<bool*>(&$2);
1.259     misha     599: } ']' {$$=$3;};
                    600: store_round_param: '(' store_expr_param_parts ')' {$$=$2;};
                    601: store_curly_param: '{' store_curly_param_parts '}' {$$=$2;};
1.69      paf       602: store_code_param_parts:
                    603:        store_code_param_part
1.259     misha     604: |      store_code_param_parts ';' store_code_param_part { $$=$1; P(*$$, *$3); }
1.69      paf       605: ;
                    606: store_expr_param_parts:
                    607:        store_expr_param_part
1.259     misha     608: |      store_expr_param_parts ';' store_expr_param_part { $$=$1; P(*$$, *$3); }
1.69      paf       609: ;
1.94      paf       610: store_curly_param_parts:
                    611:        store_curly_param_part
1.259     misha     612: |      store_curly_param_parts ';' store_curly_param_part { $$=$1; P(*$$, *$3); }
1.94      paf       613: ;
1.120     paf       614: store_code_param_part: code_param_value {
1.32      paf       615:        $$=$1;
1.120     paf       616: };
1.214     paf       617: store_expr_param_part: expr_value {
                    618:        YYSTYPE expr_code=$1;
1.215     paf       619:        if(expr_code->count()==3
1.234     misha     620:                && (*expr_code)[0].code==OP::OP_VALUE) { // optimizing (double/bool/incidently 'string' too) case. [OP::OP_VALUE+origin+Double]. no evaluating
1.214     paf       621:                $$=expr_code; 
                    622:        } else {
1.238     misha     623:                YYSTYPE code=N();
1.229     misha     624:                O(*code, OP::OP_PREPARE_TO_EXPRESSION);
1.214     paf       625:                P(*code, *expr_code);
1.229     misha     626:                O(*code, OP::OP_WRITE_EXPR_RESULT);
1.214     paf       627:                $$=N(); 
1.229     misha     628:                OA(*$$, OP::OP_EXPR_CODE__STORE_PARAM, code);
1.214     paf       629:        }
1.69      paf       630: };
1.94      paf       631: store_curly_param_part: maybe_codes {
1.206     paf       632:        $$=N(); 
1.229     misha     633:        OA(*$$, OP::OP_CURLY_CODE__STORE_PARAM, $1);
1.94      paf       634: };
1.120     paf       635: code_param_value:
1.261     moko      636:        empty_value /* optimized [;...] case */
1.120     paf       637: |      STRING /* optimized [STRING] case */
                    638: |      constructor_code_value /* [something complex] */
                    639: ;
1.1       paf       640: 
                    641: /* name */
                    642: 
1.259     misha     643: name_expr_dive_code: name_expr_value | name_path name_expr_value { $$=$1; P(*$$, *$2); };
1.1       paf       644: 
1.259     misha     645: name_path: name_step | name_path name_step { $$=$1; P(*$$, *$2); };
1.1       paf       646: name_step: name_advance1 '.';
                    647: name_advance1: name_expr_value {
1.177     paf       648:        // we know that name_advance1 not called from ^xxx context
                    649:        // so we'll not check for operator call possibility as we do in name_advance2
                    650: 
1.1       paf       651:        /* stack: context */
                    652:        $$=$1; /* stack: context,name */
1.229     misha     653:        O(*$$, OP::OP_GET_ELEMENT); /* name=pop; context=pop; stack: context.get_element(name) */
1.1       paf       654: };
                    655: name_advance2: name_expr_value {
                    656:        /* stack: context */
                    657:        $$=$1; /* stack: context,name */
1.229     misha     658:        O(*$$, OP::OP_GET_ELEMENT); /* name=pop; context=pop; stack: context.get_element(name) */
1.1       paf       659: }
1.4       paf       660: |      STRING BOGUS
1.1       paf       661: ;
                    662: name_expr_value: 
1.4       paf       663:        STRING /* subname_is_const */
1.1       paf       664: |      name_expr_subvar_value /* $subname_is_var_value */
1.160     parser    665: |      name_expr_with_subvar_value /* xxx$part_of_subname_is_var_value */
1.166     parser    666: |      name_square_code_value /* [codes] */
1.1       paf       667: ;
                    668: name_expr_subvar_value: '$' subvar_ref_name_rdive {
                    669:        $$=$2;
1.229     misha     670:        O(*$$, OP::OP_GET_ELEMENT);
1.1       paf       671: };
1.4       paf       672: name_expr_with_subvar_value: STRING subvar_get_writes {
1.238     misha     673:        YYSTYPE code;
1.183     paf       674:        {
1.206     paf       675:                change_string_literal_to_write_string_literal(*(code=$1));
                    676:                P(*code, *$2);
1.183     paf       677:        }
1.206     paf       678:        $$=N(); 
1.229     misha     679:        OA(*$$, OP::OP_STRING_POOL, code);
1.1       paf       680: };
1.212     paf       681: name_square_code_value: '[' {
                    682:        // allow $result_or_other_variable[ letters here any time ]
                    683:        *reinterpret_cast<bool*>(&$$)=PC.explicit_result; PC.explicit_result=false;
                    684: } codes {
1.213     paf       685:        PC.explicit_result=*reinterpret_cast<bool*>(&$2);
1.212     paf       686: } ']' {
1.206     paf       687:        $$=N(); 
1.229     misha     688:        OA(*$$, OP::OP_OBJECT_POOL, $3); /* stack: empty write context */
1.183     paf       689:        /* some code that writes to that context */
                    690:        /* context=pop; stack: context.value() */
1.160     parser    691: };
1.154     parser    692: subvar_ref_name_rdive: STRING {
1.206     paf       693:        $$=N(); 
1.229     misha     694:        O(*$$, OP::OP_WITH_READ);
1.206     paf       695:        P(*$$, *$1);
1.1       paf       696: };
1.259     misha     697: subvar_get_writes: subvar__get_write | subvar_get_writes subvar__get_write { $$=$1; P(*$$, *$2); };
1.1       paf       698: subvar__get_write: '$' subvar_ref_name_rdive {
                    699:        $$=$2;
1.229     misha     700:        O(*$$, OP::OP_GET_ELEMENT__WRITE);
1.42      paf       701: };
                    702: 
1.154     parser    703: class_prefix:
                    704:        class_static_prefix
                    705: |      class_constructor_prefix
                    706: ;
1.155     parser    707: class_static_prefix: STRING ':' {
                    708:        $$=$1; // stack: class name string
1.206     paf       709:        if(*LA2S(*$$) == BASE_NAME) { // pseudo BASE class
                    710:                if(VStateless_class* base=PC.cclass->base_class()) {
                    711:                        change_string_literal_value(*$$, base->name());
1.189     paf       712:                } else {
                    713:                        strcpy(PC.error, "no base class declared");
                    714:                        YYERROR;
                    715:                }
                    716:        }
1.238     misha     717:        // optimized OP_VALUE+origin+string+OP_GET_CLASS => OP_VALUE__GET_CLASS+origin+string
1.259     misha     718:        maybe_change_first_opcode(*$$, OP::OP_VALUE, OP::OP_VALUE__GET_CLASS);
1.155     parser    719: };
                    720: class_constructor_prefix: class_static_prefix ':' {
1.154     parser    721:        $$=$1;
1.180     paf       722:        if(!PC.in_call_value) {
1.154     parser    723:                strcpy(PC.error, ":: not allowed here");
                    724:                YYERROR;
                    725:        }
1.229     misha     726:        O(*$$, OP::OP_PREPARE_TO_CONSTRUCT_OBJECT);
1.1       paf       727: };
                    728: 
1.53      paf       729: 
1.56      paf       730: /* expr */
1.53      paf       731: 
1.214     paf       732: expr_value: expr;
1.56      paf       733: expr: 
1.214     paf       734:        double_or_STRING
1.216     paf       735: |   true_value
                    736: |   false_value
1.64      paf       737: |      get_value
1.66      paf       738: |      call_value
1.259     misha     739: |      '"' string_inside_quotes_value '"' { $$ = $2; }
                    740: |      '\'' string_inside_quotes_value '\'' { $$ = $2; }
1.60      paf       741: |      '(' expr ')' { $$ = $2; }
                    742: /* stack: operand // stack: @operand */
1.259     misha     743: |      '-' expr %prec NUNARY { $$=$2;  O(*$$, OP::OP_NEG); }
                    744: |      '+' expr %prec NUNARY { $$=$2; }
                    745: |      '~' expr { $$=$2;        O(*$$, OP::OP_INV); }
                    746: |      '!' expr { $$=$2;  O(*$$, OP::OP_NOT); }
                    747: |      "def" expr { $$=$2;  O(*$$, OP::OP_DEF); }
                    748: |      "in" expr { $$=$2;  O(*$$, OP::OP_IN); }
                    749: |      "-f" expr { $$=$2;  O(*$$, OP::OP_FEXISTS); }
                    750: |      "-d" expr { $$=$2;  O(*$$, OP::OP_DEXISTS); }
1.60      paf       751: /* stack: a,b // stack: a@b */
1.259     misha     752: |      expr '-' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_SUB); }
                    753: |      expr '+' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_ADD); }
                    754: |      expr '*' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_MUL); }
                    755: |      expr '/' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_DIV); }
                    756: |      expr '%' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_MOD); }
                    757: |      expr '\\' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_INTDIV); }
                    758: |      expr "<<" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_SL); }
                    759: |      expr ">>" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_SR); }
                    760: |      expr '&' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_AND); }
                    761: |      expr '|' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_OR); }
                    762: |      expr "!|" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_XOR); }
                    763: |      expr "&&" expr { $$=$1;  OA(*$$, OP::OP_NESTED_CODE, $3);  O(*$$, OP::OP_LOG_AND); }
                    764: |      expr "||" expr { $$=$1;  OA(*$$, OP::OP_NESTED_CODE, $3);  O(*$$, OP::OP_LOG_OR); }
                    765: |      expr "!||" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_LOG_XOR); }
                    766: |      expr '<' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_LT); }
                    767: |      expr '>' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_GT); }
                    768: |      expr "<=" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_LE); }
                    769: |      expr ">=" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_GE); }
                    770: |      expr "==" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_EQ); }
                    771: |      expr "!=" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_NE); }
                    772: |      expr "lt" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_LT); }
                    773: |      expr "gt" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_GT); }
                    774: |      expr "le" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_LE); }
                    775: |      expr "ge" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_GE); }
                    776: |      expr "eq" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_EQ); }
                    777: |      expr "ne" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_NE); }
                    778: |      expr "is" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_IS); }
1.56      paf       779: ;
1.214     paf       780: 
                    781: double_or_STRING: STRING {
1.238     misha     782:        // optimized OP_STRING => OP_VALUE for doubles
1.214     paf       783:        maybe_change_string_literal_to_double_literal(*($$=$1));
                    784: };
1.55      paf       785: 
1.65      paf       786: string_inside_quotes_value: maybe_codes {
1.238     misha     787: #ifdef OPTIMIZE_BYTECODE_STRING_POOL
                    788:        // it brakes ^if(" 09 "){...}
                    789:        YYSTYPE code=$1;
                    790:        $$=N();
1.239     misha     791:        if(code->count()==3 && maybe_change_first_opcode(*code, OP::OP_STRING__WRITE, OP::OP_VALUE)){
1.238     misha     792:                // optimized OP_STRING__WRITE+origin+value => OP_VALUE+origin+value without starting OP_STRING_POOL
                    793:                P(*$$, *code);
                    794:        } else {
                    795:                OA(*$$, OP::OP_STRING_POOL, code); /* stack: empty write context */
                    796:        }
                    797: #else
1.206     paf       798:        $$=N();
1.229     misha     799:        OA(*$$, OP::OP_STRING_POOL, $1); /* stack: empty write context */
1.238     misha     800: #endif
1.183     paf       801:        /* some code that writes to that context */
                    802:        /* context=pop; stack: context.get_string() */
1.53      paf       803: };
1.1       paf       804: 
1.27      paf       805: /* basics */
1.1       paf       806: 
1.81      paf       807: write_string: STRING {
1.238     misha     808:        // optimized OP_STRING+OP_WRITE_VALUE => OP_STRING__WRITE
1.259     misha     809:        change_string_literal_to_write_string_literal(*($$=$1));
1.54      paf       810: };
                    811: 
1.261     moko      812: empty_value: /* empty */ { $$=VL(/*we know that we will not change it*/const_cast<VString*>(&vempty), 0, 0, 0); }
1.259     misha     813: true_value: "true" { $$ = VL(/*we know that we will not change it*/const_cast<VBool*>(&vtrue), 0, 0, 0); }
                    814: false_value: "false" { $$ = VL(/*we know that we will not change it*/const_cast<VBool*>(&vfalse), 0, 0, 0); }
1.216     paf       815: 
1.259     misha     816: empty: /* empty */ { $$=N(); };
1.1       paf       817: 
                    818: %%
1.105     paf       819: #endif
1.1       paf       820: 
                    821: /*
                    822:        000$111(2222)00 
                    823:                000$111{3333}00
1.9       paf       824:        $,^: push,=0
1.1       paf       825:        1:( { break=pop
                    826:        2:( )  pop
                    827:        3:{ }  pop
                    828: 
                    829:        000^111(2222)4444{33333}4000
1.9       paf       830:        $,^: push,=0
1.1       paf       831:        1:( { break=pop
                    832:        2:( )=4
                    833:        3:{ }=4
                    834:                4:[^({]=pop
                    835: */
                    836: 
1.206     paf       837: inline void ungetc(Parse_control& pc, uint last_line_end_col) {
                    838:        pc.source--;
                    839:        if(pc.pos.col==0) {
                    840:                --pc.pos.line; pc.pos.col=last_line_end_col;
                    841:        } else
                    842:                --pc.pos.col;
                    843: 
                    844: }
                    845: static int yylex(YYSTYPE *lvalp, void *apc) {
                    846:        register Parse_control& pc=*static_cast<Parse_control*>(apc);
                    847: 
                    848:        #define lexical_brackets_nestage pc.brackets_nestages[pc.ls_sp]
1.48      paf       849:        #define RC {result=c; goto break2; }
1.1       paf       850: 
1.206     paf       851:        register int c;
                    852:        int result;
1.1       paf       853:        
1.206     paf       854:        if(pc.pending_state) {
                    855:                result=pc.pending_state;
                    856:                pc.pending_state=0;
1.1       paf       857:                return result;
                    858:        }
                    859:        
1.206     paf       860:        const char *begin=pc.source;
                    861:        Pos begin_pos=pc.pos;
1.91      paf       862:        const char *end;
1.67      paf       863:        int skip_analized=0;
1.50      paf       864:        while(true) {
1.206     paf       865:                c=*(end=(pc.source++));
                    866: //             fprintf(stderr, "\nchar: %c %02X; nestage: %d, sp=%d", c, c, lexical_brackets_nestage, pc.sp);
1.1       paf       867: 
1.208     paf       868:                if(c=='\n')
1.206     paf       869:                        pc.pos_next_line();
1.208     paf       870:                else
1.206     paf       871:                        pc.pos_next_c(c);
1.208     paf       872: //             fprintf(stderr, "\nchar: %c file(%d:%d)", c, pc.pos.line, pc.pos.col);
1.73      paf       873: 
1.208     paf       874:                if(pc.pos.col==0+1 && c=='@') {
1.206     paf       875:                        if(pc.ls==LS_DEF_SPECIAL_BODY) {
1.175     paf       876:                                // @SPECIAL
                    877:                                // ...
                    878:                                // @<here = 
1.206     paf       879:                                pop_LS(pc); // exiting from LS_DEF_SPECIAL_BODY state
1.175     paf       880:                        } // continuing checks
1.206     paf       881:                        if(pc.ls==LS_USER) {
                    882:                                push_LS(pc, LS_DEF_NAME);
1.171     parser    883:                                RC;
1.175     paf       884:                        } else // @ in first column inside some code [when could that be?]
1.171     parser    885:                                result=BAD_METHOD_DECL_START;
                    886:                        goto break2;
1.209     paf       887:                }
                    888:                if(c=='^') {
1.206     paf       889:                        if(pc.ls==LS_METHOD_AFTER) {
1.203     paf       890:                                // handle after-method situation
1.206     paf       891:                                pop_LS(pc);
1.203     paf       892:                                result=EON;
                    893:                                skip_analized=-1; // return to punctuation afterwards to assure it's literality
                    894:                                goto break2;
                    895:                        }
1.206     paf       896:                        switch(pc.ls) {
1.169     parser    897: case LS_EXPRESSION_VAR_NAME_WITH_COLON:
                    898: case LS_EXPRESSION_VAR_NAME_WITHOUT_COLON:
                    899: case LS_VAR_NAME_SIMPLE_WITH_COLON:
                    900: case LS_VAR_NAME_SIMPLE_WITHOUT_COLON:
                    901: case LS_VAR_NAME_CURLY:
                    902: case LS_METHOD_NAME:
1.194     paf       903: case LS_USER_COMMENT:
1.169     parser    904: case LS_DEF_COMMENT:
                    905:        // no literals in names, please
                    906:        break;
                    907: default:
1.206     paf       908:                        switch(*pc.source) {
1.165     parser    909:                        // ^escaping some punctuators
1.228     misha     910:                        case '^': case '$': case ';': case '@':
1.126     paf       911:                        case '(': case ')':
1.48      paf       912:                        case '[': case ']':
                    913:                        case '{': case '}':
1.172     parser    914:                        case '"':  case ':':
1.40      paf       915:                                if(end!=begin) {
1.206     paf       916:                                        if(!pc.string_start)
                    917:                                                pc.string_start=begin_pos;
1.40      paf       918:                                        // append piece till ^
1.206     paf       919:                                        pc.string.append_strdup_know_length(begin, end-begin);
1.40      paf       920:                                }
1.63      paf       921:                                // reset piece 'begin' position & line
1.206     paf       922:                                begin=pc.source; // ->punctuation
                    923:                                begin_pos=pc.pos;
1.203     paf       924:                                // skip over _ after ^
1.206     paf       925:                                pc.source++;  pc.pos.col++;
1.203     paf       926:                                // skip analysis = forced literal
                    927:                                continue;
1.114     paf       928: 
                    929:                        // converting ^#HH into char(hex(HH))
                    930:                        case '#':
                    931:                                if(end!=begin) {
1.206     paf       932:                                        if(!pc.string_start)
                    933:                                                pc.string_start=begin_pos;
1.114     paf       934:                                        // append piece till ^
1.206     paf       935:                                        pc.string.append_strdup_know_length(begin, end-begin);
1.114     paf       936:                                }
                    937:                                // #HH ?
1.228     misha     938:                                if(pc.source[1] && isxdigit(pc.source[1]) && pc.source[2] && isxdigit(pc.source[2])) {
1.218     paf       939:                                        char c=(char)(
1.206     paf       940:                                                hex_value[(unsigned char)pc.source[1]]*0x10+
1.218     paf       941:                                                hex_value[(unsigned char)pc.source[2]]);
1.206     paf       942:                                        if(c==0) {
1.114     paf       943:                                                result=BAD_HEX_LITERAL;
                    944:                                                goto break2; // wrong hex value[no ^#00 chars allowed]: bail out
                    945:                                        }
                    946:                                        // append char(hex(HH))
1.206     paf       947:                                        pc.string.append(c);
1.114     paf       948:                                        // skip over ^#HH
1.206     paf       949:                                        pc.source+=3;
                    950:                                        pc.pos.col+=3;
1.114     paf       951:                                        // reset piece 'begin' position & line
1.206     paf       952:                                        begin=pc.source; // ->after ^#HH
                    953:                                        begin_pos=pc.pos;
1.203     paf       954:                                        // skip analysis = forced literal
1.114     paf       955:                                        continue;
                    956:                                }
1.228     misha     957:                                // just escaped char
                    958:                                // reset piece 'begin' position & line
                    959:                                begin=pc.source;
                    960:                                begin_pos=pc.pos;
                    961:                                // skip over _ after ^
                    962:                                pc.source++;  pc.pos.col++;
                    963:                                // skip analysis = forced literal
                    964:                                continue;
1.1       paf       965:                        }
1.169     parser    966:                        break;
1.203     paf       967:                        }
1.169     parser    968:                }
1.113     paf       969:                // #comment  start skipping
1.206     paf       970:                if(c=='#' && pc.pos.col==1) {
1.112     paf       971:                        if(end!=begin) {
1.206     paf       972:                                if(!pc.string_start)
                    973:                                        pc.string_start=begin_pos;
1.112     paf       974:                                // append piece till #
1.206     paf       975:                                pc.string.append_strdup_know_length(begin, end-begin);
1.112     paf       976:                        }
                    977:                        // fall into COMMENT lexical state [wait for \n]
1.206     paf       978:                        push_LS(pc, LS_USER_COMMENT);
1.175     paf       979:                        continue;
1.112     paf       980:                }
1.206     paf       981:                switch(pc.ls) {
1.10      paf       982: 
                    983:                // USER'S = NOT OURS
1.1       paf       984:                case LS_USER:
1.206     paf       985:                case LS_NAME_SQUARE_PART: // name.[here].xxx
                    986:                        if(pc.trim_bof)
1.153     parser    987:                                switch(c) {
                    988:                                case '\n': case ' ': case '\t':
1.206     paf       989:                                        begin=pc.source;
                    990:                                        begin_pos=pc.pos;
1.152     parser    991:                                        continue; // skip it
1.153     parser    992:                                default:
1.206     paf       993:                                        pc.trim_bof=false;
1.152     parser    994:                                }
1.48      paf       995:                        switch(c) {
                    996:                        case '$':
1.206     paf       997:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf       998:                                RC;
                    999:                        case '^':
1.206     paf      1000:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1001:                                RC;
1.166     parser   1002:                        case ']':
1.206     paf      1003:                                if(pc.ls==LS_NAME_SQUARE_PART)
1.166     parser   1004:                                        if(--lexical_brackets_nestage==0) {// $name.[co<]?>de<]?>
1.206     paf      1005:                                                pop_LS(pc); // $name.[co<]>de<]!>
1.166     parser   1006:                                                RC;
                   1007:                                        }
1.160     parser   1008:                                break;
1.166     parser   1009:                        case '[': // $name.[co<[>de]
1.206     paf      1010:                                if(pc.ls==LS_NAME_SQUARE_PART)
1.166     parser   1011:                                        lexical_brackets_nestage++;
1.161     parser   1012:                                break;
1.112     paf      1013:                        }
1.209     paf      1014:                        if(pc.explicit_result && c)
                   1015:                                switch(c) {
                   1016:                                case '\n': case ' ': case '\t':
                   1017:                                        begin=pc.source;
                   1018:                                        begin_pos=pc.pos;
                   1019:                                        continue; // skip it
                   1020:                                default:
                   1021:                                        result=BAD_NONWHITESPACE_CHARACTER_IN_EXPLICIT_RESULT_MODE;
                   1022:                                        goto break2;
                   1023:                                }
1.112     paf      1024:                        break;
                   1025:                        
                   1026:                // #COMMENT
1.194     paf      1027:                case LS_USER_COMMENT:
1.112     paf      1028:                        if(c=='\n') {
                   1029:                                // skip comment
1.206     paf      1030:                                begin=pc.source;
                   1031:                                begin_pos=pc.pos;
1.112     paf      1032: 
1.206     paf      1033:                                pop_LS(pc);
1.112     paf      1034:                                continue;
1.1       paf      1035:                        }
1.48      paf      1036:                        break;
                   1037:                        
                   1038:                // STRING IN EXPRESSION
1.145     parser   1039:                case LS_EXPRESSION_STRING_QUOTED:
                   1040:                case LS_EXPRESSION_STRING_APOSTROFED:
1.48      paf      1041:                        switch(c) {
                   1042:                        case '"':
1.145     parser   1043:                        case '\'':
                   1044:                                if(
1.206     paf      1045:                                        pc.ls == LS_EXPRESSION_STRING_QUOTED && c=='"' ||
                   1046:                                        pc.ls == LS_EXPRESSION_STRING_APOSTROFED && c=='\'') {
                   1047:                                        pop_LS(pc); //"abc". | 'abc'.
1.145     parser   1048:                                        RC;
                   1049:                                }
                   1050:                                break;
1.48      paf      1051:                        case '$':
1.206     paf      1052:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1053:                                RC;
                   1054:                        case '^':
1.206     paf      1055:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1056:                                RC;
1.10      paf      1057:                        }
                   1058:                        break;
                   1059: 
                   1060:                // METHOD DEFINITION
                   1061:                case LS_DEF_NAME:
1.48      paf      1062:                        switch(c) {
                   1063:                        case '[':
1.206     paf      1064:                                pc.ls=LS_DEF_PARAMS;
1.48      paf      1065:                                RC;
                   1066:                        case '\n':
1.206     paf      1067:                                pc.ls=LS_DEF_SPECIAL_BODY;
1.48      paf      1068:                                RC;
1.10      paf      1069:                        }
                   1070:                        break;
1.48      paf      1071: 
1.10      paf      1072:                case LS_DEF_PARAMS:
1.48      paf      1073:                        switch(c) {
1.192     paf      1074:                        case '$': // common error
1.193     paf      1075:                                result=BAD_METHOD_PARAMETER_NAME_CHARACTER;
                   1076:                                goto break2;
1.48      paf      1077:                        case ';':
                   1078:                                RC;
                   1079:                        case ']':
1.206     paf      1080:                                pc.ls=*pc.source=='['?LS_DEF_LOCALS:LS_DEF_COMMENT;
1.48      paf      1081:                                RC;
1.49      paf      1082:                        case '\n': // wrong. bailing out
1.206     paf      1083:                                pop_LS(pc);
1.48      paf      1084:                                RC;
1.10      paf      1085:                        }
                   1086:                        break;
1.48      paf      1087: 
1.10      paf      1088:                case LS_DEF_LOCALS:
1.48      paf      1089:                        switch(c) {
                   1090:                        case '[':
                   1091:                        case ';':
                   1092:                                RC;
                   1093:                        case ']':
1.206     paf      1094:                                pc.ls=LS_DEF_COMMENT;
1.48      paf      1095:                                RC;
                   1096:                        case '\n': // wrong. bailing out
1.206     paf      1097:                                pop_LS(pc);
1.48      paf      1098:                                RC;
1.10      paf      1099:                        }
                   1100:                        break;
1.48      paf      1101: 
1.10      paf      1102:                case LS_DEF_COMMENT:
                   1103:                        if(c=='\n') {
1.206     paf      1104:                                pop_LS(pc);
1.48      paf      1105:                                RC;
1.37      paf      1106:                        }
                   1107:                        break;
                   1108: 
1.48      paf      1109:                case LS_DEF_SPECIAL_BODY:
1.175     paf      1110:                        if(c=='\n')
1.48      paf      1111:                                RC;
                   1112:                        break;
                   1113: 
                   1114:                // (EXPRESSION)
1.69      paf      1115:                case LS_VAR_ROUND:
                   1116:                case LS_METHOD_ROUND:
1.48      paf      1117:                        switch(c) {
                   1118:                        case ')':
                   1119:                                if(--lexical_brackets_nestage==0)
1.206     paf      1120:                                        if(pc.ls==LS_METHOD_ROUND) // method round param ended
                   1121:                                                pc.ls=LS_METHOD_AFTER; // look for method end
                   1122:                                        else // pc.ls==LS_VAR_ROUND // variable constructor ended
                   1123:                                                pop_LS(pc); // return to normal life
1.48      paf      1124:                                RC;
1.194     paf      1125:                        case '#': // comment start skipping
                   1126:                                if(end!=begin) {
1.206     paf      1127:                                        if(!pc.string_start)
                   1128:                                                pc.string_start=begin_pos;
1.194     paf      1129:                                        // append piece till #
1.206     paf      1130:                                        pc.string.append_strdup_know_length(begin, end-begin);
1.194     paf      1131:                                }
                   1132:                                // fall into COMMENT lexical state [wait for \n]
1.206     paf      1133:                                push_LS(pc, LS_EXPRESSION_COMMENT);
1.194     paf      1134:                                lexical_brackets_nestage=1;
                   1135:                                continue;
1.48      paf      1136:                        case '$':
1.206     paf      1137:                                push_LS(pc, LS_EXPRESSION_VAR_NAME_WITH_COLON);                         
1.48      paf      1138:                                RC;
                   1139:                        case '^':
1.206     paf      1140:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1141:                                RC;
                   1142:                        case '(':
                   1143:                                lexical_brackets_nestage++;
                   1144:                                RC;
1.67      paf      1145:                        case '-':
1.206     paf      1146:                                switch(*pc.source) {
1.127     paf      1147:                                case 'f': // -f
1.67      paf      1148:                                        skip_analized=1;
                   1149:                                        result=FEXISTS;
1.127     paf      1150:                                        goto break2;
                   1151:                                case 'd': // -d
                   1152:                                        skip_analized=1;
                   1153:                                        result=DEXISTS;
                   1154:                                        goto break2;
1.191     paf      1155:                                default: // minus
1.67      paf      1156:                                        result=c;
1.127     paf      1157:                                        goto break2;
                   1158:                                }
1.67      paf      1159:                                goto break2;
1.173     paf      1160:                        case '+': case '*': case '/': case '%': case '\\':
1.58      paf      1161:                        case '~':
1.48      paf      1162:                        case ';':
                   1163:                                RC;
1.193     paf      1164:                        case '&': case '|':
1.206     paf      1165:                                if(*pc.source==c) { // && ||
1.193     paf      1166:                                        result=c=='&'?LAND:LOR;
1.67      paf      1167:                                        skip_analized=1;
1.58      paf      1168:                                } else
                   1169:                                        result=c;
                   1170:                                goto break2;
1.193     paf      1171:                        case '!':
1.206     paf      1172:                                switch(pc.source[0]) { 
1.193     paf      1173:                                case '|': // !| !||
                   1174:                                        skip_analized=1;
1.206     paf      1175:                                        if(pc.source[1]=='|') {
1.193     paf      1176:                                                skip_analized++;
                   1177:                                                result=LXOR;
                   1178:                                        } else
                   1179:                                                result=NXOR;
                   1180:                                        goto break2;
                   1181:                                case '=': // !=
                   1182:                                        skip_analized=1;
                   1183:                                        result=NNE; 
                   1184:                                        goto break2;
                   1185:                                }
                   1186:                                RC;
1.195     paf      1187: 
                   1188:                        case '<': // <<, <=, <
1.206     paf      1189:                                switch(*pc.source) {
1.195     paf      1190:                                case '<': // <[<]
                   1191:                                        skip_analized=1; result=NSL; break;
                   1192:                                case '=': // <[=]
                   1193:                                        skip_analized=1; result=NLE; break;
                   1194:                                default: // <[]
                   1195:                                        result=c; break;
                   1196:                                }
                   1197:                                goto break2;
                   1198:                        case '>': // >>, >=, >
1.206     paf      1199:                                switch(*pc.source) {
1.195     paf      1200:                                case '>': // >[>]
                   1201:                                        skip_analized=1; result=NSR; break;
                   1202:                                case '=': // >[=]
                   1203:                                        skip_analized=1; result=NGE; break;
                   1204:                                default: // >[]
                   1205:                                        result=c; break;
                   1206:                                }
                   1207:                                goto break2;
                   1208:                        case '=': // ==
1.206     paf      1209:                                switch(*pc.source) {
1.195     paf      1210:                                case '=': // =[=]
                   1211:                                        skip_analized=1; result=NEQ; break;
                   1212:                                default: // =[]
                   1213:                                        result=c; break; // not used now
                   1214:                                }
1.58      paf      1215:                                goto break2;
1.195     paf      1216: 
1.48      paf      1217:                        case '"':
1.206     paf      1218:                                push_LS(pc, LS_EXPRESSION_STRING_QUOTED);
1.145     parser   1219:                                RC;
                   1220:                        case '\'':
1.206     paf      1221:                                push_LS(pc, LS_EXPRESSION_STRING_APOSTROFED);
1.48      paf      1222:                                RC;
1.50      paf      1223:                        case 'l': case 'g': case 'e': case 'n':
1.51      paf      1224:                                if(end==begin) // right after whitespace
1.206     paf      1225:                                        if(isspace(pc.source[1])) {
                   1226:                                                switch(*pc.source) {
1.117     paf      1227:                                                        //                                      case '?': // ok [and bad cases, yacc would bark at them]
                   1228:                                                case 't': // lt gt [et nt]
                   1229:                                                        result=c=='l'?SLT:c=='g'?SGT:BAD_STRING_COMPARISON_OPERATOR;
                   1230:                                                        skip_analized=1;
                   1231:                                                        goto break2;
                   1232:                                                case 'e': // le ge ne [ee]
                   1233:                                                        result=c=='l'?SLE:c=='g'?SGE:c=='n'?SNE:BAD_STRING_COMPARISON_OPERATOR;
                   1234:                                                        skip_analized=1;
                   1235:                                                        goto break2;
                   1236:                                                case 'q': // eq [lq gq nq]
                   1237:                                                        result=c=='e'?SEQ:BAD_STRING_COMPARISON_OPERATOR;
                   1238:                                                        skip_analized=1;
                   1239:                                                        goto break2;
                   1240:                                                }
1.67      paf      1241:                                        }
                   1242:                                break;
                   1243:                        case 'i':
                   1244:                                if(end==begin) // right after whitespace
1.206     paf      1245:                                        if(isspace(pc.source[1])) {
                   1246:                                                switch(pc.source[0]) {
1.117     paf      1247:                                                case 'n': // in
1.95      paf      1248:                                                        skip_analized=1;
                   1249:                                                        result=IN;
                   1250:                                                        goto break2;
1.117     paf      1251:                                                case 's': // is
1.95      paf      1252:                                                        skip_analized=1;
                   1253:                                                        result=IS;
                   1254:                                                        goto break2;
                   1255:                                                }
1.67      paf      1256:                                        }
                   1257:                                break;
                   1258:                        case 'd':
                   1259:                                if(end==begin) // right after whitespace
1.206     paf      1260:                                        if(pc.source[0]=='e' && pc.source[1]=='f') { // def
1.225     misha    1261:                                                switch(pc.source[2]){
                   1262:                                                case ' ': case '\t': case '\n': case '"': case '\'': case '^': case '$': // non-quoted string without whitespace after 'def' is not allowed
                   1263:                                                        skip_analized=2;
                   1264:                                                        result=DEF;
                   1265:                                                        goto break2;
                   1266:                                                }
                   1267:                                                // error: incorrect char after 'def'
1.50      paf      1268:                                        }
1.48      paf      1269:                                break;
1.216     paf      1270:                        case 't':
                   1271:                                if(end==begin) // right after whitespace
1.225     misha    1272:                                        if(pc.source[0]=='r' && pc.source[1]=='u' && pc.source[2]=='e') { // true
1.216     paf      1273:                                                skip_analized=3;
                   1274:                                                result=LITERAL_TRUE;
                   1275:                                                goto break2;
                   1276:                                        }
                   1277:                                break;
                   1278:                        case 'f':
                   1279:                                if(end==begin) // right after whitespace
1.225     misha    1280:                                        if(pc.source[0]=='a' && pc.source[1]=='l' && pc.source[2]=='s' && pc.source[3]=='e') { // false
1.216     paf      1281:                                                skip_analized=4;
                   1282:                                                result=LITERAL_FALSE;
                   1283:                                                goto break2;
                   1284:                                        }
                   1285:                                break;
1.48      paf      1286:                        case ' ': case '\t': case '\n':
1.63      paf      1287:                                if(end!=begin) { // there were a string after previous operator?
                   1288:                                        result=0; // return that string
                   1289:                                        goto break2;
1.48      paf      1290:                                }
1.63      paf      1291:                                // that's a leading|traling space or after-operator-space
                   1292:                                // ignoring it
                   1293:                                // reset piece 'begin' position & line
1.206     paf      1294:                                begin=pc.source; // after whitespace char
                   1295:                                begin_pos=pc.pos;
1.48      paf      1296:                                continue;
1.1       paf      1297:                        }
                   1298:                        break;
1.194     paf      1299:                case LS_EXPRESSION_COMMENT:
                   1300:                        if(c=='(')
                   1301:                                lexical_brackets_nestage++;
                   1302:                        
1.206     paf      1303:                        switch(*pc.source) {
1.194     paf      1304:                        case '\n': case ')':
1.206     paf      1305:                                if(*pc.source==')')
1.194     paf      1306:                                        if(--lexical_brackets_nestage!=0)
                   1307:                                                continue;
                   1308: 
                   1309:                                // skip comment
1.206     paf      1310:                                begin=pc.source;
                   1311:                                begin_pos=pc.pos;
1.194     paf      1312: 
1.206     paf      1313:                                pop_LS(pc);
1.194     paf      1314:                                continue;
                   1315:                        }
                   1316:                        break;
1.1       paf      1317: 
1.10      paf      1318:                // VARIABLE GET/PUT/WITH
1.166     parser   1319:                case LS_VAR_NAME_SIMPLE_WITH_COLON: 
                   1320:                case LS_VAR_NAME_SIMPLE_WITHOUT_COLON:
                   1321:                case LS_EXPRESSION_VAR_NAME_WITH_COLON: 
                   1322:                case LS_EXPRESSION_VAR_NAME_WITHOUT_COLON:
                   1323:                        if(
1.206     paf      1324:                                pc.ls==LS_EXPRESSION_VAR_NAME_WITH_COLON ||
                   1325:                                pc.ls==LS_EXPRESSION_VAR_NAME_WITHOUT_COLON) {
1.181     paf      1326:                                // name in expr ends also before 
1.48      paf      1327:                                switch(c) {
1.181     paf      1328:                                // expression minus
1.92      paf      1329:                                case '-': 
1.181     paf      1330:                                // expression integer division
                   1331:                                case '\\':
1.206     paf      1332:                                        pop_LS(pc);
                   1333:                                        pc.ungetc();
1.48      paf      1334:                                        result=EON;
                   1335:                                        goto break2;
                   1336:                                }
                   1337:                        }
1.166     parser   1338:                        if(
1.206     paf      1339:                                pc.ls==LS_VAR_NAME_SIMPLE_WITHOUT_COLON ||
                   1340:                                pc.ls==LS_EXPRESSION_VAR_NAME_WITHOUT_COLON) {
1.142     parser   1341:                                // name already has ':', stop before next 
                   1342:                                switch(c) {
                   1343:                                case ':': 
1.206     paf      1344:                                        pop_LS(pc);
                   1345:                                        pc.ungetc();
1.142     parser   1346:                                        result=EON;
                   1347:                                        goto break2;
                   1348:                                }
                   1349:                        }
1.48      paf      1350:                        switch(c) {
                   1351:                        case 0:
                   1352:                        case ' ': case '\t': case '\n':
                   1353:                        case ';':
1.126     paf      1354:                        case ']': case '}': case ')': 
                   1355:                        case '"': case '\'':
1.139     parser   1356:                        case '<': case '>':  // these stand for HTML brackets AND expression binary ops
1.253     misha    1357:                        case '+': case '*': case '/': case '\\': case '%': 
1.92      paf      1358:                        case '&': case '|': 
                   1359:                        case '=': case '!':
1.99      paf      1360:                        // common delimiters
1.190     paf      1361:                        case ',': case '?': case '#':
1.220     paf      1362:                        // mysql column separators
                   1363:                        case '`':
1.139     parser   1364:                        // before call
                   1365:                        case '^': 
1.206     paf      1366:                                pop_LS(pc);
                   1367:                                pc.ungetc();
1.13      paf      1368:                                result=EON;
1.1       paf      1369:                                goto break2;
1.48      paf      1370:                        case '[':
1.162     parser   1371:                                // $name.<[>code]
1.206     paf      1372:                                if(pc.pos.col>1/*not first column*/ && (
1.163     parser   1373:                                        end[-1]=='$'/*was start of get*/ ||
                   1374:                                        end[-1]==':'/*was class name delim */ ||
                   1375:                                        end[-1]=='.'/*was name delim */
1.162     parser   1376:                                        )) {
1.206     paf      1377:                                        push_LS(pc, LS_NAME_SQUARE_PART);
1.162     parser   1378:                                        lexical_brackets_nestage=1;
                   1379:                                        RC;
                   1380:                                }
1.206     paf      1381:                                pc.ls=LS_VAR_SQUARE;
1.1       paf      1382:                                lexical_brackets_nestage=1;
1.48      paf      1383:                                RC;
                   1384:                        case '{':
                   1385:                                if(begin==end) { // ${name}, no need of EON, switching LS
1.206     paf      1386:                                        pc.ls=LS_VAR_NAME_CURLY; 
1.48      paf      1387:                                } else {
1.206     paf      1388:                                        pc.ls=LS_VAR_CURLY;
1.48      paf      1389:                                        lexical_brackets_nestage=1;
                   1390:                                }
1.69      paf      1391: 
1.48      paf      1392:                                RC;
                   1393:                        case '(':
1.206     paf      1394:                                pc.ls=LS_VAR_ROUND;
1.1       paf      1395:                                lexical_brackets_nestage=1;
1.48      paf      1396:                                RC;
                   1397:                        case '.': // name part delim
                   1398:                        case '$': // name part subvar
1.160     parser   1399:                        case ':': // class<:>name
1.166     parser   1400:                                // go to _WITHOUT_COLON state variant...
1.206     paf      1401:                                if(pc.ls==LS_VAR_NAME_SIMPLE_WITH_COLON)
                   1402:                                        pc.ls=LS_VAR_NAME_SIMPLE_WITHOUT_COLON;
                   1403:                                else if(pc.ls==LS_EXPRESSION_VAR_NAME_WITH_COLON)
                   1404:                                        pc.ls=LS_EXPRESSION_VAR_NAME_WITHOUT_COLON;
1.166     parser   1405:                                // ...stop before next ':'
1.48      paf      1406:                                RC;
1.1       paf      1407:                        }
                   1408:                        break;
1.48      paf      1409: 
1.1       paf      1410:                case LS_VAR_NAME_CURLY:
1.48      paf      1411:                        switch(c) {
1.162     parser   1412:                        case '[':
1.166     parser   1413:                                // ${name.<[>code]}
1.206     paf      1414:                                push_LS(pc, LS_NAME_SQUARE_PART);
1.160     parser   1415:                                lexical_brackets_nestage=1;
                   1416:                                RC;
1.48      paf      1417:                        case '}': // ${name} finished, restoring LS
1.206     paf      1418:                                pop_LS(pc);
1.48      paf      1419:                                RC;
                   1420:                        case '.': // name part delim
                   1421:                        case '$': // name part subvar
                   1422:                        case ':': // ':name' or 'class:name'
                   1423:                                RC;
1.1       paf      1424:                        }
                   1425:                        break;
1.48      paf      1426: 
                   1427:                case LS_VAR_SQUARE:
                   1428:                        switch(c) {
                   1429:                        case '$':
1.206     paf      1430:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1431:                                RC;
                   1432:                        case '^':
1.206     paf      1433:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1434:                                RC;
                   1435:                        case ']':
1.1       paf      1436:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1437:                                        pop_LS(pc);
1.48      paf      1438:                                        RC;
1.1       paf      1439:                                }
1.48      paf      1440:                                break;
                   1441:                        case ';': // operator_or_fmt;value delim
                   1442:                                RC;
                   1443:                        case '[':
                   1444:                                lexical_brackets_nestage++;
                   1445:                                break;
1.1       paf      1446:                        }
                   1447:                        break;
1.48      paf      1448: 
1.1       paf      1449:                case LS_VAR_CURLY:
1.48      paf      1450:                        switch(c) {
                   1451:                        case '$':
1.206     paf      1452:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1453:                                RC;
                   1454:                        case '^':
1.206     paf      1455:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1456:                                RC;
                   1457:                        case '}':
1.1       paf      1458:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1459:                                        pop_LS(pc);
1.48      paf      1460:                                        RC;
1.1       paf      1461:                                }
1.48      paf      1462:                                break;
                   1463:                        case '{':
1.1       paf      1464:                                lexical_brackets_nestage++;
1.48      paf      1465:                                break;
                   1466:                        }
1.1       paf      1467:                        break;
                   1468: 
1.10      paf      1469:                // METHOD CALL
1.1       paf      1470:                case LS_METHOD_NAME:
1.48      paf      1471:                        switch(c) {
                   1472:                        case '[':
1.166     parser   1473:                                // ^name.<[>code].xxx
1.206     paf      1474:                                if(pc.pos.col>1/*not first column*/ && (
1.163     parser   1475:                                        end[-1]=='^'/*was start of call*/ || // never, ^[ is literal...
                   1476:                                        end[-1]==':'/*was class name delim */ ||
                   1477:                                        end[-1]=='.'/*was name delim */
1.162     parser   1478:                                        )) {
1.206     paf      1479:                                        push_LS(pc, LS_NAME_SQUARE_PART);
1.162     parser   1480:                                        lexical_brackets_nestage=1;
                   1481:                                        RC;
                   1482:                                }
1.206     paf      1483:                                pc.ls=LS_METHOD_SQUARE;
1.1       paf      1484:                                lexical_brackets_nestage=1;
1.48      paf      1485:                                RC;
                   1486:                        case '{':
1.206     paf      1487:                                pc.ls=LS_METHOD_CURLY;
1.1       paf      1488:                                lexical_brackets_nestage=1;
1.48      paf      1489:                                RC;
1.69      paf      1490:                        case '(':
1.206     paf      1491:                                pc.ls=LS_METHOD_ROUND;
1.69      paf      1492:                                lexical_brackets_nestage=1;
                   1493:                                RC;
1.48      paf      1494:                        case '.': // name part delim 
                   1495:                        case '$': // name part subvar
                   1496:                        case ':': // ':name' or 'class:name'
1.170     parser   1497:                        case '^': // ^abc^xxx wrong. bailing out
                   1498:                        case ']': case '}': case ')': // ^abc]}) wrong. bailing out
1.207     paf      1499:                        case ' ': // ^if ( wrong. bailing out
1.48      paf      1500:                                RC;
1.1       paf      1501:                        }
                   1502:                        break;
1.48      paf      1503: 
                   1504:                case LS_METHOD_SQUARE:
                   1505:                        switch(c) {
                   1506:                        case '$':
1.206     paf      1507:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1508:                                RC;
                   1509:                        case '^':
1.206     paf      1510:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1511:                                RC;
                   1512:                        case ';': // param delim
                   1513:                                RC;
                   1514:                        case ']':
1.1       paf      1515:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1516:                                        pc.ls=LS_METHOD_AFTER;
1.48      paf      1517:                                        RC;
1.1       paf      1518:                                }
1.48      paf      1519:                                break;
                   1520:                        case '[':
1.1       paf      1521:                                lexical_brackets_nestage++;
1.48      paf      1522:                                break;
                   1523:                        }
1.1       paf      1524:                        break;
1.48      paf      1525: 
1.1       paf      1526:                case LS_METHOD_CURLY:
1.48      paf      1527:                        switch(c) {
                   1528:                        case '$':
1.206     paf      1529:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1530:                                RC;
                   1531:                        case '^':
1.206     paf      1532:                                push_LS(pc, LS_METHOD_NAME);
1.94      paf      1533:                                RC;
                   1534:                        case ';': // param delim
1.48      paf      1535:                                RC;
                   1536:                        case '}':
1.1       paf      1537:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1538:                                        pc.ls=LS_METHOD_AFTER;
1.48      paf      1539:                                        RC;
1.1       paf      1540:                                }
1.48      paf      1541:                                break;
                   1542:                        case '{':
1.1       paf      1543:                                lexical_brackets_nestage++;
1.48      paf      1544:                                break;
                   1545:                        }
1.209     paf      1546:                        if(pc.explicit_result && c)
                   1547:                                switch(c) {
                   1548:                                case '\n': case ' ': case '\t':
                   1549:                                        begin=pc.source;
                   1550:                                        begin_pos=pc.pos;
                   1551:                                        continue; // skip it
                   1552:                                default:
                   1553:                                        result=BAD_NONWHITESPACE_CHARACTER_IN_EXPLICIT_RESULT_MODE;
                   1554:                                        goto break2;
                   1555:                                }
1.1       paf      1556:                        break;
1.48      paf      1557: 
1.1       paf      1558:                case LS_METHOD_AFTER:
1.69      paf      1559:                        if(c=='[') {/* ][ }[ )[ */
1.206     paf      1560:                                pc.ls=LS_METHOD_SQUARE;
1.1       paf      1561:                                lexical_brackets_nestage=1;
1.48      paf      1562:                                RC;
1.1       paf      1563:                        }                                          
1.69      paf      1564:                        if(c=='{') {/* ]{ }{ ){ */
1.206     paf      1565:                                pc.ls=LS_METHOD_CURLY;
1.69      paf      1566:                                lexical_brackets_nestage=1;
                   1567:                                RC;
                   1568:                        }                                          
                   1569:                        if(c=='(') {/* ]( }( )( */
1.206     paf      1570:                                pc.ls=LS_METHOD_ROUND;
1.1       paf      1571:                                lexical_brackets_nestage=1;
1.48      paf      1572:                                RC;
1.1       paf      1573:                        }                                          
1.206     paf      1574:                        pop_LS(pc);
                   1575:                        pc.ungetc();
1.13      paf      1576:                        result=EON;
1.1       paf      1577:                        goto break2;
                   1578:                }
1.9       paf      1579:                if(c==0) {
1.1       paf      1580:                        result=-1;
                   1581:                        break;
                   1582:                }
                   1583:        }
                   1584: 
                   1585: break2:
1.59      paf      1586:        if(end!=begin) { // there is last piece?
1.258     misha    1587:                if(c=='@' || c==0) // we are before LS_DEF_NAME or EOF?
                   1588:                        while(end!=begin && end[-1]=='\n') // trim all empty lines before LS_DEF_NAME and EOF
1.137     parser   1589:                                end--;
1.206     paf      1590:                if(end!=begin && pc.ls!=LS_USER_COMMENT) { // last piece still alive and not comment?
                   1591:                        if(!pc.string_start)
                   1592:                                pc.string_start=begin_pos;
1.59      paf      1593:                        // append it
1.206     paf      1594:                        pc.string.append_strdup_know_length(begin, end-begin);
1.30      paf      1595:                }
1.59      paf      1596:        }
1.206     paf      1597:        if(!pc.string.is_empty()) { // something accumulated?
                   1598:                // create STRING value: array of OP_VALUE+origin+vstring
                   1599:                *lvalp=VL(
                   1600:                        new VString(*new String(pc.string, String::L_CLEAN)),
                   1601:                        pc.file_no, pc.string_start.line, pc.string_start.col);
1.10      paf      1602:                // new pieces storage
1.206     paf      1603:                pc.string.clear();
                   1604:                pc.string_start.clear();
1.58      paf      1605:                // make current result be pending for next call, return STRING for now
1.206     paf      1606:                pc.pending_state=result;  result=STRING;
1.58      paf      1607:        }
1.67      paf      1608:        if(skip_analized) {
1.206     paf      1609:                pc.source+=skip_analized;  pc.pos.col+=skip_analized;
1.1       paf      1610:        }
1.58      paf      1611:        return result;
1.1       paf      1612: }
                   1613: 
1.206     paf      1614: static int real_yyerror(Parse_control *pc, char *s) {  // Called by yyparse on error
1.114     paf      1615:           strncpy(PC.error, s, MAX_STRING);
1.1       paf      1616:           return 1;
1.110     paf      1617: }
1.1       paf      1618: 
1.110     paf      1619: static void yyprint(FILE *file, int type, YYSTYPE value) {
                   1620:        if(type==STRING)
1.206     paf      1621:                fprintf(file, " \"%s\"", LA2S(*value)->cstr());
1.110     paf      1622: }

E-mail: