Annotation of parser3/src/main/compile.y, revision 1.295

1.168     parser      1: %{
1.105     paf         2: /** @file
1.106     paf         3:        Parser: compiler(lexical parser and grammar).
                      4: 
1.294     moko        5:        Copyright (c) 2001-2023 Art. Lebedev Studio (http://www.artlebedev.com)
                      6:        Authors: Konstantin Morshnev <moko@design.ru>, Alexandr Petrosian <paf@design.ru>
1.217     paf         7: 
1.262     moko        8:        
1.88      paf         9: */
                     10: 
1.295   ! moko       11: volatile const char * IDENT_COMPILE_Y = "$Id: compile.y,v 1.294 2023/09/26 20:49:09 moko Exp $";
1.262     moko       12: 
1.106     paf        13: /**
                     14:        @todo parser4: 
                     15:        - cache compiled code from request to request. to do that...
                     16:                -#:     make method definitions, @CLASS, @BASE, @USE instructions,
1.88      paf        17:                        which would be executed afterwards, and actions
                     18:                        now performed at compile time would be delayed to run time.
1.106     paf        19:                -#:     make cache expiration on time and on disk-change of class source
                     20:                -#:     in apache use subpools for compiled class storage
                     21:                -#:     in iis make up specialized Pool object for that
1.24      paf        22: */
                     23: 
1.206     paf        24: #define YYSTYPE  ArrayOperation* 
1.9       paf        25: #define YYDEBUG  1
1.271     moko       26: #define YYERROR_VERBOSE  1
                     27: #define yyerror(pc, msg)  real_yyerror(pc, msg)
1.9       paf        28: #define YYPRINT(file, type, value)  yyprint(file, type, value)
1.269     moko       29: #define YYMALLOC pa_malloc
                     30: #define YYFREE pa_free
1.1       paf        31: 
1.206     paf        32: // includes
                     33: 
1.1       paf        34: #include "compile_tools.h"
1.8       paf        35: #include "pa_value.h"
1.12      paf        36: #include "pa_request.h"
1.39      paf        37: #include "pa_vobject.h"
1.52      paf        38: #include "pa_vdouble.h"
1.98      paf        39: #include "pa_globals.h"
1.200     paf        40: #include "pa_vmethod_frame.h"
1.39      paf        41: 
1.206     paf        42: // defines
                     43: 
1.280     moko       44: #define CLASS_NAME "CLASS"
1.97      paf        45: #define USE_CONTROL_METHOD_NAME "USE"
1.226     misha      46: #define OPTIONS_CONTROL_METHOD_NAME "OPTIONS"
1.1       paf        47: 
1.206     paf        48: // forwards
                     49: 
1.264     moko       50: static int real_yyerror(Parse_control* pc, const char* s);
1.206     paf        51: static void yyprint(FILE* file, int type, YYSTYPE value);
                     52: static int yylex(YYSTYPE* lvalp, void* pc);
1.1       paf        53: 
1.216     paf        54: static const VBool vfalse(false);
                     55: static const VBool vtrue(true);
1.261     moko       56: static const VString vempty;
1.216     paf        57: 
1.8       paf        58: // local convinient inplace typecast & var
1.205     paf        59: #undef PC
1.271     moko       60: #define PC  (*pc)
1.206     paf        61: #undef POOL
1.114     paf        62: #define POOL  (*PC.pool)
1.107     paf        63: #ifndef DOXYGEN
1.265     moko       64: 
1.292     moko       65: #define CLASS_ADD if(PC.class_add()){                                          \
                     66:        PC.error=pa_strcat(PC.cclass->type(), " - class is already defined");   \
                     67:        YYERROR;                                                                \
1.281     moko       68: }
                     69: 
1.292     moko       70: #define YYERROR3(header, value, footer) {              \
                     71:        PC.error=pa_strcat(header, value, footer);      \
                     72:        YYERROR;                                        \
                     73: }
                     74: 
                     75: #define YYERROR1(value) {                              \
                     76:        PC.error=value;                                 \
                     77:        YYERROR;                                        \
1.265     moko       78: }
                     79: 
1.1       paf        80: %}
                     81: 
1.271     moko       82: %pure-parser
                     83: %lex-param {Parse_control* pc}
                     84: %parse-param {Parse_control* pc}
1.1       paf        85: 
1.13      paf        86: %token EON
1.4       paf        87: %token STRING
1.1       paf        88: %token BOGUS
1.55      paf        89: 
1.58      paf        90: %token BAD_STRING_COMPARISON_OPERATOR
1.114     paf        91: %token BAD_HEX_LITERAL
1.171     parser     92: %token BAD_METHOD_DECL_START
1.193     paf        93: %token BAD_METHOD_PARAMETER_NAME_CHARACTER
1.58      paf        94: 
1.59      paf        95: %token LAND "&&"
1.58      paf        96: %token LOR "||"
1.193     paf        97: %token LXOR "!||"
                     98: %token NXOR "!|"
1.58      paf        99: 
                    100: %token NLE "<="
                    101: %token NGE ">="
                    102: %token NEQ "=="
                    103: %token NNE "!="
1.195     paf       104: %token NSL "<<"
                    105: %token NSR ">>"
1.58      paf       106: 
                    107: %token SLT "lt"
                    108: %token SGT "gt"
                    109: %token SLE "le"
                    110: %token SGE "ge"
                    111: %token SEQ "eq"
                    112: %token SNE "ne"
                    113: 
1.67      paf       114: %token DEF "def"
                    115: %token IN "in"
                    116: %token FEXISTS "-f"
1.127     paf       117: %token DEXISTS "-d"
1.95      paf       118: %token IS "is"
1.67      paf       119: 
1.216     paf       120: %token LITERAL_TRUE "true"
                    121: %token LITERAL_FALSE "false"
                    122: 
1.57      paf       123: /* logical */
1.193     paf       124: %left "!||"
1.57      paf       125: %left "||"
                    126: %left "&&"
1.131     paf       127: %left '<' '>' "<=" ">="   "lt" "gt" "le" "ge"
                    128: %left "==" "!="  "eq" "ne"
                    129: %left "is" "def" "in" "-f" "-d"
1.57      paf       130: 
                    131: /* bitwise */
1.193     paf       132: %left "!|"
1.131     paf       133: %left '|'
                    134: %left '&' 
1.202     paf       135: %left "<<"  ">>"
1.57      paf       136: 
1.56      paf       137: /* numerical */
1.202     paf       138: %left '+' '-'
                    139: %left '*' '/' '\\' '%'
                    140: %left NUNARY   /* unary - + */
                    141: 
                    142: /* out-of-group */
                    143: %left '~' /* bitwise */
                    144: %left '!'  /* logical */
1.1       paf       145: 
                    146: %%
1.195     paf       147: all:
1.10      paf       148:        one_big_piece {
1.284     moko      149:        Method* method=new Method(Method::CT_ANY, 0, 0 /*min, max numbered_params_count*/, 0 /*param_names*/, 0 /*local_names*/, $1 /*parser_code*/, 0 /*native_code*/, PC.cclass->is_vars_local());
1.251     misha     150:        PC.cclass->set_method(PC.alias_method(main_method_name), method);
1.10      paf       151: }
                    152: |      methods;
                    153: 
                    154: methods: method | methods method;
                    155: one_big_piece: maybe_codes;
                    156: 
1.34      paf       157: method: control_method | code_method;
                    158: 
                    159: control_method: '@' STRING '\n' 
1.132     paf       160:                                maybe_control_strings {
1.260     misha     161:        const String& command=LA2S(*$2)->trim(String::TRIM_END);
1.34      paf       162:        YYSTYPE strings_code=$4;
1.292     moko      163:        if(strings_code->count()<1*OPERATIONS_PER_OPVALUE)
                    164:                YYERROR3("@", command.cstr(), " is empty");
1.74      paf       165:        if(command==CLASS_NAME) {
1.206     paf       166:                if(strings_code->count()==1*OPERATIONS_PER_OPVALUE) {
1.265     moko      167:                        CLASS_ADD;
1.73      paf       168:                        // new class' name
1.260     misha     169:                        const String& name=LA2S(*strings_code)->trim(String::TRIM_END);
1.73      paf       170:                        // creating the class
1.288     moko      171:                        VStateless_class* cclass=new VClass(name.cstr(), PC.request.get_used_filespec(PC.file_no));
1.226     misha     172:                        PC.cclass_new=cclass;
1.266     misha     173:                        PC.append=false;
1.73      paf       174:                } else {
1.292     moko      175:                        YYERROR1("@" CLASS_NAME " must contain only one line with class name (contains more then one)");
1.34      paf       176:                }
1.130     paf       177:        } else if(command==USE_CONTROL_METHOD_NAME) {
1.265     moko      178:                CLASS_ADD;
1.273     moko      179:                for(size_t i=0; i<strings_code->count(); i+=OPERATIONS_PER_OPVALUE){
1.288     moko      180:                        PC.request.use_file(LA2S(*strings_code, i)->trim(String::TRIM_END), PC.request.get_used_filespec(PC.file_no), strings_code->get(i+1).origin);
1.273     moko      181:                }
1.130     paf       182:        } else if(command==BASE_NAME) {
1.292     moko      183:                if(PC.append)
                    184:                        YYERROR3("can't set base while appending methods to class '", PC.cclass->type(), "'");
1.265     moko      185:                CLASS_ADD;
1.292     moko      186:                if(PC.cclass->base_class()) // already changed from default?
                    187:                        YYERROR3("class already have a base '", PC.cclass->base_class()->type(), "'");
1.206     paf       188:                if(strings_code->count()==1*OPERATIONS_PER_OPVALUE) {
1.260     misha     189:                        const String& base_name=LA2S(*strings_code)->trim(String::TRIM_END);
1.283     moko      190:                        if(VStateless_class *base_class=PC.request.get_class(base_name)) {
1.206     paf       191:                                // @CLASS == @BASE sanity check
1.292     moko      192:                                if(PC.cclass==base_class)
                    193:                                        YYERROR1("@" CLASS_NAME " equals @" BASE_NAME);
1.283     moko      194:                                PC.cclass->get_class()->set_base(base_class);
1.206     paf       195:                        } else {
1.292     moko      196:                                YYERROR3("'", base_name.cstr(), "': undefined class in @" BASE_NAME);
1.73      paf       197:                        }
1.34      paf       198:                } else {
1.292     moko      199:                        YYERROR1("@" BASE_NAME " must contain sole name");
1.34      paf       200:                }
1.223     misha     201:        } else if(command==OPTIONS_CONTROL_METHOD_NAME) {
                    202:                for(size_t i=0; i<strings_code->count(); i+=OPERATIONS_PER_OPVALUE) {
1.260     misha     203:                        const String& option=LA2S(*strings_code, i)->trim(String::TRIM_END);
1.279     moko      204:                        if(option==Symbols::LOCALS_SYMBOL){
1.226     misha     205:                                PC.set_all_vars_local();
1.279     moko      206:                        } else if(option==Symbols::PARTIAL_SYMBOL){
1.230     misha     207:                                if(PC.cclass_new){
                    208:                                        if(VStateless_class* existed=PC.get_existed_class(PC.cclass_new)){
1.292     moko      209:                                                if(!PC.reuse_existed_class(existed))
                    210:                                                        YYERROR3("can't append methods to '", PC.cclass_new->type(), "' - the class wasn't marked as partial");
1.226     misha     211:                                        } else {
1.256     misha     212:                                                // marks the new class as partial. we will be able to add methods here later.
1.230     misha     213:                                                PC.cclass_new->set_partial();
1.226     misha     214:                                        }
1.230     misha     215:                                } else {
1.292     moko      216:                                        YYERROR1("'partial' option should be used straight after @" CLASS_NAME);
1.226     misha     217:                                }
1.279     moko      218:                        } else if(option==Symbols::STATIC_SYMBOL){
1.256     misha     219:                                PC.set_methods_call_type(Method::CT_STATIC);
1.279     moko      220:                        } else if(option==Symbols::DYNAMIC_SYMBOL){
1.256     misha     221:                                PC.set_methods_call_type(Method::CT_DYNAMIC);
1.223     misha     222:                        } else {
1.292     moko      223:                                YYERROR3("'", option.cstr(), "' invalid option. valid options are 'partial', 'locals', 'static' and 'dynamic'");
1.223     misha     224:                        }
                    225:                }
1.130     paf       226:        } else {
1.292     moko      227:                YYERROR3("'", command.cstr(), "' invalid special name. valid names are '" CLASS_NAME "', '" USE_CONTROL_METHOD_NAME "', '" BASE_NAME "' and '" OPTIONS_CONTROL_METHOD_NAME "'.");
1.34      paf       228:        }
                    229: };
1.132     paf       230: maybe_control_strings: empty | control_strings;
1.259     misha     231: control_strings: control_string | control_strings control_string { $$=$1; P(*$$, *$2); };
1.37      paf       232: control_string: maybe_string '\n';
                    233: maybe_string: empty | STRING;
1.34      paf       234: 
1.222     misha     235: code_method: '@' STRING bracketed_maybe_strings maybe_bracketed_strings maybe_comment '\n' { 
1.265     moko      236:        CLASS_ADD;
1.208     paf       237:        PC.explicit_result=false;
1.10      paf       238: 
                    239:        YYSTYPE params_names_code=$3;
1.206     paf       240:        ArrayString* params_names=0;
                    241:        if(int size=params_names_code->count()) {
                    242:                params_names=new ArrayString;
                    243:                for(int i=0; i<size; i+=OPERATIONS_PER_OPVALUE)
                    244:                        *params_names+=LA2S(*params_names_code, i);
1.75      paf       245:        }
1.10      paf       246: 
                    247:        YYSTYPE locals_names_code=$4;
1.206     paf       248:        ArrayString* locals_names=0;
1.284     moko      249:        bool all_vars_local=PC.cclass->is_vars_local();
                    250: 
1.206     paf       251:        if(int size=locals_names_code->count()) {
                    252:                locals_names=new ArrayString;
1.208     paf       253:                for(int i=0; i<size; i+=OPERATIONS_PER_OPVALUE) {
                    254:                        const String* local_name=LA2S(*locals_names_code, i);
1.279     moko      255:                        if(SYMBOLS_EQ(*local_name,RESULT_SYMBOL))
1.208     paf       256:                                PC.explicit_result=true;
1.279     moko      257:                        else if(SYMBOLS_EQ(*local_name,LOCALS_SYMBOL))
1.223     misha     258:                                all_vars_local=true;
1.208     paf       259:                        else
                    260:                                *locals_names+=local_name;
                    261:                }
1.75      paf       262:        }
1.10      paf       263: 
1.208     paf       264:        Method* method=new Method(
1.206     paf       265:                //name, 
1.257     misha     266:                GetMethodCallType(PC, *$2),
1.81      paf       267:                0, 0/*min,max numbered_params_count*/, 
1.76      paf       268:                params_names, locals_names, 
1.223     misha     269:                0/*to be filled later in next {} */, 0, all_vars_local);
1.221     misha     270: 
1.208     paf       271:        *reinterpret_cast<Method**>(&$$)=method;
1.222     misha     272: } maybe_codes {
1.251     misha     273:                Method* method=reinterpret_cast<Method*>($7);
1.231     misha     274:                // fill in the code
1.251     misha     275:                method->parser_code=$8;
1.231     misha     276: 
                    277:                // register in class
                    278:                const String& name=*LA2S(*$2);
1.251     misha     279:                PC.cclass->set_method(PC.alias_method(name), method);
1.8       paf       280: };
1.10      paf       281: 
                    282: maybe_bracketed_strings: empty | bracketed_maybe_strings;
1.259     misha     283: bracketed_maybe_strings: '[' maybe_strings ']' {$$=$2;};
1.10      paf       284: maybe_strings: empty | strings;
1.259     misha     285: strings: STRING | strings ';' STRING { $$=$1; P(*$$, *$3); };
1.10      paf       286: 
                    287: maybe_comment: empty | STRING;
1.1       paf       288: 
                    289: /* codes */
                    290: 
1.10      paf       291: maybe_codes: empty | codes;
                    292: 
1.259     misha     293: codes: code | codes code { $$=$1; P(*$$, *$2); };
1.81      paf       294: code: write_string | action;
1.209     paf       295: action: get | put | call;
1.1       paf       296: 
                    297: /* get */
                    298: 
1.64      paf       299: get: get_value {
1.238     misha     300:        $$=N();
                    301:        YYSTYPE code=$1;
1.247     misha     302:        size_t count=code->count();
1.245     misha     303: 
1.235     misha     304: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
1.281     moko      305:        if(count!=3 || !change_first(*code, OP::OP_VALUE__GET_ELEMENT, /*=>*/OP::OP_VALUE__GET_ELEMENT__WRITE) )
1.238     misha     306: #endif
1.247     misha     307: 
1.245     misha     308: #ifdef OPTIMIZE_BYTECODE_GET_SELF_ELEMENT
1.281     moko      309:        if(count!=3 || !change_first(*code, OP::OP_WITH_SELF__VALUE__GET_ELEMENT, /*=>*/OP::OP_WITH_SELF__VALUE__GET_ELEMENT__WRITE) )
1.245     misha     310: #endif
                    311: 
1.239     misha     312: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_ELEMENT
1.281     moko      313:        if(count!=5 || !change_first(*code, OP::OP_GET_OBJECT_ELEMENT, /*=>*/OP::OP_GET_OBJECT_ELEMENT__WRITE) )
1.239     misha     314: #endif
                    315: 
                    316: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_VAR_ELEMENT
1.281     moko      317:        if(count!=5 || !change_first(*code, OP::OP_GET_OBJECT_VAR_ELEMENT, /*=>*/OP::OP_GET_OBJECT_VAR_ELEMENT__WRITE) )
1.238     misha     318: #endif
1.267     misha     319: 
                    320: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT__SPECIAL
1.281     moko      321:        if(!change(*code, count-1/* last */, OP::OP_GET_ELEMENT__SPECIAL, /*=>*/OP::OP_GET_ELEMENT__SPECIAL__WRITE) )
1.267     misha     322: #endif
                    323: 
1.247     misha     324:        {
1.281     moko      325:                change_or_append(*code, count-1 /* last */, OP::OP_GET_ELEMENT, /*=>*/OP::OP_GET_ELEMENT__WRITE, /*or */OP::OP_WRITE_VALUE ); /* value=pop; wcontext.write(value) */
1.246     misha     326:        }
1.247     misha     327: 
1.238     misha     328:        P(*$$, *code);
1.1       paf       329: };
1.259     misha     330: get_value: '$' get_name_value { $$=$2; };
1.64      paf       331: get_name_value: name_without_curly_rdive EON | name_in_curly_rdive;
1.259     misha     332: name_in_curly_rdive: '{' name_without_curly_rdive '}' { $$=$2; };
1.44      paf       333: name_without_curly_rdive: 
                    334:        name_without_curly_rdive_read 
                    335: |      name_without_curly_rdive_class;
1.19      paf       336: name_without_curly_rdive_read: name_without_curly_rdive_code {
1.206     paf       337:        $$=N(); 
1.238     misha     338:        YYSTYPE diving_code=$1;
1.239     misha     339:        size_t count=diving_code->count();
1.247     misha     340: 
                    341:        if(maybe_make_self(*$$, *diving_code, count)) {
                    342:                // $self.
                    343:        } else
1.239     misha     344: 
                    345: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_ELEMENT
1.247     misha     346:        if(maybe_make_get_object_element(*$$, *diving_code, count)){
1.245     misha     347:                // optimization for $object.field + ^object.method[
1.247     misha     348:        } else
1.238     misha     349: #endif
1.239     misha     350: 
                    351: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_VAR_ELEMENT
1.247     misha     352:        if(maybe_make_get_object_var_element(*$$, *diving_code, count)){
1.245     misha     353:                // optimization for $object.$var
1.247     misha     354:        } else
1.238     misha     355: #endif
1.239     misha     356: 
                    357: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
1.281     moko      358:        if(count>=4 && (*diving_code)[0].code==OP::OP_VALUE && (*diving_code)[3].code==OP::OP_GET_ELEMENT ){
1.248     misha     359:                 // optimization
1.239     misha     360:                O(*$$,
1.247     misha     361:                        (PC.in_call_value && count==4)
1.239     misha     362:                        ? OP::OP_VALUE__GET_ELEMENT_OR_OPERATOR // ^object[ : OP_VALUE+origin+string+OP_GET_ELEMENT => OP_VALUE__GET_ELEMENT_OR_OPERATOR+origin+string
                    363:                        : OP::OP_VALUE__GET_ELEMENT             // $object  : OP_VALUE+origin+string+OP_GET_ELEMENT => OP_VALUE__GET_ELEMENT+origin+string
                    364:                );
                    365:                P(*$$, *diving_code, 1/*offset*/, 2/*limit*/); // copy origin+value
1.247     misha     366:                if(count>4)
                    367:                        P(*$$, *diving_code, 4); // copy tail
1.239     misha     368:        } else {
                    369:                O(*$$, OP::OP_WITH_READ); /* stack: starting context */
                    370:                P(*$$, *diving_code);
                    371:        }
1.233     misha     372: #else
1.247     misha     373:        {
1.238     misha     374:                O(*$$, OP::OP_WITH_READ); /* stack: starting context */
1.179     paf       375: 
1.238     misha     376:                // ^if OP_ELEMENT => ^if OP_ELEMENT_OR_OPERATOR
                    377:                // optimized OP_VALUE+origin+string+OP_GET_ELEMENT. => OP_VALUE+origin+string+OP_GET_ELEMENT_OR_OPERATOR.
1.239     misha     378:                if(PC.in_call_value && count==4)
                    379:                        diving_code->put(count-1, OP::OP_GET_ELEMENT_OR_OPERATOR);
1.206     paf       380:                P(*$$, *diving_code);
1.239     misha     381:        }
1.233     misha     382: #endif
1.22      paf       383:        /* diving code; stack: current context */
1.1       paf       384: };
1.259     misha     385: name_without_curly_rdive_class: class_prefix name_without_curly_rdive_code { $$=$1; P(*$$, *$2); };
                    386: name_without_curly_rdive_code: name_advance2 | name_path name_advance2 { $$=$1; P(*$$, *$2); };
1.1       paf       387: 
                    388: /* put */
                    389: 
1.81      paf       390: put: '$' name_expr_wdive construct {
1.241     misha     391:        $$=N();
1.244     misha     392: #ifdef OPTIMIZE_BYTECODE_CONSTRUCT
                    393:        if(maybe_optimize_construct(*$$, *$2, *$3)){
1.246     misha     394:                // $a(expr), $.a(expr), $a[value], $.a[value], $self.a[value], $self.a(expr)
1.241     misha     395:        } else 
                    396: #endif
                    397:        {
                    398:                P(*$$, *$2); /* stack: context,name */
                    399:                P(*$$, *$3); /* stack: context,name,constructor_value */
                    400:        }
1.20      paf       401: };
1.44      paf       402: name_expr_wdive: 
1.157     parser    403:        name_expr_wdive_root
                    404: |      name_expr_wdive_write
1.44      paf       405: |      name_expr_wdive_class;
1.157     parser    406: name_expr_wdive_root: name_expr_dive_code {
1.206     paf       407:        $$=N();
1.238     misha     408:        YYSTYPE diving_code=$1;
1.247     misha     409:        size_t count=diving_code->count();
                    410: 
                    411:        if(maybe_make_self(*$$, *diving_code, count)) {
                    412:                // $self.
                    413:        } else
                    414: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
1.281     moko      415:        if(count>=4 && (*diving_code)[0].code==OP::OP_VALUE && (*diving_code)[3].code==OP::OP_GET_ELEMENT ){
1.247     misha     416:                O(*$$, OP::OP_WITH_ROOT__VALUE__GET_ELEMENT);
                    417:                P(*$$, *diving_code, 1/*offset*/, 2/*limit*/); // copy origin+value
                    418:                if(count>4)
                    419:                        P(*$$, *diving_code, 4); // tail
                    420:        } else
                    421: #endif
                    422:        {
1.229     misha     423:                O(*$$, OP::OP_WITH_ROOT); /* stack: starting context */
1.206     paf       424:                P(*$$, *diving_code);
1.23      paf       425:        }
                    426:        /* diving code; stack: current context */
1.156     parser    427: };
1.157     parser    428: name_expr_wdive_write: '.' name_expr_dive_code {
1.206     paf       429:        $$=N(); 
1.229     misha     430:        O(*$$, OP::OP_WITH_WRITE); /* stack: starting context */
1.206     paf       431:        P(*$$, *$2); /* diving code; stack: context,name */
1.20      paf       432: };
1.259     misha     433: name_expr_wdive_class: class_prefix name_expr_dive_code { $$=$1; P(*$$, *$2); };
1.20      paf       434: 
1.244     misha     435: construct:
1.163     parser    436:        construct_square
                    437: |      construct_round
                    438: |      construct_curly
1.149     parser    439: ;
1.211     paf       440: construct_square: '[' {
                    441:        // allow $result_or_other_variable[ letters here any time ]
                    442:        *reinterpret_cast<bool*>(&$$)=PC.explicit_result; PC.explicit_result=false;
                    443: } any_constructor_code_value {
1.213     paf       444:        PC.explicit_result=*reinterpret_cast<bool*>(&$2);
1.211     paf       445: } ']' {
1.149     parser    446:        // stack: context, name
1.211     paf       447:        $$=$3; // stack: context, name, value
1.229     misha     448:        O(*$$, OP::OP_CONSTRUCT_VALUE); /* value=pop; name=pop; context=pop; construct(context,name,value) */
1.81      paf       449: }
                    450: ;
1.149     parser    451: construct_round: '(' expr_value ')' { 
1.206     paf       452:        $$=N(); 
1.149     parser    453:        // stack: context, name
1.206     paf       454:        P(*$$, *$2); // stack: context, name, value
1.229     misha     455:        O(*$$, OP::OP_CONSTRUCT_EXPR); /* value=pop->as_expr_result; name=pop; context=pop; construct(context,name,value) */
1.81      paf       456: }
1.52      paf       457: ;
1.149     parser    458: construct_curly: '{' maybe_codes '}' {
                    459:        // stack: context, name
1.206     paf       460:        $$=N(); 
1.229     misha     461:        OA(*$$, OP::OP_CURLY_CODE__CONSTRUCT, $2); /* code=pop; name=pop; context=pop; construct(context,name,junction(code)) */
1.149     parser    462: };
                    463: 
1.55      paf       464: any_constructor_code_value: 
1.261     moko      465:        empty_value /* optimized $var[] case */
1.52      paf       466: |      STRING /* optimized $var[STRING] case */
1.55      paf       467: |      constructor_code_value /* $var[something complex] */
1.1       paf       468: ;
1.55      paf       469: constructor_code_value: constructor_code {
1.206     paf       470:        $$=N(); 
1.229     misha     471:        OA(*$$, OP::OP_OBJECT_POOL, $1); /* stack: empty write context */
1.183     paf       472:        /* some code that writes to that context */
                    473:        /* context=pop; stack: context.value() */
1.1       paf       474: };
1.55      paf       475: constructor_code: codes__excluding_sole_str_literal;
1.259     misha     476: codes__excluding_sole_str_literal: action | code codes { $$=$1; P(*$$, *$2); };
1.27      paf       477: 
1.1       paf       478: /* call */
                    479: 
1.66      paf       480: call: call_value {
1.267     misha     481:        size_t count=$1->count();
1.238     misha     482: #ifdef OPTIMIZE_BYTECODE_CUT_REM_OPERATOR
1.267     misha     483:        if(count)
1.238     misha     484: #endif
                    485:        {
                    486:                $$=$1; /* stack: value */
1.281     moko      487:                if(!change_first(*$$, OP::OP_CONSTRUCT_OBJECT, /*=>*/ OP::OP_CONSTRUCT_OBJECT__WRITE))
                    488:                        change_or_append(*$$, count-2 /* second last */, OP::OP_CALL, /*=>*/ OP::OP_CALL__WRITE, /*or */ OP::OP_WRITE_VALUE); /* value=pop; wcontext.write(value) */
1.238     misha     489:        }
1.66      paf       490: };
1.177     paf       491: call_value: '^' { 
1.281     moko      492:        PC.in_call_value=true; 
                    493: }
                    494: call_name {
                    495:        PC.in_call_value=false;
                    496: } 
                    497: store_params EON { /* ^field.$method{vasya} */
1.238     misha     498: #ifdef OPTIMIZE_BYTECODE_CUT_REM_OPERATOR
1.242     misha     499: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
1.238     misha     500:        const String* operator_name=LA2S(*$3, 0, OP::OP_VALUE__GET_ELEMENT_OR_OPERATOR);
1.242     misha     501: #else
                    502:        const String* operator_name=LA2S(*$3, 1);
                    503: #endif
1.279     moko      504:        if(operator_name && SYMBOLS_EQ(*operator_name,REM_SYMBOL)){
1.238     misha     505:                $$=N();
                    506:        } else 
                    507: #endif
                    508:                {
                    509:                        YYSTYPE params_code=$5;
                    510:                        if(params_code->count()==3) { // probably [] case. [OP::OP_VALUE+origin+Void]
                    511:                                if(Value* value=LA2V(*params_code)) // it is OP_VALUE+origin+value?
1.261     moko      512:                                        if(const String * string=value->get_string())
                    513:                                                if(string->is_empty()) // value is empty string?
                    514:                                                        params_code=0; // ^zzz[] case. don't append lone empty param.
1.238     misha     515:                        }
                    516:                        /* stack: context, method_junction */
1.249     misha     517: 
                    518:                        YYSTYPE var_code=$3;
                    519:                        if(
                    520:                                var_code->count()==8
1.282     moko      521:                                && ( (*var_code)[0].code==OP::OP_VALUE__GET_CLASS || (*var_code)[0].code==OP::OP_VALUE__GET_BASE_CLASS )
1.249     misha     522:                                && (*var_code)[3].code==OP::OP_PREPARE_TO_CONSTRUCT_OBJECT
                    523:                                && (*var_code)[4].code==OP::OP_VALUE
1.272     moko      524: #ifdef FEATURE_GET_ELEMENT4CALL
                    525:                                && (*var_code)[7].code==OP::OP_GET_ELEMENT4CALL
                    526: #else
1.249     misha     527:                                && (*var_code)[7].code==OP::OP_GET_ELEMENT
1.272     moko      528: #endif
1.249     misha     529:                        ){
1.267     misha     530:                                $$=N();
1.249     misha     531:                                O(*$$, OP::OP_CONSTRUCT_OBJECT);
                    532:                                P(*$$, *var_code, 1/*offset*/, 2/*limit*/); // class name
                    533:                                P(*$$, *var_code, 5/*offset*/, 2/*limit*/); // constructor name
                    534:                                OA(*$$, params_code);
                    535:                        } else 
                    536:                                {
                    537:                                        $$=var_code; /* with_xxx,diving code; stack: context,method_junction */
                    538:                                        OA(*$$, OP::OP_CALL, params_code); // method_frame=make frame(pop junction); ncontext=pop; call(ncontext,method_frame) stack: value
                    539:                                }
1.238     misha     540:                }
1.1       paf       541: };
                    542: 
1.272     moko      543: call_name: name_without_curly_rdive {
                    544: #ifdef FEATURE_GET_ELEMENT4CALL
                    545:        size_t count=$1->count();
                    546:        if(count){
                    547:                $$=$1;
                    548: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_ELEMENT
                    549:                !(count==5 && change_first(*$$, OP::OP_GET_OBJECT_ELEMENT, OP::OP_GET_OBJECT_ELEMENT4CALL)) &&
                    550: #endif
                    551: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_VAR_ELEMENT
                    552:                !(count==5 && change_first(*$$, OP::OP_GET_OBJECT_VAR_ELEMENT, OP::OP_GET_OBJECT_VAR_ELEMENT4CALL)) &&
                    553: #endif
                    554:                !change(*$$, count-1, OP::OP_GET_ELEMENT, OP::OP_GET_ELEMENT4CALL);
                    555:        }
                    556: #endif
                    557: };
1.38      paf       558: 
1.259     misha     559: store_params: store_param | store_params store_param { $$=$1; P(*$$, *$2); };
1.69      paf       560: store_param: 
                    561:        store_square_param
                    562: |      store_round_param
                    563: |      store_curly_param
1.31      paf       564: ;
1.210     paf       565: store_square_param: '[' {
1.211     paf       566:        // allow ^call[ letters here any time ]
1.210     paf       567:        *reinterpret_cast<bool*>(&$$)=PC.explicit_result; PC.explicit_result=false;
                    568: } store_code_param_parts {
1.213     paf       569:        PC.explicit_result=*reinterpret_cast<bool*>(&$2);
1.259     misha     570: } ']' {$$=$3;};
                    571: store_round_param: '(' store_expr_param_parts ')' {$$=$2;};
                    572: store_curly_param: '{' store_curly_param_parts '}' {$$=$2;};
1.69      paf       573: store_code_param_parts:
                    574:        store_code_param_part
1.259     misha     575: |      store_code_param_parts ';' store_code_param_part { $$=$1; P(*$$, *$3); }
1.69      paf       576: ;
                    577: store_expr_param_parts:
                    578:        store_expr_param_part
1.259     misha     579: |      store_expr_param_parts ';' store_expr_param_part { $$=$1; P(*$$, *$3); }
1.69      paf       580: ;
1.94      paf       581: store_curly_param_parts:
                    582:        store_curly_param_part
1.259     misha     583: |      store_curly_param_parts ';' store_curly_param_part { $$=$1; P(*$$, *$3); }
1.94      paf       584: ;
1.120     paf       585: store_code_param_part: code_param_value {
1.32      paf       586:        $$=$1;
1.120     paf       587: };
1.214     paf       588: store_expr_param_part: expr_value {
                    589:        YYSTYPE expr_code=$1;
1.215     paf       590:        if(expr_code->count()==3
1.234     misha     591:                && (*expr_code)[0].code==OP::OP_VALUE) { // optimizing (double/bool/incidently 'string' too) case. [OP::OP_VALUE+origin+Double]. no evaluating
1.214     paf       592:                $$=expr_code; 
                    593:        } else {
1.238     misha     594:                YYSTYPE code=N();
1.214     paf       595:                P(*code, *expr_code);
1.229     misha     596:                O(*code, OP::OP_WRITE_EXPR_RESULT);
1.214     paf       597:                $$=N(); 
1.229     misha     598:                OA(*$$, OP::OP_EXPR_CODE__STORE_PARAM, code);
1.214     paf       599:        }
1.69      paf       600: };
1.94      paf       601: store_curly_param_part: maybe_codes {
1.206     paf       602:        $$=N(); 
1.229     misha     603:        OA(*$$, OP::OP_CURLY_CODE__STORE_PARAM, $1);
1.94      paf       604: };
1.120     paf       605: code_param_value:
1.261     moko      606:        empty_value /* optimized [;...] case */
1.120     paf       607: |      STRING /* optimized [STRING] case */
                    608: |      constructor_code_value /* [something complex] */
                    609: ;
1.1       paf       610: 
                    611: /* name */
                    612: 
1.259     misha     613: name_expr_dive_code: name_expr_value | name_path name_expr_value { $$=$1; P(*$$, *$2); };
1.1       paf       614: 
1.259     misha     615: name_path: name_step | name_path name_step { $$=$1; P(*$$, *$2); };
1.1       paf       616: name_step: name_advance1 '.';
                    617: name_advance1: name_expr_value {
1.177     paf       618:        // we know that name_advance1 not called from ^xxx context
                    619:        // so we'll not check for operator call possibility as we do in name_advance2
                    620: 
1.1       paf       621:        /* stack: context */
                    622:        $$=$1; /* stack: context,name */
1.267     misha     623: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT__SPECIAL
                    624:        O(*$$, is_special_element(*$$) ? OP::OP_GET_ELEMENT__SPECIAL : OP::OP_GET_ELEMENT);
                    625: #else
1.229     misha     626:        O(*$$, OP::OP_GET_ELEMENT); /* name=pop; context=pop; stack: context.get_element(name) */
1.267     misha     627: #endif
1.1       paf       628: };
                    629: name_advance2: name_expr_value {
                    630:        /* stack: context */
                    631:        $$=$1; /* stack: context,name */
1.267     misha     632: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT__SPECIAL
                    633:        O(*$$, is_special_element(*$$) ? OP::OP_GET_ELEMENT__SPECIAL : OP::OP_GET_ELEMENT);
                    634: #else
1.229     misha     635:        O(*$$, OP::OP_GET_ELEMENT); /* name=pop; context=pop; stack: context.get_element(name) */
1.267     misha     636: #endif
1.1       paf       637: }
1.4       paf       638: |      STRING BOGUS
1.1       paf       639: ;
                    640: name_expr_value: 
1.4       paf       641:        STRING /* subname_is_const */
1.1       paf       642: |      name_expr_subvar_value /* $subname_is_var_value */
1.160     parser    643: |      name_expr_with_subvar_value /* xxx$part_of_subname_is_var_value */
1.166     parser    644: |      name_square_code_value /* [codes] */
1.1       paf       645: ;
                    646: name_expr_subvar_value: '$' subvar_ref_name_rdive {
                    647:        $$=$2;
1.229     misha     648:        O(*$$, OP::OP_GET_ELEMENT);
1.1       paf       649: };
1.4       paf       650: name_expr_with_subvar_value: STRING subvar_get_writes {
1.238     misha     651:        YYSTYPE code;
1.183     paf       652:        {
1.206     paf       653:                change_string_literal_to_write_string_literal(*(code=$1));
                    654:                P(*code, *$2);
1.183     paf       655:        }
1.206     paf       656:        $$=N(); 
1.229     misha     657:        OA(*$$, OP::OP_STRING_POOL, code);
1.1       paf       658: };
1.212     paf       659: name_square_code_value: '[' {
                    660:        // allow $result_or_other_variable[ letters here any time ]
                    661:        *reinterpret_cast<bool*>(&$$)=PC.explicit_result; PC.explicit_result=false;
                    662: } codes {
1.213     paf       663:        PC.explicit_result=*reinterpret_cast<bool*>(&$2);
1.212     paf       664: } ']' {
1.206     paf       665:        $$=N(); 
1.267     misha     666: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT__SPECIAL
                    667:        if(!maybe_append_simple_diving_code(*$$, *$3))
                    668: #endif
                    669:        {
1.281     moko      670:                OA(*$$, OP::OP_OBJECT_POOL, $3); /* stack: empty write context */
                    671:                /* some code that writes to that context */
                    672:                /* context=pop; stack: context.value() */
1.267     misha     673:        }
1.160     parser    674: };
1.154     parser    675: subvar_ref_name_rdive: STRING {
1.206     paf       676:        $$=N(); 
1.229     misha     677:        O(*$$, OP::OP_WITH_READ);
1.206     paf       678:        P(*$$, *$1);
1.1       paf       679: };
1.259     misha     680: subvar_get_writes: subvar__get_write | subvar_get_writes subvar__get_write { $$=$1; P(*$$, *$2); };
1.1       paf       681: subvar__get_write: '$' subvar_ref_name_rdive {
                    682:        $$=$2;
1.229     misha     683:        O(*$$, OP::OP_GET_ELEMENT__WRITE);
1.42      paf       684: };
                    685: 
1.154     parser    686: class_prefix:
                    687:        class_static_prefix
                    688: |      class_constructor_prefix
                    689: ;
1.155     parser    690: class_static_prefix: STRING ':' {
                    691:        $$=$1; // stack: class name string
1.282     moko      692:        OP::OPCODE code = OP::OP_VALUE__GET_CLASS;
1.206     paf       693:        if(*LA2S(*$$) == BASE_NAME) { // pseudo BASE class
                    694:                if(VStateless_class* base=PC.cclass->base_class()) {
1.275     moko      695:                        change_string_literal_value(*$$, *new String(base->type()));
1.189     paf       696:                } else {
1.292     moko      697:                        YYERROR1("no base class declared");
1.189     paf       698:                }
1.282     moko      699:                code = OP::OP_VALUE__GET_BASE_CLASS;
                    700:        } else {
1.283     moko      701:                // can't use get_class because it will call @autouse[] if the class wasn't loaded
                    702:                VStateless_class* base=PC.request.classes().get(*LA2S(*$$));
                    703:                if(base && PC.cclass->derived_from(*base))
1.282     moko      704:                        code = OP::OP_VALUE__GET_BASE_CLASS;
1.189     paf       705:        }
1.238     misha     706:        // optimized OP_VALUE+origin+string+OP_GET_CLASS => OP_VALUE__GET_CLASS+origin+string
1.282     moko      707:        change_first(*$$, OP::OP_VALUE, code);
1.155     parser    708: };
                    709: class_constructor_prefix: class_static_prefix ':' {
1.154     parser    710:        $$=$1;
1.292     moko      711:        if(!PC.in_call_value)
                    712:                YYERROR1(":: not allowed here");
1.229     misha     713:        O(*$$, OP::OP_PREPARE_TO_CONSTRUCT_OBJECT);
1.1       paf       714: };
                    715: 
1.53      paf       716: 
1.56      paf       717: /* expr */
1.53      paf       718: 
1.214     paf       719: expr_value: expr;
1.56      paf       720: expr: 
1.214     paf       721:        double_or_STRING
1.216     paf       722: |   true_value
                    723: |   false_value
1.64      paf       724: |      get_value
1.66      paf       725: |      call_value
1.259     misha     726: |      '"' string_inside_quotes_value '"' { $$ = $2; }
                    727: |      '\'' string_inside_quotes_value '\'' { $$ = $2; }
1.60      paf       728: |      '(' expr ')' { $$ = $2; }
                    729: /* stack: operand // stack: @operand */
1.259     misha     730: |      '-' expr %prec NUNARY { $$=$2;  O(*$$, OP::OP_NEG); }
                    731: |      '+' expr %prec NUNARY { $$=$2; }
                    732: |      '~' expr { $$=$2;        O(*$$, OP::OP_INV); }
                    733: |      '!' expr { $$=$2;  O(*$$, OP::OP_NOT); }
                    734: |      "def" expr { $$=$2;  O(*$$, OP::OP_DEF); }
                    735: |      "in" expr { $$=$2;  O(*$$, OP::OP_IN); }
                    736: |      "-f" expr { $$=$2;  O(*$$, OP::OP_FEXISTS); }
                    737: |      "-d" expr { $$=$2;  O(*$$, OP::OP_DEXISTS); }
1.60      paf       738: /* stack: a,b // stack: a@b */
1.259     misha     739: |      expr '-' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_SUB); }
                    740: |      expr '+' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_ADD); }
                    741: |      expr '*' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_MUL); }
                    742: |      expr '/' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_DIV); }
                    743: |      expr '%' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_MOD); }
                    744: |      expr '\\' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_INTDIV); }
                    745: |      expr "<<" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_SL); }
                    746: |      expr ">>" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_SR); }
                    747: |      expr '&' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_AND); }
                    748: |      expr '|' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_OR); }
                    749: |      expr "!|" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_XOR); }
                    750: |      expr "&&" expr { $$=$1;  OA(*$$, OP::OP_NESTED_CODE, $3);  O(*$$, OP::OP_LOG_AND); }
                    751: |      expr "||" expr { $$=$1;  OA(*$$, OP::OP_NESTED_CODE, $3);  O(*$$, OP::OP_LOG_OR); }
                    752: |      expr "!||" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_LOG_XOR); }
                    753: |      expr '<' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_LT); }
                    754: |      expr '>' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_GT); }
                    755: |      expr "<=" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_LE); }
                    756: |      expr ">=" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_GE); }
                    757: |      expr "==" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_EQ); }
                    758: |      expr "!=" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_NE); }
                    759: |      expr "lt" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_LT); }
                    760: |      expr "gt" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_GT); }
                    761: |      expr "le" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_LE); }
                    762: |      expr "ge" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_GE); }
                    763: |      expr "eq" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_EQ); }
                    764: |      expr "ne" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_NE); }
                    765: |      expr "is" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_IS); }
1.56      paf       766: ;
1.214     paf       767: 
                    768: double_or_STRING: STRING {
1.238     misha     769:        // optimized OP_STRING => OP_VALUE for doubles
1.214     paf       770:        maybe_change_string_literal_to_double_literal(*($$=$1));
                    771: };
1.55      paf       772: 
1.65      paf       773: string_inside_quotes_value: maybe_codes {
1.238     misha     774: #ifdef OPTIMIZE_BYTECODE_STRING_POOL
                    775:        // it brakes ^if(" 09 "){...}
                    776:        YYSTYPE code=$1;
                    777:        $$=N();
1.267     misha     778:        if(code->count()==3 && change_first(*code, OP::OP_STRING__WRITE, OP::OP_VALUE)){
1.238     misha     779:                // optimized OP_STRING__WRITE+origin+value => OP_VALUE+origin+value without starting OP_STRING_POOL
                    780:                P(*$$, *code);
                    781:        } else {
                    782:                OA(*$$, OP::OP_STRING_POOL, code); /* stack: empty write context */
                    783:        }
                    784: #else
1.206     paf       785:        $$=N();
1.229     misha     786:        OA(*$$, OP::OP_STRING_POOL, $1); /* stack: empty write context */
1.238     misha     787: #endif
1.183     paf       788:        /* some code that writes to that context */
                    789:        /* context=pop; stack: context.get_string() */
1.53      paf       790: };
1.1       paf       791: 
1.27      paf       792: /* basics */
1.1       paf       793: 
1.81      paf       794: write_string: STRING {
1.238     misha     795:        // optimized OP_STRING+OP_WRITE_VALUE => OP_STRING__WRITE
1.259     misha     796:        change_string_literal_to_write_string_literal(*($$=$1));
1.54      paf       797: };
                    798: 
1.261     moko      799: empty_value: /* empty */ { $$=VL(/*we know that we will not change it*/const_cast<VString*>(&vempty), 0, 0, 0); }
1.259     misha     800: true_value: "true" { $$ = VL(/*we know that we will not change it*/const_cast<VBool*>(&vtrue), 0, 0, 0); }
                    801: false_value: "false" { $$ = VL(/*we know that we will not change it*/const_cast<VBool*>(&vfalse), 0, 0, 0); }
1.216     paf       802: 
1.259     misha     803: empty: /* empty */ { $$=N(); };
1.1       paf       804: 
                    805: %%
1.105     paf       806: #endif
1.1       paf       807: 
                    808: /*
                    809:        000$111(2222)00 
                    810:                000$111{3333}00
1.9       paf       811:        $,^: push,=0
1.1       paf       812:        1:( { break=pop
                    813:        2:( )  pop
                    814:        3:{ }  pop
                    815: 
                    816:        000^111(2222)4444{33333}4000
1.9       paf       817:        $,^: push,=0
1.1       paf       818:        1:( { break=pop
                    819:        2:( )=4
                    820:        3:{ }=4
                    821:                4:[^({]=pop
                    822: */
                    823: 
1.206     paf       824: inline void ungetc(Parse_control& pc, uint last_line_end_col) {
                    825:        pc.source--;
                    826:        if(pc.pos.col==0) {
                    827:                --pc.pos.line; pc.pos.col=last_line_end_col;
                    828:        } else
                    829:                --pc.pos.col;
                    830: 
                    831: }
                    832: static int yylex(YYSTYPE *lvalp, void *apc) {
1.295   ! moko      833:        Parse_control& pc=*static_cast<Parse_control*>(apc);
1.206     paf       834: 
                    835:        #define lexical_brackets_nestage pc.brackets_nestages[pc.ls_sp]
1.48      paf       836:        #define RC {result=c; goto break2; }
1.1       paf       837: 
1.295   ! moko      838:        int c;
1.206     paf       839:        int result;
1.1       paf       840:        
1.206     paf       841:        if(pc.pending_state) {
                    842:                result=pc.pending_state;
                    843:                pc.pending_state=0;
1.1       paf       844:                return result;
                    845:        }
                    846:        
1.206     paf       847:        const char *begin=pc.source;
                    848:        Pos begin_pos=pc.pos;
1.91      paf       849:        const char *end;
1.67      paf       850:        int skip_analized=0;
1.50      paf       851:        while(true) {
1.206     paf       852:                c=*(end=(pc.source++));
                    853: //             fprintf(stderr, "\nchar: %c %02X; nestage: %d, sp=%d", c, c, lexical_brackets_nestage, pc.sp);
1.1       paf       854: 
1.208     paf       855:                if(c=='\n')
1.206     paf       856:                        pc.pos_next_line();
1.208     paf       857:                else
1.206     paf       858:                        pc.pos_next_c(c);
1.208     paf       859: //             fprintf(stderr, "\nchar: %c file(%d:%d)", c, pc.pos.line, pc.pos.col);
1.73      paf       860: 
1.208     paf       861:                if(pc.pos.col==0+1 && c=='@') {
1.206     paf       862:                        if(pc.ls==LS_DEF_SPECIAL_BODY) {
1.175     paf       863:                                // @SPECIAL
                    864:                                // ...
                    865:                                // @<here = 
1.206     paf       866:                                pop_LS(pc); // exiting from LS_DEF_SPECIAL_BODY state
1.175     paf       867:                        } // continuing checks
1.206     paf       868:                        if(pc.ls==LS_USER) {
                    869:                                push_LS(pc, LS_DEF_NAME);
1.171     parser    870:                                RC;
1.175     paf       871:                        } else // @ in first column inside some code [when could that be?]
1.171     parser    872:                                result=BAD_METHOD_DECL_START;
                    873:                        goto break2;
1.209     paf       874:                }
                    875:                if(c=='^') {
1.206     paf       876:                        if(pc.ls==LS_METHOD_AFTER) {
1.203     paf       877:                                // handle after-method situation
1.206     paf       878:                                pop_LS(pc);
1.203     paf       879:                                result=EON;
                    880:                                skip_analized=-1; // return to punctuation afterwards to assure it's literality
                    881:                                goto break2;
                    882:                        }
1.206     paf       883:                        switch(pc.ls) {
1.169     parser    884: case LS_EXPRESSION_VAR_NAME_WITH_COLON:
                    885: case LS_EXPRESSION_VAR_NAME_WITHOUT_COLON:
                    886: case LS_VAR_NAME_SIMPLE_WITH_COLON:
                    887: case LS_VAR_NAME_SIMPLE_WITHOUT_COLON:
                    888: case LS_VAR_NAME_CURLY:
                    889: case LS_METHOD_NAME:
1.194     paf       890: case LS_USER_COMMENT:
1.169     parser    891: case LS_DEF_COMMENT:
                    892:        // no literals in names, please
                    893:        break;
                    894: default:
1.206     paf       895:                        switch(*pc.source) {
1.165     parser    896:                        // ^escaping some punctuators
1.228     misha     897:                        case '^': case '$': case ';': case '@':
1.126     paf       898:                        case '(': case ')':
1.48      paf       899:                        case '[': case ']':
                    900:                        case '{': case '}':
1.172     parser    901:                        case '"':  case ':':
1.40      paf       902:                                if(end!=begin) {
1.206     paf       903:                                        if(!pc.string_start)
                    904:                                                pc.string_start=begin_pos;
1.40      paf       905:                                        // append piece till ^
1.206     paf       906:                                        pc.string.append_strdup_know_length(begin, end-begin);
1.40      paf       907:                                }
1.63      paf       908:                                // reset piece 'begin' position & line
1.206     paf       909:                                begin=pc.source; // ->punctuation
                    910:                                begin_pos=pc.pos;
1.203     paf       911:                                // skip over _ after ^
1.206     paf       912:                                pc.source++;  pc.pos.col++;
1.203     paf       913:                                // skip analysis = forced literal
                    914:                                continue;
1.114     paf       915: 
                    916:                        // converting ^#HH into char(hex(HH))
                    917:                        case '#':
                    918:                                if(end!=begin) {
1.206     paf       919:                                        if(!pc.string_start)
                    920:                                                pc.string_start=begin_pos;
1.114     paf       921:                                        // append piece till ^
1.206     paf       922:                                        pc.string.append_strdup_know_length(begin, end-begin);
1.114     paf       923:                                }
                    924:                                // #HH ?
1.228     misha     925:                                if(pc.source[1] && isxdigit(pc.source[1]) && pc.source[2] && isxdigit(pc.source[2])) {
1.218     paf       926:                                        char c=(char)(
1.206     paf       927:                                                hex_value[(unsigned char)pc.source[1]]*0x10+
1.218     paf       928:                                                hex_value[(unsigned char)pc.source[2]]);
1.206     paf       929:                                        if(c==0) {
1.114     paf       930:                                                result=BAD_HEX_LITERAL;
                    931:                                                goto break2; // wrong hex value[no ^#00 chars allowed]: bail out
                    932:                                        }
                    933:                                        // append char(hex(HH))
1.206     paf       934:                                        pc.string.append(c);
1.114     paf       935:                                        // skip over ^#HH
1.206     paf       936:                                        pc.source+=3;
                    937:                                        pc.pos.col+=3;
1.114     paf       938:                                        // reset piece 'begin' position & line
1.206     paf       939:                                        begin=pc.source; // ->after ^#HH
                    940:                                        begin_pos=pc.pos;
1.203     paf       941:                                        // skip analysis = forced literal
1.114     paf       942:                                        continue;
                    943:                                }
1.228     misha     944:                                // just escaped char
                    945:                                // reset piece 'begin' position & line
                    946:                                begin=pc.source;
                    947:                                begin_pos=pc.pos;
                    948:                                // skip over _ after ^
                    949:                                pc.source++;  pc.pos.col++;
                    950:                                // skip analysis = forced literal
                    951:                                continue;
1.1       paf       952:                        }
1.169     parser    953:                        break;
1.203     paf       954:                        }
1.169     parser    955:                }
1.113     paf       956:                // #comment  start skipping
1.206     paf       957:                if(c=='#' && pc.pos.col==1) {
1.112     paf       958:                        if(end!=begin) {
1.206     paf       959:                                if(!pc.string_start)
                    960:                                        pc.string_start=begin_pos;
1.112     paf       961:                                // append piece till #
1.206     paf       962:                                pc.string.append_strdup_know_length(begin, end-begin);
1.112     paf       963:                        }
                    964:                        // fall into COMMENT lexical state [wait for \n]
1.206     paf       965:                        push_LS(pc, LS_USER_COMMENT);
1.175     paf       966:                        continue;
1.112     paf       967:                }
1.206     paf       968:                switch(pc.ls) {
1.10      paf       969: 
                    970:                // USER'S = NOT OURS
1.1       paf       971:                case LS_USER:
1.206     paf       972:                case LS_NAME_SQUARE_PART: // name.[here].xxx
                    973:                        if(pc.trim_bof)
1.153     parser    974:                                switch(c) {
                    975:                                case '\n': case ' ': case '\t':
1.206     paf       976:                                        begin=pc.source;
                    977:                                        begin_pos=pc.pos;
1.152     parser    978:                                        continue; // skip it
1.153     parser    979:                                default:
1.206     paf       980:                                        pc.trim_bof=false;
1.152     parser    981:                                }
1.48      paf       982:                        switch(c) {
                    983:                        case '$':
1.206     paf       984:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf       985:                                RC;
                    986:                        case '^':
1.206     paf       987:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf       988:                                RC;
1.166     parser    989:                        case ']':
1.206     paf       990:                                if(pc.ls==LS_NAME_SQUARE_PART)
1.166     parser    991:                                        if(--lexical_brackets_nestage==0) {// $name.[co<]?>de<]?>
1.206     paf       992:                                                pop_LS(pc); // $name.[co<]>de<]!>
1.166     parser    993:                                                RC;
                    994:                                        }
1.160     parser    995:                                break;
1.166     parser    996:                        case '[': // $name.[co<[>de]
1.206     paf       997:                                if(pc.ls==LS_NAME_SQUARE_PART)
1.166     parser    998:                                        lexical_brackets_nestage++;
1.161     parser    999:                                break;
1.112     paf      1000:                        }
1.209     paf      1001:                        if(pc.explicit_result && c)
                   1002:                                switch(c) {
1.276     moko     1003:                                default:
                   1004:                                        pc.string.append(c);
1.209     paf      1005:                                case '\n': case ' ': case '\t':
                   1006:                                        begin=pc.source;
                   1007:                                        begin_pos=pc.pos;
1.276     moko     1008:                                        continue;
1.209     paf      1009:                                }
1.112     paf      1010:                        break;
                   1011:                        
                   1012:                // #COMMENT
1.194     paf      1013:                case LS_USER_COMMENT:
1.112     paf      1014:                        if(c=='\n') {
                   1015:                                // skip comment
1.206     paf      1016:                                begin=pc.source;
                   1017:                                begin_pos=pc.pos;
1.112     paf      1018: 
1.206     paf      1019:                                pop_LS(pc);
1.112     paf      1020:                                continue;
1.1       paf      1021:                        }
1.48      paf      1022:                        break;
                   1023:                        
                   1024:                // STRING IN EXPRESSION
1.145     parser   1025:                case LS_EXPRESSION_STRING_QUOTED:
                   1026:                case LS_EXPRESSION_STRING_APOSTROFED:
1.48      paf      1027:                        switch(c) {
                   1028:                        case '"':
1.145     parser   1029:                        case '\'':
                   1030:                                if(
1.270     moko     1031:                                        (pc.ls == LS_EXPRESSION_STRING_QUOTED && c=='"') ||
                   1032:                                        (pc.ls == LS_EXPRESSION_STRING_APOSTROFED && c=='\'') ) {
1.206     paf      1033:                                        pop_LS(pc); //"abc". | 'abc'.
1.145     parser   1034:                                        RC;
                   1035:                                }
                   1036:                                break;
1.48      paf      1037:                        case '$':
1.206     paf      1038:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1039:                                RC;
                   1040:                        case '^':
1.206     paf      1041:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1042:                                RC;
1.10      paf      1043:                        }
                   1044:                        break;
                   1045: 
                   1046:                // METHOD DEFINITION
                   1047:                case LS_DEF_NAME:
1.48      paf      1048:                        switch(c) {
                   1049:                        case '[':
1.206     paf      1050:                                pc.ls=LS_DEF_PARAMS;
1.48      paf      1051:                                RC;
                   1052:                        case '\n':
1.206     paf      1053:                                pc.ls=LS_DEF_SPECIAL_BODY;
1.48      paf      1054:                                RC;
1.10      paf      1055:                        }
                   1056:                        break;
1.48      paf      1057: 
1.10      paf      1058:                case LS_DEF_PARAMS:
1.48      paf      1059:                        switch(c) {
1.192     paf      1060:                        case '$': // common error
1.193     paf      1061:                                result=BAD_METHOD_PARAMETER_NAME_CHARACTER;
                   1062:                                goto break2;
1.48      paf      1063:                        case ';':
                   1064:                                RC;
                   1065:                        case ']':
1.206     paf      1066:                                pc.ls=*pc.source=='['?LS_DEF_LOCALS:LS_DEF_COMMENT;
1.48      paf      1067:                                RC;
1.49      paf      1068:                        case '\n': // wrong. bailing out
1.206     paf      1069:                                pop_LS(pc);
1.48      paf      1070:                                RC;
1.10      paf      1071:                        }
                   1072:                        break;
1.48      paf      1073: 
1.10      paf      1074:                case LS_DEF_LOCALS:
1.48      paf      1075:                        switch(c) {
                   1076:                        case '[':
                   1077:                        case ';':
                   1078:                                RC;
                   1079:                        case ']':
1.206     paf      1080:                                pc.ls=LS_DEF_COMMENT;
1.48      paf      1081:                                RC;
                   1082:                        case '\n': // wrong. bailing out
1.206     paf      1083:                                pop_LS(pc);
1.48      paf      1084:                                RC;
1.10      paf      1085:                        }
                   1086:                        break;
1.48      paf      1087: 
1.10      paf      1088:                case LS_DEF_COMMENT:
                   1089:                        if(c=='\n') {
1.206     paf      1090:                                pop_LS(pc);
1.48      paf      1091:                                RC;
1.37      paf      1092:                        }
                   1093:                        break;
                   1094: 
1.48      paf      1095:                case LS_DEF_SPECIAL_BODY:
1.175     paf      1096:                        if(c=='\n')
1.48      paf      1097:                                RC;
                   1098:                        break;
                   1099: 
                   1100:                // (EXPRESSION)
1.69      paf      1101:                case LS_VAR_ROUND:
                   1102:                case LS_METHOD_ROUND:
1.48      paf      1103:                        switch(c) {
                   1104:                        case ')':
1.270     moko     1105:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1106:                                        if(pc.ls==LS_METHOD_ROUND) // method round param ended
                   1107:                                                pc.ls=LS_METHOD_AFTER; // look for method end
                   1108:                                        else // pc.ls==LS_VAR_ROUND // variable constructor ended
                   1109:                                                pop_LS(pc); // return to normal life
1.270     moko     1110:                                }
1.48      paf      1111:                                RC;
1.194     paf      1112:                        case '#': // comment start skipping
                   1113:                                if(end!=begin) {
1.206     paf      1114:                                        if(!pc.string_start)
                   1115:                                                pc.string_start=begin_pos;
1.194     paf      1116:                                        // append piece till #
1.206     paf      1117:                                        pc.string.append_strdup_know_length(begin, end-begin);
1.194     paf      1118:                                }
                   1119:                                // fall into COMMENT lexical state [wait for \n]
1.206     paf      1120:                                push_LS(pc, LS_EXPRESSION_COMMENT);
1.194     paf      1121:                                lexical_brackets_nestage=1;
                   1122:                                continue;
1.48      paf      1123:                        case '$':
1.206     paf      1124:                                push_LS(pc, LS_EXPRESSION_VAR_NAME_WITH_COLON);                         
1.48      paf      1125:                                RC;
                   1126:                        case '^':
1.206     paf      1127:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1128:                                RC;
                   1129:                        case '(':
                   1130:                                lexical_brackets_nestage++;
                   1131:                                RC;
1.67      paf      1132:                        case '-':
1.206     paf      1133:                                switch(*pc.source) {
1.127     paf      1134:                                case 'f': // -f
1.67      paf      1135:                                        skip_analized=1;
                   1136:                                        result=FEXISTS;
1.127     paf      1137:                                        goto break2;
                   1138:                                case 'd': // -d
                   1139:                                        skip_analized=1;
                   1140:                                        result=DEXISTS;
                   1141:                                        goto break2;
1.191     paf      1142:                                default: // minus
1.67      paf      1143:                                        result=c;
1.127     paf      1144:                                        goto break2;
                   1145:                                }
1.67      paf      1146:                                goto break2;
1.173     paf      1147:                        case '+': case '*': case '/': case '%': case '\\':
1.58      paf      1148:                        case '~':
1.48      paf      1149:                        case ';':
                   1150:                                RC;
1.193     paf      1151:                        case '&': case '|':
1.206     paf      1152:                                if(*pc.source==c) { // && ||
1.193     paf      1153:                                        result=c=='&'?LAND:LOR;
1.67      paf      1154:                                        skip_analized=1;
1.58      paf      1155:                                } else
                   1156:                                        result=c;
                   1157:                                goto break2;
1.193     paf      1158:                        case '!':
1.206     paf      1159:                                switch(pc.source[0]) { 
1.193     paf      1160:                                case '|': // !| !||
                   1161:                                        skip_analized=1;
1.206     paf      1162:                                        if(pc.source[1]=='|') {
1.193     paf      1163:                                                skip_analized++;
                   1164:                                                result=LXOR;
                   1165:                                        } else
                   1166:                                                result=NXOR;
                   1167:                                        goto break2;
                   1168:                                case '=': // !=
                   1169:                                        skip_analized=1;
                   1170:                                        result=NNE; 
                   1171:                                        goto break2;
                   1172:                                }
                   1173:                                RC;
1.195     paf      1174: 
                   1175:                        case '<': // <<, <=, <
1.206     paf      1176:                                switch(*pc.source) {
1.195     paf      1177:                                case '<': // <[<]
                   1178:                                        skip_analized=1; result=NSL; break;
                   1179:                                case '=': // <[=]
                   1180:                                        skip_analized=1; result=NLE; break;
                   1181:                                default: // <[]
                   1182:                                        result=c; break;
                   1183:                                }
                   1184:                                goto break2;
                   1185:                        case '>': // >>, >=, >
1.206     paf      1186:                                switch(*pc.source) {
1.195     paf      1187:                                case '>': // >[>]
                   1188:                                        skip_analized=1; result=NSR; break;
                   1189:                                case '=': // >[=]
                   1190:                                        skip_analized=1; result=NGE; break;
                   1191:                                default: // >[]
                   1192:                                        result=c; break;
                   1193:                                }
                   1194:                                goto break2;
                   1195:                        case '=': // ==
1.206     paf      1196:                                switch(*pc.source) {
1.195     paf      1197:                                case '=': // =[=]
                   1198:                                        skip_analized=1; result=NEQ; break;
                   1199:                                default: // =[]
                   1200:                                        result=c; break; // not used now
                   1201:                                }
1.58      paf      1202:                                goto break2;
1.195     paf      1203: 
1.48      paf      1204:                        case '"':
1.206     paf      1205:                                push_LS(pc, LS_EXPRESSION_STRING_QUOTED);
1.145     parser   1206:                                RC;
                   1207:                        case '\'':
1.206     paf      1208:                                push_LS(pc, LS_EXPRESSION_STRING_APOSTROFED);
1.48      paf      1209:                                RC;
1.50      paf      1210:                        case 'l': case 'g': case 'e': case 'n':
1.51      paf      1211:                                if(end==begin) // right after whitespace
1.206     paf      1212:                                        if(isspace(pc.source[1])) {
                   1213:                                                switch(*pc.source) {
1.117     paf      1214:                                                        //                                      case '?': // ok [and bad cases, yacc would bark at them]
                   1215:                                                case 't': // lt gt [et nt]
                   1216:                                                        result=c=='l'?SLT:c=='g'?SGT:BAD_STRING_COMPARISON_OPERATOR;
                   1217:                                                        skip_analized=1;
                   1218:                                                        goto break2;
                   1219:                                                case 'e': // le ge ne [ee]
                   1220:                                                        result=c=='l'?SLE:c=='g'?SGE:c=='n'?SNE:BAD_STRING_COMPARISON_OPERATOR;
                   1221:                                                        skip_analized=1;
                   1222:                                                        goto break2;
                   1223:                                                case 'q': // eq [lq gq nq]
                   1224:                                                        result=c=='e'?SEQ:BAD_STRING_COMPARISON_OPERATOR;
                   1225:                                                        skip_analized=1;
                   1226:                                                        goto break2;
                   1227:                                                }
1.67      paf      1228:                                        }
                   1229:                                break;
                   1230:                        case 'i':
                   1231:                                if(end==begin) // right after whitespace
1.206     paf      1232:                                        if(isspace(pc.source[1])) {
                   1233:                                                switch(pc.source[0]) {
1.117     paf      1234:                                                case 'n': // in
1.95      paf      1235:                                                        skip_analized=1;
                   1236:                                                        result=IN;
                   1237:                                                        goto break2;
1.117     paf      1238:                                                case 's': // is
1.95      paf      1239:                                                        skip_analized=1;
                   1240:                                                        result=IS;
                   1241:                                                        goto break2;
                   1242:                                                }
1.67      paf      1243:                                        }
                   1244:                                break;
                   1245:                        case 'd':
                   1246:                                if(end==begin) // right after whitespace
1.206     paf      1247:                                        if(pc.source[0]=='e' && pc.source[1]=='f') { // def
1.225     misha    1248:                                                switch(pc.source[2]){
                   1249:                                                case ' ': case '\t': case '\n': case '"': case '\'': case '^': case '$': // non-quoted string without whitespace after 'def' is not allowed
                   1250:                                                        skip_analized=2;
                   1251:                                                        result=DEF;
                   1252:                                                        goto break2;
                   1253:                                                }
                   1254:                                                // error: incorrect char after 'def'
1.50      paf      1255:                                        }
1.48      paf      1256:                                break;
1.216     paf      1257:                        case 't':
                   1258:                                if(end==begin) // right after whitespace
1.225     misha    1259:                                        if(pc.source[0]=='r' && pc.source[1]=='u' && pc.source[2]=='e') { // true
1.216     paf      1260:                                                skip_analized=3;
                   1261:                                                result=LITERAL_TRUE;
                   1262:                                                goto break2;
                   1263:                                        }
                   1264:                                break;
                   1265:                        case 'f':
                   1266:                                if(end==begin) // right after whitespace
1.225     misha    1267:                                        if(pc.source[0]=='a' && pc.source[1]=='l' && pc.source[2]=='s' && pc.source[3]=='e') { // false
1.216     paf      1268:                                                skip_analized=4;
                   1269:                                                result=LITERAL_FALSE;
                   1270:                                                goto break2;
                   1271:                                        }
                   1272:                                break;
1.48      paf      1273:                        case ' ': case '\t': case '\n':
1.63      paf      1274:                                if(end!=begin) { // there were a string after previous operator?
                   1275:                                        result=0; // return that string
                   1276:                                        goto break2;
1.48      paf      1277:                                }
1.63      paf      1278:                                // that's a leading|traling space or after-operator-space
                   1279:                                // ignoring it
                   1280:                                // reset piece 'begin' position & line
1.206     paf      1281:                                begin=pc.source; // after whitespace char
                   1282:                                begin_pos=pc.pos;
1.48      paf      1283:                                continue;
1.1       paf      1284:                        }
                   1285:                        break;
1.194     paf      1286:                case LS_EXPRESSION_COMMENT:
                   1287:                        if(c=='(')
                   1288:                                lexical_brackets_nestage++;
                   1289:                        
1.206     paf      1290:                        switch(*pc.source) {
1.194     paf      1291:                        case '\n': case ')':
1.206     paf      1292:                                if(*pc.source==')')
1.194     paf      1293:                                        if(--lexical_brackets_nestage!=0)
                   1294:                                                continue;
                   1295: 
                   1296:                                // skip comment
1.206     paf      1297:                                begin=pc.source;
                   1298:                                begin_pos=pc.pos;
1.194     paf      1299: 
1.206     paf      1300:                                pop_LS(pc);
1.194     paf      1301:                                continue;
                   1302:                        }
                   1303:                        break;
1.1       paf      1304: 
1.10      paf      1305:                // VARIABLE GET/PUT/WITH
1.166     parser   1306:                case LS_VAR_NAME_SIMPLE_WITH_COLON: 
                   1307:                case LS_VAR_NAME_SIMPLE_WITHOUT_COLON:
                   1308:                case LS_EXPRESSION_VAR_NAME_WITH_COLON: 
                   1309:                case LS_EXPRESSION_VAR_NAME_WITHOUT_COLON:
                   1310:                        if(
1.206     paf      1311:                                pc.ls==LS_EXPRESSION_VAR_NAME_WITH_COLON ||
                   1312:                                pc.ls==LS_EXPRESSION_VAR_NAME_WITHOUT_COLON) {
1.181     paf      1313:                                // name in expr ends also before 
1.48      paf      1314:                                switch(c) {
1.181     paf      1315:                                // expression minus
1.92      paf      1316:                                case '-': 
1.181     paf      1317:                                // expression integer division
                   1318:                                case '\\':
1.206     paf      1319:                                        pop_LS(pc);
                   1320:                                        pc.ungetc();
1.48      paf      1321:                                        result=EON;
                   1322:                                        goto break2;
                   1323:                                }
                   1324:                        }
1.166     parser   1325:                        if(
1.206     paf      1326:                                pc.ls==LS_VAR_NAME_SIMPLE_WITHOUT_COLON ||
                   1327:                                pc.ls==LS_EXPRESSION_VAR_NAME_WITHOUT_COLON) {
1.142     parser   1328:                                // name already has ':', stop before next 
                   1329:                                switch(c) {
                   1330:                                case ':': 
1.206     paf      1331:                                        pop_LS(pc);
                   1332:                                        pc.ungetc();
1.142     parser   1333:                                        result=EON;
                   1334:                                        goto break2;
                   1335:                                }
                   1336:                        }
1.48      paf      1337:                        switch(c) {
                   1338:                        case 0:
                   1339:                        case ' ': case '\t': case '\n':
                   1340:                        case ';':
1.126     paf      1341:                        case ']': case '}': case ')': 
                   1342:                        case '"': case '\'':
1.139     parser   1343:                        case '<': case '>':  // these stand for HTML brackets AND expression binary ops
1.253     misha    1344:                        case '+': case '*': case '/': case '\\': case '%': 
1.92      paf      1345:                        case '&': case '|': 
                   1346:                        case '=': case '!':
1.99      paf      1347:                        // common delimiters
1.190     paf      1348:                        case ',': case '?': case '#':
1.220     paf      1349:                        // mysql column separators
                   1350:                        case '`':
1.139     parser   1351:                        // before call
                   1352:                        case '^': 
1.206     paf      1353:                                pop_LS(pc);
                   1354:                                pc.ungetc();
1.13      paf      1355:                                result=EON;
1.1       paf      1356:                                goto break2;
1.48      paf      1357:                        case '[':
1.162     parser   1358:                                // $name.<[>code]
1.206     paf      1359:                                if(pc.pos.col>1/*not first column*/ && (
1.163     parser   1360:                                        end[-1]=='$'/*was start of get*/ ||
                   1361:                                        end[-1]==':'/*was class name delim */ ||
                   1362:                                        end[-1]=='.'/*was name delim */
1.162     parser   1363:                                        )) {
1.206     paf      1364:                                        push_LS(pc, LS_NAME_SQUARE_PART);
1.162     parser   1365:                                        lexical_brackets_nestage=1;
                   1366:                                        RC;
                   1367:                                }
1.206     paf      1368:                                pc.ls=LS_VAR_SQUARE;
1.1       paf      1369:                                lexical_brackets_nestage=1;
1.48      paf      1370:                                RC;
                   1371:                        case '{':
                   1372:                                if(begin==end) { // ${name}, no need of EON, switching LS
1.206     paf      1373:                                        pc.ls=LS_VAR_NAME_CURLY; 
1.48      paf      1374:                                } else {
1.206     paf      1375:                                        pc.ls=LS_VAR_CURLY;
1.48      paf      1376:                                        lexical_brackets_nestage=1;
                   1377:                                }
1.69      paf      1378: 
1.48      paf      1379:                                RC;
                   1380:                        case '(':
1.206     paf      1381:                                pc.ls=LS_VAR_ROUND;
1.1       paf      1382:                                lexical_brackets_nestage=1;
1.48      paf      1383:                                RC;
                   1384:                        case '.': // name part delim
                   1385:                        case '$': // name part subvar
1.160     parser   1386:                        case ':': // class<:>name
1.166     parser   1387:                                // go to _WITHOUT_COLON state variant...
1.206     paf      1388:                                if(pc.ls==LS_VAR_NAME_SIMPLE_WITH_COLON)
                   1389:                                        pc.ls=LS_VAR_NAME_SIMPLE_WITHOUT_COLON;
                   1390:                                else if(pc.ls==LS_EXPRESSION_VAR_NAME_WITH_COLON)
                   1391:                                        pc.ls=LS_EXPRESSION_VAR_NAME_WITHOUT_COLON;
1.166     parser   1392:                                // ...stop before next ':'
1.48      paf      1393:                                RC;
1.1       paf      1394:                        }
                   1395:                        break;
1.48      paf      1396: 
1.1       paf      1397:                case LS_VAR_NAME_CURLY:
1.48      paf      1398:                        switch(c) {
1.162     parser   1399:                        case '[':
1.166     parser   1400:                                // ${name.<[>code]}
1.206     paf      1401:                                push_LS(pc, LS_NAME_SQUARE_PART);
1.160     parser   1402:                                lexical_brackets_nestage=1;
                   1403:                                RC;
1.48      paf      1404:                        case '}': // ${name} finished, restoring LS
1.206     paf      1405:                                pop_LS(pc);
1.48      paf      1406:                                RC;
                   1407:                        case '.': // name part delim
                   1408:                        case '$': // name part subvar
                   1409:                        case ':': // ':name' or 'class:name'
                   1410:                                RC;
1.1       paf      1411:                        }
                   1412:                        break;
1.48      paf      1413: 
                   1414:                case LS_VAR_SQUARE:
                   1415:                        switch(c) {
                   1416:                        case '$':
1.206     paf      1417:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1418:                                RC;
                   1419:                        case '^':
1.206     paf      1420:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1421:                                RC;
                   1422:                        case ']':
1.1       paf      1423:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1424:                                        pop_LS(pc);
1.48      paf      1425:                                        RC;
1.1       paf      1426:                                }
1.48      paf      1427:                                break;
                   1428:                        case ';': // operator_or_fmt;value delim
                   1429:                                RC;
                   1430:                        case '[':
                   1431:                                lexical_brackets_nestage++;
                   1432:                                break;
1.1       paf      1433:                        }
                   1434:                        break;
1.48      paf      1435: 
1.1       paf      1436:                case LS_VAR_CURLY:
1.48      paf      1437:                        switch(c) {
                   1438:                        case '$':
1.206     paf      1439:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1440:                                RC;
                   1441:                        case '^':
1.206     paf      1442:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1443:                                RC;
                   1444:                        case '}':
1.1       paf      1445:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1446:                                        pop_LS(pc);
1.48      paf      1447:                                        RC;
1.1       paf      1448:                                }
1.48      paf      1449:                                break;
                   1450:                        case '{':
1.1       paf      1451:                                lexical_brackets_nestage++;
1.48      paf      1452:                                break;
                   1453:                        }
1.1       paf      1454:                        break;
                   1455: 
1.10      paf      1456:                // METHOD CALL
1.1       paf      1457:                case LS_METHOD_NAME:
1.48      paf      1458:                        switch(c) {
                   1459:                        case '[':
1.166     parser   1460:                                // ^name.<[>code].xxx
1.206     paf      1461:                                if(pc.pos.col>1/*not first column*/ && (
1.163     parser   1462:                                        end[-1]=='^'/*was start of call*/ || // never, ^[ is literal...
                   1463:                                        end[-1]==':'/*was class name delim */ ||
                   1464:                                        end[-1]=='.'/*was name delim */
1.162     parser   1465:                                        )) {
1.206     paf      1466:                                        push_LS(pc, LS_NAME_SQUARE_PART);
1.162     parser   1467:                                        lexical_brackets_nestage=1;
                   1468:                                        RC;
                   1469:                                }
1.206     paf      1470:                                pc.ls=LS_METHOD_SQUARE;
1.1       paf      1471:                                lexical_brackets_nestage=1;
1.48      paf      1472:                                RC;
                   1473:                        case '{':
1.206     paf      1474:                                pc.ls=LS_METHOD_CURLY;
1.1       paf      1475:                                lexical_brackets_nestage=1;
1.48      paf      1476:                                RC;
1.69      paf      1477:                        case '(':
1.206     paf      1478:                                pc.ls=LS_METHOD_ROUND;
1.69      paf      1479:                                lexical_brackets_nestage=1;
                   1480:                                RC;
1.48      paf      1481:                        case '.': // name part delim 
                   1482:                        case '$': // name part subvar
                   1483:                        case ':': // ':name' or 'class:name'
1.170     parser   1484:                        case '^': // ^abc^xxx wrong. bailing out
                   1485:                        case ']': case '}': case ')': // ^abc]}) wrong. bailing out
1.207     paf      1486:                        case ' ': // ^if ( wrong. bailing out
1.48      paf      1487:                                RC;
1.1       paf      1488:                        }
                   1489:                        break;
1.48      paf      1490: 
                   1491:                case LS_METHOD_SQUARE:
                   1492:                        switch(c) {
                   1493:                        case '$':
1.206     paf      1494:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1495:                                RC;
                   1496:                        case '^':
1.206     paf      1497:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1498:                                RC;
                   1499:                        case ';': // param delim
                   1500:                                RC;
                   1501:                        case ']':
1.1       paf      1502:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1503:                                        pc.ls=LS_METHOD_AFTER;
1.48      paf      1504:                                        RC;
1.1       paf      1505:                                }
1.48      paf      1506:                                break;
                   1507:                        case '[':
1.1       paf      1508:                                lexical_brackets_nestage++;
1.48      paf      1509:                                break;
                   1510:                        }
1.1       paf      1511:                        break;
1.48      paf      1512: 
1.1       paf      1513:                case LS_METHOD_CURLY:
1.48      paf      1514:                        switch(c) {
                   1515:                        case '$':
1.206     paf      1516:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1517:                                RC;
                   1518:                        case '^':
1.206     paf      1519:                                push_LS(pc, LS_METHOD_NAME);
1.94      paf      1520:                                RC;
                   1521:                        case ';': // param delim
1.48      paf      1522:                                RC;
                   1523:                        case '}':
1.1       paf      1524:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1525:                                        pc.ls=LS_METHOD_AFTER;
1.48      paf      1526:                                        RC;
1.1       paf      1527:                                }
1.48      paf      1528:                                break;
                   1529:                        case '{':
1.1       paf      1530:                                lexical_brackets_nestage++;
1.48      paf      1531:                                break;
                   1532:                        }
1.209     paf      1533:                        if(pc.explicit_result && c)
                   1534:                                switch(c) {
1.276     moko     1535:                                default:
                   1536:                                        pc.string.append(c);
1.209     paf      1537:                                case '\n': case ' ': case '\t':
                   1538:                                        begin=pc.source;
                   1539:                                        begin_pos=pc.pos;
1.276     moko     1540:                                        continue;
1.209     paf      1541:                                }
1.1       paf      1542:                        break;
1.48      paf      1543: 
1.1       paf      1544:                case LS_METHOD_AFTER:
1.69      paf      1545:                        if(c=='[') {/* ][ }[ )[ */
1.206     paf      1546:                                pc.ls=LS_METHOD_SQUARE;
1.1       paf      1547:                                lexical_brackets_nestage=1;
1.48      paf      1548:                                RC;
1.281     moko     1549:                        }
1.69      paf      1550:                        if(c=='{') {/* ]{ }{ ){ */
1.206     paf      1551:                                pc.ls=LS_METHOD_CURLY;
1.69      paf      1552:                                lexical_brackets_nestage=1;
                   1553:                                RC;
1.281     moko     1554:                        }
1.69      paf      1555:                        if(c=='(') {/* ]( }( )( */
1.206     paf      1556:                                pc.ls=LS_METHOD_ROUND;
1.1       paf      1557:                                lexical_brackets_nestage=1;
1.48      paf      1558:                                RC;
1.281     moko     1559:                        }
1.206     paf      1560:                        pop_LS(pc);
                   1561:                        pc.ungetc();
1.13      paf      1562:                        result=EON;
1.1       paf      1563:                        goto break2;
                   1564:                }
1.9       paf      1565:                if(c==0) {
1.1       paf      1566:                        result=-1;
                   1567:                        break;
                   1568:                }
                   1569:        }
                   1570: 
                   1571: break2:
1.59      paf      1572:        if(end!=begin) { // there is last piece?
1.258     misha    1573:                if(c=='@' || c==0) // we are before LS_DEF_NAME or EOF?
                   1574:                        while(end!=begin && end[-1]=='\n') // trim all empty lines before LS_DEF_NAME and EOF
1.137     parser   1575:                                end--;
1.206     paf      1576:                if(end!=begin && pc.ls!=LS_USER_COMMENT) { // last piece still alive and not comment?
                   1577:                        if(!pc.string_start)
                   1578:                                pc.string_start=begin_pos;
1.59      paf      1579:                        // append it
1.206     paf      1580:                        pc.string.append_strdup_know_length(begin, end-begin);
1.30      paf      1581:                }
1.59      paf      1582:        }
1.206     paf      1583:        if(!pc.string.is_empty()) { // something accumulated?
                   1584:                // create STRING value: array of OP_VALUE+origin+vstring
1.278     moko     1585: #ifdef SYMBOLS_CACHING
                   1586:                Value *lookup=symbols->get(pc.string);
                   1587: #else
                   1588:                Value *lookup=0;
                   1589: #endif
1.281     moko     1590:                *lvalp=VL(lookup ? lookup : new VString(*new String(pc.string, String::L_CLEAN)), pc.file_no, pc.string_start.line, pc.string_start.col);
1.10      paf      1591:                // new pieces storage
1.206     paf      1592:                pc.string.clear();
                   1593:                pc.string_start.clear();
1.58      paf      1594:                // make current result be pending for next call, return STRING for now
1.206     paf      1595:                pc.pending_state=result;  result=STRING;
1.58      paf      1596:        }
1.67      paf      1597:        if(skip_analized) {
1.206     paf      1598:                pc.source+=skip_analized;  pc.pos.col+=skip_analized;
1.1       paf      1599:        }
1.58      paf      1600:        return result;
1.1       paf      1601: }
                   1602: 
1.264     moko     1603: static int real_yyerror(Parse_control *pc, const char *s) {  // Called by yyparse on error
1.293     moko     1604:        PC.error=pa_strdup(s);
1.281     moko     1605:        return 1;
1.110     paf      1606: }
1.1       paf      1607: 
1.110     paf      1608: static void yyprint(FILE *file, int type, YYSTYPE value) {
                   1609:        if(type==STRING)
1.206     paf      1610:                fprintf(file, " \"%s\"", LA2S(*value)->cstr());
1.110     paf      1611: }

E-mail: