Annotation of parser3/src/main/compile.y, revision 1.266

1.168     parser      1: %{
1.105     paf         2: /** @file
1.106     paf         3:        Parser: compiler(lexical parser and grammar).
                      4: 
1.262     moko        5:        Copyright (c) 2001-2012 Art. Lebedev Studio (http://www.artlebedev.com)
1.168     parser      6:        Author: Alexander Petrosyan <paf@design.ru> (http://design.ru/paf)
1.217     paf         7: 
1.262     moko        8:        
1.88      paf         9: */
                     10: 
1.266   ! misha      11: volatile const char * IDENT_COMPILE_Y = "$Id: compile.y,v 1.265 2013/09/30 19:40:57 moko Exp $";
1.262     moko       12: 
1.106     paf        13: /**
                     14:        @todo parser4: 
                     15:        - cache compiled code from request to request. to do that...
                     16:                -#:     make method definitions, @CLASS, @BASE, @USE instructions,
1.88      paf        17:                        which would be executed afterwards, and actions
                     18:                        now performed at compile time would be delayed to run time.
1.106     paf        19:                -#:     make cache expiration on time and on disk-change of class source
                     20:                -#:     in apache use subpools for compiled class storage
                     21:                -#:     in iis make up specialized Pool object for that
1.24      paf        22: */
                     23: 
1.206     paf        24: #define YYSTYPE  ArrayOperation* 
1.9       paf        25: #define YYPARSE_PARAM  pc
                     26: #define YYLEX_PARAM  pc
                     27: #define YYDEBUG  1
1.106     paf        28: #define YYERROR_VERBOSE        1
1.206     paf        29: #define yyerror(msg)  real_yyerror((Parse_control *)pc, msg)
1.9       paf        30: #define YYPRINT(file, type, value)  yyprint(file, type, value)
1.1       paf        31: 
1.206     paf        32: // includes
                     33: 
1.1       paf        34: #include "compile_tools.h"
1.8       paf        35: #include "pa_value.h"
1.12      paf        36: #include "pa_request.h"
1.39      paf        37: #include "pa_vobject.h"
1.52      paf        38: #include "pa_vdouble.h"
1.98      paf        39: #include "pa_globals.h"
1.200     paf        40: #include "pa_vmethod_frame.h"
1.39      paf        41: 
1.206     paf        42: // defines
                     43: 
1.97      paf        44: #define USE_CONTROL_METHOD_NAME "USE"
1.226     misha      45: #define OPTIONS_CONTROL_METHOD_NAME "OPTIONS"
                     46: #define OPTION_ALL_VARS_LOCAL_NAME "locals"
1.230     misha      47: #define OPTION_PARTIAL_CLASS "partial"
1.238     misha      48: #define REM_OPERATOR_NAME "rem"
1.1       paf        49: 
1.206     paf        50: // forwards
                     51: 
1.264     moko       52: static int real_yyerror(Parse_control* pc, const char* s);
1.206     paf        53: static void yyprint(FILE* file, int type, YYSTYPE value);
                     54: static int yylex(YYSTYPE* lvalp, void* pc);
1.1       paf        55: 
1.216     paf        56: static const VBool vfalse(false);
                     57: static const VBool vtrue(true);
1.261     moko       58: static const VString vempty;
1.216     paf        59: 
1.8       paf        60: // local convinient inplace typecast & var
1.205     paf        61: #undef PC
1.206     paf        62: #define PC  (*(Parse_control *)pc)
                     63: #undef POOL
1.114     paf        64: #define POOL  (*PC.pool)
1.107     paf        65: #ifndef DOXYGEN
1.265     moko       66: 
                     67: #define CLASS_ADD if(PC.class_add()){                                  \
                     68:        strncpy(PC.error, PC.cclass->name().cstr(), MAX_STRING/2);      \
                     69:        strcat(PC.error, " - class is already defined");                \
                     70:        YYERROR;                                                        \
                     71: }
                     72: 
1.1       paf        73: %}
                     74: 
                     75: %pure_parser
                     76: 
1.13      paf        77: %token EON
1.4       paf        78: %token STRING
1.1       paf        79: %token BOGUS
1.55      paf        80: 
1.58      paf        81: %token BAD_STRING_COMPARISON_OPERATOR
1.114     paf        82: %token BAD_HEX_LITERAL
1.171     parser     83: %token BAD_METHOD_DECL_START
1.193     paf        84: %token BAD_METHOD_PARAMETER_NAME_CHARACTER
1.209     paf        85: %token BAD_NONWHITESPACE_CHARACTER_IN_EXPLICIT_RESULT_MODE
1.58      paf        86: 
1.59      paf        87: %token LAND "&&"
1.58      paf        88: %token LOR "||"
1.193     paf        89: %token LXOR "!||"
                     90: %token NXOR "!|"
1.58      paf        91: 
                     92: %token NLE "<="
                     93: %token NGE ">="
                     94: %token NEQ "=="
                     95: %token NNE "!="
1.195     paf        96: %token NSL "<<"
                     97: %token NSR ">>"
1.58      paf        98: 
                     99: %token SLT "lt"
                    100: %token SGT "gt"
                    101: %token SLE "le"
                    102: %token SGE "ge"
                    103: %token SEQ "eq"
                    104: %token SNE "ne"
                    105: 
1.67      paf       106: %token DEF "def"
                    107: %token IN "in"
                    108: %token FEXISTS "-f"
1.127     paf       109: %token DEXISTS "-d"
1.95      paf       110: %token IS "is"
1.67      paf       111: 
1.216     paf       112: %token LITERAL_TRUE "true"
                    113: %token LITERAL_FALSE "false"
                    114: 
1.57      paf       115: /* logical */
1.193     paf       116: %left "!||"
1.57      paf       117: %left "||"
                    118: %left "&&"
1.131     paf       119: %left '<' '>' "<=" ">="   "lt" "gt" "le" "ge"
                    120: %left "==" "!="  "eq" "ne"
                    121: %left "is" "def" "in" "-f" "-d"
1.57      paf       122: 
                    123: /* bitwise */
1.193     paf       124: %left "!|"
1.131     paf       125: %left '|'
                    126: %left '&' 
1.202     paf       127: %left "<<"  ">>"
1.57      paf       128: 
1.56      paf       129: /* numerical */
1.202     paf       130: %left '+' '-'
                    131: %left '*' '/' '\\' '%'
                    132: %left NUNARY   /* unary - + */
                    133: 
                    134: /* out-of-group */
                    135: %left '~' /* bitwise */
                    136: %left '!'  /* logical */
1.1       paf       137: 
                    138: %%
1.195     paf       139: all:
1.10      paf       140:        one_big_piece {
1.251     misha     141:        Method* method=new Method(Method::CT_ANY,
1.81      paf       142:                0, 0, /*min, max numbered_params_count*/
1.75      paf       143:                0/*param_names*/, 0/*local_names*/, 
                    144:                $1/*parser_code*/, 0/*native_code*/);
1.251     misha     145:        PC.cclass->set_method(PC.alias_method(main_method_name), method);
1.10      paf       146: }
                    147: |      methods;
                    148: 
                    149: methods: method | methods method;
                    150: one_big_piece: maybe_codes;
                    151: 
1.34      paf       152: method: control_method | code_method;
                    153: 
                    154: control_method: '@' STRING '\n' 
1.132     paf       155:                                maybe_control_strings {
1.260     misha     156:        const String& command=LA2S(*$2)->trim(String::TRIM_END);
1.34      paf       157:        YYSTYPE strings_code=$4;
1.206     paf       158:        if(strings_code->count()<1*OPERATIONS_PER_OPVALUE) {
1.114     paf       159:                strcpy(PC.error, "@");
                    160:                strcat(PC.error, command.cstr());
                    161:                strcat(PC.error, " is empty");
1.37      paf       162:                YYERROR;
                    163:        }
1.74      paf       164:        if(command==CLASS_NAME) {
1.206     paf       165:                if(strings_code->count()==1*OPERATIONS_PER_OPVALUE) {
1.265     moko      166:                        CLASS_ADD;
1.73      paf       167:                        // new class' name
1.260     misha     168:                        const String& name=LA2S(*strings_code)->trim(String::TRIM_END);
1.73      paf       169:                        // creating the class
1.206     paf       170:                        VStateless_class* cclass=new VClass;
1.226     misha     171:                        PC.cclass_new=cclass;
                    172:                        PC.cclass_new->set_name(name);
1.266   ! misha     173:                        PC.append=false;
1.73      paf       174:                } else {
1.206     paf       175:                        strcpy(PC.error, "@"CLASS_NAME" must contain only one line with class name (contains more then one)");
1.34      paf       176:                        YYERROR;
                    177:                }
1.130     paf       178:        } else if(command==USE_CONTROL_METHOD_NAME) {
1.265     moko      179:                CLASS_ADD;
1.206     paf       180:                for(size_t i=0; i<strings_code->count(); i+=OPERATIONS_PER_OPVALUE) 
1.260     misha     181:                        PC.request.use_file(PC.request.main_class, LA2S(*strings_code, i)->trim(String::TRIM_END), PC.request.get_used_filename(PC.file_no));
1.130     paf       182:        } else if(command==BASE_NAME) {
1.226     misha     183:                if(PC.append){
                    184:                        strcpy(PC.error, "can't set base while appending methods to class '");
                    185:                        strncat(PC.error, PC.cclass->name().cstr(), MAX_STRING/2);
                    186:                        strcat(PC.error, "'");
                    187:                        YYERROR;
                    188:                }
1.265     moko      189:                CLASS_ADD;
1.188     paf       190:                if(PC.cclass->base_class()) { // already changed from default?
1.130     paf       191:                        strcpy(PC.error, "class already have a base '");
1.226     misha     192:                        strncat(PC.error, PC.cclass->base_class()->name().cstr(), MAX_STRING/2);
1.130     paf       193:                        strcat(PC.error, "'");
                    194:                        YYERROR;
                    195:                }
1.206     paf       196:                if(strings_code->count()==1*OPERATIONS_PER_OPVALUE) {
1.260     misha     197:                        const String& base_name=LA2S(*strings_code)->trim(String::TRIM_END);
1.252     misha     198:                        if(Value* base_class_value=PC.request.get_class(base_name)) {
1.206     paf       199:                                // @CLASS == @BASE sanity check
                    200:                                if(VStateless_class *base_class=base_class_value->get_class()) {
                    201:                                        if(PC.cclass==base_class) {
                    202:                                                strcpy(PC.error, "@"CLASS_NAME" equals @"BASE_NAME);
                    203:                                                YYERROR;
                    204:                                        }
                    205:                                        PC.cclass->get_class()->set_base(base_class);
                    206:                                } else { // they asked to derive from a class without methods ['env' & co]
                    207:                                        strcpy(PC.error, base_name.cstr());
                    208:                                        strcat(PC.error, ": you can not derive from this class in @"BASE_NAME);
                    209:                                        YYERROR;
                    210:                                }
                    211:                        } else {
1.130     paf       212:                                strcpy(PC.error, base_name.cstr());
                    213:                                strcat(PC.error, ": undefined class in @"BASE_NAME);
1.73      paf       214:                                YYERROR;
                    215:                        }
1.34      paf       216:                } else {
1.130     paf       217:                        strcpy(PC.error, "@"BASE_NAME" must contain sole name");
1.34      paf       218:                        YYERROR;
                    219:                }
1.223     misha     220:        } else if(command==OPTIONS_CONTROL_METHOD_NAME) {
                    221:                for(size_t i=0; i<strings_code->count(); i+=OPERATIONS_PER_OPVALUE) {
1.260     misha     222:                        const String& option=LA2S(*strings_code, i)->trim(String::TRIM_END);
1.226     misha     223:                        if(option==OPTION_ALL_VARS_LOCAL_NAME){
                    224:                                PC.set_all_vars_local();
1.230     misha     225:                        } else if(option==OPTION_PARTIAL_CLASS){
                    226:                                if(PC.cclass_new){
                    227:                                        if(VStateless_class* existed=PC.get_existed_class(PC.cclass_new)){
                    228:                                                if(!PC.reuse_existed_class(existed)){
                    229:                                                        strcpy(PC.error, "can't append methods to '");
                    230:                                                        strncat(PC.error, PC.cclass_new->name().cstr(), MAX_STRING/2);
                    231:                                                        strcat(PC.error, "' - the class wasn't marked as partial");
                    232:                                                        YYERROR;
                    233:                                                }
1.226     misha     234:                                        } else {
1.256     misha     235:                                                // marks the new class as partial. we will be able to add methods here later.
1.230     misha     236:                                                PC.cclass_new->set_partial();
1.226     misha     237:                                        }
1.230     misha     238:                                } else {
                    239:                                        strcpy(PC.error, "'"OPTION_PARTIAL_CLASS"' option should be used straight after @"CLASS_NAME);
1.226     misha     240:                                        YYERROR;
                    241:                                }
1.256     misha     242:                        } else if(option==method_call_type_static){
                    243:                                PC.set_methods_call_type(Method::CT_STATIC);
                    244:                        } else if(option==method_call_type_dynamic){
                    245:                                PC.set_methods_call_type(Method::CT_DYNAMIC);
1.223     misha     246:                        } else {
1.226     misha     247:                                strcpy(PC.error, "'");
                    248:                                strncat(PC.error, option.cstr(), MAX_STRING/2);
                    249:                                strcat(PC.error, "' invalid option. valid options are "
1.256     misha     250:                                        "'"OPTION_PARTIAL_CLASS"', '"OPTION_ALL_VARS_LOCAL_NAME"'"
                    251:                                        ", '"METHOD_CALL_TYPE_STATIC"' and '"METHOD_CALL_TYPE_DYNAMIC"'"
                    252:                                        );
1.223     misha     253:                                YYERROR;
                    254:                        }
                    255:                }
1.130     paf       256:        } else {
                    257:                strcpy(PC.error, "'");
                    258:                strncat(PC.error, command.cstr(), MAX_STRING/2);
                    259:                strcat(PC.error, "' invalid special name. valid names are "
1.223     misha     260:                        "'"CLASS_NAME"', '"USE_CONTROL_METHOD_NAME"', '"BASE_NAME"' and '"OPTIONS_CONTROL_METHOD_NAME"'.");
1.130     paf       261:                YYERROR;
1.34      paf       262:        }
                    263: };
1.132     paf       264: maybe_control_strings: empty | control_strings;
1.259     misha     265: control_strings: control_string | control_strings control_string { $$=$1; P(*$$, *$2); };
1.37      paf       266: control_string: maybe_string '\n';
                    267: maybe_string: empty | STRING;
1.34      paf       268: 
1.222     misha     269: code_method: '@' STRING bracketed_maybe_strings maybe_bracketed_strings maybe_comment '\n' { 
1.265     moko      270:        CLASS_ADD;
1.208     paf       271:        PC.explicit_result=false;
1.10      paf       272: 
                    273:        YYSTYPE params_names_code=$3;
1.206     paf       274:        ArrayString* params_names=0;
                    275:        if(int size=params_names_code->count()) {
                    276:                params_names=new ArrayString;
                    277:                for(int i=0; i<size; i+=OPERATIONS_PER_OPVALUE)
                    278:                        *params_names+=LA2S(*params_names_code, i);
1.75      paf       279:        }
1.10      paf       280: 
                    281:        YYSTYPE locals_names_code=$4;
1.206     paf       282:        ArrayString* locals_names=0;
1.223     misha     283:        bool all_vars_local=false;
1.206     paf       284:        if(int size=locals_names_code->count()) {
                    285:                locals_names=new ArrayString;
1.208     paf       286:                for(int i=0; i<size; i+=OPERATIONS_PER_OPVALUE) {
                    287:                        const String* local_name=LA2S(*locals_names_code, i);
                    288:                        if(*local_name==RESULT_VAR_NAME)
                    289:                                PC.explicit_result=true;
1.226     misha     290:                        else if(*local_name==OPTION_ALL_VARS_LOCAL_NAME)
1.223     misha     291:                                all_vars_local=true;
1.208     paf       292:                        else
                    293:                                *locals_names+=local_name;
                    294:                }
1.75      paf       295:        }
1.231     misha     296:        if(!all_vars_local && PC.cclass && PC.cclass->is_vars_local())
1.223     misha     297:                all_vars_local=true;
1.10      paf       298: 
1.208     paf       299:        Method* method=new Method(
1.206     paf       300:                //name, 
1.257     misha     301:                GetMethodCallType(PC, *$2),
1.81      paf       302:                0, 0/*min,max numbered_params_count*/, 
1.76      paf       303:                params_names, locals_names, 
1.223     misha     304:                0/*to be filled later in next {} */, 0, all_vars_local);
1.221     misha     305: 
1.208     paf       306:        *reinterpret_cast<Method**>(&$$)=method;
1.222     misha     307: } maybe_codes {
1.251     misha     308:                Method* method=reinterpret_cast<Method*>($7);
1.231     misha     309:                // fill in the code
1.251     misha     310:                method->parser_code=$8;
1.231     misha     311: 
                    312:                // register in class
                    313:                const String& name=*LA2S(*$2);
1.251     misha     314:                PC.cclass->set_method(PC.alias_method(name), method);
1.8       paf       315: };
1.10      paf       316: 
                    317: maybe_bracketed_strings: empty | bracketed_maybe_strings;
1.259     misha     318: bracketed_maybe_strings: '[' maybe_strings ']' {$$=$2;};
1.10      paf       319: maybe_strings: empty | strings;
1.259     misha     320: strings: STRING | strings ';' STRING { $$=$1; P(*$$, *$3); };
1.10      paf       321: 
                    322: maybe_comment: empty | STRING;
1.1       paf       323: 
                    324: /* codes */
                    325: 
1.10      paf       326: maybe_codes: empty | codes;
                    327: 
1.259     misha     328: codes: code | codes code { $$=$1; P(*$$, *$2); };
1.81      paf       329: code: write_string | action;
1.209     paf       330: action: get | put | call;
1.1       paf       331: 
                    332: /* get */
                    333: 
1.64      paf       334: get: get_value {
1.238     misha     335:        $$=N();
                    336:        YYSTYPE code=$1;
1.247     misha     337:        size_t count=code->count();
1.245     misha     338: 
1.235     misha     339: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
1.247     misha     340:        if(
                    341:                count!=3
                    342:                || !maybe_change_first_opcode(*code, OP::OP_VALUE__GET_ELEMENT, /*=>*/OP::OP_VALUE__GET_ELEMENT__WRITE)
                    343:        )
1.238     misha     344: #endif
1.247     misha     345: 
1.245     misha     346: #ifdef OPTIMIZE_BYTECODE_GET_SELF_ELEMENT
1.247     misha     347:        if(
                    348:                count!=3
                    349:                || !maybe_change_first_opcode(*code, OP::OP_WITH_SELF__VALUE__GET_ELEMENT, /*=>*/OP::OP_WITH_SELF__VALUE__GET_ELEMENT__WRITE)
                    350:        )
1.245     misha     351: #endif
                    352: 
1.239     misha     353: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_ELEMENT
1.247     misha     354:        if(
                    355:                count!=5
                    356:                || !maybe_change_first_opcode(*code, OP::OP_GET_OBJECT_ELEMENT, /*=>*/OP::OP_GET_OBJECT_ELEMENT__WRITE)
                    357:        )
1.239     misha     358: #endif
                    359: 
                    360: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_VAR_ELEMENT
1.247     misha     361:        if(
                    362:                count!=5
                    363:                || !maybe_change_first_opcode(*code, OP::OP_GET_OBJECT_VAR_ELEMENT, /*=>*/OP::OP_GET_OBJECT_VAR_ELEMENT__WRITE)
                    364:        )
1.238     misha     365: #endif
1.247     misha     366:        {
                    367:                changetail_or_append(*code,
                    368:                        OP::OP_GET_ELEMENT, false,  /*=>*/OP::OP_GET_ELEMENT__WRITE,
                    369:                        /*or */OP::OP_WRITE_VALUE
                    370:                        ); /* value=pop; wcontext.write(value) */
1.246     misha     371:        }
1.247     misha     372: 
1.238     misha     373:        P(*$$, *code);
1.1       paf       374: };
1.259     misha     375: get_value: '$' get_name_value { $$=$2; };
1.64      paf       376: get_name_value: name_without_curly_rdive EON | name_in_curly_rdive;
1.259     misha     377: name_in_curly_rdive: '{' name_without_curly_rdive '}' { $$=$2; };
1.44      paf       378: name_without_curly_rdive: 
                    379:        name_without_curly_rdive_read 
                    380: |      name_without_curly_rdive_class;
1.19      paf       381: name_without_curly_rdive_read: name_without_curly_rdive_code {
1.206     paf       382:        $$=N(); 
1.238     misha     383:        YYSTYPE diving_code=$1;
1.239     misha     384:        size_t count=diving_code->count();
1.247     misha     385: 
                    386:        if(maybe_make_self(*$$, *diving_code, count)) {
                    387:                // $self.
                    388:        } else
1.239     misha     389: 
                    390: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_ELEMENT
1.247     misha     391:        if(maybe_make_get_object_element(*$$, *diving_code, count)){
1.245     misha     392:                // optimization for $object.field + ^object.method[
1.247     misha     393:        } else
1.238     misha     394: #endif
1.239     misha     395: 
                    396: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_VAR_ELEMENT
1.247     misha     397:        if(maybe_make_get_object_var_element(*$$, *diving_code, count)){
1.245     misha     398:                // optimization for $object.$var
1.247     misha     399:        } else
1.238     misha     400: #endif
1.239     misha     401: 
                    402: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
1.248     misha     403:        if(
                    404:                count>=4
                    405:                && (*diving_code)[0].code==OP::OP_VALUE
                    406:                && (*diving_code)[3].code==OP::OP_GET_ELEMENT
                    407:        ){
                    408:                 // optimization
1.239     misha     409:                O(*$$,
1.247     misha     410:                        (PC.in_call_value && count==4)
1.239     misha     411:                        ? OP::OP_VALUE__GET_ELEMENT_OR_OPERATOR // ^object[ : OP_VALUE+origin+string+OP_GET_ELEMENT => OP_VALUE__GET_ELEMENT_OR_OPERATOR+origin+string
                    412:                        : OP::OP_VALUE__GET_ELEMENT             // $object  : OP_VALUE+origin+string+OP_GET_ELEMENT => OP_VALUE__GET_ELEMENT+origin+string
                    413:                );
                    414:                P(*$$, *diving_code, 1/*offset*/, 2/*limit*/); // copy origin+value
1.247     misha     415:                if(count>4)
                    416:                        P(*$$, *diving_code, 4); // copy tail
1.239     misha     417:        } else {
                    418:                O(*$$, OP::OP_WITH_READ); /* stack: starting context */
                    419:                P(*$$, *diving_code);
                    420:        }
1.233     misha     421: #else
1.247     misha     422:        {
1.238     misha     423:                O(*$$, OP::OP_WITH_READ); /* stack: starting context */
1.179     paf       424: 
1.238     misha     425:                // ^if OP_ELEMENT => ^if OP_ELEMENT_OR_OPERATOR
                    426:                // optimized OP_VALUE+origin+string+OP_GET_ELEMENT. => OP_VALUE+origin+string+OP_GET_ELEMENT_OR_OPERATOR.
1.239     misha     427:                if(PC.in_call_value && count==4)
                    428:                        diving_code->put(count-1, OP::OP_GET_ELEMENT_OR_OPERATOR);
1.206     paf       429:                P(*$$, *diving_code);
1.239     misha     430:        }
1.233     misha     431: #endif
1.22      paf       432:        /* diving code; stack: current context */
1.1       paf       433: };
1.259     misha     434: name_without_curly_rdive_class: class_prefix name_without_curly_rdive_code { $$=$1; P(*$$, *$2); };
                    435: name_without_curly_rdive_code: name_advance2 | name_path name_advance2 { $$=$1; P(*$$, *$2); };
1.1       paf       436: 
                    437: /* put */
                    438: 
1.81      paf       439: put: '$' name_expr_wdive construct {
1.241     misha     440:        $$=N();
1.244     misha     441: #ifdef OPTIMIZE_BYTECODE_CONSTRUCT
                    442:        if(maybe_optimize_construct(*$$, *$2, *$3)){
1.246     misha     443:                // $a(expr), $.a(expr), $a[value], $.a[value], $self.a[value], $self.a(expr)
1.241     misha     444:        } else 
                    445: #endif
                    446:        {
                    447:                P(*$$, *$2); /* stack: context,name */
                    448:                P(*$$, *$3); /* stack: context,name,constructor_value */
                    449:        }
1.20      paf       450: };
1.44      paf       451: name_expr_wdive: 
1.157     parser    452:        name_expr_wdive_root
                    453: |      name_expr_wdive_write
1.44      paf       454: |      name_expr_wdive_class;
1.157     parser    455: name_expr_wdive_root: name_expr_dive_code {
1.206     paf       456:        $$=N();
1.238     misha     457:        YYSTYPE diving_code=$1;
1.247     misha     458:        size_t count=diving_code->count();
                    459: 
                    460:        if(maybe_make_self(*$$, *diving_code, count)) {
                    461:                // $self.
                    462:        } else
                    463: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
                    464:        if(
                    465:                count>=4
                    466:                && (*diving_code)[0].code==OP::OP_VALUE
                    467:                && (*diving_code)[3].code==OP::OP_GET_ELEMENT
                    468:        ){
                    469:                O(*$$, OP::OP_WITH_ROOT__VALUE__GET_ELEMENT);
                    470:                P(*$$, *diving_code, 1/*offset*/, 2/*limit*/); // copy origin+value
                    471:                if(count>4)
                    472:                        P(*$$, *diving_code, 4); // tail
                    473:        } else
                    474: #endif
                    475:        {
1.229     misha     476:                O(*$$, OP::OP_WITH_ROOT); /* stack: starting context */
1.206     paf       477:                P(*$$, *diving_code);
1.23      paf       478:        }
                    479:        /* diving code; stack: current context */
1.156     parser    480: };
1.157     parser    481: name_expr_wdive_write: '.' name_expr_dive_code {
1.206     paf       482:        $$=N(); 
1.229     misha     483:        O(*$$, OP::OP_WITH_WRITE); /* stack: starting context */
1.206     paf       484:        P(*$$, *$2); /* diving code; stack: context,name */
1.20      paf       485: };
1.259     misha     486: name_expr_wdive_class: class_prefix name_expr_dive_code { $$=$1; P(*$$, *$2); };
1.20      paf       487: 
1.244     misha     488: construct:
1.163     parser    489:        construct_square
                    490: |      construct_round
                    491: |      construct_curly
1.149     parser    492: ;
1.211     paf       493: construct_square: '[' {
                    494:        // allow $result_or_other_variable[ letters here any time ]
                    495:        *reinterpret_cast<bool*>(&$$)=PC.explicit_result; PC.explicit_result=false;
                    496: } any_constructor_code_value {
1.213     paf       497:        PC.explicit_result=*reinterpret_cast<bool*>(&$2);
1.211     paf       498: } ']' {
1.149     parser    499:        // stack: context, name
1.211     paf       500:        $$=$3; // stack: context, name, value
1.229     misha     501:        O(*$$, OP::OP_CONSTRUCT_VALUE); /* value=pop; name=pop; context=pop; construct(context,name,value) */
1.81      paf       502: }
                    503: ;
1.149     parser    504: construct_round: '(' expr_value ')' { 
1.206     paf       505:        $$=N(); 
1.229     misha     506:        O(*$$, OP::OP_PREPARE_TO_EXPRESSION);
1.149     parser    507:        // stack: context, name
1.206     paf       508:        P(*$$, *$2); // stack: context, name, value
1.229     misha     509:        O(*$$, OP::OP_CONSTRUCT_EXPR); /* value=pop->as_expr_result; name=pop; context=pop; construct(context,name,value) */
1.81      paf       510: }
1.52      paf       511: ;
1.149     parser    512: construct_curly: '{' maybe_codes '}' {
                    513:        // stack: context, name
1.206     paf       514:        $$=N(); 
1.229     misha     515:        OA(*$$, OP::OP_CURLY_CODE__CONSTRUCT, $2); /* code=pop; name=pop; context=pop; construct(context,name,junction(code)) */
1.149     parser    516: };
                    517: 
1.55      paf       518: any_constructor_code_value: 
1.261     moko      519:        empty_value /* optimized $var[] case */
1.52      paf       520: |      STRING /* optimized $var[STRING] case */
1.55      paf       521: |      constructor_code_value /* $var[something complex] */
1.1       paf       522: ;
1.55      paf       523: constructor_code_value: constructor_code {
1.206     paf       524:        $$=N(); 
1.229     misha     525:        OA(*$$, OP::OP_OBJECT_POOL, $1); /* stack: empty write context */
1.183     paf       526:        /* some code that writes to that context */
                    527:        /* context=pop; stack: context.value() */
1.1       paf       528: };
1.55      paf       529: constructor_code: codes__excluding_sole_str_literal;
1.259     misha     530: codes__excluding_sole_str_literal: action | code codes { $$=$1; P(*$$, *$2); };
1.27      paf       531: 
1.1       paf       532: /* call */
                    533: 
1.66      paf       534: call: call_value {
1.238     misha     535: #ifdef OPTIMIZE_BYTECODE_CUT_REM_OPERATOR
                    536:        if((*$1).count())
                    537: #endif
                    538:        {
                    539:                $$=$1; /* stack: value */
1.249     misha     540:                if(!maybe_change_first_opcode(*$$, OP::OP_CONSTRUCT_OBJECT, /*=>*/OP::OP_CONSTRUCT_OBJECT__WRITE))
                    541:                        changetail_or_append(*$$, 
                    542:                                OP::OP_CALL, true,  /*=>*/ OP::OP_CALL__WRITE,
                    543:                                /*or */OP::OP_WRITE_VALUE); /* value=pop; wcontext.write(value) */
1.238     misha     544:        }
1.66      paf       545: };
1.177     paf       546: call_value: '^' { 
1.180     paf       547:                                        PC.in_call_value=true; 
1.177     paf       548:                        }
                    549:                        call_name {
1.180     paf       550:                                PC.in_call_value=false;
1.177     paf       551:                        } 
1.154     parser    552:                        store_params EON { /* ^field.$method{vasya} */
1.238     misha     553: #ifdef OPTIMIZE_BYTECODE_CUT_REM_OPERATOR
1.242     misha     554: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
1.238     misha     555:        const String* operator_name=LA2S(*$3, 0, OP::OP_VALUE__GET_ELEMENT_OR_OPERATOR);
1.242     misha     556: #else
                    557:        const String* operator_name=LA2S(*$3, 1);
                    558: #endif
1.249     misha     559:        if(operator_name && *operator_name==REM_OPERATOR_NAME){
1.238     misha     560:                $$=N();
                    561:        } else 
                    562: #endif
                    563:                {
                    564:                        YYSTYPE params_code=$5;
                    565:                        if(params_code->count()==3) { // probably [] case. [OP::OP_VALUE+origin+Void]
                    566:                                if(Value* value=LA2V(*params_code)) // it is OP_VALUE+origin+value?
1.261     moko      567:                                        if(const String * string=value->get_string())
                    568:                                                if(string->is_empty()) // value is empty string?
                    569:                                                        params_code=0; // ^zzz[] case. don't append lone empty param.
1.238     misha     570:                        }
                    571:                        /* stack: context, method_junction */
1.249     misha     572: 
                    573:                        YYSTYPE var_code=$3;
                    574:                        if(
                    575:                                var_code->count()==8
                    576:                                && (*var_code)[0].code==OP::OP_VALUE__GET_CLASS
                    577:                                && (*var_code)[3].code==OP::OP_PREPARE_TO_CONSTRUCT_OBJECT
                    578:                                && (*var_code)[4].code==OP::OP_VALUE
                    579:                                && (*var_code)[7].code==OP::OP_GET_ELEMENT
                    580:                        ){
                    581:                                yyval=N();
                    582:                                O(*$$, OP::OP_CONSTRUCT_OBJECT);
                    583:                                P(*$$, *var_code, 1/*offset*/, 2/*limit*/); // class name
                    584:                                P(*$$, *var_code, 5/*offset*/, 2/*limit*/); // constructor name
                    585:                                OA(*$$, params_code);
                    586:                        } else 
                    587:                                {
                    588:                                        $$=var_code; /* with_xxx,diving code; stack: context,method_junction */
                    589:                                        OA(*$$, OP::OP_CALL, params_code); // method_frame=make frame(pop junction); ncontext=pop; call(ncontext,method_frame) stack: value
                    590:                                }
1.238     misha     591:                }
1.1       paf       592: };
                    593: 
1.43      paf       594: call_name: name_without_curly_rdive;
1.38      paf       595: 
1.259     misha     596: store_params: store_param | store_params store_param { $$=$1; P(*$$, *$2); };
1.69      paf       597: store_param: 
                    598:        store_square_param
                    599: |      store_round_param
                    600: |      store_curly_param
1.31      paf       601: ;
1.210     paf       602: store_square_param: '[' {
1.211     paf       603:        // allow ^call[ letters here any time ]
1.210     paf       604:        *reinterpret_cast<bool*>(&$$)=PC.explicit_result; PC.explicit_result=false;
                    605: } store_code_param_parts {
1.213     paf       606:        PC.explicit_result=*reinterpret_cast<bool*>(&$2);
1.259     misha     607: } ']' {$$=$3;};
                    608: store_round_param: '(' store_expr_param_parts ')' {$$=$2;};
                    609: store_curly_param: '{' store_curly_param_parts '}' {$$=$2;};
1.69      paf       610: store_code_param_parts:
                    611:        store_code_param_part
1.259     misha     612: |      store_code_param_parts ';' store_code_param_part { $$=$1; P(*$$, *$3); }
1.69      paf       613: ;
                    614: store_expr_param_parts:
                    615:        store_expr_param_part
1.259     misha     616: |      store_expr_param_parts ';' store_expr_param_part { $$=$1; P(*$$, *$3); }
1.69      paf       617: ;
1.94      paf       618: store_curly_param_parts:
                    619:        store_curly_param_part
1.259     misha     620: |      store_curly_param_parts ';' store_curly_param_part { $$=$1; P(*$$, *$3); }
1.94      paf       621: ;
1.120     paf       622: store_code_param_part: code_param_value {
1.32      paf       623:        $$=$1;
1.120     paf       624: };
1.214     paf       625: store_expr_param_part: expr_value {
                    626:        YYSTYPE expr_code=$1;
1.215     paf       627:        if(expr_code->count()==3
1.234     misha     628:                && (*expr_code)[0].code==OP::OP_VALUE) { // optimizing (double/bool/incidently 'string' too) case. [OP::OP_VALUE+origin+Double]. no evaluating
1.214     paf       629:                $$=expr_code; 
                    630:        } else {
1.238     misha     631:                YYSTYPE code=N();
1.229     misha     632:                O(*code, OP::OP_PREPARE_TO_EXPRESSION);
1.214     paf       633:                P(*code, *expr_code);
1.229     misha     634:                O(*code, OP::OP_WRITE_EXPR_RESULT);
1.214     paf       635:                $$=N(); 
1.229     misha     636:                OA(*$$, OP::OP_EXPR_CODE__STORE_PARAM, code);
1.214     paf       637:        }
1.69      paf       638: };
1.94      paf       639: store_curly_param_part: maybe_codes {
1.206     paf       640:        $$=N(); 
1.229     misha     641:        OA(*$$, OP::OP_CURLY_CODE__STORE_PARAM, $1);
1.94      paf       642: };
1.120     paf       643: code_param_value:
1.261     moko      644:        empty_value /* optimized [;...] case */
1.120     paf       645: |      STRING /* optimized [STRING] case */
                    646: |      constructor_code_value /* [something complex] */
                    647: ;
1.1       paf       648: 
                    649: /* name */
                    650: 
1.259     misha     651: name_expr_dive_code: name_expr_value | name_path name_expr_value { $$=$1; P(*$$, *$2); };
1.1       paf       652: 
1.259     misha     653: name_path: name_step | name_path name_step { $$=$1; P(*$$, *$2); };
1.1       paf       654: name_step: name_advance1 '.';
                    655: name_advance1: name_expr_value {
1.177     paf       656:        // we know that name_advance1 not called from ^xxx context
                    657:        // so we'll not check for operator call possibility as we do in name_advance2
                    658: 
1.1       paf       659:        /* stack: context */
                    660:        $$=$1; /* stack: context,name */
1.229     misha     661:        O(*$$, OP::OP_GET_ELEMENT); /* name=pop; context=pop; stack: context.get_element(name) */
1.1       paf       662: };
                    663: name_advance2: name_expr_value {
                    664:        /* stack: context */
                    665:        $$=$1; /* stack: context,name */
1.229     misha     666:        O(*$$, OP::OP_GET_ELEMENT); /* name=pop; context=pop; stack: context.get_element(name) */
1.1       paf       667: }
1.4       paf       668: |      STRING BOGUS
1.1       paf       669: ;
                    670: name_expr_value: 
1.4       paf       671:        STRING /* subname_is_const */
1.1       paf       672: |      name_expr_subvar_value /* $subname_is_var_value */
1.160     parser    673: |      name_expr_with_subvar_value /* xxx$part_of_subname_is_var_value */
1.166     parser    674: |      name_square_code_value /* [codes] */
1.1       paf       675: ;
                    676: name_expr_subvar_value: '$' subvar_ref_name_rdive {
                    677:        $$=$2;
1.229     misha     678:        O(*$$, OP::OP_GET_ELEMENT);
1.1       paf       679: };
1.4       paf       680: name_expr_with_subvar_value: STRING subvar_get_writes {
1.238     misha     681:        YYSTYPE code;
1.183     paf       682:        {
1.206     paf       683:                change_string_literal_to_write_string_literal(*(code=$1));
                    684:                P(*code, *$2);
1.183     paf       685:        }
1.206     paf       686:        $$=N(); 
1.229     misha     687:        OA(*$$, OP::OP_STRING_POOL, code);
1.1       paf       688: };
1.212     paf       689: name_square_code_value: '[' {
                    690:        // allow $result_or_other_variable[ letters here any time ]
                    691:        *reinterpret_cast<bool*>(&$$)=PC.explicit_result; PC.explicit_result=false;
                    692: } codes {
1.213     paf       693:        PC.explicit_result=*reinterpret_cast<bool*>(&$2);
1.212     paf       694: } ']' {
1.206     paf       695:        $$=N(); 
1.229     misha     696:        OA(*$$, OP::OP_OBJECT_POOL, $3); /* stack: empty write context */
1.183     paf       697:        /* some code that writes to that context */
                    698:        /* context=pop; stack: context.value() */
1.160     parser    699: };
1.154     parser    700: subvar_ref_name_rdive: STRING {
1.206     paf       701:        $$=N(); 
1.229     misha     702:        O(*$$, OP::OP_WITH_READ);
1.206     paf       703:        P(*$$, *$1);
1.1       paf       704: };
1.259     misha     705: subvar_get_writes: subvar__get_write | subvar_get_writes subvar__get_write { $$=$1; P(*$$, *$2); };
1.1       paf       706: subvar__get_write: '$' subvar_ref_name_rdive {
                    707:        $$=$2;
1.229     misha     708:        O(*$$, OP::OP_GET_ELEMENT__WRITE);
1.42      paf       709: };
                    710: 
1.154     parser    711: class_prefix:
                    712:        class_static_prefix
                    713: |      class_constructor_prefix
                    714: ;
1.155     parser    715: class_static_prefix: STRING ':' {
                    716:        $$=$1; // stack: class name string
1.206     paf       717:        if(*LA2S(*$$) == BASE_NAME) { // pseudo BASE class
                    718:                if(VStateless_class* base=PC.cclass->base_class()) {
                    719:                        change_string_literal_value(*$$, base->name());
1.189     paf       720:                } else {
                    721:                        strcpy(PC.error, "no base class declared");
                    722:                        YYERROR;
                    723:                }
                    724:        }
1.238     misha     725:        // optimized OP_VALUE+origin+string+OP_GET_CLASS => OP_VALUE__GET_CLASS+origin+string
1.259     misha     726:        maybe_change_first_opcode(*$$, OP::OP_VALUE, OP::OP_VALUE__GET_CLASS);
1.155     parser    727: };
                    728: class_constructor_prefix: class_static_prefix ':' {
1.154     parser    729:        $$=$1;
1.180     paf       730:        if(!PC.in_call_value) {
1.154     parser    731:                strcpy(PC.error, ":: not allowed here");
                    732:                YYERROR;
                    733:        }
1.229     misha     734:        O(*$$, OP::OP_PREPARE_TO_CONSTRUCT_OBJECT);
1.1       paf       735: };
                    736: 
1.53      paf       737: 
1.56      paf       738: /* expr */
1.53      paf       739: 
1.214     paf       740: expr_value: expr;
1.56      paf       741: expr: 
1.214     paf       742:        double_or_STRING
1.216     paf       743: |   true_value
                    744: |   false_value
1.64      paf       745: |      get_value
1.66      paf       746: |      call_value
1.259     misha     747: |      '"' string_inside_quotes_value '"' { $$ = $2; }
                    748: |      '\'' string_inside_quotes_value '\'' { $$ = $2; }
1.60      paf       749: |      '(' expr ')' { $$ = $2; }
                    750: /* stack: operand // stack: @operand */
1.259     misha     751: |      '-' expr %prec NUNARY { $$=$2;  O(*$$, OP::OP_NEG); }
                    752: |      '+' expr %prec NUNARY { $$=$2; }
                    753: |      '~' expr { $$=$2;        O(*$$, OP::OP_INV); }
                    754: |      '!' expr { $$=$2;  O(*$$, OP::OP_NOT); }
                    755: |      "def" expr { $$=$2;  O(*$$, OP::OP_DEF); }
                    756: |      "in" expr { $$=$2;  O(*$$, OP::OP_IN); }
                    757: |      "-f" expr { $$=$2;  O(*$$, OP::OP_FEXISTS); }
                    758: |      "-d" expr { $$=$2;  O(*$$, OP::OP_DEXISTS); }
1.60      paf       759: /* stack: a,b // stack: a@b */
1.259     misha     760: |      expr '-' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_SUB); }
                    761: |      expr '+' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_ADD); }
                    762: |      expr '*' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_MUL); }
                    763: |      expr '/' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_DIV); }
                    764: |      expr '%' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_MOD); }
                    765: |      expr '\\' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_INTDIV); }
                    766: |      expr "<<" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_SL); }
                    767: |      expr ">>" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_SR); }
                    768: |      expr '&' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_AND); }
                    769: |      expr '|' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_OR); }
                    770: |      expr "!|" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_XOR); }
                    771: |      expr "&&" expr { $$=$1;  OA(*$$, OP::OP_NESTED_CODE, $3);  O(*$$, OP::OP_LOG_AND); }
                    772: |      expr "||" expr { $$=$1;  OA(*$$, OP::OP_NESTED_CODE, $3);  O(*$$, OP::OP_LOG_OR); }
                    773: |      expr "!||" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_LOG_XOR); }
                    774: |      expr '<' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_LT); }
                    775: |      expr '>' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_GT); }
                    776: |      expr "<=" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_LE); }
                    777: |      expr ">=" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_GE); }
                    778: |      expr "==" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_EQ); }
                    779: |      expr "!=" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_NE); }
                    780: |      expr "lt" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_LT); }
                    781: |      expr "gt" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_GT); }
                    782: |      expr "le" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_LE); }
                    783: |      expr "ge" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_GE); }
                    784: |      expr "eq" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_EQ); }
                    785: |      expr "ne" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_NE); }
                    786: |      expr "is" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_IS); }
1.56      paf       787: ;
1.214     paf       788: 
                    789: double_or_STRING: STRING {
1.238     misha     790:        // optimized OP_STRING => OP_VALUE for doubles
1.214     paf       791:        maybe_change_string_literal_to_double_literal(*($$=$1));
                    792: };
1.55      paf       793: 
1.65      paf       794: string_inside_quotes_value: maybe_codes {
1.238     misha     795: #ifdef OPTIMIZE_BYTECODE_STRING_POOL
                    796:        // it brakes ^if(" 09 "){...}
                    797:        YYSTYPE code=$1;
                    798:        $$=N();
1.239     misha     799:        if(code->count()==3 && maybe_change_first_opcode(*code, OP::OP_STRING__WRITE, OP::OP_VALUE)){
1.238     misha     800:                // optimized OP_STRING__WRITE+origin+value => OP_VALUE+origin+value without starting OP_STRING_POOL
                    801:                P(*$$, *code);
                    802:        } else {
                    803:                OA(*$$, OP::OP_STRING_POOL, code); /* stack: empty write context */
                    804:        }
                    805: #else
1.206     paf       806:        $$=N();
1.229     misha     807:        OA(*$$, OP::OP_STRING_POOL, $1); /* stack: empty write context */
1.238     misha     808: #endif
1.183     paf       809:        /* some code that writes to that context */
                    810:        /* context=pop; stack: context.get_string() */
1.53      paf       811: };
1.1       paf       812: 
1.27      paf       813: /* basics */
1.1       paf       814: 
1.81      paf       815: write_string: STRING {
1.238     misha     816:        // optimized OP_STRING+OP_WRITE_VALUE => OP_STRING__WRITE
1.259     misha     817:        change_string_literal_to_write_string_literal(*($$=$1));
1.54      paf       818: };
                    819: 
1.261     moko      820: empty_value: /* empty */ { $$=VL(/*we know that we will not change it*/const_cast<VString*>(&vempty), 0, 0, 0); }
1.259     misha     821: true_value: "true" { $$ = VL(/*we know that we will not change it*/const_cast<VBool*>(&vtrue), 0, 0, 0); }
                    822: false_value: "false" { $$ = VL(/*we know that we will not change it*/const_cast<VBool*>(&vfalse), 0, 0, 0); }
1.216     paf       823: 
1.259     misha     824: empty: /* empty */ { $$=N(); };
1.1       paf       825: 
                    826: %%
1.105     paf       827: #endif
1.1       paf       828: 
                    829: /*
                    830:        000$111(2222)00 
                    831:                000$111{3333}00
1.9       paf       832:        $,^: push,=0
1.1       paf       833:        1:( { break=pop
                    834:        2:( )  pop
                    835:        3:{ }  pop
                    836: 
                    837:        000^111(2222)4444{33333}4000
1.9       paf       838:        $,^: push,=0
1.1       paf       839:        1:( { break=pop
                    840:        2:( )=4
                    841:        3:{ }=4
                    842:                4:[^({]=pop
                    843: */
                    844: 
1.206     paf       845: inline void ungetc(Parse_control& pc, uint last_line_end_col) {
                    846:        pc.source--;
                    847:        if(pc.pos.col==0) {
                    848:                --pc.pos.line; pc.pos.col=last_line_end_col;
                    849:        } else
                    850:                --pc.pos.col;
                    851: 
                    852: }
                    853: static int yylex(YYSTYPE *lvalp, void *apc) {
                    854:        register Parse_control& pc=*static_cast<Parse_control*>(apc);
                    855: 
                    856:        #define lexical_brackets_nestage pc.brackets_nestages[pc.ls_sp]
1.48      paf       857:        #define RC {result=c; goto break2; }
1.1       paf       858: 
1.206     paf       859:        register int c;
                    860:        int result;
1.1       paf       861:        
1.206     paf       862:        if(pc.pending_state) {
                    863:                result=pc.pending_state;
                    864:                pc.pending_state=0;
1.1       paf       865:                return result;
                    866:        }
                    867:        
1.206     paf       868:        const char *begin=pc.source;
                    869:        Pos begin_pos=pc.pos;
1.91      paf       870:        const char *end;
1.67      paf       871:        int skip_analized=0;
1.50      paf       872:        while(true) {
1.206     paf       873:                c=*(end=(pc.source++));
                    874: //             fprintf(stderr, "\nchar: %c %02X; nestage: %d, sp=%d", c, c, lexical_brackets_nestage, pc.sp);
1.1       paf       875: 
1.208     paf       876:                if(c=='\n')
1.206     paf       877:                        pc.pos_next_line();
1.208     paf       878:                else
1.206     paf       879:                        pc.pos_next_c(c);
1.208     paf       880: //             fprintf(stderr, "\nchar: %c file(%d:%d)", c, pc.pos.line, pc.pos.col);
1.73      paf       881: 
1.208     paf       882:                if(pc.pos.col==0+1 && c=='@') {
1.206     paf       883:                        if(pc.ls==LS_DEF_SPECIAL_BODY) {
1.175     paf       884:                                // @SPECIAL
                    885:                                // ...
                    886:                                // @<here = 
1.206     paf       887:                                pop_LS(pc); // exiting from LS_DEF_SPECIAL_BODY state
1.175     paf       888:                        } // continuing checks
1.206     paf       889:                        if(pc.ls==LS_USER) {
                    890:                                push_LS(pc, LS_DEF_NAME);
1.171     parser    891:                                RC;
1.175     paf       892:                        } else // @ in first column inside some code [when could that be?]
1.171     parser    893:                                result=BAD_METHOD_DECL_START;
                    894:                        goto break2;
1.209     paf       895:                }
                    896:                if(c=='^') {
1.206     paf       897:                        if(pc.ls==LS_METHOD_AFTER) {
1.203     paf       898:                                // handle after-method situation
1.206     paf       899:                                pop_LS(pc);
1.203     paf       900:                                result=EON;
                    901:                                skip_analized=-1; // return to punctuation afterwards to assure it's literality
                    902:                                goto break2;
                    903:                        }
1.206     paf       904:                        switch(pc.ls) {
1.169     parser    905: case LS_EXPRESSION_VAR_NAME_WITH_COLON:
                    906: case LS_EXPRESSION_VAR_NAME_WITHOUT_COLON:
                    907: case LS_VAR_NAME_SIMPLE_WITH_COLON:
                    908: case LS_VAR_NAME_SIMPLE_WITHOUT_COLON:
                    909: case LS_VAR_NAME_CURLY:
                    910: case LS_METHOD_NAME:
1.194     paf       911: case LS_USER_COMMENT:
1.169     parser    912: case LS_DEF_COMMENT:
                    913:        // no literals in names, please
                    914:        break;
                    915: default:
1.206     paf       916:                        switch(*pc.source) {
1.165     parser    917:                        // ^escaping some punctuators
1.228     misha     918:                        case '^': case '$': case ';': case '@':
1.126     paf       919:                        case '(': case ')':
1.48      paf       920:                        case '[': case ']':
                    921:                        case '{': case '}':
1.172     parser    922:                        case '"':  case ':':
1.40      paf       923:                                if(end!=begin) {
1.206     paf       924:                                        if(!pc.string_start)
                    925:                                                pc.string_start=begin_pos;
1.40      paf       926:                                        // append piece till ^
1.206     paf       927:                                        pc.string.append_strdup_know_length(begin, end-begin);
1.40      paf       928:                                }
1.63      paf       929:                                // reset piece 'begin' position & line
1.206     paf       930:                                begin=pc.source; // ->punctuation
                    931:                                begin_pos=pc.pos;
1.203     paf       932:                                // skip over _ after ^
1.206     paf       933:                                pc.source++;  pc.pos.col++;
1.203     paf       934:                                // skip analysis = forced literal
                    935:                                continue;
1.114     paf       936: 
                    937:                        // converting ^#HH into char(hex(HH))
                    938:                        case '#':
                    939:                                if(end!=begin) {
1.206     paf       940:                                        if(!pc.string_start)
                    941:                                                pc.string_start=begin_pos;
1.114     paf       942:                                        // append piece till ^
1.206     paf       943:                                        pc.string.append_strdup_know_length(begin, end-begin);
1.114     paf       944:                                }
                    945:                                // #HH ?
1.228     misha     946:                                if(pc.source[1] && isxdigit(pc.source[1]) && pc.source[2] && isxdigit(pc.source[2])) {
1.218     paf       947:                                        char c=(char)(
1.206     paf       948:                                                hex_value[(unsigned char)pc.source[1]]*0x10+
1.218     paf       949:                                                hex_value[(unsigned char)pc.source[2]]);
1.206     paf       950:                                        if(c==0) {
1.114     paf       951:                                                result=BAD_HEX_LITERAL;
                    952:                                                goto break2; // wrong hex value[no ^#00 chars allowed]: bail out
                    953:                                        }
                    954:                                        // append char(hex(HH))
1.206     paf       955:                                        pc.string.append(c);
1.114     paf       956:                                        // skip over ^#HH
1.206     paf       957:                                        pc.source+=3;
                    958:                                        pc.pos.col+=3;
1.114     paf       959:                                        // reset piece 'begin' position & line
1.206     paf       960:                                        begin=pc.source; // ->after ^#HH
                    961:                                        begin_pos=pc.pos;
1.203     paf       962:                                        // skip analysis = forced literal
1.114     paf       963:                                        continue;
                    964:                                }
1.228     misha     965:                                // just escaped char
                    966:                                // reset piece 'begin' position & line
                    967:                                begin=pc.source;
                    968:                                begin_pos=pc.pos;
                    969:                                // skip over _ after ^
                    970:                                pc.source++;  pc.pos.col++;
                    971:                                // skip analysis = forced literal
                    972:                                continue;
1.1       paf       973:                        }
1.169     parser    974:                        break;
1.203     paf       975:                        }
1.169     parser    976:                }
1.113     paf       977:                // #comment  start skipping
1.206     paf       978:                if(c=='#' && pc.pos.col==1) {
1.112     paf       979:                        if(end!=begin) {
1.206     paf       980:                                if(!pc.string_start)
                    981:                                        pc.string_start=begin_pos;
1.112     paf       982:                                // append piece till #
1.206     paf       983:                                pc.string.append_strdup_know_length(begin, end-begin);
1.112     paf       984:                        }
                    985:                        // fall into COMMENT lexical state [wait for \n]
1.206     paf       986:                        push_LS(pc, LS_USER_COMMENT);
1.175     paf       987:                        continue;
1.112     paf       988:                }
1.206     paf       989:                switch(pc.ls) {
1.10      paf       990: 
                    991:                // USER'S = NOT OURS
1.1       paf       992:                case LS_USER:
1.206     paf       993:                case LS_NAME_SQUARE_PART: // name.[here].xxx
                    994:                        if(pc.trim_bof)
1.153     parser    995:                                switch(c) {
                    996:                                case '\n': case ' ': case '\t':
1.206     paf       997:                                        begin=pc.source;
                    998:                                        begin_pos=pc.pos;
1.152     parser    999:                                        continue; // skip it
1.153     parser   1000:                                default:
1.206     paf      1001:                                        pc.trim_bof=false;
1.152     parser   1002:                                }
1.48      paf      1003:                        switch(c) {
                   1004:                        case '$':
1.206     paf      1005:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1006:                                RC;
                   1007:                        case '^':
1.206     paf      1008:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1009:                                RC;
1.166     parser   1010:                        case ']':
1.206     paf      1011:                                if(pc.ls==LS_NAME_SQUARE_PART)
1.166     parser   1012:                                        if(--lexical_brackets_nestage==0) {// $name.[co<]?>de<]?>
1.206     paf      1013:                                                pop_LS(pc); // $name.[co<]>de<]!>
1.166     parser   1014:                                                RC;
                   1015:                                        }
1.160     parser   1016:                                break;
1.166     parser   1017:                        case '[': // $name.[co<[>de]
1.206     paf      1018:                                if(pc.ls==LS_NAME_SQUARE_PART)
1.166     parser   1019:                                        lexical_brackets_nestage++;
1.161     parser   1020:                                break;
1.112     paf      1021:                        }
1.209     paf      1022:                        if(pc.explicit_result && c)
                   1023:                                switch(c) {
                   1024:                                case '\n': case ' ': case '\t':
                   1025:                                        begin=pc.source;
                   1026:                                        begin_pos=pc.pos;
                   1027:                                        continue; // skip it
                   1028:                                default:
                   1029:                                        result=BAD_NONWHITESPACE_CHARACTER_IN_EXPLICIT_RESULT_MODE;
                   1030:                                        goto break2;
                   1031:                                }
1.112     paf      1032:                        break;
                   1033:                        
                   1034:                // #COMMENT
1.194     paf      1035:                case LS_USER_COMMENT:
1.112     paf      1036:                        if(c=='\n') {
                   1037:                                // skip comment
1.206     paf      1038:                                begin=pc.source;
                   1039:                                begin_pos=pc.pos;
1.112     paf      1040: 
1.206     paf      1041:                                pop_LS(pc);
1.112     paf      1042:                                continue;
1.1       paf      1043:                        }
1.48      paf      1044:                        break;
                   1045:                        
                   1046:                // STRING IN EXPRESSION
1.145     parser   1047:                case LS_EXPRESSION_STRING_QUOTED:
                   1048:                case LS_EXPRESSION_STRING_APOSTROFED:
1.48      paf      1049:                        switch(c) {
                   1050:                        case '"':
1.145     parser   1051:                        case '\'':
                   1052:                                if(
1.206     paf      1053:                                        pc.ls == LS_EXPRESSION_STRING_QUOTED && c=='"' ||
                   1054:                                        pc.ls == LS_EXPRESSION_STRING_APOSTROFED && c=='\'') {
                   1055:                                        pop_LS(pc); //"abc". | 'abc'.
1.145     parser   1056:                                        RC;
                   1057:                                }
                   1058:                                break;
1.48      paf      1059:                        case '$':
1.206     paf      1060:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1061:                                RC;
                   1062:                        case '^':
1.206     paf      1063:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1064:                                RC;
1.10      paf      1065:                        }
                   1066:                        break;
                   1067: 
                   1068:                // METHOD DEFINITION
                   1069:                case LS_DEF_NAME:
1.48      paf      1070:                        switch(c) {
                   1071:                        case '[':
1.206     paf      1072:                                pc.ls=LS_DEF_PARAMS;
1.48      paf      1073:                                RC;
                   1074:                        case '\n':
1.206     paf      1075:                                pc.ls=LS_DEF_SPECIAL_BODY;
1.48      paf      1076:                                RC;
1.10      paf      1077:                        }
                   1078:                        break;
1.48      paf      1079: 
1.10      paf      1080:                case LS_DEF_PARAMS:
1.48      paf      1081:                        switch(c) {
1.192     paf      1082:                        case '$': // common error
1.193     paf      1083:                                result=BAD_METHOD_PARAMETER_NAME_CHARACTER;
                   1084:                                goto break2;
1.48      paf      1085:                        case ';':
                   1086:                                RC;
                   1087:                        case ']':
1.206     paf      1088:                                pc.ls=*pc.source=='['?LS_DEF_LOCALS:LS_DEF_COMMENT;
1.48      paf      1089:                                RC;
1.49      paf      1090:                        case '\n': // wrong. bailing out
1.206     paf      1091:                                pop_LS(pc);
1.48      paf      1092:                                RC;
1.10      paf      1093:                        }
                   1094:                        break;
1.48      paf      1095: 
1.10      paf      1096:                case LS_DEF_LOCALS:
1.48      paf      1097:                        switch(c) {
                   1098:                        case '[':
                   1099:                        case ';':
                   1100:                                RC;
                   1101:                        case ']':
1.206     paf      1102:                                pc.ls=LS_DEF_COMMENT;
1.48      paf      1103:                                RC;
                   1104:                        case '\n': // wrong. bailing out
1.206     paf      1105:                                pop_LS(pc);
1.48      paf      1106:                                RC;
1.10      paf      1107:                        }
                   1108:                        break;
1.48      paf      1109: 
1.10      paf      1110:                case LS_DEF_COMMENT:
                   1111:                        if(c=='\n') {
1.206     paf      1112:                                pop_LS(pc);
1.48      paf      1113:                                RC;
1.37      paf      1114:                        }
                   1115:                        break;
                   1116: 
1.48      paf      1117:                case LS_DEF_SPECIAL_BODY:
1.175     paf      1118:                        if(c=='\n')
1.48      paf      1119:                                RC;
                   1120:                        break;
                   1121: 
                   1122:                // (EXPRESSION)
1.69      paf      1123:                case LS_VAR_ROUND:
                   1124:                case LS_METHOD_ROUND:
1.48      paf      1125:                        switch(c) {
                   1126:                        case ')':
                   1127:                                if(--lexical_brackets_nestage==0)
1.206     paf      1128:                                        if(pc.ls==LS_METHOD_ROUND) // method round param ended
                   1129:                                                pc.ls=LS_METHOD_AFTER; // look for method end
                   1130:                                        else // pc.ls==LS_VAR_ROUND // variable constructor ended
                   1131:                                                pop_LS(pc); // return to normal life
1.48      paf      1132:                                RC;
1.194     paf      1133:                        case '#': // comment start skipping
                   1134:                                if(end!=begin) {
1.206     paf      1135:                                        if(!pc.string_start)
                   1136:                                                pc.string_start=begin_pos;
1.194     paf      1137:                                        // append piece till #
1.206     paf      1138:                                        pc.string.append_strdup_know_length(begin, end-begin);
1.194     paf      1139:                                }
                   1140:                                // fall into COMMENT lexical state [wait for \n]
1.206     paf      1141:                                push_LS(pc, LS_EXPRESSION_COMMENT);
1.194     paf      1142:                                lexical_brackets_nestage=1;
                   1143:                                continue;
1.48      paf      1144:                        case '$':
1.206     paf      1145:                                push_LS(pc, LS_EXPRESSION_VAR_NAME_WITH_COLON);                         
1.48      paf      1146:                                RC;
                   1147:                        case '^':
1.206     paf      1148:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1149:                                RC;
                   1150:                        case '(':
                   1151:                                lexical_brackets_nestage++;
                   1152:                                RC;
1.67      paf      1153:                        case '-':
1.206     paf      1154:                                switch(*pc.source) {
1.127     paf      1155:                                case 'f': // -f
1.67      paf      1156:                                        skip_analized=1;
                   1157:                                        result=FEXISTS;
1.127     paf      1158:                                        goto break2;
                   1159:                                case 'd': // -d
                   1160:                                        skip_analized=1;
                   1161:                                        result=DEXISTS;
                   1162:                                        goto break2;
1.191     paf      1163:                                default: // minus
1.67      paf      1164:                                        result=c;
1.127     paf      1165:                                        goto break2;
                   1166:                                }
1.67      paf      1167:                                goto break2;
1.173     paf      1168:                        case '+': case '*': case '/': case '%': case '\\':
1.58      paf      1169:                        case '~':
1.48      paf      1170:                        case ';':
                   1171:                                RC;
1.193     paf      1172:                        case '&': case '|':
1.206     paf      1173:                                if(*pc.source==c) { // && ||
1.193     paf      1174:                                        result=c=='&'?LAND:LOR;
1.67      paf      1175:                                        skip_analized=1;
1.58      paf      1176:                                } else
                   1177:                                        result=c;
                   1178:                                goto break2;
1.193     paf      1179:                        case '!':
1.206     paf      1180:                                switch(pc.source[0]) { 
1.193     paf      1181:                                case '|': // !| !||
                   1182:                                        skip_analized=1;
1.206     paf      1183:                                        if(pc.source[1]=='|') {
1.193     paf      1184:                                                skip_analized++;
                   1185:                                                result=LXOR;
                   1186:                                        } else
                   1187:                                                result=NXOR;
                   1188:                                        goto break2;
                   1189:                                case '=': // !=
                   1190:                                        skip_analized=1;
                   1191:                                        result=NNE; 
                   1192:                                        goto break2;
                   1193:                                }
                   1194:                                RC;
1.195     paf      1195: 
                   1196:                        case '<': // <<, <=, <
1.206     paf      1197:                                switch(*pc.source) {
1.195     paf      1198:                                case '<': // <[<]
                   1199:                                        skip_analized=1; result=NSL; break;
                   1200:                                case '=': // <[=]
                   1201:                                        skip_analized=1; result=NLE; break;
                   1202:                                default: // <[]
                   1203:                                        result=c; break;
                   1204:                                }
                   1205:                                goto break2;
                   1206:                        case '>': // >>, >=, >
1.206     paf      1207:                                switch(*pc.source) {
1.195     paf      1208:                                case '>': // >[>]
                   1209:                                        skip_analized=1; result=NSR; break;
                   1210:                                case '=': // >[=]
                   1211:                                        skip_analized=1; result=NGE; break;
                   1212:                                default: // >[]
                   1213:                                        result=c; break;
                   1214:                                }
                   1215:                                goto break2;
                   1216:                        case '=': // ==
1.206     paf      1217:                                switch(*pc.source) {
1.195     paf      1218:                                case '=': // =[=]
                   1219:                                        skip_analized=1; result=NEQ; break;
                   1220:                                default: // =[]
                   1221:                                        result=c; break; // not used now
                   1222:                                }
1.58      paf      1223:                                goto break2;
1.195     paf      1224: 
1.48      paf      1225:                        case '"':
1.206     paf      1226:                                push_LS(pc, LS_EXPRESSION_STRING_QUOTED);
1.145     parser   1227:                                RC;
                   1228:                        case '\'':
1.206     paf      1229:                                push_LS(pc, LS_EXPRESSION_STRING_APOSTROFED);
1.48      paf      1230:                                RC;
1.50      paf      1231:                        case 'l': case 'g': case 'e': case 'n':
1.51      paf      1232:                                if(end==begin) // right after whitespace
1.206     paf      1233:                                        if(isspace(pc.source[1])) {
                   1234:                                                switch(*pc.source) {
1.117     paf      1235:                                                        //                                      case '?': // ok [and bad cases, yacc would bark at them]
                   1236:                                                case 't': // lt gt [et nt]
                   1237:                                                        result=c=='l'?SLT:c=='g'?SGT:BAD_STRING_COMPARISON_OPERATOR;
                   1238:                                                        skip_analized=1;
                   1239:                                                        goto break2;
                   1240:                                                case 'e': // le ge ne [ee]
                   1241:                                                        result=c=='l'?SLE:c=='g'?SGE:c=='n'?SNE:BAD_STRING_COMPARISON_OPERATOR;
                   1242:                                                        skip_analized=1;
                   1243:                                                        goto break2;
                   1244:                                                case 'q': // eq [lq gq nq]
                   1245:                                                        result=c=='e'?SEQ:BAD_STRING_COMPARISON_OPERATOR;
                   1246:                                                        skip_analized=1;
                   1247:                                                        goto break2;
                   1248:                                                }
1.67      paf      1249:                                        }
                   1250:                                break;
                   1251:                        case 'i':
                   1252:                                if(end==begin) // right after whitespace
1.206     paf      1253:                                        if(isspace(pc.source[1])) {
                   1254:                                                switch(pc.source[0]) {
1.117     paf      1255:                                                case 'n': // in
1.95      paf      1256:                                                        skip_analized=1;
                   1257:                                                        result=IN;
                   1258:                                                        goto break2;
1.117     paf      1259:                                                case 's': // is
1.95      paf      1260:                                                        skip_analized=1;
                   1261:                                                        result=IS;
                   1262:                                                        goto break2;
                   1263:                                                }
1.67      paf      1264:                                        }
                   1265:                                break;
                   1266:                        case 'd':
                   1267:                                if(end==begin) // right after whitespace
1.206     paf      1268:                                        if(pc.source[0]=='e' && pc.source[1]=='f') { // def
1.225     misha    1269:                                                switch(pc.source[2]){
                   1270:                                                case ' ': case '\t': case '\n': case '"': case '\'': case '^': case '$': // non-quoted string without whitespace after 'def' is not allowed
                   1271:                                                        skip_analized=2;
                   1272:                                                        result=DEF;
                   1273:                                                        goto break2;
                   1274:                                                }
                   1275:                                                // error: incorrect char after 'def'
1.50      paf      1276:                                        }
1.48      paf      1277:                                break;
1.216     paf      1278:                        case 't':
                   1279:                                if(end==begin) // right after whitespace
1.225     misha    1280:                                        if(pc.source[0]=='r' && pc.source[1]=='u' && pc.source[2]=='e') { // true
1.216     paf      1281:                                                skip_analized=3;
                   1282:                                                result=LITERAL_TRUE;
                   1283:                                                goto break2;
                   1284:                                        }
                   1285:                                break;
                   1286:                        case 'f':
                   1287:                                if(end==begin) // right after whitespace
1.225     misha    1288:                                        if(pc.source[0]=='a' && pc.source[1]=='l' && pc.source[2]=='s' && pc.source[3]=='e') { // false
1.216     paf      1289:                                                skip_analized=4;
                   1290:                                                result=LITERAL_FALSE;
                   1291:                                                goto break2;
                   1292:                                        }
                   1293:                                break;
1.48      paf      1294:                        case ' ': case '\t': case '\n':
1.63      paf      1295:                                if(end!=begin) { // there were a string after previous operator?
                   1296:                                        result=0; // return that string
                   1297:                                        goto break2;
1.48      paf      1298:                                }
1.63      paf      1299:                                // that's a leading|traling space or after-operator-space
                   1300:                                // ignoring it
                   1301:                                // reset piece 'begin' position & line
1.206     paf      1302:                                begin=pc.source; // after whitespace char
                   1303:                                begin_pos=pc.pos;
1.48      paf      1304:                                continue;
1.1       paf      1305:                        }
                   1306:                        break;
1.194     paf      1307:                case LS_EXPRESSION_COMMENT:
                   1308:                        if(c=='(')
                   1309:                                lexical_brackets_nestage++;
                   1310:                        
1.206     paf      1311:                        switch(*pc.source) {
1.194     paf      1312:                        case '\n': case ')':
1.206     paf      1313:                                if(*pc.source==')')
1.194     paf      1314:                                        if(--lexical_brackets_nestage!=0)
                   1315:                                                continue;
                   1316: 
                   1317:                                // skip comment
1.206     paf      1318:                                begin=pc.source;
                   1319:                                begin_pos=pc.pos;
1.194     paf      1320: 
1.206     paf      1321:                                pop_LS(pc);
1.194     paf      1322:                                continue;
                   1323:                        }
                   1324:                        break;
1.1       paf      1325: 
1.10      paf      1326:                // VARIABLE GET/PUT/WITH
1.166     parser   1327:                case LS_VAR_NAME_SIMPLE_WITH_COLON: 
                   1328:                case LS_VAR_NAME_SIMPLE_WITHOUT_COLON:
                   1329:                case LS_EXPRESSION_VAR_NAME_WITH_COLON: 
                   1330:                case LS_EXPRESSION_VAR_NAME_WITHOUT_COLON:
                   1331:                        if(
1.206     paf      1332:                                pc.ls==LS_EXPRESSION_VAR_NAME_WITH_COLON ||
                   1333:                                pc.ls==LS_EXPRESSION_VAR_NAME_WITHOUT_COLON) {
1.181     paf      1334:                                // name in expr ends also before 
1.48      paf      1335:                                switch(c) {
1.181     paf      1336:                                // expression minus
1.92      paf      1337:                                case '-': 
1.181     paf      1338:                                // expression integer division
                   1339:                                case '\\':
1.206     paf      1340:                                        pop_LS(pc);
                   1341:                                        pc.ungetc();
1.48      paf      1342:                                        result=EON;
                   1343:                                        goto break2;
                   1344:                                }
                   1345:                        }
1.166     parser   1346:                        if(
1.206     paf      1347:                                pc.ls==LS_VAR_NAME_SIMPLE_WITHOUT_COLON ||
                   1348:                                pc.ls==LS_EXPRESSION_VAR_NAME_WITHOUT_COLON) {
1.142     parser   1349:                                // name already has ':', stop before next 
                   1350:                                switch(c) {
                   1351:                                case ':': 
1.206     paf      1352:                                        pop_LS(pc);
                   1353:                                        pc.ungetc();
1.142     parser   1354:                                        result=EON;
                   1355:                                        goto break2;
                   1356:                                }
                   1357:                        }
1.48      paf      1358:                        switch(c) {
                   1359:                        case 0:
                   1360:                        case ' ': case '\t': case '\n':
                   1361:                        case ';':
1.126     paf      1362:                        case ']': case '}': case ')': 
                   1363:                        case '"': case '\'':
1.139     parser   1364:                        case '<': case '>':  // these stand for HTML brackets AND expression binary ops
1.253     misha    1365:                        case '+': case '*': case '/': case '\\': case '%': 
1.92      paf      1366:                        case '&': case '|': 
                   1367:                        case '=': case '!':
1.99      paf      1368:                        // common delimiters
1.190     paf      1369:                        case ',': case '?': case '#':
1.220     paf      1370:                        // mysql column separators
                   1371:                        case '`':
1.139     parser   1372:                        // before call
                   1373:                        case '^': 
1.206     paf      1374:                                pop_LS(pc);
                   1375:                                pc.ungetc();
1.13      paf      1376:                                result=EON;
1.1       paf      1377:                                goto break2;
1.48      paf      1378:                        case '[':
1.162     parser   1379:                                // $name.<[>code]
1.206     paf      1380:                                if(pc.pos.col>1/*not first column*/ && (
1.163     parser   1381:                                        end[-1]=='$'/*was start of get*/ ||
                   1382:                                        end[-1]==':'/*was class name delim */ ||
                   1383:                                        end[-1]=='.'/*was name delim */
1.162     parser   1384:                                        )) {
1.206     paf      1385:                                        push_LS(pc, LS_NAME_SQUARE_PART);
1.162     parser   1386:                                        lexical_brackets_nestage=1;
                   1387:                                        RC;
                   1388:                                }
1.206     paf      1389:                                pc.ls=LS_VAR_SQUARE;
1.1       paf      1390:                                lexical_brackets_nestage=1;
1.48      paf      1391:                                RC;
                   1392:                        case '{':
                   1393:                                if(begin==end) { // ${name}, no need of EON, switching LS
1.206     paf      1394:                                        pc.ls=LS_VAR_NAME_CURLY; 
1.48      paf      1395:                                } else {
1.206     paf      1396:                                        pc.ls=LS_VAR_CURLY;
1.48      paf      1397:                                        lexical_brackets_nestage=1;
                   1398:                                }
1.69      paf      1399: 
1.48      paf      1400:                                RC;
                   1401:                        case '(':
1.206     paf      1402:                                pc.ls=LS_VAR_ROUND;
1.1       paf      1403:                                lexical_brackets_nestage=1;
1.48      paf      1404:                                RC;
                   1405:                        case '.': // name part delim
                   1406:                        case '$': // name part subvar
1.160     parser   1407:                        case ':': // class<:>name
1.166     parser   1408:                                // go to _WITHOUT_COLON state variant...
1.206     paf      1409:                                if(pc.ls==LS_VAR_NAME_SIMPLE_WITH_COLON)
                   1410:                                        pc.ls=LS_VAR_NAME_SIMPLE_WITHOUT_COLON;
                   1411:                                else if(pc.ls==LS_EXPRESSION_VAR_NAME_WITH_COLON)
                   1412:                                        pc.ls=LS_EXPRESSION_VAR_NAME_WITHOUT_COLON;
1.166     parser   1413:                                // ...stop before next ':'
1.48      paf      1414:                                RC;
1.1       paf      1415:                        }
                   1416:                        break;
1.48      paf      1417: 
1.1       paf      1418:                case LS_VAR_NAME_CURLY:
1.48      paf      1419:                        switch(c) {
1.162     parser   1420:                        case '[':
1.166     parser   1421:                                // ${name.<[>code]}
1.206     paf      1422:                                push_LS(pc, LS_NAME_SQUARE_PART);
1.160     parser   1423:                                lexical_brackets_nestage=1;
                   1424:                                RC;
1.48      paf      1425:                        case '}': // ${name} finished, restoring LS
1.206     paf      1426:                                pop_LS(pc);
1.48      paf      1427:                                RC;
                   1428:                        case '.': // name part delim
                   1429:                        case '$': // name part subvar
                   1430:                        case ':': // ':name' or 'class:name'
                   1431:                                RC;
1.1       paf      1432:                        }
                   1433:                        break;
1.48      paf      1434: 
                   1435:                case LS_VAR_SQUARE:
                   1436:                        switch(c) {
                   1437:                        case '$':
1.206     paf      1438:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1439:                                RC;
                   1440:                        case '^':
1.206     paf      1441:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1442:                                RC;
                   1443:                        case ']':
1.1       paf      1444:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1445:                                        pop_LS(pc);
1.48      paf      1446:                                        RC;
1.1       paf      1447:                                }
1.48      paf      1448:                                break;
                   1449:                        case ';': // operator_or_fmt;value delim
                   1450:                                RC;
                   1451:                        case '[':
                   1452:                                lexical_brackets_nestage++;
                   1453:                                break;
1.1       paf      1454:                        }
                   1455:                        break;
1.48      paf      1456: 
1.1       paf      1457:                case LS_VAR_CURLY:
1.48      paf      1458:                        switch(c) {
                   1459:                        case '$':
1.206     paf      1460:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1461:                                RC;
                   1462:                        case '^':
1.206     paf      1463:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1464:                                RC;
                   1465:                        case '}':
1.1       paf      1466:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1467:                                        pop_LS(pc);
1.48      paf      1468:                                        RC;
1.1       paf      1469:                                }
1.48      paf      1470:                                break;
                   1471:                        case '{':
1.1       paf      1472:                                lexical_brackets_nestage++;
1.48      paf      1473:                                break;
                   1474:                        }
1.1       paf      1475:                        break;
                   1476: 
1.10      paf      1477:                // METHOD CALL
1.1       paf      1478:                case LS_METHOD_NAME:
1.48      paf      1479:                        switch(c) {
                   1480:                        case '[':
1.166     parser   1481:                                // ^name.<[>code].xxx
1.206     paf      1482:                                if(pc.pos.col>1/*not first column*/ && (
1.163     parser   1483:                                        end[-1]=='^'/*was start of call*/ || // never, ^[ is literal...
                   1484:                                        end[-1]==':'/*was class name delim */ ||
                   1485:                                        end[-1]=='.'/*was name delim */
1.162     parser   1486:                                        )) {
1.206     paf      1487:                                        push_LS(pc, LS_NAME_SQUARE_PART);
1.162     parser   1488:                                        lexical_brackets_nestage=1;
                   1489:                                        RC;
                   1490:                                }
1.206     paf      1491:                                pc.ls=LS_METHOD_SQUARE;
1.1       paf      1492:                                lexical_brackets_nestage=1;
1.48      paf      1493:                                RC;
                   1494:                        case '{':
1.206     paf      1495:                                pc.ls=LS_METHOD_CURLY;
1.1       paf      1496:                                lexical_brackets_nestage=1;
1.48      paf      1497:                                RC;
1.69      paf      1498:                        case '(':
1.206     paf      1499:                                pc.ls=LS_METHOD_ROUND;
1.69      paf      1500:                                lexical_brackets_nestage=1;
                   1501:                                RC;
1.48      paf      1502:                        case '.': // name part delim 
                   1503:                        case '$': // name part subvar
                   1504:                        case ':': // ':name' or 'class:name'
1.170     parser   1505:                        case '^': // ^abc^xxx wrong. bailing out
                   1506:                        case ']': case '}': case ')': // ^abc]}) wrong. bailing out
1.207     paf      1507:                        case ' ': // ^if ( wrong. bailing out
1.48      paf      1508:                                RC;
1.1       paf      1509:                        }
                   1510:                        break;
1.48      paf      1511: 
                   1512:                case LS_METHOD_SQUARE:
                   1513:                        switch(c) {
                   1514:                        case '$':
1.206     paf      1515:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1516:                                RC;
                   1517:                        case '^':
1.206     paf      1518:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1519:                                RC;
                   1520:                        case ';': // param delim
                   1521:                                RC;
                   1522:                        case ']':
1.1       paf      1523:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1524:                                        pc.ls=LS_METHOD_AFTER;
1.48      paf      1525:                                        RC;
1.1       paf      1526:                                }
1.48      paf      1527:                                break;
                   1528:                        case '[':
1.1       paf      1529:                                lexical_brackets_nestage++;
1.48      paf      1530:                                break;
                   1531:                        }
1.1       paf      1532:                        break;
1.48      paf      1533: 
1.1       paf      1534:                case LS_METHOD_CURLY:
1.48      paf      1535:                        switch(c) {
                   1536:                        case '$':
1.206     paf      1537:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1538:                                RC;
                   1539:                        case '^':
1.206     paf      1540:                                push_LS(pc, LS_METHOD_NAME);
1.94      paf      1541:                                RC;
                   1542:                        case ';': // param delim
1.48      paf      1543:                                RC;
                   1544:                        case '}':
1.1       paf      1545:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1546:                                        pc.ls=LS_METHOD_AFTER;
1.48      paf      1547:                                        RC;
1.1       paf      1548:                                }
1.48      paf      1549:                                break;
                   1550:                        case '{':
1.1       paf      1551:                                lexical_brackets_nestage++;
1.48      paf      1552:                                break;
                   1553:                        }
1.209     paf      1554:                        if(pc.explicit_result && c)
                   1555:                                switch(c) {
                   1556:                                case '\n': case ' ': case '\t':
                   1557:                                        begin=pc.source;
                   1558:                                        begin_pos=pc.pos;
                   1559:                                        continue; // skip it
                   1560:                                default:
                   1561:                                        result=BAD_NONWHITESPACE_CHARACTER_IN_EXPLICIT_RESULT_MODE;
                   1562:                                        goto break2;
                   1563:                                }
1.1       paf      1564:                        break;
1.48      paf      1565: 
1.1       paf      1566:                case LS_METHOD_AFTER:
1.69      paf      1567:                        if(c=='[') {/* ][ }[ )[ */
1.206     paf      1568:                                pc.ls=LS_METHOD_SQUARE;
1.1       paf      1569:                                lexical_brackets_nestage=1;
1.48      paf      1570:                                RC;
1.1       paf      1571:                        }                                          
1.69      paf      1572:                        if(c=='{') {/* ]{ }{ ){ */
1.206     paf      1573:                                pc.ls=LS_METHOD_CURLY;
1.69      paf      1574:                                lexical_brackets_nestage=1;
                   1575:                                RC;
                   1576:                        }                                          
                   1577:                        if(c=='(') {/* ]( }( )( */
1.206     paf      1578:                                pc.ls=LS_METHOD_ROUND;
1.1       paf      1579:                                lexical_brackets_nestage=1;
1.48      paf      1580:                                RC;
1.1       paf      1581:                        }                                          
1.206     paf      1582:                        pop_LS(pc);
                   1583:                        pc.ungetc();
1.13      paf      1584:                        result=EON;
1.1       paf      1585:                        goto break2;
                   1586:                }
1.9       paf      1587:                if(c==0) {
1.1       paf      1588:                        result=-1;
                   1589:                        break;
                   1590:                }
                   1591:        }
                   1592: 
                   1593: break2:
1.59      paf      1594:        if(end!=begin) { // there is last piece?
1.258     misha    1595:                if(c=='@' || c==0) // we are before LS_DEF_NAME or EOF?
                   1596:                        while(end!=begin && end[-1]=='\n') // trim all empty lines before LS_DEF_NAME and EOF
1.137     parser   1597:                                end--;
1.206     paf      1598:                if(end!=begin && pc.ls!=LS_USER_COMMENT) { // last piece still alive and not comment?
                   1599:                        if(!pc.string_start)
                   1600:                                pc.string_start=begin_pos;
1.59      paf      1601:                        // append it
1.206     paf      1602:                        pc.string.append_strdup_know_length(begin, end-begin);
1.30      paf      1603:                }
1.59      paf      1604:        }
1.206     paf      1605:        if(!pc.string.is_empty()) { // something accumulated?
                   1606:                // create STRING value: array of OP_VALUE+origin+vstring
                   1607:                *lvalp=VL(
                   1608:                        new VString(*new String(pc.string, String::L_CLEAN)),
                   1609:                        pc.file_no, pc.string_start.line, pc.string_start.col);
1.10      paf      1610:                // new pieces storage
1.206     paf      1611:                pc.string.clear();
                   1612:                pc.string_start.clear();
1.58      paf      1613:                // make current result be pending for next call, return STRING for now
1.206     paf      1614:                pc.pending_state=result;  result=STRING;
1.58      paf      1615:        }
1.67      paf      1616:        if(skip_analized) {
1.206     paf      1617:                pc.source+=skip_analized;  pc.pos.col+=skip_analized;
1.1       paf      1618:        }
1.58      paf      1619:        return result;
1.1       paf      1620: }
                   1621: 
1.264     moko     1622: static int real_yyerror(Parse_control *pc, const char *s) {  // Called by yyparse on error
1.114     paf      1623:           strncpy(PC.error, s, MAX_STRING);
1.1       paf      1624:           return 1;
1.110     paf      1625: }
1.1       paf      1626: 
1.110     paf      1627: static void yyprint(FILE *file, int type, YYSTYPE value) {
                   1628:        if(type==STRING)
1.206     paf      1629:                fprintf(file, " \"%s\"", LA2S(*value)->cstr());
1.110     paf      1630: }

E-mail: