Annotation of parser3/src/main/compile.y, revision 1.279

1.168     parser      1: %{
1.105     paf         2: /** @file
1.106     paf         3:        Parser: compiler(lexical parser and grammar).
                      4: 
1.274     moko        5:        Copyright (c) 2001-2015 Art. Lebedev Studio (http://www.artlebedev.com)
1.168     parser      6:        Author: Alexander Petrosyan <paf@design.ru> (http://design.ru/paf)
1.217     paf         7: 
1.262     moko        8:        
1.88      paf         9: */
                     10: 
1.279   ! moko       11: volatile const char * IDENT_COMPILE_Y = "$Id: compile.y,v 1.278 2016/05/24 14:28:24 moko Exp $";
1.262     moko       12: 
1.106     paf        13: /**
                     14:        @todo parser4: 
                     15:        - cache compiled code from request to request. to do that...
                     16:                -#:     make method definitions, @CLASS, @BASE, @USE instructions,
1.88      paf        17:                        which would be executed afterwards, and actions
                     18:                        now performed at compile time would be delayed to run time.
1.106     paf        19:                -#:     make cache expiration on time and on disk-change of class source
                     20:                -#:     in apache use subpools for compiled class storage
                     21:                -#:     in iis make up specialized Pool object for that
1.24      paf        22: */
                     23: 
1.206     paf        24: #define YYSTYPE  ArrayOperation* 
1.9       paf        25: #define YYDEBUG  1
1.271     moko       26: #define YYERROR_VERBOSE  1
                     27: #define yyerror(pc, msg)  real_yyerror(pc, msg)
1.9       paf        28: #define YYPRINT(file, type, value)  yyprint(file, type, value)
1.269     moko       29: #define YYMALLOC pa_malloc
                     30: #define YYFREE pa_free
1.1       paf        31: 
1.206     paf        32: // includes
                     33: 
1.1       paf        34: #include "compile_tools.h"
1.8       paf        35: #include "pa_value.h"
1.12      paf        36: #include "pa_request.h"
1.39      paf        37: #include "pa_vobject.h"
1.52      paf        38: #include "pa_vdouble.h"
1.98      paf        39: #include "pa_globals.h"
1.200     paf        40: #include "pa_vmethod_frame.h"
1.39      paf        41: 
1.206     paf        42: // defines
                     43: 
1.97      paf        44: #define USE_CONTROL_METHOD_NAME "USE"
1.226     misha      45: #define OPTIONS_CONTROL_METHOD_NAME "OPTIONS"
1.1       paf        46: 
1.206     paf        47: // forwards
                     48: 
1.264     moko       49: static int real_yyerror(Parse_control* pc, const char* s);
1.206     paf        50: static void yyprint(FILE* file, int type, YYSTYPE value);
                     51: static int yylex(YYSTYPE* lvalp, void* pc);
1.1       paf        52: 
1.216     paf        53: static const VBool vfalse(false);
                     54: static const VBool vtrue(true);
1.261     moko       55: static const VString vempty;
1.216     paf        56: 
1.8       paf        57: // local convinient inplace typecast & var
1.205     paf        58: #undef PC
1.271     moko       59: #define PC  (*pc)
1.206     paf        60: #undef POOL
1.114     paf        61: #define POOL  (*PC.pool)
1.107     paf        62: #ifndef DOXYGEN
1.265     moko       63: 
                     64: #define CLASS_ADD if(PC.class_add()){                                  \
1.275     moko       65:        strncpy(PC.error, PC.cclass->type(), MAX_STRING/2);             \
1.265     moko       66:        strcat(PC.error, " - class is already defined");                \
                     67:        YYERROR;                                                        \
                     68: }
                     69: 
1.1       paf        70: %}
                     71: 
1.271     moko       72: %pure-parser
                     73: %lex-param {Parse_control* pc}
                     74: %parse-param {Parse_control* pc}
1.1       paf        75: 
1.13      paf        76: %token EON
1.4       paf        77: %token STRING
1.1       paf        78: %token BOGUS
1.55      paf        79: 
1.58      paf        80: %token BAD_STRING_COMPARISON_OPERATOR
1.114     paf        81: %token BAD_HEX_LITERAL
1.171     parser     82: %token BAD_METHOD_DECL_START
1.193     paf        83: %token BAD_METHOD_PARAMETER_NAME_CHARACTER
1.58      paf        84: 
1.59      paf        85: %token LAND "&&"
1.58      paf        86: %token LOR "||"
1.193     paf        87: %token LXOR "!||"
                     88: %token NXOR "!|"
1.58      paf        89: 
                     90: %token NLE "<="
                     91: %token NGE ">="
                     92: %token NEQ "=="
                     93: %token NNE "!="
1.195     paf        94: %token NSL "<<"
                     95: %token NSR ">>"
1.58      paf        96: 
                     97: %token SLT "lt"
                     98: %token SGT "gt"
                     99: %token SLE "le"
                    100: %token SGE "ge"
                    101: %token SEQ "eq"
                    102: %token SNE "ne"
                    103: 
1.67      paf       104: %token DEF "def"
                    105: %token IN "in"
                    106: %token FEXISTS "-f"
1.127     paf       107: %token DEXISTS "-d"
1.95      paf       108: %token IS "is"
1.67      paf       109: 
1.216     paf       110: %token LITERAL_TRUE "true"
                    111: %token LITERAL_FALSE "false"
                    112: 
1.57      paf       113: /* logical */
1.193     paf       114: %left "!||"
1.57      paf       115: %left "||"
                    116: %left "&&"
1.131     paf       117: %left '<' '>' "<=" ">="   "lt" "gt" "le" "ge"
                    118: %left "==" "!="  "eq" "ne"
                    119: %left "is" "def" "in" "-f" "-d"
1.57      paf       120: 
                    121: /* bitwise */
1.193     paf       122: %left "!|"
1.131     paf       123: %left '|'
                    124: %left '&' 
1.202     paf       125: %left "<<"  ">>"
1.57      paf       126: 
1.56      paf       127: /* numerical */
1.202     paf       128: %left '+' '-'
                    129: %left '*' '/' '\\' '%'
                    130: %left NUNARY   /* unary - + */
                    131: 
                    132: /* out-of-group */
                    133: %left '~' /* bitwise */
                    134: %left '!'  /* logical */
1.1       paf       135: 
                    136: %%
1.195     paf       137: all:
1.10      paf       138:        one_big_piece {
1.251     misha     139:        Method* method=new Method(Method::CT_ANY,
1.81      paf       140:                0, 0, /*min, max numbered_params_count*/
1.75      paf       141:                0/*param_names*/, 0/*local_names*/, 
                    142:                $1/*parser_code*/, 0/*native_code*/);
1.251     misha     143:        PC.cclass->set_method(PC.alias_method(main_method_name), method);
1.10      paf       144: }
                    145: |      methods;
                    146: 
                    147: methods: method | methods method;
                    148: one_big_piece: maybe_codes;
                    149: 
1.34      paf       150: method: control_method | code_method;
                    151: 
                    152: control_method: '@' STRING '\n' 
1.132     paf       153:                                maybe_control_strings {
1.260     misha     154:        const String& command=LA2S(*$2)->trim(String::TRIM_END);
1.34      paf       155:        YYSTYPE strings_code=$4;
1.206     paf       156:        if(strings_code->count()<1*OPERATIONS_PER_OPVALUE) {
1.114     paf       157:                strcpy(PC.error, "@");
                    158:                strcat(PC.error, command.cstr());
                    159:                strcat(PC.error, " is empty");
1.37      paf       160:                YYERROR;
                    161:        }
1.74      paf       162:        if(command==CLASS_NAME) {
1.206     paf       163:                if(strings_code->count()==1*OPERATIONS_PER_OPVALUE) {
1.265     moko      164:                        CLASS_ADD;
1.73      paf       165:                        // new class' name
1.260     misha     166:                        const String& name=LA2S(*strings_code)->trim(String::TRIM_END);
1.73      paf       167:                        // creating the class
1.206     paf       168:                        VStateless_class* cclass=new VClass;
1.226     misha     169:                        PC.cclass_new=cclass;
1.275     moko      170:                        PC.cclass_new->set_type(name.cstr());
1.266     misha     171:                        PC.append=false;
1.73      paf       172:                } else {
1.268     moko      173:                        strcpy(PC.error, "@" CLASS_NAME " must contain only one line with class name (contains more then one)");
1.34      paf       174:                        YYERROR;
                    175:                }
1.130     paf       176:        } else if(command==USE_CONTROL_METHOD_NAME) {
1.265     moko      177:                CLASS_ADD;
1.273     moko      178:                for(size_t i=0; i<strings_code->count(); i+=OPERATIONS_PER_OPVALUE){
                    179:                        PC.request.use_file(PC.request.main_class, LA2S(*strings_code, i)->trim(String::TRIM_END),
                    180:                                PC.request.get_used_filename(PC.file_no), strings_code->get(i+1).origin);
                    181:                }
1.130     paf       182:        } else if(command==BASE_NAME) {
1.226     misha     183:                if(PC.append){
                    184:                        strcpy(PC.error, "can't set base while appending methods to class '");
1.275     moko      185:                        strncat(PC.error, PC.cclass->type(), MAX_STRING/2);
1.226     misha     186:                        strcat(PC.error, "'");
                    187:                        YYERROR;
                    188:                }
1.265     moko      189:                CLASS_ADD;
1.188     paf       190:                if(PC.cclass->base_class()) { // already changed from default?
1.130     paf       191:                        strcpy(PC.error, "class already have a base '");
1.275     moko      192:                        strncat(PC.error, PC.cclass->base_class()->type(), MAX_STRING/2);
1.130     paf       193:                        strcat(PC.error, "'");
                    194:                        YYERROR;
                    195:                }
1.206     paf       196:                if(strings_code->count()==1*OPERATIONS_PER_OPVALUE) {
1.260     misha     197:                        const String& base_name=LA2S(*strings_code)->trim(String::TRIM_END);
1.252     misha     198:                        if(Value* base_class_value=PC.request.get_class(base_name)) {
1.206     paf       199:                                // @CLASS == @BASE sanity check
                    200:                                if(VStateless_class *base_class=base_class_value->get_class()) {
                    201:                                        if(PC.cclass==base_class) {
1.268     moko      202:                                                strcpy(PC.error, "@" CLASS_NAME " equals @" BASE_NAME);
1.206     paf       203:                                                YYERROR;
                    204:                                        }
                    205:                                        PC.cclass->get_class()->set_base(base_class);
                    206:                                } else { // they asked to derive from a class without methods ['env' & co]
                    207:                                        strcpy(PC.error, base_name.cstr());
1.268     moko      208:                                        strcat(PC.error, ": you can not derive from this class in @" BASE_NAME);
1.206     paf       209:                                        YYERROR;
                    210:                                }
                    211:                        } else {
1.130     paf       212:                                strcpy(PC.error, base_name.cstr());
1.268     moko      213:                                strcat(PC.error, ": undefined class in @" BASE_NAME);
1.73      paf       214:                                YYERROR;
                    215:                        }
1.34      paf       216:                } else {
1.268     moko      217:                        strcpy(PC.error, "@" BASE_NAME " must contain sole name");
1.34      paf       218:                        YYERROR;
                    219:                }
1.223     misha     220:        } else if(command==OPTIONS_CONTROL_METHOD_NAME) {
                    221:                for(size_t i=0; i<strings_code->count(); i+=OPERATIONS_PER_OPVALUE) {
1.260     misha     222:                        const String& option=LA2S(*strings_code, i)->trim(String::TRIM_END);
1.279   ! moko      223:                        if(option==Symbols::LOCALS_SYMBOL){
1.226     misha     224:                                PC.set_all_vars_local();
1.279   ! moko      225:                        } else if(option==Symbols::PARTIAL_SYMBOL){
1.230     misha     226:                                if(PC.cclass_new){
                    227:                                        if(VStateless_class* existed=PC.get_existed_class(PC.cclass_new)){
                    228:                                                if(!PC.reuse_existed_class(existed)){
                    229:                                                        strcpy(PC.error, "can't append methods to '");
1.275     moko      230:                                                        strncat(PC.error, PC.cclass_new->type(), MAX_STRING/2);
1.230     misha     231:                                                        strcat(PC.error, "' - the class wasn't marked as partial");
                    232:                                                        YYERROR;
                    233:                                                }
1.226     misha     234:                                        } else {
1.256     misha     235:                                                // marks the new class as partial. we will be able to add methods here later.
1.230     misha     236:                                                PC.cclass_new->set_partial();
1.226     misha     237:                                        }
1.230     misha     238:                                } else {
1.279   ! moko      239:                                        strcpy(PC.error, "'partial' option should be used straight after @" CLASS_NAME);
1.226     misha     240:                                        YYERROR;
                    241:                                }
1.279   ! moko      242:                        } else if(option==Symbols::STATIC_SYMBOL){
1.256     misha     243:                                PC.set_methods_call_type(Method::CT_STATIC);
1.279   ! moko      244:                        } else if(option==Symbols::DYNAMIC_SYMBOL){
1.256     misha     245:                                PC.set_methods_call_type(Method::CT_DYNAMIC);
1.223     misha     246:                        } else {
1.226     misha     247:                                strcpy(PC.error, "'");
                    248:                                strncat(PC.error, option.cstr(), MAX_STRING/2);
1.279   ! moko      249:                                strcat(PC.error, "' invalid option. valid options are 'partial', 'locals', 'static' and 'dynamic'");
1.223     misha     250:                                YYERROR;
                    251:                        }
                    252:                }
1.130     paf       253:        } else {
                    254:                strcpy(PC.error, "'");
                    255:                strncat(PC.error, command.cstr(), MAX_STRING/2);
                    256:                strcat(PC.error, "' invalid special name. valid names are "
1.268     moko      257:                        "'" CLASS_NAME "', '" USE_CONTROL_METHOD_NAME "', '" BASE_NAME "' and '" OPTIONS_CONTROL_METHOD_NAME "'.");
1.130     paf       258:                YYERROR;
1.34      paf       259:        }
                    260: };
1.132     paf       261: maybe_control_strings: empty | control_strings;
1.259     misha     262: control_strings: control_string | control_strings control_string { $$=$1; P(*$$, *$2); };
1.37      paf       263: control_string: maybe_string '\n';
                    264: maybe_string: empty | STRING;
1.34      paf       265: 
1.222     misha     266: code_method: '@' STRING bracketed_maybe_strings maybe_bracketed_strings maybe_comment '\n' { 
1.265     moko      267:        CLASS_ADD;
1.208     paf       268:        PC.explicit_result=false;
1.10      paf       269: 
                    270:        YYSTYPE params_names_code=$3;
1.206     paf       271:        ArrayString* params_names=0;
                    272:        if(int size=params_names_code->count()) {
                    273:                params_names=new ArrayString;
                    274:                for(int i=0; i<size; i+=OPERATIONS_PER_OPVALUE)
                    275:                        *params_names+=LA2S(*params_names_code, i);
1.75      paf       276:        }
1.10      paf       277: 
                    278:        YYSTYPE locals_names_code=$4;
1.206     paf       279:        ArrayString* locals_names=0;
1.223     misha     280:        bool all_vars_local=false;
1.206     paf       281:        if(int size=locals_names_code->count()) {
                    282:                locals_names=new ArrayString;
1.208     paf       283:                for(int i=0; i<size; i+=OPERATIONS_PER_OPVALUE) {
                    284:                        const String* local_name=LA2S(*locals_names_code, i);
1.279   ! moko      285:                        if(SYMBOLS_EQ(*local_name,RESULT_SYMBOL))
1.208     paf       286:                                PC.explicit_result=true;
1.279   ! moko      287:                        else if(SYMBOLS_EQ(*local_name,LOCALS_SYMBOL))
1.223     misha     288:                                all_vars_local=true;
1.208     paf       289:                        else
                    290:                                *locals_names+=local_name;
                    291:                }
1.75      paf       292:        }
1.231     misha     293:        if(!all_vars_local && PC.cclass && PC.cclass->is_vars_local())
1.223     misha     294:                all_vars_local=true;
1.10      paf       295: 
1.208     paf       296:        Method* method=new Method(
1.206     paf       297:                //name, 
1.257     misha     298:                GetMethodCallType(PC, *$2),
1.81      paf       299:                0, 0/*min,max numbered_params_count*/, 
1.76      paf       300:                params_names, locals_names, 
1.223     misha     301:                0/*to be filled later in next {} */, 0, all_vars_local);
1.221     misha     302: 
1.208     paf       303:        *reinterpret_cast<Method**>(&$$)=method;
1.222     misha     304: } maybe_codes {
1.251     misha     305:                Method* method=reinterpret_cast<Method*>($7);
1.231     misha     306:                // fill in the code
1.251     misha     307:                method->parser_code=$8;
1.231     misha     308: 
                    309:                // register in class
                    310:                const String& name=*LA2S(*$2);
1.251     misha     311:                PC.cclass->set_method(PC.alias_method(name), method);
1.8       paf       312: };
1.10      paf       313: 
                    314: maybe_bracketed_strings: empty | bracketed_maybe_strings;
1.259     misha     315: bracketed_maybe_strings: '[' maybe_strings ']' {$$=$2;};
1.10      paf       316: maybe_strings: empty | strings;
1.259     misha     317: strings: STRING | strings ';' STRING { $$=$1; P(*$$, *$3); };
1.10      paf       318: 
                    319: maybe_comment: empty | STRING;
1.1       paf       320: 
                    321: /* codes */
                    322: 
1.10      paf       323: maybe_codes: empty | codes;
                    324: 
1.259     misha     325: codes: code | codes code { $$=$1; P(*$$, *$2); };
1.81      paf       326: code: write_string | action;
1.209     paf       327: action: get | put | call;
1.1       paf       328: 
                    329: /* get */
                    330: 
1.64      paf       331: get: get_value {
1.238     misha     332:        $$=N();
                    333:        YYSTYPE code=$1;
1.247     misha     334:        size_t count=code->count();
1.245     misha     335: 
1.235     misha     336: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
1.247     misha     337:        if(
                    338:                count!=3
1.267     misha     339:                || !change_first(*code, OP::OP_VALUE__GET_ELEMENT, /*=>*/OP::OP_VALUE__GET_ELEMENT__WRITE)
1.247     misha     340:        )
1.238     misha     341: #endif
1.247     misha     342: 
1.245     misha     343: #ifdef OPTIMIZE_BYTECODE_GET_SELF_ELEMENT
1.247     misha     344:        if(
                    345:                count!=3
1.267     misha     346:                || !change_first(*code, OP::OP_WITH_SELF__VALUE__GET_ELEMENT, /*=>*/OP::OP_WITH_SELF__VALUE__GET_ELEMENT__WRITE)
1.247     misha     347:        )
1.245     misha     348: #endif
                    349: 
1.239     misha     350: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_ELEMENT
1.247     misha     351:        if(
                    352:                count!=5
1.267     misha     353:                || !change_first(*code, OP::OP_GET_OBJECT_ELEMENT, /*=>*/OP::OP_GET_OBJECT_ELEMENT__WRITE)
1.247     misha     354:        )
1.239     misha     355: #endif
                    356: 
                    357: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_VAR_ELEMENT
1.247     misha     358:        if(
                    359:                count!=5
1.267     misha     360:                || !change_first(*code, OP::OP_GET_OBJECT_VAR_ELEMENT, /*=>*/OP::OP_GET_OBJECT_VAR_ELEMENT__WRITE)
1.247     misha     361:        )
1.238     misha     362: #endif
1.267     misha     363: 
                    364: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT__SPECIAL
                    365:        if(
                    366:                !change(*code, count-1/* last */, OP::OP_GET_ELEMENT__SPECIAL, /*=>*/OP::OP_GET_ELEMENT__SPECIAL__WRITE)
                    367:        )
                    368: #endif
                    369: 
1.247     misha     370:        {
1.267     misha     371:                change_or_append(*code, count-1 /* last */,
                    372:                        OP::OP_GET_ELEMENT, /*=>*/OP::OP_GET_ELEMENT__WRITE,
1.247     misha     373:                        /*or */OP::OP_WRITE_VALUE
                    374:                        ); /* value=pop; wcontext.write(value) */
1.246     misha     375:        }
1.247     misha     376: 
1.238     misha     377:        P(*$$, *code);
1.1       paf       378: };
1.259     misha     379: get_value: '$' get_name_value { $$=$2; };
1.64      paf       380: get_name_value: name_without_curly_rdive EON | name_in_curly_rdive;
1.259     misha     381: name_in_curly_rdive: '{' name_without_curly_rdive '}' { $$=$2; };
1.44      paf       382: name_without_curly_rdive: 
                    383:        name_without_curly_rdive_read 
                    384: |      name_without_curly_rdive_class;
1.19      paf       385: name_without_curly_rdive_read: name_without_curly_rdive_code {
1.206     paf       386:        $$=N(); 
1.238     misha     387:        YYSTYPE diving_code=$1;
1.239     misha     388:        size_t count=diving_code->count();
1.247     misha     389: 
                    390:        if(maybe_make_self(*$$, *diving_code, count)) {
                    391:                // $self.
                    392:        } else
1.239     misha     393: 
                    394: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_ELEMENT
1.247     misha     395:        if(maybe_make_get_object_element(*$$, *diving_code, count)){
1.245     misha     396:                // optimization for $object.field + ^object.method[
1.247     misha     397:        } else
1.238     misha     398: #endif
1.239     misha     399: 
                    400: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_VAR_ELEMENT
1.247     misha     401:        if(maybe_make_get_object_var_element(*$$, *diving_code, count)){
1.245     misha     402:                // optimization for $object.$var
1.247     misha     403:        } else
1.238     misha     404: #endif
1.239     misha     405: 
                    406: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
1.248     misha     407:        if(
                    408:                count>=4
                    409:                && (*diving_code)[0].code==OP::OP_VALUE
                    410:                && (*diving_code)[3].code==OP::OP_GET_ELEMENT
                    411:        ){
                    412:                 // optimization
1.239     misha     413:                O(*$$,
1.247     misha     414:                        (PC.in_call_value && count==4)
1.239     misha     415:                        ? OP::OP_VALUE__GET_ELEMENT_OR_OPERATOR // ^object[ : OP_VALUE+origin+string+OP_GET_ELEMENT => OP_VALUE__GET_ELEMENT_OR_OPERATOR+origin+string
                    416:                        : OP::OP_VALUE__GET_ELEMENT             // $object  : OP_VALUE+origin+string+OP_GET_ELEMENT => OP_VALUE__GET_ELEMENT+origin+string
                    417:                );
                    418:                P(*$$, *diving_code, 1/*offset*/, 2/*limit*/); // copy origin+value
1.247     misha     419:                if(count>4)
                    420:                        P(*$$, *diving_code, 4); // copy tail
1.239     misha     421:        } else {
                    422:                O(*$$, OP::OP_WITH_READ); /* stack: starting context */
                    423:                P(*$$, *diving_code);
                    424:        }
1.233     misha     425: #else
1.247     misha     426:        {
1.238     misha     427:                O(*$$, OP::OP_WITH_READ); /* stack: starting context */
1.179     paf       428: 
1.238     misha     429:                // ^if OP_ELEMENT => ^if OP_ELEMENT_OR_OPERATOR
                    430:                // optimized OP_VALUE+origin+string+OP_GET_ELEMENT. => OP_VALUE+origin+string+OP_GET_ELEMENT_OR_OPERATOR.
1.239     misha     431:                if(PC.in_call_value && count==4)
                    432:                        diving_code->put(count-1, OP::OP_GET_ELEMENT_OR_OPERATOR);
1.206     paf       433:                P(*$$, *diving_code);
1.239     misha     434:        }
1.233     misha     435: #endif
1.22      paf       436:        /* diving code; stack: current context */
1.1       paf       437: };
1.259     misha     438: name_without_curly_rdive_class: class_prefix name_without_curly_rdive_code { $$=$1; P(*$$, *$2); };
                    439: name_without_curly_rdive_code: name_advance2 | name_path name_advance2 { $$=$1; P(*$$, *$2); };
1.1       paf       440: 
                    441: /* put */
                    442: 
1.81      paf       443: put: '$' name_expr_wdive construct {
1.241     misha     444:        $$=N();
1.244     misha     445: #ifdef OPTIMIZE_BYTECODE_CONSTRUCT
                    446:        if(maybe_optimize_construct(*$$, *$2, *$3)){
1.246     misha     447:                // $a(expr), $.a(expr), $a[value], $.a[value], $self.a[value], $self.a(expr)
1.241     misha     448:        } else 
                    449: #endif
                    450:        {
                    451:                P(*$$, *$2); /* stack: context,name */
                    452:                P(*$$, *$3); /* stack: context,name,constructor_value */
                    453:        }
1.20      paf       454: };
1.44      paf       455: name_expr_wdive: 
1.157     parser    456:        name_expr_wdive_root
                    457: |      name_expr_wdive_write
1.44      paf       458: |      name_expr_wdive_class;
1.157     parser    459: name_expr_wdive_root: name_expr_dive_code {
1.206     paf       460:        $$=N();
1.238     misha     461:        YYSTYPE diving_code=$1;
1.247     misha     462:        size_t count=diving_code->count();
                    463: 
                    464:        if(maybe_make_self(*$$, *diving_code, count)) {
                    465:                // $self.
                    466:        } else
                    467: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
                    468:        if(
                    469:                count>=4
                    470:                && (*diving_code)[0].code==OP::OP_VALUE
                    471:                && (*diving_code)[3].code==OP::OP_GET_ELEMENT
                    472:        ){
                    473:                O(*$$, OP::OP_WITH_ROOT__VALUE__GET_ELEMENT);
                    474:                P(*$$, *diving_code, 1/*offset*/, 2/*limit*/); // copy origin+value
                    475:                if(count>4)
                    476:                        P(*$$, *diving_code, 4); // tail
                    477:        } else
                    478: #endif
                    479:        {
1.229     misha     480:                O(*$$, OP::OP_WITH_ROOT); /* stack: starting context */
1.206     paf       481:                P(*$$, *diving_code);
1.23      paf       482:        }
                    483:        /* diving code; stack: current context */
1.156     parser    484: };
1.157     parser    485: name_expr_wdive_write: '.' name_expr_dive_code {
1.206     paf       486:        $$=N(); 
1.229     misha     487:        O(*$$, OP::OP_WITH_WRITE); /* stack: starting context */
1.206     paf       488:        P(*$$, *$2); /* diving code; stack: context,name */
1.20      paf       489: };
1.259     misha     490: name_expr_wdive_class: class_prefix name_expr_dive_code { $$=$1; P(*$$, *$2); };
1.20      paf       491: 
1.244     misha     492: construct:
1.163     parser    493:        construct_square
                    494: |      construct_round
                    495: |      construct_curly
1.149     parser    496: ;
1.211     paf       497: construct_square: '[' {
                    498:        // allow $result_or_other_variable[ letters here any time ]
                    499:        *reinterpret_cast<bool*>(&$$)=PC.explicit_result; PC.explicit_result=false;
                    500: } any_constructor_code_value {
1.213     paf       501:        PC.explicit_result=*reinterpret_cast<bool*>(&$2);
1.211     paf       502: } ']' {
1.149     parser    503:        // stack: context, name
1.211     paf       504:        $$=$3; // stack: context, name, value
1.229     misha     505:        O(*$$, OP::OP_CONSTRUCT_VALUE); /* value=pop; name=pop; context=pop; construct(context,name,value) */
1.81      paf       506: }
                    507: ;
1.149     parser    508: construct_round: '(' expr_value ')' { 
1.206     paf       509:        $$=N(); 
1.229     misha     510:        O(*$$, OP::OP_PREPARE_TO_EXPRESSION);
1.149     parser    511:        // stack: context, name
1.206     paf       512:        P(*$$, *$2); // stack: context, name, value
1.229     misha     513:        O(*$$, OP::OP_CONSTRUCT_EXPR); /* value=pop->as_expr_result; name=pop; context=pop; construct(context,name,value) */
1.81      paf       514: }
1.52      paf       515: ;
1.149     parser    516: construct_curly: '{' maybe_codes '}' {
                    517:        // stack: context, name
1.206     paf       518:        $$=N(); 
1.229     misha     519:        OA(*$$, OP::OP_CURLY_CODE__CONSTRUCT, $2); /* code=pop; name=pop; context=pop; construct(context,name,junction(code)) */
1.149     parser    520: };
                    521: 
1.55      paf       522: any_constructor_code_value: 
1.261     moko      523:        empty_value /* optimized $var[] case */
1.52      paf       524: |      STRING /* optimized $var[STRING] case */
1.55      paf       525: |      constructor_code_value /* $var[something complex] */
1.1       paf       526: ;
1.55      paf       527: constructor_code_value: constructor_code {
1.206     paf       528:        $$=N(); 
1.229     misha     529:        OA(*$$, OP::OP_OBJECT_POOL, $1); /* stack: empty write context */
1.183     paf       530:        /* some code that writes to that context */
                    531:        /* context=pop; stack: context.value() */
1.1       paf       532: };
1.55      paf       533: constructor_code: codes__excluding_sole_str_literal;
1.259     misha     534: codes__excluding_sole_str_literal: action | code codes { $$=$1; P(*$$, *$2); };
1.27      paf       535: 
1.1       paf       536: /* call */
                    537: 
1.66      paf       538: call: call_value {
1.267     misha     539:        size_t count=$1->count();
1.238     misha     540: #ifdef OPTIMIZE_BYTECODE_CUT_REM_OPERATOR
1.267     misha     541:        if(count)
1.238     misha     542: #endif
                    543:        {
                    544:                $$=$1; /* stack: value */
1.267     misha     545:                if(!change_first(*$$, OP::OP_CONSTRUCT_OBJECT, /*=>*/OP::OP_CONSTRUCT_OBJECT__WRITE))
                    546:                        change_or_append(*$$, count-2 /* second last */,
                    547:                                OP::OP_CALL, /*=>*/ OP::OP_CALL__WRITE,
1.249     misha     548:                                /*or */OP::OP_WRITE_VALUE); /* value=pop; wcontext.write(value) */
1.238     misha     549:        }
1.66      paf       550: };
1.177     paf       551: call_value: '^' { 
1.180     paf       552:                                        PC.in_call_value=true; 
1.177     paf       553:                        }
                    554:                        call_name {
1.180     paf       555:                                PC.in_call_value=false;
1.177     paf       556:                        } 
1.154     parser    557:                        store_params EON { /* ^field.$method{vasya} */
1.238     misha     558: #ifdef OPTIMIZE_BYTECODE_CUT_REM_OPERATOR
1.242     misha     559: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT
1.238     misha     560:        const String* operator_name=LA2S(*$3, 0, OP::OP_VALUE__GET_ELEMENT_OR_OPERATOR);
1.242     misha     561: #else
                    562:        const String* operator_name=LA2S(*$3, 1);
                    563: #endif
1.279   ! moko      564:        if(operator_name && SYMBOLS_EQ(*operator_name,REM_SYMBOL)){
1.238     misha     565:                $$=N();
                    566:        } else 
                    567: #endif
                    568:                {
                    569:                        YYSTYPE params_code=$5;
                    570:                        if(params_code->count()==3) { // probably [] case. [OP::OP_VALUE+origin+Void]
                    571:                                if(Value* value=LA2V(*params_code)) // it is OP_VALUE+origin+value?
1.261     moko      572:                                        if(const String * string=value->get_string())
                    573:                                                if(string->is_empty()) // value is empty string?
                    574:                                                        params_code=0; // ^zzz[] case. don't append lone empty param.
1.238     misha     575:                        }
                    576:                        /* stack: context, method_junction */
1.249     misha     577: 
                    578:                        YYSTYPE var_code=$3;
                    579:                        if(
                    580:                                var_code->count()==8
                    581:                                && (*var_code)[0].code==OP::OP_VALUE__GET_CLASS
                    582:                                && (*var_code)[3].code==OP::OP_PREPARE_TO_CONSTRUCT_OBJECT
                    583:                                && (*var_code)[4].code==OP::OP_VALUE
1.272     moko      584: #ifdef FEATURE_GET_ELEMENT4CALL
                    585:                                && (*var_code)[7].code==OP::OP_GET_ELEMENT4CALL
                    586: #else
1.249     misha     587:                                && (*var_code)[7].code==OP::OP_GET_ELEMENT
1.272     moko      588: #endif
1.249     misha     589:                        ){
1.267     misha     590:                                $$=N();
1.249     misha     591:                                O(*$$, OP::OP_CONSTRUCT_OBJECT);
                    592:                                P(*$$, *var_code, 1/*offset*/, 2/*limit*/); // class name
                    593:                                P(*$$, *var_code, 5/*offset*/, 2/*limit*/); // constructor name
                    594:                                OA(*$$, params_code);
                    595:                        } else 
                    596:                                {
                    597:                                        $$=var_code; /* with_xxx,diving code; stack: context,method_junction */
                    598:                                        OA(*$$, OP::OP_CALL, params_code); // method_frame=make frame(pop junction); ncontext=pop; call(ncontext,method_frame) stack: value
                    599:                                }
1.238     misha     600:                }
1.1       paf       601: };
                    602: 
1.272     moko      603: call_name: name_without_curly_rdive {
                    604: #ifdef FEATURE_GET_ELEMENT4CALL
                    605:        size_t count=$1->count();
                    606:        if(count){
                    607:                $$=$1;
                    608: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_ELEMENT
                    609:                !(count==5 && change_first(*$$, OP::OP_GET_OBJECT_ELEMENT, OP::OP_GET_OBJECT_ELEMENT4CALL)) &&
                    610: #endif
                    611: #ifdef OPTIMIZE_BYTECODE_GET_OBJECT_VAR_ELEMENT
                    612:                !(count==5 && change_first(*$$, OP::OP_GET_OBJECT_VAR_ELEMENT, OP::OP_GET_OBJECT_VAR_ELEMENT4CALL)) &&
                    613: #endif
                    614:                !change(*$$, count-1, OP::OP_GET_ELEMENT, OP::OP_GET_ELEMENT4CALL);
                    615:        }
                    616: #endif
                    617: };
1.38      paf       618: 
1.259     misha     619: store_params: store_param | store_params store_param { $$=$1; P(*$$, *$2); };
1.69      paf       620: store_param: 
                    621:        store_square_param
                    622: |      store_round_param
                    623: |      store_curly_param
1.31      paf       624: ;
1.210     paf       625: store_square_param: '[' {
1.211     paf       626:        // allow ^call[ letters here any time ]
1.210     paf       627:        *reinterpret_cast<bool*>(&$$)=PC.explicit_result; PC.explicit_result=false;
                    628: } store_code_param_parts {
1.213     paf       629:        PC.explicit_result=*reinterpret_cast<bool*>(&$2);
1.259     misha     630: } ']' {$$=$3;};
                    631: store_round_param: '(' store_expr_param_parts ')' {$$=$2;};
                    632: store_curly_param: '{' store_curly_param_parts '}' {$$=$2;};
1.69      paf       633: store_code_param_parts:
                    634:        store_code_param_part
1.259     misha     635: |      store_code_param_parts ';' store_code_param_part { $$=$1; P(*$$, *$3); }
1.69      paf       636: ;
                    637: store_expr_param_parts:
                    638:        store_expr_param_part
1.259     misha     639: |      store_expr_param_parts ';' store_expr_param_part { $$=$1; P(*$$, *$3); }
1.69      paf       640: ;
1.94      paf       641: store_curly_param_parts:
                    642:        store_curly_param_part
1.259     misha     643: |      store_curly_param_parts ';' store_curly_param_part { $$=$1; P(*$$, *$3); }
1.94      paf       644: ;
1.120     paf       645: store_code_param_part: code_param_value {
1.32      paf       646:        $$=$1;
1.120     paf       647: };
1.214     paf       648: store_expr_param_part: expr_value {
                    649:        YYSTYPE expr_code=$1;
1.215     paf       650:        if(expr_code->count()==3
1.234     misha     651:                && (*expr_code)[0].code==OP::OP_VALUE) { // optimizing (double/bool/incidently 'string' too) case. [OP::OP_VALUE+origin+Double]. no evaluating
1.214     paf       652:                $$=expr_code; 
                    653:        } else {
1.238     misha     654:                YYSTYPE code=N();
1.229     misha     655:                O(*code, OP::OP_PREPARE_TO_EXPRESSION);
1.214     paf       656:                P(*code, *expr_code);
1.229     misha     657:                O(*code, OP::OP_WRITE_EXPR_RESULT);
1.214     paf       658:                $$=N(); 
1.229     misha     659:                OA(*$$, OP::OP_EXPR_CODE__STORE_PARAM, code);
1.214     paf       660:        }
1.69      paf       661: };
1.94      paf       662: store_curly_param_part: maybe_codes {
1.206     paf       663:        $$=N(); 
1.229     misha     664:        OA(*$$, OP::OP_CURLY_CODE__STORE_PARAM, $1);
1.94      paf       665: };
1.120     paf       666: code_param_value:
1.261     moko      667:        empty_value /* optimized [;...] case */
1.120     paf       668: |      STRING /* optimized [STRING] case */
                    669: |      constructor_code_value /* [something complex] */
                    670: ;
1.1       paf       671: 
                    672: /* name */
                    673: 
1.259     misha     674: name_expr_dive_code: name_expr_value | name_path name_expr_value { $$=$1; P(*$$, *$2); };
1.1       paf       675: 
1.259     misha     676: name_path: name_step | name_path name_step { $$=$1; P(*$$, *$2); };
1.1       paf       677: name_step: name_advance1 '.';
                    678: name_advance1: name_expr_value {
1.177     paf       679:        // we know that name_advance1 not called from ^xxx context
                    680:        // so we'll not check for operator call possibility as we do in name_advance2
                    681: 
1.1       paf       682:        /* stack: context */
                    683:        $$=$1; /* stack: context,name */
1.267     misha     684: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT__SPECIAL
                    685:        O(*$$, is_special_element(*$$) ? OP::OP_GET_ELEMENT__SPECIAL : OP::OP_GET_ELEMENT);
                    686: #else
1.229     misha     687:        O(*$$, OP::OP_GET_ELEMENT); /* name=pop; context=pop; stack: context.get_element(name) */
1.267     misha     688: #endif
1.1       paf       689: };
                    690: name_advance2: name_expr_value {
                    691:        /* stack: context */
                    692:        $$=$1; /* stack: context,name */
1.267     misha     693: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT__SPECIAL
                    694:        O(*$$, is_special_element(*$$) ? OP::OP_GET_ELEMENT__SPECIAL : OP::OP_GET_ELEMENT);
                    695: #else
1.229     misha     696:        O(*$$, OP::OP_GET_ELEMENT); /* name=pop; context=pop; stack: context.get_element(name) */
1.267     misha     697: #endif
1.1       paf       698: }
1.4       paf       699: |      STRING BOGUS
1.1       paf       700: ;
                    701: name_expr_value: 
1.4       paf       702:        STRING /* subname_is_const */
1.1       paf       703: |      name_expr_subvar_value /* $subname_is_var_value */
1.160     parser    704: |      name_expr_with_subvar_value /* xxx$part_of_subname_is_var_value */
1.166     parser    705: |      name_square_code_value /* [codes] */
1.1       paf       706: ;
                    707: name_expr_subvar_value: '$' subvar_ref_name_rdive {
                    708:        $$=$2;
1.229     misha     709:        O(*$$, OP::OP_GET_ELEMENT);
1.1       paf       710: };
1.4       paf       711: name_expr_with_subvar_value: STRING subvar_get_writes {
1.238     misha     712:        YYSTYPE code;
1.183     paf       713:        {
1.206     paf       714:                change_string_literal_to_write_string_literal(*(code=$1));
                    715:                P(*code, *$2);
1.183     paf       716:        }
1.206     paf       717:        $$=N(); 
1.229     misha     718:        OA(*$$, OP::OP_STRING_POOL, code);
1.1       paf       719: };
1.212     paf       720: name_square_code_value: '[' {
                    721:        // allow $result_or_other_variable[ letters here any time ]
                    722:        *reinterpret_cast<bool*>(&$$)=PC.explicit_result; PC.explicit_result=false;
                    723: } codes {
1.213     paf       724:        PC.explicit_result=*reinterpret_cast<bool*>(&$2);
1.212     paf       725: } ']' {
1.206     paf       726:        $$=N(); 
1.267     misha     727: #ifdef OPTIMIZE_BYTECODE_GET_ELEMENT__SPECIAL
                    728:        if(!maybe_append_simple_diving_code(*$$, *$3))
                    729: #endif
                    730:        {
1.229     misha     731:        OA(*$$, OP::OP_OBJECT_POOL, $3); /* stack: empty write context */
1.183     paf       732:        /* some code that writes to that context */
                    733:        /* context=pop; stack: context.value() */
1.267     misha     734:        }
1.160     parser    735: };
1.154     parser    736: subvar_ref_name_rdive: STRING {
1.206     paf       737:        $$=N(); 
1.229     misha     738:        O(*$$, OP::OP_WITH_READ);
1.206     paf       739:        P(*$$, *$1);
1.1       paf       740: };
1.259     misha     741: subvar_get_writes: subvar__get_write | subvar_get_writes subvar__get_write { $$=$1; P(*$$, *$2); };
1.1       paf       742: subvar__get_write: '$' subvar_ref_name_rdive {
                    743:        $$=$2;
1.229     misha     744:        O(*$$, OP::OP_GET_ELEMENT__WRITE);
1.42      paf       745: };
                    746: 
1.154     parser    747: class_prefix:
                    748:        class_static_prefix
                    749: |      class_constructor_prefix
                    750: ;
1.155     parser    751: class_static_prefix: STRING ':' {
                    752:        $$=$1; // stack: class name string
1.206     paf       753:        if(*LA2S(*$$) == BASE_NAME) { // pseudo BASE class
                    754:                if(VStateless_class* base=PC.cclass->base_class()) {
1.275     moko      755:                        change_string_literal_value(*$$, *new String(base->type()));
1.189     paf       756:                } else {
                    757:                        strcpy(PC.error, "no base class declared");
                    758:                        YYERROR;
                    759:                }
                    760:        }
1.238     misha     761:        // optimized OP_VALUE+origin+string+OP_GET_CLASS => OP_VALUE__GET_CLASS+origin+string
1.267     misha     762:        change_first(*$$, OP::OP_VALUE, OP::OP_VALUE__GET_CLASS);
1.155     parser    763: };
                    764: class_constructor_prefix: class_static_prefix ':' {
1.154     parser    765:        $$=$1;
1.180     paf       766:        if(!PC.in_call_value) {
1.154     parser    767:                strcpy(PC.error, ":: not allowed here");
                    768:                YYERROR;
                    769:        }
1.229     misha     770:        O(*$$, OP::OP_PREPARE_TO_CONSTRUCT_OBJECT);
1.1       paf       771: };
                    772: 
1.53      paf       773: 
1.56      paf       774: /* expr */
1.53      paf       775: 
1.214     paf       776: expr_value: expr;
1.56      paf       777: expr: 
1.214     paf       778:        double_or_STRING
1.216     paf       779: |   true_value
                    780: |   false_value
1.64      paf       781: |      get_value
1.66      paf       782: |      call_value
1.259     misha     783: |      '"' string_inside_quotes_value '"' { $$ = $2; }
                    784: |      '\'' string_inside_quotes_value '\'' { $$ = $2; }
1.60      paf       785: |      '(' expr ')' { $$ = $2; }
                    786: /* stack: operand // stack: @operand */
1.259     misha     787: |      '-' expr %prec NUNARY { $$=$2;  O(*$$, OP::OP_NEG); }
                    788: |      '+' expr %prec NUNARY { $$=$2; }
                    789: |      '~' expr { $$=$2;        O(*$$, OP::OP_INV); }
                    790: |      '!' expr { $$=$2;  O(*$$, OP::OP_NOT); }
                    791: |      "def" expr { $$=$2;  O(*$$, OP::OP_DEF); }
                    792: |      "in" expr { $$=$2;  O(*$$, OP::OP_IN); }
                    793: |      "-f" expr { $$=$2;  O(*$$, OP::OP_FEXISTS); }
                    794: |      "-d" expr { $$=$2;  O(*$$, OP::OP_DEXISTS); }
1.60      paf       795: /* stack: a,b // stack: a@b */
1.259     misha     796: |      expr '-' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_SUB); }
                    797: |      expr '+' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_ADD); }
                    798: |      expr '*' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_MUL); }
                    799: |      expr '/' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_DIV); }
                    800: |      expr '%' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_MOD); }
                    801: |      expr '\\' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_INTDIV); }
                    802: |      expr "<<" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_SL); }
                    803: |      expr ">>" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_SR); }
                    804: |      expr '&' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_AND); }
                    805: |      expr '|' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_OR); }
                    806: |      expr "!|" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_BIN_XOR); }
                    807: |      expr "&&" expr { $$=$1;  OA(*$$, OP::OP_NESTED_CODE, $3);  O(*$$, OP::OP_LOG_AND); }
                    808: |      expr "||" expr { $$=$1;  OA(*$$, OP::OP_NESTED_CODE, $3);  O(*$$, OP::OP_LOG_OR); }
                    809: |      expr "!||" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_LOG_XOR); }
                    810: |      expr '<' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_LT); }
                    811: |      expr '>' expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_GT); }
                    812: |      expr "<=" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_LE); }
                    813: |      expr ">=" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_GE); }
                    814: |      expr "==" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_EQ); }
                    815: |      expr "!=" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_NUM_NE); }
                    816: |      expr "lt" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_LT); }
                    817: |      expr "gt" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_GT); }
                    818: |      expr "le" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_LE); }
                    819: |      expr "ge" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_GE); }
                    820: |      expr "eq" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_EQ); }
                    821: |      expr "ne" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_STR_NE); }
                    822: |      expr "is" expr { $$=$1;  P(*$$, *$3);  O(*$$, OP::OP_IS); }
1.56      paf       823: ;
1.214     paf       824: 
                    825: double_or_STRING: STRING {
1.238     misha     826:        // optimized OP_STRING => OP_VALUE for doubles
1.214     paf       827:        maybe_change_string_literal_to_double_literal(*($$=$1));
                    828: };
1.55      paf       829: 
1.65      paf       830: string_inside_quotes_value: maybe_codes {
1.238     misha     831: #ifdef OPTIMIZE_BYTECODE_STRING_POOL
                    832:        // it brakes ^if(" 09 "){...}
                    833:        YYSTYPE code=$1;
                    834:        $$=N();
1.267     misha     835:        if(code->count()==3 && change_first(*code, OP::OP_STRING__WRITE, OP::OP_VALUE)){
1.238     misha     836:                // optimized OP_STRING__WRITE+origin+value => OP_VALUE+origin+value without starting OP_STRING_POOL
                    837:                P(*$$, *code);
                    838:        } else {
                    839:                OA(*$$, OP::OP_STRING_POOL, code); /* stack: empty write context */
                    840:        }
                    841: #else
1.206     paf       842:        $$=N();
1.229     misha     843:        OA(*$$, OP::OP_STRING_POOL, $1); /* stack: empty write context */
1.238     misha     844: #endif
1.183     paf       845:        /* some code that writes to that context */
                    846:        /* context=pop; stack: context.get_string() */
1.53      paf       847: };
1.1       paf       848: 
1.27      paf       849: /* basics */
1.1       paf       850: 
1.81      paf       851: write_string: STRING {
1.238     misha     852:        // optimized OP_STRING+OP_WRITE_VALUE => OP_STRING__WRITE
1.259     misha     853:        change_string_literal_to_write_string_literal(*($$=$1));
1.54      paf       854: };
                    855: 
1.261     moko      856: empty_value: /* empty */ { $$=VL(/*we know that we will not change it*/const_cast<VString*>(&vempty), 0, 0, 0); }
1.259     misha     857: true_value: "true" { $$ = VL(/*we know that we will not change it*/const_cast<VBool*>(&vtrue), 0, 0, 0); }
                    858: false_value: "false" { $$ = VL(/*we know that we will not change it*/const_cast<VBool*>(&vfalse), 0, 0, 0); }
1.216     paf       859: 
1.259     misha     860: empty: /* empty */ { $$=N(); };
1.1       paf       861: 
                    862: %%
1.105     paf       863: #endif
1.1       paf       864: 
                    865: /*
                    866:        000$111(2222)00 
                    867:                000$111{3333}00
1.9       paf       868:        $,^: push,=0
1.1       paf       869:        1:( { break=pop
                    870:        2:( )  pop
                    871:        3:{ }  pop
                    872: 
                    873:        000^111(2222)4444{33333}4000
1.9       paf       874:        $,^: push,=0
1.1       paf       875:        1:( { break=pop
                    876:        2:( )=4
                    877:        3:{ }=4
                    878:                4:[^({]=pop
                    879: */
                    880: 
1.206     paf       881: inline void ungetc(Parse_control& pc, uint last_line_end_col) {
                    882:        pc.source--;
                    883:        if(pc.pos.col==0) {
                    884:                --pc.pos.line; pc.pos.col=last_line_end_col;
                    885:        } else
                    886:                --pc.pos.col;
                    887: 
                    888: }
                    889: static int yylex(YYSTYPE *lvalp, void *apc) {
                    890:        register Parse_control& pc=*static_cast<Parse_control*>(apc);
                    891: 
                    892:        #define lexical_brackets_nestage pc.brackets_nestages[pc.ls_sp]
1.48      paf       893:        #define RC {result=c; goto break2; }
1.1       paf       894: 
1.206     paf       895:        register int c;
                    896:        int result;
1.1       paf       897:        
1.206     paf       898:        if(pc.pending_state) {
                    899:                result=pc.pending_state;
                    900:                pc.pending_state=0;
1.1       paf       901:                return result;
                    902:        }
                    903:        
1.206     paf       904:        const char *begin=pc.source;
                    905:        Pos begin_pos=pc.pos;
1.91      paf       906:        const char *end;
1.67      paf       907:        int skip_analized=0;
1.50      paf       908:        while(true) {
1.206     paf       909:                c=*(end=(pc.source++));
                    910: //             fprintf(stderr, "\nchar: %c %02X; nestage: %d, sp=%d", c, c, lexical_brackets_nestage, pc.sp);
1.1       paf       911: 
1.208     paf       912:                if(c=='\n')
1.206     paf       913:                        pc.pos_next_line();
1.208     paf       914:                else
1.206     paf       915:                        pc.pos_next_c(c);
1.208     paf       916: //             fprintf(stderr, "\nchar: %c file(%d:%d)", c, pc.pos.line, pc.pos.col);
1.73      paf       917: 
1.208     paf       918:                if(pc.pos.col==0+1 && c=='@') {
1.206     paf       919:                        if(pc.ls==LS_DEF_SPECIAL_BODY) {
1.175     paf       920:                                // @SPECIAL
                    921:                                // ...
                    922:                                // @<here = 
1.206     paf       923:                                pop_LS(pc); // exiting from LS_DEF_SPECIAL_BODY state
1.175     paf       924:                        } // continuing checks
1.206     paf       925:                        if(pc.ls==LS_USER) {
                    926:                                push_LS(pc, LS_DEF_NAME);
1.171     parser    927:                                RC;
1.175     paf       928:                        } else // @ in first column inside some code [when could that be?]
1.171     parser    929:                                result=BAD_METHOD_DECL_START;
                    930:                        goto break2;
1.209     paf       931:                }
                    932:                if(c=='^') {
1.206     paf       933:                        if(pc.ls==LS_METHOD_AFTER) {
1.203     paf       934:                                // handle after-method situation
1.206     paf       935:                                pop_LS(pc);
1.203     paf       936:                                result=EON;
                    937:                                skip_analized=-1; // return to punctuation afterwards to assure it's literality
                    938:                                goto break2;
                    939:                        }
1.206     paf       940:                        switch(pc.ls) {
1.169     parser    941: case LS_EXPRESSION_VAR_NAME_WITH_COLON:
                    942: case LS_EXPRESSION_VAR_NAME_WITHOUT_COLON:
                    943: case LS_VAR_NAME_SIMPLE_WITH_COLON:
                    944: case LS_VAR_NAME_SIMPLE_WITHOUT_COLON:
                    945: case LS_VAR_NAME_CURLY:
                    946: case LS_METHOD_NAME:
1.194     paf       947: case LS_USER_COMMENT:
1.169     parser    948: case LS_DEF_COMMENT:
                    949:        // no literals in names, please
                    950:        break;
                    951: default:
1.206     paf       952:                        switch(*pc.source) {
1.165     parser    953:                        // ^escaping some punctuators
1.228     misha     954:                        case '^': case '$': case ';': case '@':
1.126     paf       955:                        case '(': case ')':
1.48      paf       956:                        case '[': case ']':
                    957:                        case '{': case '}':
1.172     parser    958:                        case '"':  case ':':
1.40      paf       959:                                if(end!=begin) {
1.206     paf       960:                                        if(!pc.string_start)
                    961:                                                pc.string_start=begin_pos;
1.40      paf       962:                                        // append piece till ^
1.206     paf       963:                                        pc.string.append_strdup_know_length(begin, end-begin);
1.40      paf       964:                                }
1.63      paf       965:                                // reset piece 'begin' position & line
1.206     paf       966:                                begin=pc.source; // ->punctuation
                    967:                                begin_pos=pc.pos;
1.203     paf       968:                                // skip over _ after ^
1.206     paf       969:                                pc.source++;  pc.pos.col++;
1.203     paf       970:                                // skip analysis = forced literal
                    971:                                continue;
1.114     paf       972: 
                    973:                        // converting ^#HH into char(hex(HH))
                    974:                        case '#':
                    975:                                if(end!=begin) {
1.206     paf       976:                                        if(!pc.string_start)
                    977:                                                pc.string_start=begin_pos;
1.114     paf       978:                                        // append piece till ^
1.206     paf       979:                                        pc.string.append_strdup_know_length(begin, end-begin);
1.114     paf       980:                                }
                    981:                                // #HH ?
1.228     misha     982:                                if(pc.source[1] && isxdigit(pc.source[1]) && pc.source[2] && isxdigit(pc.source[2])) {
1.218     paf       983:                                        char c=(char)(
1.206     paf       984:                                                hex_value[(unsigned char)pc.source[1]]*0x10+
1.218     paf       985:                                                hex_value[(unsigned char)pc.source[2]]);
1.206     paf       986:                                        if(c==0) {
1.114     paf       987:                                                result=BAD_HEX_LITERAL;
                    988:                                                goto break2; // wrong hex value[no ^#00 chars allowed]: bail out
                    989:                                        }
                    990:                                        // append char(hex(HH))
1.206     paf       991:                                        pc.string.append(c);
1.114     paf       992:                                        // skip over ^#HH
1.206     paf       993:                                        pc.source+=3;
                    994:                                        pc.pos.col+=3;
1.114     paf       995:                                        // reset piece 'begin' position & line
1.206     paf       996:                                        begin=pc.source; // ->after ^#HH
                    997:                                        begin_pos=pc.pos;
1.203     paf       998:                                        // skip analysis = forced literal
1.114     paf       999:                                        continue;
                   1000:                                }
1.228     misha    1001:                                // just escaped char
                   1002:                                // reset piece 'begin' position & line
                   1003:                                begin=pc.source;
                   1004:                                begin_pos=pc.pos;
                   1005:                                // skip over _ after ^
                   1006:                                pc.source++;  pc.pos.col++;
                   1007:                                // skip analysis = forced literal
                   1008:                                continue;
1.1       paf      1009:                        }
1.169     parser   1010:                        break;
1.203     paf      1011:                        }
1.169     parser   1012:                }
1.113     paf      1013:                // #comment  start skipping
1.206     paf      1014:                if(c=='#' && pc.pos.col==1) {
1.112     paf      1015:                        if(end!=begin) {
1.206     paf      1016:                                if(!pc.string_start)
                   1017:                                        pc.string_start=begin_pos;
1.112     paf      1018:                                // append piece till #
1.206     paf      1019:                                pc.string.append_strdup_know_length(begin, end-begin);
1.112     paf      1020:                        }
                   1021:                        // fall into COMMENT lexical state [wait for \n]
1.206     paf      1022:                        push_LS(pc, LS_USER_COMMENT);
1.175     paf      1023:                        continue;
1.112     paf      1024:                }
1.206     paf      1025:                switch(pc.ls) {
1.10      paf      1026: 
                   1027:                // USER'S = NOT OURS
1.1       paf      1028:                case LS_USER:
1.206     paf      1029:                case LS_NAME_SQUARE_PART: // name.[here].xxx
                   1030:                        if(pc.trim_bof)
1.153     parser   1031:                                switch(c) {
                   1032:                                case '\n': case ' ': case '\t':
1.206     paf      1033:                                        begin=pc.source;
                   1034:                                        begin_pos=pc.pos;
1.152     parser   1035:                                        continue; // skip it
1.153     parser   1036:                                default:
1.206     paf      1037:                                        pc.trim_bof=false;
1.152     parser   1038:                                }
1.48      paf      1039:                        switch(c) {
                   1040:                        case '$':
1.206     paf      1041:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1042:                                RC;
                   1043:                        case '^':
1.206     paf      1044:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1045:                                RC;
1.166     parser   1046:                        case ']':
1.206     paf      1047:                                if(pc.ls==LS_NAME_SQUARE_PART)
1.166     parser   1048:                                        if(--lexical_brackets_nestage==0) {// $name.[co<]?>de<]?>
1.206     paf      1049:                                                pop_LS(pc); // $name.[co<]>de<]!>
1.166     parser   1050:                                                RC;
                   1051:                                        }
1.160     parser   1052:                                break;
1.166     parser   1053:                        case '[': // $name.[co<[>de]
1.206     paf      1054:                                if(pc.ls==LS_NAME_SQUARE_PART)
1.166     parser   1055:                                        lexical_brackets_nestage++;
1.161     parser   1056:                                break;
1.112     paf      1057:                        }
1.209     paf      1058:                        if(pc.explicit_result && c)
                   1059:                                switch(c) {
1.276     moko     1060:                                default:
                   1061:                                        pc.string.append(c);
1.209     paf      1062:                                case '\n': case ' ': case '\t':
                   1063:                                        begin=pc.source;
                   1064:                                        begin_pos=pc.pos;
1.276     moko     1065:                                        continue;
1.209     paf      1066:                                }
1.112     paf      1067:                        break;
                   1068:                        
                   1069:                // #COMMENT
1.194     paf      1070:                case LS_USER_COMMENT:
1.112     paf      1071:                        if(c=='\n') {
                   1072:                                // skip comment
1.206     paf      1073:                                begin=pc.source;
                   1074:                                begin_pos=pc.pos;
1.112     paf      1075: 
1.206     paf      1076:                                pop_LS(pc);
1.112     paf      1077:                                continue;
1.1       paf      1078:                        }
1.48      paf      1079:                        break;
                   1080:                        
                   1081:                // STRING IN EXPRESSION
1.145     parser   1082:                case LS_EXPRESSION_STRING_QUOTED:
                   1083:                case LS_EXPRESSION_STRING_APOSTROFED:
1.48      paf      1084:                        switch(c) {
                   1085:                        case '"':
1.145     parser   1086:                        case '\'':
                   1087:                                if(
1.270     moko     1088:                                        (pc.ls == LS_EXPRESSION_STRING_QUOTED && c=='"') ||
                   1089:                                        (pc.ls == LS_EXPRESSION_STRING_APOSTROFED && c=='\'') ) {
1.206     paf      1090:                                        pop_LS(pc); //"abc". | 'abc'.
1.145     parser   1091:                                        RC;
                   1092:                                }
                   1093:                                break;
1.48      paf      1094:                        case '$':
1.206     paf      1095:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1096:                                RC;
                   1097:                        case '^':
1.206     paf      1098:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1099:                                RC;
1.10      paf      1100:                        }
                   1101:                        break;
                   1102: 
                   1103:                // METHOD DEFINITION
                   1104:                case LS_DEF_NAME:
1.48      paf      1105:                        switch(c) {
                   1106:                        case '[':
1.206     paf      1107:                                pc.ls=LS_DEF_PARAMS;
1.48      paf      1108:                                RC;
                   1109:                        case '\n':
1.206     paf      1110:                                pc.ls=LS_DEF_SPECIAL_BODY;
1.48      paf      1111:                                RC;
1.10      paf      1112:                        }
                   1113:                        break;
1.48      paf      1114: 
1.10      paf      1115:                case LS_DEF_PARAMS:
1.48      paf      1116:                        switch(c) {
1.192     paf      1117:                        case '$': // common error
1.193     paf      1118:                                result=BAD_METHOD_PARAMETER_NAME_CHARACTER;
                   1119:                                goto break2;
1.48      paf      1120:                        case ';':
                   1121:                                RC;
                   1122:                        case ']':
1.206     paf      1123:                                pc.ls=*pc.source=='['?LS_DEF_LOCALS:LS_DEF_COMMENT;
1.48      paf      1124:                                RC;
1.49      paf      1125:                        case '\n': // wrong. bailing out
1.206     paf      1126:                                pop_LS(pc);
1.48      paf      1127:                                RC;
1.10      paf      1128:                        }
                   1129:                        break;
1.48      paf      1130: 
1.10      paf      1131:                case LS_DEF_LOCALS:
1.48      paf      1132:                        switch(c) {
                   1133:                        case '[':
                   1134:                        case ';':
                   1135:                                RC;
                   1136:                        case ']':
1.206     paf      1137:                                pc.ls=LS_DEF_COMMENT;
1.48      paf      1138:                                RC;
                   1139:                        case '\n': // wrong. bailing out
1.206     paf      1140:                                pop_LS(pc);
1.48      paf      1141:                                RC;
1.10      paf      1142:                        }
                   1143:                        break;
1.48      paf      1144: 
1.10      paf      1145:                case LS_DEF_COMMENT:
                   1146:                        if(c=='\n') {
1.206     paf      1147:                                pop_LS(pc);
1.48      paf      1148:                                RC;
1.37      paf      1149:                        }
                   1150:                        break;
                   1151: 
1.48      paf      1152:                case LS_DEF_SPECIAL_BODY:
1.175     paf      1153:                        if(c=='\n')
1.48      paf      1154:                                RC;
                   1155:                        break;
                   1156: 
                   1157:                // (EXPRESSION)
1.69      paf      1158:                case LS_VAR_ROUND:
                   1159:                case LS_METHOD_ROUND:
1.48      paf      1160:                        switch(c) {
                   1161:                        case ')':
1.270     moko     1162:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1163:                                        if(pc.ls==LS_METHOD_ROUND) // method round param ended
                   1164:                                                pc.ls=LS_METHOD_AFTER; // look for method end
                   1165:                                        else // pc.ls==LS_VAR_ROUND // variable constructor ended
                   1166:                                                pop_LS(pc); // return to normal life
1.270     moko     1167:                                }
1.48      paf      1168:                                RC;
1.194     paf      1169:                        case '#': // comment start skipping
                   1170:                                if(end!=begin) {
1.206     paf      1171:                                        if(!pc.string_start)
                   1172:                                                pc.string_start=begin_pos;
1.194     paf      1173:                                        // append piece till #
1.206     paf      1174:                                        pc.string.append_strdup_know_length(begin, end-begin);
1.194     paf      1175:                                }
                   1176:                                // fall into COMMENT lexical state [wait for \n]
1.206     paf      1177:                                push_LS(pc, LS_EXPRESSION_COMMENT);
1.194     paf      1178:                                lexical_brackets_nestage=1;
                   1179:                                continue;
1.48      paf      1180:                        case '$':
1.206     paf      1181:                                push_LS(pc, LS_EXPRESSION_VAR_NAME_WITH_COLON);                         
1.48      paf      1182:                                RC;
                   1183:                        case '^':
1.206     paf      1184:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1185:                                RC;
                   1186:                        case '(':
                   1187:                                lexical_brackets_nestage++;
                   1188:                                RC;
1.67      paf      1189:                        case '-':
1.206     paf      1190:                                switch(*pc.source) {
1.127     paf      1191:                                case 'f': // -f
1.67      paf      1192:                                        skip_analized=1;
                   1193:                                        result=FEXISTS;
1.127     paf      1194:                                        goto break2;
                   1195:                                case 'd': // -d
                   1196:                                        skip_analized=1;
                   1197:                                        result=DEXISTS;
                   1198:                                        goto break2;
1.191     paf      1199:                                default: // minus
1.67      paf      1200:                                        result=c;
1.127     paf      1201:                                        goto break2;
                   1202:                                }
1.67      paf      1203:                                goto break2;
1.173     paf      1204:                        case '+': case '*': case '/': case '%': case '\\':
1.58      paf      1205:                        case '~':
1.48      paf      1206:                        case ';':
                   1207:                                RC;
1.193     paf      1208:                        case '&': case '|':
1.206     paf      1209:                                if(*pc.source==c) { // && ||
1.193     paf      1210:                                        result=c=='&'?LAND:LOR;
1.67      paf      1211:                                        skip_analized=1;
1.58      paf      1212:                                } else
                   1213:                                        result=c;
                   1214:                                goto break2;
1.193     paf      1215:                        case '!':
1.206     paf      1216:                                switch(pc.source[0]) { 
1.193     paf      1217:                                case '|': // !| !||
                   1218:                                        skip_analized=1;
1.206     paf      1219:                                        if(pc.source[1]=='|') {
1.193     paf      1220:                                                skip_analized++;
                   1221:                                                result=LXOR;
                   1222:                                        } else
                   1223:                                                result=NXOR;
                   1224:                                        goto break2;
                   1225:                                case '=': // !=
                   1226:                                        skip_analized=1;
                   1227:                                        result=NNE; 
                   1228:                                        goto break2;
                   1229:                                }
                   1230:                                RC;
1.195     paf      1231: 
                   1232:                        case '<': // <<, <=, <
1.206     paf      1233:                                switch(*pc.source) {
1.195     paf      1234:                                case '<': // <[<]
                   1235:                                        skip_analized=1; result=NSL; break;
                   1236:                                case '=': // <[=]
                   1237:                                        skip_analized=1; result=NLE; break;
                   1238:                                default: // <[]
                   1239:                                        result=c; break;
                   1240:                                }
                   1241:                                goto break2;
                   1242:                        case '>': // >>, >=, >
1.206     paf      1243:                                switch(*pc.source) {
1.195     paf      1244:                                case '>': // >[>]
                   1245:                                        skip_analized=1; result=NSR; break;
                   1246:                                case '=': // >[=]
                   1247:                                        skip_analized=1; result=NGE; break;
                   1248:                                default: // >[]
                   1249:                                        result=c; break;
                   1250:                                }
                   1251:                                goto break2;
                   1252:                        case '=': // ==
1.206     paf      1253:                                switch(*pc.source) {
1.195     paf      1254:                                case '=': // =[=]
                   1255:                                        skip_analized=1; result=NEQ; break;
                   1256:                                default: // =[]
                   1257:                                        result=c; break; // not used now
                   1258:                                }
1.58      paf      1259:                                goto break2;
1.195     paf      1260: 
1.48      paf      1261:                        case '"':
1.206     paf      1262:                                push_LS(pc, LS_EXPRESSION_STRING_QUOTED);
1.145     parser   1263:                                RC;
                   1264:                        case '\'':
1.206     paf      1265:                                push_LS(pc, LS_EXPRESSION_STRING_APOSTROFED);
1.48      paf      1266:                                RC;
1.50      paf      1267:                        case 'l': case 'g': case 'e': case 'n':
1.51      paf      1268:                                if(end==begin) // right after whitespace
1.206     paf      1269:                                        if(isspace(pc.source[1])) {
                   1270:                                                switch(*pc.source) {
1.117     paf      1271:                                                        //                                      case '?': // ok [and bad cases, yacc would bark at them]
                   1272:                                                case 't': // lt gt [et nt]
                   1273:                                                        result=c=='l'?SLT:c=='g'?SGT:BAD_STRING_COMPARISON_OPERATOR;
                   1274:                                                        skip_analized=1;
                   1275:                                                        goto break2;
                   1276:                                                case 'e': // le ge ne [ee]
                   1277:                                                        result=c=='l'?SLE:c=='g'?SGE:c=='n'?SNE:BAD_STRING_COMPARISON_OPERATOR;
                   1278:                                                        skip_analized=1;
                   1279:                                                        goto break2;
                   1280:                                                case 'q': // eq [lq gq nq]
                   1281:                                                        result=c=='e'?SEQ:BAD_STRING_COMPARISON_OPERATOR;
                   1282:                                                        skip_analized=1;
                   1283:                                                        goto break2;
                   1284:                                                }
1.67      paf      1285:                                        }
                   1286:                                break;
                   1287:                        case 'i':
                   1288:                                if(end==begin) // right after whitespace
1.206     paf      1289:                                        if(isspace(pc.source[1])) {
                   1290:                                                switch(pc.source[0]) {
1.117     paf      1291:                                                case 'n': // in
1.95      paf      1292:                                                        skip_analized=1;
                   1293:                                                        result=IN;
                   1294:                                                        goto break2;
1.117     paf      1295:                                                case 's': // is
1.95      paf      1296:                                                        skip_analized=1;
                   1297:                                                        result=IS;
                   1298:                                                        goto break2;
                   1299:                                                }
1.67      paf      1300:                                        }
                   1301:                                break;
                   1302:                        case 'd':
                   1303:                                if(end==begin) // right after whitespace
1.206     paf      1304:                                        if(pc.source[0]=='e' && pc.source[1]=='f') { // def
1.225     misha    1305:                                                switch(pc.source[2]){
                   1306:                                                case ' ': case '\t': case '\n': case '"': case '\'': case '^': case '$': // non-quoted string without whitespace after 'def' is not allowed
                   1307:                                                        skip_analized=2;
                   1308:                                                        result=DEF;
                   1309:                                                        goto break2;
                   1310:                                                }
                   1311:                                                // error: incorrect char after 'def'
1.50      paf      1312:                                        }
1.48      paf      1313:                                break;
1.216     paf      1314:                        case 't':
                   1315:                                if(end==begin) // right after whitespace
1.225     misha    1316:                                        if(pc.source[0]=='r' && pc.source[1]=='u' && pc.source[2]=='e') { // true
1.216     paf      1317:                                                skip_analized=3;
                   1318:                                                result=LITERAL_TRUE;
                   1319:                                                goto break2;
                   1320:                                        }
                   1321:                                break;
                   1322:                        case 'f':
                   1323:                                if(end==begin) // right after whitespace
1.225     misha    1324:                                        if(pc.source[0]=='a' && pc.source[1]=='l' && pc.source[2]=='s' && pc.source[3]=='e') { // false
1.216     paf      1325:                                                skip_analized=4;
                   1326:                                                result=LITERAL_FALSE;
                   1327:                                                goto break2;
                   1328:                                        }
                   1329:                                break;
1.48      paf      1330:                        case ' ': case '\t': case '\n':
1.63      paf      1331:                                if(end!=begin) { // there were a string after previous operator?
                   1332:                                        result=0; // return that string
                   1333:                                        goto break2;
1.48      paf      1334:                                }
1.63      paf      1335:                                // that's a leading|traling space or after-operator-space
                   1336:                                // ignoring it
                   1337:                                // reset piece 'begin' position & line
1.206     paf      1338:                                begin=pc.source; // after whitespace char
                   1339:                                begin_pos=pc.pos;
1.48      paf      1340:                                continue;
1.1       paf      1341:                        }
                   1342:                        break;
1.194     paf      1343:                case LS_EXPRESSION_COMMENT:
                   1344:                        if(c=='(')
                   1345:                                lexical_brackets_nestage++;
                   1346:                        
1.206     paf      1347:                        switch(*pc.source) {
1.194     paf      1348:                        case '\n': case ')':
1.206     paf      1349:                                if(*pc.source==')')
1.194     paf      1350:                                        if(--lexical_brackets_nestage!=0)
                   1351:                                                continue;
                   1352: 
                   1353:                                // skip comment
1.206     paf      1354:                                begin=pc.source;
                   1355:                                begin_pos=pc.pos;
1.194     paf      1356: 
1.206     paf      1357:                                pop_LS(pc);
1.194     paf      1358:                                continue;
                   1359:                        }
                   1360:                        break;
1.1       paf      1361: 
1.10      paf      1362:                // VARIABLE GET/PUT/WITH
1.166     parser   1363:                case LS_VAR_NAME_SIMPLE_WITH_COLON: 
                   1364:                case LS_VAR_NAME_SIMPLE_WITHOUT_COLON:
                   1365:                case LS_EXPRESSION_VAR_NAME_WITH_COLON: 
                   1366:                case LS_EXPRESSION_VAR_NAME_WITHOUT_COLON:
                   1367:                        if(
1.206     paf      1368:                                pc.ls==LS_EXPRESSION_VAR_NAME_WITH_COLON ||
                   1369:                                pc.ls==LS_EXPRESSION_VAR_NAME_WITHOUT_COLON) {
1.181     paf      1370:                                // name in expr ends also before 
1.48      paf      1371:                                switch(c) {
1.181     paf      1372:                                // expression minus
1.92      paf      1373:                                case '-': 
1.181     paf      1374:                                // expression integer division
                   1375:                                case '\\':
1.206     paf      1376:                                        pop_LS(pc);
                   1377:                                        pc.ungetc();
1.48      paf      1378:                                        result=EON;
                   1379:                                        goto break2;
                   1380:                                }
                   1381:                        }
1.166     parser   1382:                        if(
1.206     paf      1383:                                pc.ls==LS_VAR_NAME_SIMPLE_WITHOUT_COLON ||
                   1384:                                pc.ls==LS_EXPRESSION_VAR_NAME_WITHOUT_COLON) {
1.142     parser   1385:                                // name already has ':', stop before next 
                   1386:                                switch(c) {
                   1387:                                case ':': 
1.206     paf      1388:                                        pop_LS(pc);
                   1389:                                        pc.ungetc();
1.142     parser   1390:                                        result=EON;
                   1391:                                        goto break2;
                   1392:                                }
                   1393:                        }
1.48      paf      1394:                        switch(c) {
                   1395:                        case 0:
                   1396:                        case ' ': case '\t': case '\n':
                   1397:                        case ';':
1.126     paf      1398:                        case ']': case '}': case ')': 
                   1399:                        case '"': case '\'':
1.139     parser   1400:                        case '<': case '>':  // these stand for HTML brackets AND expression binary ops
1.253     misha    1401:                        case '+': case '*': case '/': case '\\': case '%': 
1.92      paf      1402:                        case '&': case '|': 
                   1403:                        case '=': case '!':
1.99      paf      1404:                        // common delimiters
1.190     paf      1405:                        case ',': case '?': case '#':
1.220     paf      1406:                        // mysql column separators
                   1407:                        case '`':
1.139     parser   1408:                        // before call
                   1409:                        case '^': 
1.206     paf      1410:                                pop_LS(pc);
                   1411:                                pc.ungetc();
1.13      paf      1412:                                result=EON;
1.1       paf      1413:                                goto break2;
1.48      paf      1414:                        case '[':
1.162     parser   1415:                                // $name.<[>code]
1.206     paf      1416:                                if(pc.pos.col>1/*not first column*/ && (
1.163     parser   1417:                                        end[-1]=='$'/*was start of get*/ ||
                   1418:                                        end[-1]==':'/*was class name delim */ ||
                   1419:                                        end[-1]=='.'/*was name delim */
1.162     parser   1420:                                        )) {
1.206     paf      1421:                                        push_LS(pc, LS_NAME_SQUARE_PART);
1.162     parser   1422:                                        lexical_brackets_nestage=1;
                   1423:                                        RC;
                   1424:                                }
1.206     paf      1425:                                pc.ls=LS_VAR_SQUARE;
1.1       paf      1426:                                lexical_brackets_nestage=1;
1.48      paf      1427:                                RC;
                   1428:                        case '{':
                   1429:                                if(begin==end) { // ${name}, no need of EON, switching LS
1.206     paf      1430:                                        pc.ls=LS_VAR_NAME_CURLY; 
1.48      paf      1431:                                } else {
1.206     paf      1432:                                        pc.ls=LS_VAR_CURLY;
1.48      paf      1433:                                        lexical_brackets_nestage=1;
                   1434:                                }
1.69      paf      1435: 
1.48      paf      1436:                                RC;
                   1437:                        case '(':
1.206     paf      1438:                                pc.ls=LS_VAR_ROUND;
1.1       paf      1439:                                lexical_brackets_nestage=1;
1.48      paf      1440:                                RC;
                   1441:                        case '.': // name part delim
                   1442:                        case '$': // name part subvar
1.160     parser   1443:                        case ':': // class<:>name
1.166     parser   1444:                                // go to _WITHOUT_COLON state variant...
1.206     paf      1445:                                if(pc.ls==LS_VAR_NAME_SIMPLE_WITH_COLON)
                   1446:                                        pc.ls=LS_VAR_NAME_SIMPLE_WITHOUT_COLON;
                   1447:                                else if(pc.ls==LS_EXPRESSION_VAR_NAME_WITH_COLON)
                   1448:                                        pc.ls=LS_EXPRESSION_VAR_NAME_WITHOUT_COLON;
1.166     parser   1449:                                // ...stop before next ':'
1.48      paf      1450:                                RC;
1.1       paf      1451:                        }
                   1452:                        break;
1.48      paf      1453: 
1.1       paf      1454:                case LS_VAR_NAME_CURLY:
1.48      paf      1455:                        switch(c) {
1.162     parser   1456:                        case '[':
1.166     parser   1457:                                // ${name.<[>code]}
1.206     paf      1458:                                push_LS(pc, LS_NAME_SQUARE_PART);
1.160     parser   1459:                                lexical_brackets_nestage=1;
                   1460:                                RC;
1.48      paf      1461:                        case '}': // ${name} finished, restoring LS
1.206     paf      1462:                                pop_LS(pc);
1.48      paf      1463:                                RC;
                   1464:                        case '.': // name part delim
                   1465:                        case '$': // name part subvar
                   1466:                        case ':': // ':name' or 'class:name'
                   1467:                                RC;
1.1       paf      1468:                        }
                   1469:                        break;
1.48      paf      1470: 
                   1471:                case LS_VAR_SQUARE:
                   1472:                        switch(c) {
                   1473:                        case '$':
1.206     paf      1474:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1475:                                RC;
                   1476:                        case '^':
1.206     paf      1477:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1478:                                RC;
                   1479:                        case ']':
1.1       paf      1480:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1481:                                        pop_LS(pc);
1.48      paf      1482:                                        RC;
1.1       paf      1483:                                }
1.48      paf      1484:                                break;
                   1485:                        case ';': // operator_or_fmt;value delim
                   1486:                                RC;
                   1487:                        case '[':
                   1488:                                lexical_brackets_nestage++;
                   1489:                                break;
1.1       paf      1490:                        }
                   1491:                        break;
1.48      paf      1492: 
1.1       paf      1493:                case LS_VAR_CURLY:
1.48      paf      1494:                        switch(c) {
                   1495:                        case '$':
1.206     paf      1496:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1497:                                RC;
                   1498:                        case '^':
1.206     paf      1499:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1500:                                RC;
                   1501:                        case '}':
1.1       paf      1502:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1503:                                        pop_LS(pc);
1.48      paf      1504:                                        RC;
1.1       paf      1505:                                }
1.48      paf      1506:                                break;
                   1507:                        case '{':
1.1       paf      1508:                                lexical_brackets_nestage++;
1.48      paf      1509:                                break;
                   1510:                        }
1.1       paf      1511:                        break;
                   1512: 
1.10      paf      1513:                // METHOD CALL
1.1       paf      1514:                case LS_METHOD_NAME:
1.48      paf      1515:                        switch(c) {
                   1516:                        case '[':
1.166     parser   1517:                                // ^name.<[>code].xxx
1.206     paf      1518:                                if(pc.pos.col>1/*not first column*/ && (
1.163     parser   1519:                                        end[-1]=='^'/*was start of call*/ || // never, ^[ is literal...
                   1520:                                        end[-1]==':'/*was class name delim */ ||
                   1521:                                        end[-1]=='.'/*was name delim */
1.162     parser   1522:                                        )) {
1.206     paf      1523:                                        push_LS(pc, LS_NAME_SQUARE_PART);
1.162     parser   1524:                                        lexical_brackets_nestage=1;
                   1525:                                        RC;
                   1526:                                }
1.206     paf      1527:                                pc.ls=LS_METHOD_SQUARE;
1.1       paf      1528:                                lexical_brackets_nestage=1;
1.48      paf      1529:                                RC;
                   1530:                        case '{':
1.206     paf      1531:                                pc.ls=LS_METHOD_CURLY;
1.1       paf      1532:                                lexical_brackets_nestage=1;
1.48      paf      1533:                                RC;
1.69      paf      1534:                        case '(':
1.206     paf      1535:                                pc.ls=LS_METHOD_ROUND;
1.69      paf      1536:                                lexical_brackets_nestage=1;
                   1537:                                RC;
1.48      paf      1538:                        case '.': // name part delim 
                   1539:                        case '$': // name part subvar
                   1540:                        case ':': // ':name' or 'class:name'
1.170     parser   1541:                        case '^': // ^abc^xxx wrong. bailing out
                   1542:                        case ']': case '}': case ')': // ^abc]}) wrong. bailing out
1.207     paf      1543:                        case ' ': // ^if ( wrong. bailing out
1.48      paf      1544:                                RC;
1.1       paf      1545:                        }
                   1546:                        break;
1.48      paf      1547: 
                   1548:                case LS_METHOD_SQUARE:
                   1549:                        switch(c) {
                   1550:                        case '$':
1.206     paf      1551:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1552:                                RC;
                   1553:                        case '^':
1.206     paf      1554:                                push_LS(pc, LS_METHOD_NAME);
1.48      paf      1555:                                RC;
                   1556:                        case ';': // param delim
                   1557:                                RC;
                   1558:                        case ']':
1.1       paf      1559:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1560:                                        pc.ls=LS_METHOD_AFTER;
1.48      paf      1561:                                        RC;
1.1       paf      1562:                                }
1.48      paf      1563:                                break;
                   1564:                        case '[':
1.1       paf      1565:                                lexical_brackets_nestage++;
1.48      paf      1566:                                break;
                   1567:                        }
1.1       paf      1568:                        break;
1.48      paf      1569: 
1.1       paf      1570:                case LS_METHOD_CURLY:
1.48      paf      1571:                        switch(c) {
                   1572:                        case '$':
1.206     paf      1573:                                push_LS(pc, LS_VAR_NAME_SIMPLE_WITH_COLON);
1.48      paf      1574:                                RC;
                   1575:                        case '^':
1.206     paf      1576:                                push_LS(pc, LS_METHOD_NAME);
1.94      paf      1577:                                RC;
                   1578:                        case ';': // param delim
1.48      paf      1579:                                RC;
                   1580:                        case '}':
1.1       paf      1581:                                if(--lexical_brackets_nestage==0) {
1.206     paf      1582:                                        pc.ls=LS_METHOD_AFTER;
1.48      paf      1583:                                        RC;
1.1       paf      1584:                                }
1.48      paf      1585:                                break;
                   1586:                        case '{':
1.1       paf      1587:                                lexical_brackets_nestage++;
1.48      paf      1588:                                break;
                   1589:                        }
1.209     paf      1590:                        if(pc.explicit_result && c)
                   1591:                                switch(c) {
1.276     moko     1592:                                default:
                   1593:                                        pc.string.append(c);
1.209     paf      1594:                                case '\n': case ' ': case '\t':
                   1595:                                        begin=pc.source;
                   1596:                                        begin_pos=pc.pos;
1.276     moko     1597:                                        continue;
1.209     paf      1598:                                }
1.1       paf      1599:                        break;
1.48      paf      1600: 
1.1       paf      1601:                case LS_METHOD_AFTER:
1.69      paf      1602:                        if(c=='[') {/* ][ }[ )[ */
1.206     paf      1603:                                pc.ls=LS_METHOD_SQUARE;
1.1       paf      1604:                                lexical_brackets_nestage=1;
1.48      paf      1605:                                RC;
1.1       paf      1606:                        }                                          
1.69      paf      1607:                        if(c=='{') {/* ]{ }{ ){ */
1.206     paf      1608:                                pc.ls=LS_METHOD_CURLY;
1.69      paf      1609:                                lexical_brackets_nestage=1;
                   1610:                                RC;
                   1611:                        }                                          
                   1612:                        if(c=='(') {/* ]( }( )( */
1.206     paf      1613:                                pc.ls=LS_METHOD_ROUND;
1.1       paf      1614:                                lexical_brackets_nestage=1;
1.48      paf      1615:                                RC;
1.1       paf      1616:                        }                                          
1.206     paf      1617:                        pop_LS(pc);
                   1618:                        pc.ungetc();
1.13      paf      1619:                        result=EON;
1.1       paf      1620:                        goto break2;
                   1621:                }
1.9       paf      1622:                if(c==0) {
1.1       paf      1623:                        result=-1;
                   1624:                        break;
                   1625:                }
                   1626:        }
                   1627: 
                   1628: break2:
1.59      paf      1629:        if(end!=begin) { // there is last piece?
1.258     misha    1630:                if(c=='@' || c==0) // we are before LS_DEF_NAME or EOF?
                   1631:                        while(end!=begin && end[-1]=='\n') // trim all empty lines before LS_DEF_NAME and EOF
1.137     parser   1632:                                end--;
1.206     paf      1633:                if(end!=begin && pc.ls!=LS_USER_COMMENT) { // last piece still alive and not comment?
                   1634:                        if(!pc.string_start)
                   1635:                                pc.string_start=begin_pos;
1.59      paf      1636:                        // append it
1.206     paf      1637:                        pc.string.append_strdup_know_length(begin, end-begin);
1.30      paf      1638:                }
1.59      paf      1639:        }
1.206     paf      1640:        if(!pc.string.is_empty()) { // something accumulated?
                   1641:                // create STRING value: array of OP_VALUE+origin+vstring
1.278     moko     1642: #ifdef SYMBOLS_CACHING
                   1643:                Value *lookup=symbols->get(pc.string);
                   1644: #else
                   1645:                Value *lookup=0;
                   1646: #endif
1.206     paf      1647:                *lvalp=VL(
1.279   ! moko     1648:                        lookup ? lookup : new VString(*new String(pc.string, String::L_CLEAN)), pc.file_no, pc.string_start.line, pc.string_start.col);
1.10      paf      1649:                // new pieces storage
1.206     paf      1650:                pc.string.clear();
                   1651:                pc.string_start.clear();
1.58      paf      1652:                // make current result be pending for next call, return STRING for now
1.206     paf      1653:                pc.pending_state=result;  result=STRING;
1.58      paf      1654:        }
1.67      paf      1655:        if(skip_analized) {
1.206     paf      1656:                pc.source+=skip_analized;  pc.pos.col+=skip_analized;
1.1       paf      1657:        }
1.58      paf      1658:        return result;
1.1       paf      1659: }
                   1660: 
1.264     moko     1661: static int real_yyerror(Parse_control *pc, const char *s) {  // Called by yyparse on error
1.114     paf      1662:           strncpy(PC.error, s, MAX_STRING);
1.1       paf      1663:           return 1;
1.110     paf      1664: }
1.1       paf      1665: 
1.110     paf      1666: static void yyprint(FILE *file, int type, YYSTYPE value) {
                   1667:        if(type==STRING)
1.206     paf      1668:                fprintf(file, " \"%s\"", LA2S(*value)->cstr());
1.110     paf      1669: }

E-mail: