Annotation of parser3/src/main/pa_common.C, revision 1.52

1.15      paf         1: /** @file
1.16      paf         2:        Parser: commonly functions.
                      3: 
1.8       paf         4:        Copyright(c) 2001 ArtLebedev Group(http://www.artlebedev.com)
1.16      paf         5: 
1.8       paf         6:        Author: Alexander Petrosyan <paf@design.ru>(http://design.ru/paf)
1.5       paf         7: 
1.52    ! paf         8:        $Id: pa_common.C,v 1.51 2001/04/25 11:02:57 paf Exp $
1.1       paf         9: */
                     10: 
1.22      paf        11: #include "pa_config_includes.h"
1.1       paf        12: #include "pa_common.h"
1.2       paf        13: #include "pa_types.h"
1.4       paf        14: #include "pa_exception.h"
1.14      paf        15: #include "pa_pool.h"
                     16: #include "pa_globals.h"
                     17: #include "pa_value.h"
                     18: #include "pa_hash.h"
                     19: #include "pa_string.h"
1.1       paf        20: 
1.47      paf        21: #ifndef WIN32
                     22: #      ifndef _O_TEXT
                     23: #              define _O_TEXT 0
                     24: #      endif
                     25: #      ifndef _O_BINARY
                     26: #              define _O_BINARY 0
                     27: #      endif
                     28: #endif
                     29: 
1.22      paf        30: #if _MSC_VER
1.1       paf        31: 
                     32: int __vsnprintf(char *b, size_t s, const char *f, va_list l) {
                     33:        int r=_vsnprintf(b, --s, f, l);
                     34:        b[s]=0;
                     35:        return r;
                     36: }
                     37: int __snprintf(char *b, size_t s, const char *f, ...) {
                     38:        va_list l;
                     39:     va_start(l, f);
                     40:     int r=__vsnprintf(b, s, f, l);
                     41:     va_end(l);
                     42:        return r;
                     43: }
                     44: 
                     45: #endif
1.2       paf        46: 
1.18      paf        47: 
1.28      paf        48: char *file_read_text(Pool& pool, const String& file_spec, bool fail_on_read_problem) {
1.34      paf        49:        void *result;
                     50:        size_t size;
1.35      paf        51:        return file_read(pool, file_spec, result, size, true, 
                     52:                fail_on_read_problem)?(char *)result:0;
1.34      paf        53: }
                     54: bool file_read(Pool& pool, const String& file_spec, 
1.44      paf        55:                           void*& data, size_t& read_size, bool as_text,
                     56:                           bool fail_on_read_problem,
                     57:                           size_t offset, size_t limit) {
                     58:        const char *fname=file_spec.cstr(String::UL_FILE_NAME);
1.33      paf        59:        int f;
1.2       paf        60:     struct stat finfo;
1.33      paf        61: 
                     62:        // first open, next stat:
1.45      paf        63:        // directory update of NTFS hard links performed on open.
1.33      paf        64:        // ex: 
                     65:        //   a.html:^test[] and b.html hardlink to a.html
                     66:        //   user inserts ! before ^test in a.html
                     67:        //   directory entry of b.html in NTFS not updated at once,
1.35      paf        68:        //   they delay update till open, so we would receive "!^test[" string
                     69:        //   if would do stat, next open.
1.34      paf        70:     if(
                     71:                (f=open(fname, O_RDONLY|(as_text?_O_TEXT:_O_BINARY)))>=0 && 
                     72:                stat(fname, &finfo)==0) {
1.2       paf        73:                /*if(exclusive)
                     74:                        flock(f, LOCK_EX);*/
1.44      paf        75:                size_t max_size=limit?min(offset+limit, finfo.st_size)-offset:finfo.st_size;
1.47      paf        76:                if(!max_size) { // eof
                     77:                        data=0;
                     78:                        read_size=0;
                     79:                        return true;
                     80:                }
1.44      paf        81:                data=pool.malloc(max_size+(as_text?1:0));
1.45      paf        82:                if(offset)
                     83:                        lseek(f, offset, SEEK_SET);
1.44      paf        84:                read_size=read(f, data, max_size);
1.2       paf        85:                /*if(exclusive)
                     86:                        flock(f, LOCK_UN);*/
                     87:                close(f);
1.32      paf        88: 
1.44      paf        89:                if(read_size>=0 && read_size<=max_size) {
1.34      paf        90:                        if(as_text)
1.46      paf        91:                                ((char*&)data)[read_size]=0;
1.34      paf        92:                } else
1.33      paf        93:                        PTHROW(0, 0, 
                     94:                                &file_spec, 
1.44      paf        95:                                "read failed: actually read %d bytes count not in [0..%lu] valid range", 
                     96:                                        read_size, (unsigned long)max_size); //never
1.32      paf        97:                
1.34      paf        98:                return true;//prepare_config(result, remove_empty_lines);
1.2       paf        99:     }
1.4       paf       100:        if(fail_on_read_problem)
1.33      paf       101:                PTHROW(0, 0, 
                    102:                        &file_spec, 
1.45      paf       103:                        "read failed: %s (%d)", strerror(errno), errno);
1.34      paf       104:     return false;
1.8       paf       105: }
                    106: 
1.18      paf       107: void file_write(Pool& pool, 
1.28      paf       108:                                const String& file_spec, 
1.34      paf       109:                                const void *data, size_t size, 
1.33      paf       110:                                bool as_text/*, 
1.20      paf       111:                                bool exclusive*/) {
1.44      paf       112:        const char *fname=file_spec.cstr(String::UL_FILE_NAME);
1.28      paf       113:        int f;
1.50      paf       114:        if(access(fname, W_OK)!=0) {/*no*/
                    115:                size_t pos_after=1;
                    116:                int pos_before;
                    117:                while((pos_before=file_spec.pos("/", 1, pos_after))>=0) {
                    118:                        mkdir(file_spec.mid(0, pos_before).cstr(String::UL_FILE_NAME), 0775);
                    119:                        pos_after=pos_before+1;
                    120:                }
                    121: 
1.33      paf       122:                if((f=open(fname, O_WRONLY|O_CREAT|_O_BINARY, 0666))>0)
1.28      paf       123:                        close(f);
                    124:        }
                    125:        if(access(fname, R_OK|W_OK)==0) {
1.34      paf       126:                int mode=O_RDWR|(as_text?_O_TEXT:_O_BINARY)
1.18      paf       127: #ifdef WIN32
1.28      paf       128:                        |O_TRUNC
1.18      paf       129: #endif
1.28      paf       130:                ;
1.33      paf       131:                if((f=open(fname, mode, 0666))>=0) {
1.28      paf       132:                        /*if(exclusive)
                    133:                                flock(f, LOCK_EX);*/
                    134:                        
1.33      paf       135:                        if(size) write(f, data, size);
1.18      paf       136: #ifndef WIN32
1.33      paf       137:                        ftruncate(f, size);
1.18      paf       138: #endif
1.28      paf       139:                        /*if(exclusive)
                    140:                                flock(f, LOCK_UN);*/
                    141:                        close(f);
                    142:                        return;
1.18      paf       143:                }
                    144:        }
1.33      paf       145:        PTHROW(0, 0, 
                    146:                &file_spec, 
1.45      paf       147:                "write failed: %s (%d)", strerror(errno), errno);
1.30      paf       148: }
                    149: 
1.50      paf       150: static void rmdir(const String& file_spec, size_t pos_after) {
                    151:        int pos_before;
                    152:        if((pos_before=file_spec.pos("/", 1, pos_after))>=0)
                    153:                rmdir(file_spec, pos_before+1);
                    154:        
                    155:        rmdir(file_spec.mid(0, pos_after-1/* / */).cstr(String::UL_FILE_NAME));
                    156: }
1.30      paf       157: void file_delete(Pool& pool, const String& file_spec) {
1.39      paf       158:        if(unlink(file_spec.cstr(String::UL_FILE_NAME))!=0)
1.33      paf       159:                PTHROW(0, 0, 
                    160:                        &file_spec, 
1.45      paf       161:                        "unlink failed: %s (%d)", strerror(errno), errno);
1.50      paf       162: 
                    163:        rmdir(file_spec, 1);
1.31      paf       164: }
                    165: 
1.51      paf       166: 
                    167: static bool entry_readable(const String& file_spec, bool need_dir) {
                    168:     const char *fname=file_spec.cstr(String::UL_FILE_NAME);
                    169:        struct stat finfo;
                    170:        if(access(fname, R_OK)==0 && stat(fname, &finfo)==0) {
                    171:                bool is_dir=(bool)(finfo.st_mode&S_IFDIR);
                    172:                return is_dir==need_dir;
                    173:        }
                    174:        return false;
                    175: }
1.31      paf       176: bool file_readable(const String& file_spec) {
1.51      paf       177:        return entry_readable(file_spec, false);
                    178: }
                    179: bool dir_readable(const String& file_spec) {
                    180:        return entry_readable(file_spec, true);
1.43      paf       181: }
                    182: bool file_executable(const String& file_spec) {
                    183:     return access(file_spec.cstr(String::UL_FILE_NAME), X_OK)==0;
1.44      paf       184: }
                    185: 
                    186: size_t file_size(const String& file_spec) {
                    187:        Pool& pool=file_spec.pool();
                    188:        const char *fname=file_spec.cstr(String::UL_FILE_NAME);
                    189:     struct stat finfo;
                    190:        if(stat(fname, &finfo)!=0)
                    191:                PTHROW(0, 0, 
                    192:                        &file_spec, 
1.45      paf       193:                        "write failed: %s (%d)", strerror(errno), errno);
1.44      paf       194:        return finfo.st_size;
1.18      paf       195: }
                    196: 
1.8       paf       197: char *getrow(char **row_ref, char delim) {
                    198:     char *result=*row_ref;
                    199:     if(result) {
                    200:                *row_ref=strchr(result, delim);
                    201:                if(*row_ref) 
                    202:                        *((*row_ref)++)=0; 
                    203:                else if(!*result) 
                    204:                        return 0;
                    205:     }
                    206:     return result;
                    207: }
                    208: 
1.23      paf       209: char *lsplit(char *string, char delim) {
                    210:     if(string) {
                    211:                char *v=strchr(string, delim);
1.8       paf       212:                if(v) {
                    213:                        *v=0;
                    214:                        return v+1;
                    215:                }
                    216:     }
                    217:     return 0;
                    218: }
                    219: 
                    220: char *lsplit(char **string_ref, char delim) {
                    221:     char *result=*string_ref;
                    222:        char *next=lsplit(*string_ref, delim);
                    223:     *string_ref=next;
                    224:     return result;
1.9       paf       225: }
                    226: 
                    227: char *rsplit(char *string, char delim) {
1.18      paf       228:     if(string) {
1.9       paf       229:                char *v=strrchr(string, delim);
1.18      paf       230:                if(v) {
1.9       paf       231:                        *v=0;
                    232:                        return v+1;
                    233:                }
                    234:     }
                    235:     return NULL;       
1.10      paf       236: }
                    237: 
1.37      paf       238: /// @todo less stupid type detection
1.10      paf       239: char *format(Pool& pool, double value, char *fmt) {
                    240:        char *result=(char *)pool.malloc(MAX_NUMBER);
                    241:        if(fmt)
                    242:                if(strpbrk(fmt, "diouxX"))
                    243:                        if(strpbrk(fmt, "ouxX"))
1.33      paf       244:                                snprintf(result, MAX_NUMBER, fmt, (uint)value );
1.10      paf       245:                        else
1.33      paf       246:                                snprintf(result, MAX_NUMBER, fmt, (int)value );
1.10      paf       247:                else
                    248:                        snprintf(result, MAX_NUMBER, fmt, value);
                    249:        else
1.33      paf       250:                snprintf(result, MAX_NUMBER, "%d", (int)value);
1.10      paf       251:        
                    252:        return result;
1.12      paf       253: }
                    254: 
1.36      paf       255: size_t stdout_write(const void *buf, size_t size) {
1.12      paf       256: #ifdef WIN32
                    257:        do{
                    258:                int chunk_written=fwrite(buf, 1, min(8*0x400, size), stdout);
                    259:                if(chunk_written<=0)
                    260:                        break;
                    261:                size-=chunk_written;
1.36      paf       262:                buf=((const char*)buf)+chunk_written;
1.12      paf       263:        } while(size>0);
                    264: 
                    265:        return size;
                    266: #else
1.13      paf       267:        return fwrite(buf, 1, size, stdout);
1.12      paf       268: #endif
1.2       paf       269: }
1.14      paf       270: 
                    271: const char *unescape_chars(Pool& pool, const char *cp, int len) {
                    272:        char *s=(char *)pool.malloc(len + 1);
                    273:        enum EscapeState {
1.33      paf       274:                EscapeRest, 
                    275:                EscapeFirst, 
1.14      paf       276:                EscapeSecond
                    277:        } escapeState=EscapeRest;
                    278:        int escapedValue=0;
                    279:        int srcPos=0;
                    280:        int dstPos=0;
                    281:        while(srcPos < len) {
                    282:                int ch=cp[srcPos];
                    283:                switch(escapeState) {
                    284:                        case EscapeRest:
                    285:                        if(ch=='%') {
                    286:                                escapeState=EscapeFirst;
                    287:                        } else if(ch=='+') {
                    288:                                s[dstPos++]=' ';
                    289:                        } else {
                    290:                                s[dstPos++]=ch; 
                    291:                        }
                    292:                        break;
                    293:                        case EscapeFirst:
                    294:                        escapedValue=hex_value[ch] << 4;        
                    295:                        escapeState=EscapeSecond;
                    296:                        break;
                    297:                        case EscapeSecond:
                    298:                        escapedValue +=hex_value[ch];
                    299:                        s[dstPos++]=escapedValue;
                    300:                        escapeState=EscapeRest;
                    301:                        break;
                    302:                }
                    303:                srcPos++;
                    304:        }
                    305:        s[dstPos]=0;
                    306:        return s;
                    307: }
                    308: 
1.52    ! paf       309: /// used by attributed_meaning_to_string / append_attribute_subattribute
1.40      paf       310: struct Attributed_meaning_info {
1.52    ! paf       311:        String *header; // header line being constructed
        !           312:        String::Untaint_lang lang; // language in which to append to that line
1.40      paf       313: };
1.17      paf       314: static void append_attribute_subattribute(const Hash::Key& akey, Hash::Val *avalue, 
1.14      paf       315:                                                                                  void *info) {
                    316:        if(akey==VALUE_NAME)
                    317:                return;
                    318: 
1.40      paf       319:        Attributed_meaning_info& ami=*static_cast<Attributed_meaning_info *>(info);
                    320: 
1.14      paf       321:        // ...; charset=windows1251
1.48      paf       322:        *ami.header << "; ";
1.40      paf       323:        ami.header->append(akey, ami.lang, true);
1.48      paf       324:        *ami.header << "=";
                    325:        ami.header->append(static_cast<Value *>(avalue)->as_string(), ami.lang, true);
1.14      paf       326: }
1.49      paf       327: const String& attributed_meaning_to_string(Value& meaning, 
                    328:                                                                                   String::Untaint_lang lang) {
1.20      paf       329:        String &result=*new(meaning.pool()) String(meaning.pool());
                    330:        if(Hash *hash=meaning.get_hash()) {
1.14      paf       331:                // $value(value) $subattribute(subattribute value)
                    332:                if(Value *value=static_cast<Value *>(hash->get(*value_name)))
1.40      paf       333:                        result.append(value->as_string(), lang, true);
1.14      paf       334: 
1.40      paf       335:                Attributed_meaning_info attributed_meaning_info={
1.52    ! paf       336:                        &result,
        !           337:                        lang
1.40      paf       338:                };
                    339:                hash->for_each(append_attribute_subattribute, &attributed_meaning_info);
1.14      paf       340:        } else // result value
1.40      paf       341:                result.append(meaning.as_string(), lang, true);
1.14      paf       342: 
                    343:        return result;
1.24      paf       344: }
                    345: 
                    346: #ifdef WIN32
                    347: void back_slashes_to_slashes(char *s) {
                    348:        if(s)
                    349:                for(; *s; s++)
                    350:                        if(*s=='\\')
                    351:                                *s='/';
                    352: }
1.42      paf       353: /*
                    354: void slashes_to_back_slashes(char *s) {
                    355:        if(s)
                    356:                for(; *s; s++)
                    357:                        if(*s=='/')
                    358:                                *s='\\';
                    359: }
                    360: */
1.24      paf       361: #endif
1.41      paf       362: 
                    363: bool StrEqNc(const char *s1, const char *s2, bool strict) {
                    364:        while(true) {
                    365:                if(!(*s1)) {
                    366:                        if(!(*s2))
                    367:                                return true;
                    368:                        else
                    369:                                return !strict;
                    370:                } else if(!(*s2))
                    371:                        return !strict;
                    372:                if(isalpha(*s1)) {
                    373:                        if(tolower(*s1) !=tolower(*s2))
                    374:                                return false;
                    375:                } else if((*s1) !=(*s2))
                    376:                        return false;
                    377:                s1++;
                    378:                s2++;
                    379:        }
1.48      paf       380: }
                    381: 
                    382: char *unquote(char*& current, char stop_at) {
                    383:        char *result=current;
                    384:        char *dest=current;
                    385:        // skip leading WS
                    386:        while(*current==' ' || *current=='\t')
                    387:                current++;
                    388:        if(!*current)
                    389:                return current=0;
                    390: 
                    391:        bool quoted=*current=='"';
                    392:        if(quoted)
                    393:                current++;
                    394: 
                    395:        for(; *current; ) {
                    396:                if(quoted)
                    397:                        switch(*current) {
                    398:                        case '\\': // "...\c
                    399:                                if(current[1])
                    400:                                        current++;
                    401:                                break;
                    402:                        case '"':
                    403:                                current++;
                    404:                                goto break2;
                    405:                        }
                    406:                else
                    407:                        if(*current==stop_at)
                    408:                                break;
                    409: 
                    410:                *dest++=*current++;
                    411:        }
                    412: break2:
                    413:        if(*current)
                    414:                current++; // skip 'stop_at'
                    415:        *dest=0;
                    416:        return result;
1.41      paf       417: }

E-mail: