Annotation of parser3/src/classes/file.C, revision 1.67

1.17      paf         1: /** @file
                      2:        Parser: @b file parser class.
                      3: 
1.1       paf         4:        Copyright (c) 2001 ArtLebedev Group (http://www.artlebedev.com)
1.65      paf         5:        Author: Alexander Petrosyan <paf@design.ru> (http://paf.design.ru)
1.17      paf         6: 
1.67    ! paf         7:        $Id: file.C,v 1.66 2001/12/13 09:32:06 paf Exp $
1.1       paf         8: */
1.47      parser      9: 
                     10: #include "pa_config_includes.h"
                     11: 
                     12: #include "pcre.h"
1.1       paf        13: 
1.35      paf        14: #include "classes.h"
1.1       paf        15: #include "pa_request.h"
                     16: #include "pa_vfile.h"
1.11      paf        17: #include "pa_table.h"
1.21      paf        18: #include "pa_vint.h"
1.24      paf        19: #include "pa_exec.h"
1.40      parser     20: #include "pa_vdate.h"
1.47      parser     21: #include "pa_dir.h"
                     22: #include "pa_vtable.h"
1.67    ! paf        23: #include "pa_charset.h"
1.1       paf        24: 
1.33      paf        25: // consts
                     26: 
1.32      paf        27: // defines
                     28: 
                     29: #define FILE_CLASS_NAME "file"
                     30: 
1.48      parser     31: #define TEXT_MODE_NAME "text"
                     32: 
1.32      paf        33: // class
                     34: 
                     35: class MFile : public Methoded {
                     36: public: // VStateless_class
                     37:        
                     38:        Value *create_new_value(Pool& pool) { return new(pool) VFile(pool); }
                     39: 
1.33      paf        40: public: // Methoded
                     41:        bool used_directly() { return true; }
                     42: 
1.32      paf        43: public:
                     44:        MFile(Pool& pool);
1.33      paf        45: 
1.32      paf        46: };
                     47: 
1.9       paf        48: // consts
                     49: 
                     50: const int FIND_MONKEY_MAX_HOPS=10;
                     51: 
1.1       paf        52: // methods
                     53: 
1.26      paf        54: static void _save(Request& r, const String&, MethodParams *params) {
1.48      parser     55:        Value& vmode_name=params-> as_no_junction(0, "mode must not be code");
1.49      parser     56:        Value& vfile_name=params->as_no_junction(1, "file name must not be code");
1.4       paf        57: 
1.7       paf        58:        // save
1.48      parser     59:        static_cast<VFile *>(r.self)->save(r.absolute(vfile_name.as_string()),
                     60:                vmode_name.as_string()==TEXT_MODE_NAME);
1.7       paf        61: }
                     62: 
1.26      paf        63: static void _delete(Request& r, const String&, MethodParams *params) {
1.7       paf        64:        Pool& pool=r.pool();
1.39      parser     65:        Value& vfile_name=params->as_no_junction(0, "file name must not be code");
1.7       paf        66: 
                     67:        // unlink
1.18      paf        68:        file_delete(pool, r.absolute(vfile_name.as_string()));
1.1       paf        69: }
                     70: 
1.45      parser     71: static void _move(Request& r, const String&, MethodParams *params) {
                     72:        Pool& pool=r.pool();
                     73:        Value& vfrom_file_name=params->as_no_junction(0, "from file name must not be code");
                     74:        Value& vto_file_name=params->as_no_junction(1, "to file name must not be code");
                     75: 
1.51      parser     76:        // move
1.45      parser     77:        file_move(pool, 
                     78:                r.absolute(vfrom_file_name.as_string()),
                     79:                r.absolute(vto_file_name.as_string()));
                     80: }
                     81: 
1.26      paf        82: static void _find(Request& r, const String& method_name, MethodParams *params) {
1.8       paf        83:        Pool& pool=r.pool();
1.39      parser     84:        Value& vfile_name=params->as_no_junction(0, "file name must not be code");
1.8       paf        85: 
1.18      paf        86:        const String &lfile_name=vfile_name.as_string();
1.8       paf        87: 
                     88:        // passed file name simply exists in current dir
                     89:        if(file_readable(r.absolute(lfile_name))) {
                     90:                r.write_no_lang(*new(pool) VString(lfile_name));
                     91:                return;
                     92:        }
                     93: 
                     94:        // scan .. dirs for result
1.9       paf        95:        for(int i=0; i<FIND_MONKEY_MAX_HOPS; i++) {
1.8       paf        96:                String test_name(pool);
                     97:                for(int j=0; j<i; j++)
                     98:                        test_name.APPEND_CONST("../");
1.15      paf        99:                test_name.append(lfile_name, String::UL_CLEAN);
1.8       paf       100:                if(file_readable(r.absolute(test_name))) {
                    101:                        r.write_no_lang(*new(pool) VString(*new(pool) String(test_name)));
                    102:                        return;
                    103:                }
                    104:        }
                    105: 
                    106:        // not found
                    107:        if(params->size()==2) {
1.39      parser    108:                Value& not_found_code=params->as_junction(1, "not-found param must be code");
1.8       paf       109:                r.write_pass_lang(r.process(not_found_code));
                    110:        }
                    111: }
                    112: 
1.26      paf       113: static void _load(Request& r, const String& method_name, MethodParams *params) {
1.9       paf       114:        Pool& pool=r.pool();
1.48      parser    115:        Value& vmode_name=params-> as_no_junction(0, "mode must not be code");
                    116:        Value& vfile_name=params->as_no_junction(1, "file name must not be code");
1.9       paf       117: 
1.18      paf       118:        const String& lfile_name=vfile_name.as_string();
1.9       paf       119: 
1.12      paf       120:        void *data;  size_t size;
1.48      parser    121:        file_read(pool, r.absolute(lfile_name), data, size, 
                    122:                vmode_name.as_string()==TEXT_MODE_NAME);
1.9       paf       123: 
1.61      paf       124:        char *user_file_name=params->size()>2?
                    125:                params->as_string(2, "filename must be string").cstr(String::UL_FILE_SPEC)
1.53      parser    126:                :lfile_name.cstr(String::UL_FILE_SPEC);
1.10      paf       127:        
1.21      paf       128:        static_cast<VFile *>(r.self)->set(true/*tainted*/, data, size, 
1.52      parser    129:                user_file_name, new(pool) VString(r.mime_type_of(user_file_name)));
1.9       paf       130: }
                    131: 
1.26      paf       132: static void _stat(Request& r, const String& method_name, MethodParams *params) {
1.25      paf       133:        Pool& pool=r.pool();
1.39      parser    134:        Value& vfile_name=params->as_no_junction(0, "file name must not be code");
1.25      paf       135: 
                    136:        const String& lfile_name=vfile_name.as_string();
                    137: 
1.40      parser    138:        size_t size;
                    139:        time_t atime, mtime, ctime;
                    140:        file_stat(r.absolute(lfile_name),
                    141:                size,
                    142:                atime, mtime, ctime);
1.25      paf       143:        
1.40      parser    144:        VFile& vfile=*static_cast<VFile *>(r.self);
                    145:        vfile.set(true/*tainted*/, 0/*no bytes*/, size);
                    146:        Hash& ff=vfile.fields();
                    147:        ff.put(*new(pool) String(pool, "adate"), new(pool) VDate(pool, atime));
                    148:        ff.put(*new(pool) String(pool, "mdate"), new(pool) VDate(pool, mtime));
                    149:        ff.put(*new(pool) String(pool, "cdate"), new(pool) VDate(pool, ctime));
1.25      paf       150: }
                    151: 
1.22      paf       152: static void append_env_pair(const Hash::Key& key, Hash::Val *value, void *info) {
                    153:        Hash& hash=*static_cast<Hash *>(info);
                    154:        hash.put(key, &static_cast<Value *>(value)->as_string());
                    155: }
1.29      paf       156: 
                    157: static void pass_cgi_header_attribute(Array::Item *value, void *info) {
                    158:        String& string=*static_cast<String *>(value);
                    159:        Hash& hash=*static_cast<Hash *>(info);
                    160:        int colon_pos=string.pos(":", 1);
                    161:        if(colon_pos>0)
1.30      paf       162:                hash.put(string.mid(0, colon_pos), 
                    163:                new(string.pool()) VString(string.mid(colon_pos+1, string.size())));
1.29      paf       164: }
1.62      paf       165: /** @todo fix `` in perl - they produced flipping consoles and no output to perl
                    166:        @test EPASS, ECSTR [touched them when optimized hash]
                    167: */
1.41      parser    168: static void _exec_cgi(Request& r, const String& method_name, MethodParams *params,
                    169:                                          bool cgi) {
1.21      paf       170:        Pool& pool=r.pool();
                    171: 
1.39      parser    172:        Value& vfile_name=params->as_no_junction(0, "file name must not be code");
1.21      paf       173: 
1.23      paf       174:        const String& script_name=r.absolute(vfile_name.as_string());
                    175: 
                    176:        Hash env(pool);
1.62      paf       177:        #define ECSTR(name, value_cstr) \
                    178:                String name##key(pool, #name); \
                    179:                String name##value(pool); \
                    180:                if(value_cstr) { \
                    181:                        name##value.APPEND_CONST(value_cstr); \
                    182:                        env.put(name##key, &name##value); \
1.23      paf       183:                }
1.62      paf       184:        #define EPASS(name) \
                    185:                String name##key(pool, #name); \
                    186:                String name##value(pool); \
                    187:                if(const char *value_cstr=SAPI::get_env(pool, #name)) { \
                    188:                        name##value.APPEND_CONST(value_cstr); \
                    189:                        env.put(name##key, &name##value); \
1.23      paf       190:                }
                    191: 
                    192:        // const
1.63      paf       193:        ECSTR(GATEWAY_INTERFACE, "CGI/1.1");
1.23      paf       194:        // from Request.info
1.62      paf       195:        ECSTR(DOCUMENT_ROOT, r.info.document_root);
                    196:        ECSTR(PATH_TRANSLATED, r.info.path_translated);
1.66      paf       197:        ECSTR(REQUEST_METHOD, r.info.method);
1.62      paf       198:        ECSTR(QUERY_STRING, r.info.query_string);
                    199:        ECSTR(REQUEST_URI, r.info.uri);
                    200:        ECSTR(CONTENT_TYPE, r.info.content_type);
1.23      paf       201:        char content_length_cstr[MAX_NUMBER];  
                    202:        snprintf(content_length_cstr, MAX_NUMBER, "%u", r.info.content_length);
                    203:        String content_length(pool, content_length_cstr);
1.62      paf       204:        ECSTR(CONTENT_LENGTH, content_length_cstr);
                    205:        ECSTR(HTTP_COOKIE, r.info.cookie);
                    206:        ECSTR(HTTP_USER_AGENT, r.info.user_agent);
1.23      paf       207:        // passing some SAPI:get_env-s
1.66      paf       208:        EPASS(SERVER_PROTOCOL);
1.62      paf       209:        EPASS(SERVER_NAME);
                    210:        EPASS(SERVER_PORT);
                    211:        EPASS(HTTP_REFERER);
                    212:        EPASS(REMOTE_ADDR);
                    213:        EPASS(REMOTE_HOST);
                    214:        EPASS(REMOTE_USER);
1.23      paf       215:        // SCRIPT_NAME
1.63      paf       216:        env.put(*new(pool) String(pool, "SCRIPT_NAME"), &script_name);
1.27      paf       217: #ifdef WIN32
                    218:        // WIN32 shell
1.62      paf       219:        EPASS(COMSPEC);
1.27      paf       220: #endif
1.23      paf       221: 
1.21      paf       222:        if(params->size()>1) {
1.39      parser    223:                Value& venv=params->as_no_junction(1, "env must not be code");
1.60      parser    224:                if(Hash *user_env=venv.get_hash(&method_name))
1.23      paf       225:                        user_env->for_each(append_env_pair, &env);
1.21      paf       226:        }
                    227: 
                    228:        Array *argv=0;
                    229:        if(params->size()>2) {
                    230:                argv=new(pool) Array(pool, params->size()-2);
                    231:                for(int i=2; i<params->size(); i++)
1.58      parser    232:                        *argv+=&params->as_string(i, "parameter must be string");
1.21      paf       233:        }
                    234: 
1.57      parser    235:        String in(pool);
                    236:        in.APPEND(r.post_data, r.post_size, String::UL_CLEAN, "passing post data", 0);
1.21      paf       237:        String out(pool);
1.31      paf       238:        //out.APPEND_CONST("content-type:text/plain\nheader:test-header\n\ntest-body");
                    239:        //out<<in;
1.27      paf       240:        String& err=*new(pool) String(pool);
1.42      parser    241:        int status=pa_exec(script_name, &env, argv, in, out, err);
1.21      paf       242: 
                    243:        VFile& self=*static_cast<VFile *>(r.self);
                    244: 
1.41      parser    245:        const String *body=&out; // ^file:exec
                    246:        if(cgi) { // ^file:cgi
                    247:                // construct with 'out' body and header
                    248:                int delim_size;
                    249:                const char *eol_marker="\r\n"; size_t eol_marker_size=2;
                    250:                int pos=out.pos("\r\n\r\n", delim_size=4);
                    251:                if(pos<0) {
                    252:                        eol_marker="\n"; eol_marker_size=1;
                    253:                        pos=out.pos("\n\n", delim_size=2);
                    254:                }
                    255:                if(pos<0) {
                    256:                        delim_size=0; // calm down, compiler
1.59      parser    257:                        throw Exception(0, 0,
1.41      parser    258:                                &method_name,
1.46      parser    259:                                "output does not contain CGI header; exit code=%d; outsize=%u; out: \"%s\"; errsize=%u; err: \"%s\"", 
                    260:                                        status, 
                    261:                                        (uint)out.size(), out.cstr(),
                    262:                                        (uint)err.size(), err.cstr());
1.41      parser    263:                }
1.21      paf       264: 
1.41      parser    265:                const String& header=out.mid(0, pos);
                    266:                body=&out.mid(pos+delim_size, out.size());
1.30      paf       267: 
1.41      parser    268:                // header to $fields
                    269:                {
                    270:                        Array rows(pool);
                    271:                        header.split(rows, 0, eol_marker, eol_marker_size, String::UL_CLEAN);
                    272:                        rows.for_each(pass_cgi_header_attribute, &self.fields());
                    273:                }
1.29      paf       274:        }
1.41      parser    275:        // body
1.64      paf       276:        self.set(false/*not tainted*/, body->cstr(), body->size());
1.21      paf       277: 
1.42      parser    278:        // $status
1.21      paf       279:        self.fields().put(
1.42      parser    280:                *new(pool) String(pool, "status"),
                    281:                new(pool) VInt(pool, status));
1.21      paf       282:        
                    283:        // $stderr
                    284:        if(err.size()) {
                    285:                self.fields().put(
                    286:                        *new(pool) String(pool, "stderr"),
                    287:                        new(pool) VString(err));
                    288: 
1.44      parser    289:                SAPI::log(pool, "file:%s: %s", cgi?"cgi":"exec", err.cstr());
1.21      paf       290:        }
                    291: }
1.41      parser    292: static void _exec(Request& r, const String& method_name, MethodParams *params) {
                    293:        _exec_cgi(r, method_name, params, false);
                    294: }
                    295: static void _cgi(Request& r, const String& method_name, MethodParams *params) {
                    296:        _exec_cgi(r, method_name, params, true);
                    297: }
                    298: 
1.47      parser    299: static void _list(Request& r, const String& method_name, MethodParams *params) {
                    300:        Pool& pool=r.pool();
                    301: 
                    302:        Value& relative_path=params->as_no_junction(0, "path must not be code");
                    303: 
                    304:        const String *regexp;
                    305:        pcre *regexp_code;
                    306:        int ovecsize;
                    307:        int *ovector;
                    308:        if(params->size()>1) {
                    309:                regexp=&params->as_no_junction(1, "regexp must not be code").as_string();
                    310: 
1.64      paf       311:                const char *pattern=regexp->cstr();
1.47      parser    312:                const char *errptr;
                    313:                int erroffset;
                    314:                regexp_code=pcre_compile(pattern, PCRE_EXTRA | PCRE_DOTALL, 
                    315:                        &errptr, &erroffset, 
1.67    ! paf       316:                        pool.get_client_charset().pcre_tables);
1.47      parser    317: 
                    318:                if(!regexp_code)
1.59      parser    319:                        throw Exception(0, 0, 
1.47      parser    320:                                &regexp->mid(erroffset, regexp->size()), 
                    321:                                "regular expression syntax error - %s", errptr);
                    322: 
1.50      parser    323:                ovector=(int *)pool.malloc(sizeof(int)*(ovecsize=(1/*match*/)*3));
1.47      parser    324:        } else 
                    325:                regexp_code=0;
                    326: 
                    327: 
                    328:        const char* absolute_path_cstr=r.absolute(relative_path.as_string())
1.53      parser    329:                .cstr(String::UL_FILE_SPEC);
1.47      parser    330: 
                    331:        Array& columns=*new(pool) Array(pool);
                    332:        columns+=new(pool) String(pool, "name");        
                    333:        Table& table=*new(pool) Table(pool, &method_name, &columns);
                    334: 
                    335:        LOAD_DIR(absolute_path_cstr, 
                    336:                size_t file_name_size=strlen(ffblk.ff_name);
                    337:                bool suits=true;
                    338:                if(regexp_code) {
                    339:                        int exec_result=pcre_exec(regexp_code, 0, 
                    340:                                ffblk.ff_name, file_name_size, 0, 
                    341:                                0, ovector, ovecsize);
                    342:                        
                    343:                        if(exec_result==PCRE_ERROR_NOMATCH)
                    344:                                suits=false;
                    345:                        else if(exec_result<0) {
                    346:                                (*pcre_free)(regexp_code);
1.59      parser    347:                                throw Exception(0, 0, 
1.47      parser    348:                                        regexp, 
                    349:                                        "regular expression execute (%d)", 
                    350:                                                exec_result);
                    351:                        }
                    352:                }
                    353: 
                    354:                if(suits) {
1.50      parser    355:                        char *file_name_cstr=(char *)pool.malloc(file_name_size);
1.47      parser    356:                        memcpy(file_name_cstr, ffblk.ff_name, file_name_size);
                    357:                        String &file_name=*new(pool) String(pool);
1.53      parser    358:                        file_name.APPEND(file_name_cstr, file_name_size, String::UL_FILE_SPEC, 
1.47      parser    359:                                method_name.origin().file, method_name.origin().line);
                    360:                
                    361:                        Array& row=*new(pool) Array(pool);
                    362:                        row+=&file_name;
                    363:                        table+=&row;
                    364:                }
                    365:        );
                    366: 
                    367:        if(regexp_code)
                    368:                (*pcre_free)(regexp_code);
                    369: 
1.60      parser    370:        // write out result
1.47      parser    371:        VTable& result=*new(pool) VTable(pool, &table);
                    372:        result.set_name(method_name);
                    373:        r.write_no_lang(result);
                    374: }
1.21      paf       375: 
1.32      paf       376: // constructor
                    377: 
                    378: MFile::MFile(Pool& apool) : Methoded(apool) {
                    379:        set_name(*NEW String(pool(), FILE_CLASS_NAME));
                    380: 
1.1       paf       381: 
1.48      parser    382:        // ^save[mode;file-name]
                    383:        add_native_method("save", Method::CT_DYNAMIC, _save, 2, 2);
1.7       paf       384: 
                    385:        // ^delete[file-name]
1.32      paf       386:        add_native_method("delete", Method::CT_STATIC, _delete, 1, 1);
1.45      parser    387: 
                    388:        // ^move[from-file-name;to-file-name]
                    389:        add_native_method("move", Method::CT_STATIC, _move, 2, 2);
1.8       paf       390: 
                    391:        // ^find[file-name]
                    392:        // ^find[file-name]{when-not-found}
1.32      paf       393:        add_native_method("find", Method::CT_STATIC, _find, 1, 2);
1.9       paf       394: 
1.48      parser    395:        // ^load[mode;disk-name]
                    396:        // ^load[mode;disk-name;user-name]
                    397:        add_native_method("load", Method::CT_DYNAMIC, _load, 2, 3);
1.25      paf       398: 
                    399:        // ^stat[disk-name]
1.32      paf       400:        add_native_method("stat", Method::CT_DYNAMIC, _stat, 1, 1);
1.21      paf       401: 
1.36      paf       402:        // ^cgi[file-name]
                    403:        // ^cgi[file-name;env hash]
                    404:        // ^cgi[file-name;env hash;1cmd;2line;3ar;4g;5s]
1.41      parser    405:        add_native_method("cgi", Method::CT_DYNAMIC, _cgi, 1, 2+10);
                    406: 
                    407:        // ^exec[file-name]
                    408:        // ^exec[file-name;env hash]
                    409:        // ^exec[file-name;env hash;1cmd;2line;3ar;4g;5s]
                    410:        add_native_method("exec", Method::CT_DYNAMIC, _exec, 1, 2+10);
1.47      parser    411: 
                    412:        // ^file:list[path]
                    413:        // ^file:list[path][regexp]
                    414:        add_native_method("list", Method::CT_STATIC, _list, 1, 2);
                    415: 
1.32      paf       416: }
                    417: 
                    418: // global variable
                    419: 
                    420: Methoded *file_class;
                    421: 
                    422: // creator
                    423: 
                    424: Methoded *MFile_create(Pool& pool) {
                    425:        return file_class=new(pool) MFile(pool);
1.1       paf       426: }

E-mail: