Diff for /parser3/src/classes/file.C between versions 1.26 and 1.73

version 1.26, 2001/04/15 13:12:17 version 1.73, 2002/03/25 11:55:26
Line 1 Line 1
 /** @file  /** @file
         Parser: @b file parser class.          Parser: @b file parser class.
   
         Copyright (c) 2001 ArtLebedev Group (http://www.artlebedev.com)          Copyright (c) 2001, 2002 ArtLebedev Group (http://www.artlebedev.com)
           Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)
         Author: Alexander Petrosyan <paf@design.ru> (http://design.ru/paf)  
   
         $Id$          $Id$
 */  */
   
   #include "pa_config_includes.h"
   
   #include "pcre.h"
   
   #include "classes.h"
 #include "pa_request.h"  #include "pa_request.h"
 #include "_file.h"  
 #include "pa_vfile.h"  #include "pa_vfile.h"
 #include "pa_table.h"  #include "pa_table.h"
 #include "pa_vint.h"  #include "pa_vint.h"
 #include "pa_exec.h"  #include "pa_exec.h"
   #include "pa_vdate.h"
   #include "pa_dir.h"
   #include "pa_vtable.h"
   #include "pa_charset.h"
   
 // consts  // consts
   
 const int FIND_MONKEY_MAX_HOPS=10;  // defines
   
   #define FILE_CLASS_NAME "file"
   
   #define TEXT_MODE_NAME "text"
   
   // class
   
   class MFile : public Methoded {
   public: // VStateless_class
           
           Value *create_new_value(Pool& pool) { return new(pool) VFile(pool); }
   
   public: // Methoded
           bool used_directly() { return true; }
   
   public:
           MFile(Pool& pool);
   
   };
   
 // global var  // consts
   
 VStateless_class *file_class;  const int FIND_MONKEY_MAX_HOPS=10;
   
 // methods  // methods
   
 static void _save(Request& r, const String&, MethodParams *params) {  static void _save(Request& r, const String&, MethodParams *params) {
         Value& vfile_name=params->get_no_junction(0, "file name must not be code");          Value& vmode_name=params-> as_no_junction(0, "mode must not be code");
           Value& vfile_name=params->as_no_junction(1, "file name must not be code");
   
         // save          // save
         static_cast<VFile *>(r.self)->save(r.absolute(vfile_name.as_string()));          static_cast<VFile *>(r.self)->save(r.absolute(vfile_name.as_string()),
                   vmode_name.as_string()==TEXT_MODE_NAME);
 }  }
   
 static void _delete(Request& r, const String&, MethodParams *params) {  static void _delete(Request& r, const String&, MethodParams *params) {
         Pool& pool=r.pool();          Value& vfile_name=params->as_no_junction(0, "file name must not be code");
         Value& vfile_name=params->get_no_junction(0, "file name must not be code");  
   
         // unlink          // unlink
         file_delete(pool, r.absolute(vfile_name.as_string()));          file_delete(r.absolute(vfile_name.as_string()));
   }
   
   static void _move(Request& r, const String&, MethodParams *params) {
           Value& vfrom_file_name=params->as_no_junction(0, "from file name must not be code");
           Value& vto_file_name=params->as_no_junction(1, "to file name must not be code");
   
           // move
           file_move(
                   r.absolute(vfrom_file_name.as_string()),
                   r.absolute(vto_file_name.as_string()));
 }  }
   
 static void _find(Request& r, const String& method_name, MethodParams *params) {  static void _find(Request& r, const String& method_name, MethodParams *params) {
         Pool& pool=r.pool();          Pool& pool=r.pool();
         Value& vfile_name=params->get_no_junction(0, "file name must not be code");          Value& vfile_name=params->as_no_junction(0, "file name must not be code");
   
         const String &lfile_name=vfile_name.as_string();          const String &lfile_name=vfile_name.as_string();
   
Line 66  static void _find(Request& r, const Stri Line 103  static void _find(Request& r, const Stri
   
         // not found          // not found
         if(params->size()==2) {          if(params->size()==2) {
                 Value& not_found_code=params->get_junction(1, "not-found param must be code");                  Value& not_found_code=params->as_junction(1, "not-found param must be code");
                 r.write_pass_lang(r.process(not_found_code));                  r.write_pass_lang(r.process(not_found_code));
         }          }
 }  }
   
 static void _load(Request& r, const String& method_name, MethodParams *params) {  static void _load(Request& r, const String& method_name, MethodParams *params) {
         Pool& pool=r.pool();          Pool& pool=r.pool();
         Value& vfile_name=params->get_no_junction(0, "file name must not be code");          Value& vmode_name=params-> as_no_junction(0, "mode must not be code");
           Value& vfile_name=params->as_no_junction(1, "file name must not be code");
   
         const String& lfile_name=vfile_name.as_string();          const String& lfile_name=vfile_name.as_string();
   
         void *data;  size_t size;          void *data;  size_t size;
         file_read(pool, r.absolute(lfile_name), data, size, false/*binary*/);          file_read(pool, r.absolute(lfile_name), data, size, 
                   vmode_name.as_string()==TEXT_MODE_NAME);
   
         char *user_file_name=params->size()==1?lfile_name.cstr(String::UL_FILE_NAME)          char *user_file_name=params->size()>2?
                 :params->get(1).as_string().cstr();                  params->as_string(2, "filename must be string").cstr(String::UL_FILE_SPEC)
                   :lfile_name.cstr(String::UL_FILE_SPEC);
                   
         static_cast<VFile *>(r.self)->set(true/*tainted*/, data, size,           static_cast<VFile *>(r.self)->set(true/*tainted*/, data, size, 
                 user_file_name, &r.mime_type_of(user_file_name));                  user_file_name, new(pool) VString(r.mime_type_of(user_file_name)));
 }  }
   
 static void _stat(Request& r, const String& method_name, MethodParams *params) {  static void _stat(Request& r, const String& method_name, MethodParams *params) {
         Pool& pool=r.pool();          Pool& pool=r.pool();
         Value& vfile_name=params->get_no_junction(0, "file name must not be code");          Value& vfile_name=params->as_no_junction(0, "file name must not be code");
   
         const String& lfile_name=vfile_name.as_string();          const String& lfile_name=vfile_name.as_string();
   
         size_t size=file_size(r.absolute(lfile_name));          size_t size;
           time_t atime, mtime, ctime;
           file_stat(r.absolute(lfile_name),
                   size,
                   atime, mtime, ctime);
                   
         static_cast<VFile *>(r.self)->set(true/*tainted*/, 0/*no bytes*/, size);          VFile& vfile=*static_cast<VFile *>(r.self);
           vfile.set(true/*tainted*/, 0/*no bytes*/, size);
           Hash& ff=vfile.fields();
           ff.put(*new(pool) String(pool, "adate"), new(pool) VDate(pool, atime));
           ff.put(*new(pool) String(pool, "mdate"), new(pool) VDate(pool, mtime));
           ff.put(*new(pool) String(pool, "cdate"), new(pool) VDate(pool, ctime));
 }  }
   
 static void append_env_pair(const Hash::Key& key, Hash::Val *value, void *info) {  static void append_env_pair(const Hash::Key& key, Hash::Val *value, void *info) {
         Hash& hash=*static_cast<Hash *>(info);          Hash& hash=*static_cast<Hash *>(info);
         hash.put(key, &static_cast<Value *>(value)->as_string());          hash.put(key, &static_cast<Value *>(value)->as_string());
 }  }
 /// ^exec[file-name]  
 /// ^exec[file-name;env hash]  static void pass_cgi_header_attribute(Array::Item *value, void *info) {
 /// ^exec[file-name;env hash;cmd;line;arg;s]          String& string=*static_cast<String *>(value);
 /// @test header to $fields. waits for header '\' tricks          Hash& hash=*static_cast<Hash *>(info);
 static void _cgi(Request& r, const String& method_name, MethodParams *params) {          int colon_pos=string.pos(":", 1);
           if(colon_pos>0)
                   hash.put(string.mid(0, colon_pos), 
                   new(string.pool()) VString(string.mid(colon_pos+1, string.size())));
   }
   /** @todo fix `` in perl - they produced flipping consoles and no output to perl
           @test EPASS, ECSTR [touched them when optimized hash]
   */
   static void _exec_cgi(Request& r, const String& method_name, MethodParams *params,
                                             bool cgi) {
         Pool& pool=r.pool();          Pool& pool=r.pool();
   
         Value& vfile_name=params->get_no_junction(0, "file name must not be code");          Value& vfile_name=params->as_no_junction(0, "file name must not be code");
   
         const String& script_name=r.absolute(vfile_name.as_string());          const String& script_name=r.absolute(vfile_name.as_string());
   
         Hash env(pool);          Hash env(pool);
         #define PASS(key) \          #define ECSTR(name, value_cstr) \
                 String key(pool); \                  String name##key(pool, #name); \
                 if(const char *value=SAPI::get_env(pool, #key)) { \                  String name##value(pool); \
                         key.APPEND_CONST(value); \                  if(value_cstr) { \
                         env.put(String(pool, #key), &key); \                          name##value.APPEND_CONST(value_cstr); \
                 }                          env.put(name##key, &name##value); \
         #define INFO(key, value) \                  }
                 String value(pool); \          #define EPASS(name) \
                 if(r.info.value) { \                  String name##key(pool, #name); \
                         value.APPEND_CONST(r.info.value); \                  String name##value(pool); \
                         env.put(String(pool, key), &value); \                  if(const char *value_cstr=SAPI::get_env(pool, #name)) { \
                           name##value.APPEND_CONST(value_cstr); \
                           env.put(name##key, &name##value); \
                 }                  }
   
         // const          // const
         String gateway_interface(pool, "CGI/1.1");          ECSTR(GATEWAY_INTERFACE, "CGI/1.1");
         env.put(String(pool, "GATEWAY_INTERFACE"), &gateway_interface);  
         // from Request.info          // from Request.info
         INFO("DOCUMENT_ROOT", document_root);          ECSTR(DOCUMENT_ROOT, r.info.document_root);
         INFO("PATH_TRANSLATED", path_translated);          ECSTR(PATH_TRANSLATED, r.info.path_translated);
         INFO("SERVER_PROTOCOL", method);          ECSTR(REQUEST_METHOD, r.info.method);
         INFO("QUERY_STRING", query_string);          ECSTR(QUERY_STRING, r.info.query_string);
         INFO("REQUEST_URI", uri);          ECSTR(REQUEST_URI, r.info.uri);
         INFO("CONTENT_TYPE", content_type);          ECSTR(CONTENT_TYPE, r.info.content_type);
         char content_length_cstr[MAX_NUMBER];            char content_length_cstr[MAX_NUMBER];  
         snprintf(content_length_cstr, MAX_NUMBER, "%u", r.info.content_length);          snprintf(content_length_cstr, MAX_NUMBER, "%u", r.info.content_length);
         String content_length(pool, content_length_cstr);          String content_length(pool, content_length_cstr);
         env.put(String(pool, "CONTENT_LENGTH"), &content_length);          ECSTR(CONTENT_LENGTH, content_length_cstr);
         INFO("HTTP_COOKIE", cookie);          ECSTR(HTTP_COOKIE, r.info.cookie);
         INFO("HTTP_USER_AGENT", user_agent);          ECSTR(HTTP_USER_AGENT, r.info.user_agent);
         // passing some SAPI:get_env-s          // passing some SAPI:get_env-s
         PASS(SERVER_NAME);          EPASS(SERVER_PROTOCOL);
         PASS(SERVER_PORT);          EPASS(SERVER_NAME);
         PASS(HTTP_REFERER);          EPASS(SERVER_PORT);
         PASS(REMOTE_ADDR);          EPASS(HTTP_REFERER);
         PASS(REMOTE_HOST);          EPASS(REMOTE_ADDR);
         PASS(REMOTE_USER);          EPASS(REMOTE_HOST);
           EPASS(REMOTE_USER);
         // SCRIPT_NAME          // SCRIPT_NAME
         env.put(String(pool, "SCRIPT_NAME"), &script_name);          env.put(*new(pool) String(pool, "SCRIPT_NAME"), &script_name);
   #ifdef WIN32
           // WIN32 shell
           EPASS(COMSPEC);
   #endif
   
         if(params->size()>1) {          if(params->size()>1) {
                 Value& venv=params->get_no_junction(1, "env must not be code");                  Value& venv=params->as_no_junction(1, "env must not be code");
                 if(Hash *user_env=venv.get_hash())                  if(Hash *user_env=venv.get_hash(&method_name))
                         user_env->for_each(append_env_pair, &env);                          user_env->for_each(append_env_pair, &env);
                 else  
                         PTHROW(0, 0,  
                                 &method_name,  
                                 "env must be hash");  
         }          }
   
         Array *argv=0;          Array *argv=0;
         if(params->size()>2) {          if(params->size()>2) {
                 argv=new(pool) Array(pool, params->size()-2);                  argv=new(pool) Array(pool, params->size()-2);
                 for(int i=2; i<params->size(); i++)                  for(int i=2; i<params->size(); i++)
                         *argv+=&params->get(i).as_string();                          *argv+=&params->as_string(i, "parameter must be string");
         }          }
   
         const String in(pool, r.post_data, r.post_size);          String in(pool);
           in.APPEND(r.post_data, r.post_size, String::UL_CLEAN, "passing post data", 0);
         String out(pool);          String out(pool);
         String err(pool);          //out.APPEND_CONST("content-type:text/plain\nheader:test-header\n\ntest-body");
         int exit_code=pa_exec(script_name, &env, argv,          //out<<in;
                 in, out, err);          String& err=*new(pool) String(pool);
           int status=pa_exec(false/*forced_allow*/, script_name, &env, argv, in, out, err);
   
         VFile& self=*static_cast<VFile *>(r.self);          VFile& self=*static_cast<VFile *>(r.self);
         // construct with 'out' body and header  
         int delim_size;  
         int pos=out.pos("\n\n", delim_size=2);  
         if(pos<0)  
                 pos=out.pos("\r\n\r\n", delim_size=4);  
         if(pos<0) {  
                 delim_size=0; // calm down, compiler  
                 PTHROW(0, 0,  
                         &method_name,  
                         "output does not contain CGI header");  
         }  
   
         const String& header=out.mid(0, pos);          const String *body=&out; // ^file:exec
         const String& body=out.mid(pos+delim_size, out.size());          if(cgi) { // ^file:cgi
                   // construct with 'out' body and header
                   int delim_size;
                   const char *eol_marker="\r\n"; size_t eol_marker_size=2;
                   int pos=out.pos("\r\n\r\n", delim_size=4);
                   if(pos<0) {
                           eol_marker="\n"; eol_marker_size=1;
                           pos=out.pos("\n\n", delim_size=2);
                   }
                   if(pos<0) {
                           delim_size=0; // calm down, compiler
                           throw Exception(0, 0,
                                   &method_name,
                                   "output does not contain CGI header; exit code=%d; outsize=%u; out: \"%s\"; errsize=%u; err: \"%s\"", 
                                           status, 
                                           (uint)out.size(), out.cstr(),
                                           (uint)err.size(), err.cstr());
                   }
   
         // body                  const String& header=out.mid(0, pos);
         self.set(false/*not tainted*/, body.cstr(String::UL_AS_IS), body.size());                  body=&out.mid(pos+delim_size, out.size());
   
         // todo header to $fields. waits for header '\' tricks                  // header to $fields
                   {
                           Array rows(pool);
                           header.split(rows, 0, eol_marker, eol_marker_size, String::UL_CLEAN);
                           rows.for_each(pass_cgi_header_attribute, &self.fields());
                   }
           }
           // body
           self.set(false/*not tainted*/, body->cstr(), body->size());
   
         // $exit-code          // $status
         self.fields().put(          self.fields().put(
                 *new(pool) String(pool, "exit-code"),                  *new(pool) String(pool, "status"),
                 new(pool) VInt(pool, exit_code));                  new(pool) VInt(pool, status));
                   
         // $stderr          // $stderr
         if(err.size()) {          if(err.size()) {
Line 208  static void _cgi(Request& r, const Strin Line 284  static void _cgi(Request& r, const Strin
                         *new(pool) String(pool, "stderr"),                          *new(pool) String(pool, "stderr"),
                         new(pool) VString(err));                          new(pool) VString(err));
   
                 SAPI::log(pool, "cgi: %s", err.cstr());                  SAPI::log(pool, "file:%s: %s", cgi?"cgi":"exec", err.cstr());
         }          }
 }  }
   static void _exec(Request& r, const String& method_name, MethodParams *params) {
           _exec_cgi(r, method_name, params, false);
   }
   static void _cgi(Request& r, const String& method_name, MethodParams *params) {
           _exec_cgi(r, method_name, params, true);
   }
   
   static void _list(Request& r, const String& method_name, MethodParams *params) {
           Pool& pool=r.pool();
   
           Value& relative_path=params->as_no_junction(0, "path must not be code");
   
           const String *regexp;
           pcre *regexp_code;
           int ovecsize;
           int *ovector;
           if(params->size()>1) {
                   regexp=&params->as_no_junction(1, "regexp must not be code").as_string();
   
                   const char *pattern=regexp->cstr();
                   const char *errptr;
                   int erroffset;
                   regexp_code=pcre_compile(pattern, PCRE_EXTRA | PCRE_DOTALL, 
                           &errptr, &erroffset, 
                           pool.get_client_charset().pcre_tables);
   
                   if(!regexp_code)
                           throw Exception(0, 0, 
                                   &regexp->mid(erroffset, regexp->size()), 
                                   "regular expression syntax error - %s", errptr);
   
                   ovector=(int *)pool.malloc(sizeof(int)*(ovecsize=(1/*match*/)*3));
           } else 
                   regexp_code=0;
   
   
           const char* absolute_path_cstr=r.absolute(relative_path.as_string())
                   .cstr(String::UL_FILE_SPEC);
   
           Array& columns=*new(pool) Array(pool);
           columns+=new(pool) String(pool, "name");        
           Table& table=*new(pool) Table(pool, &method_name, &columns);
   
           LOAD_DIR(absolute_path_cstr, 
                   size_t file_name_size=strlen(ffblk.ff_name);
                   bool suits=true;
                   if(regexp_code) {
                           int exec_result=pcre_exec(regexp_code, 0, 
                                   ffblk.ff_name, file_name_size, 0, 
                                   0, ovector, ovecsize);
                           
                           if(exec_result==PCRE_ERROR_NOMATCH)
                                   suits=false;
                           else if(exec_result<0) {
                                   (*pcre_free)(regexp_code);
                                   throw Exception(0, 0, 
                                           regexp, 
                                           "regular expression execute (%d)", 
                                                   exec_result);
                           }
                   }
   
                   if(suits) {
                           char *file_name_cstr=(char *)pool.malloc(file_name_size);
                           memcpy(file_name_cstr, ffblk.ff_name, file_name_size);
                           String &file_name=*new(pool) String(pool);
                           file_name.APPEND(file_name_cstr, file_name_size, String::UL_FILE_SPEC, 
                                   method_name.origin().file, method_name.origin().line);
                   
                           Array& row=*new(pool) Array(pool);
                           row+=&file_name;
                           table+=&row;
                   }
           );
   
           if(regexp_code)
                   (*pcre_free)(regexp_code);
   
 // initialize          // write out result
           VTable& result=*new(pool) VTable(pool, &table);
           result.set_name(method_name);
           r.write_no_lang(result);
   }
   
 void initialize_file_class(Pool& pool, VStateless_class& vclass) {  #ifndef DOXYGEN
         // ^save[file-name]  struct Lock_execute_body_info {
         vclass.add_native_method("save", Method::CT_DYNAMIC, _save, 1, 1);          Request *r;
           Value *body_code;
   };
   #endif
   static void lock_execute_body(int , void *context) {
           Lock_execute_body_info& info=*static_cast<Lock_execute_body_info *>(context);
   
           // execute body
           info.r->write_assign_lang(info.r->process(*info.body_code));
   };
   static void _lock(Request& r, const String& method_name, MethodParams *params) {
           const String& file_spec=r.absolute(params->as_string(0, "file name must be string"));
           Value& body_code=params->as_junction(1, "body must be code");
   
           Lock_execute_body_info info={&r, &body_code};
           file_write_action_under_lock(file_spec, "lock", lock_execute_body, &info);
   }
   
   // constructor
   
   MFile::MFile(Pool& apool) : Methoded(apool) {
           set_name(*NEW String(pool(), FILE_CLASS_NAME));
   
   
           // ^save[mode;file-name]
           add_native_method("save", Method::CT_DYNAMIC, _save, 2, 2);
   
         // ^delete[file-name]          // ^delete[file-name]
         vclass.add_native_method("delete", Method::CT_STATIC, _delete, 1, 1);          add_native_method("delete", Method::CT_STATIC, _delete, 1, 1);
   
           // ^move[from-file-name;to-file-name]
           add_native_method("move", Method::CT_STATIC, _move, 2, 2);
   
         // ^find[file-name]          // ^find[file-name]
         // ^find[file-name]{when-not-found}          // ^find[file-name]{when-not-found}
         vclass.add_native_method("find", Method::CT_STATIC, _find, 1, 2);          add_native_method("find", Method::CT_STATIC, _find, 1, 2);
   
         // ^load[disk-name]          // ^load[mode;disk-name]
         // ^load[disk-name;user-name]          // ^load[mode;disk-name;user-name]
         vclass.add_native_method("load", Method::CT_DYNAMIC, _load, 1, 2);          add_native_method("load", Method::CT_DYNAMIC, _load, 2, 3);
   
         // ^stat[disk-name]          // ^stat[disk-name]
         vclass.add_native_method("stat", Method::CT_DYNAMIC, _stat, 1, 1);          add_native_method("stat", Method::CT_DYNAMIC, _stat, 1, 1);
   
           // ^cgi[file-name]
           // ^cgi[file-name;env hash]
           // ^cgi[file-name;env hash;1cmd;2line;3ar;4g;5s]
           add_native_method("cgi", Method::CT_DYNAMIC, _cgi, 1, 2+10);
   
         // ^exec[file-name]          // ^exec[file-name]
         // ^exec[file-name;env hash]          // ^exec[file-name;env hash]
         // ^exec[file-name;env hash;1cmd;2line;3ar;4g;5s]          // ^exec[file-name;env hash;1cmd;2line;3ar;4g;5s]
         vclass.add_native_method("cgi", Method::CT_DYNAMIC, _cgi, 1, 2+5);          add_native_method("exec", Method::CT_DYNAMIC, _exec, 1, 2+10);
   
           // ^file:list[path]
           // ^file:list[path][regexp]
           add_native_method("list", Method::CT_STATIC, _list, 1, 2);
   
           // ^file:lock[path]{code}
           add_native_method("lock", Method::CT_STATIC, _lock, 2, 2);
   
   }
   
   // global variable
   
   Methoded *file_class;
   
   // creator
   
   Methoded *MFile_create(Pool& pool) {
           return file_class=new(pool) MFile(pool);
 }  }

Removed from v.1.26  
changed lines
  Added in v.1.73


E-mail: