[BACK]Return to pa_globals.C CVS log [TXT] [DIR] Up to [parser3project] / parser3 / src / main

Diff for /parser3/src/main/pa_globals.C between versions 1.152.2.19.2.10 and 1.165

version 1.152.2.19.2.10, 2003/04/01 07:59:08 version 1.165, 2003/12/17 07:33:53
Line 5 Line 5
         Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)          Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)
 */  */
   
 static const char* IDENT_GLOBALS_C="$Date$";  static const char * const IDENT_GLOBALS_C="$Date$";
   
 #include "pa_config_includes.h"  #include "pa_config_includes.h"
   
 #ifdef XML  #ifdef XML
   #include "libxml/xmlversion.h"
 #include "libxslt/extensions.h"  #include "libxslt/extensions.h"
 #include "libxslt/xsltutils.h"  #include "libxslt/xsltutils.h"
 extern "C" {  extern "C" {
Line 17  extern "C" { Line 18  extern "C" {
 };  };
 #endif  #endif
   
   #include "pcre.h"
   
 #include "pa_globals.h"  #include "pa_globals.h"
 #include "pa_string.h"  #include "pa_string.h"
 #include "pa_sapi.h"  #include "pa_sapi.h"
 #include "pa_threads.h"  #include "pa_threads.h"
   #include "pa_xml_io.h"
   #include "pa_common.h"
   
   #include "pa_cache_managers.h"
   
 // defines  // defines
   
 #define PA_DEBUG_XML_GC_MEMORY  //#define PA_DEBUG_XML_GC_MEMORY
   
 // globals  // globals
   
Line 61  static void setup_hex_value() { Line 67  static void setup_hex_value() {
         hex_value['f'] = 15;          hex_value['f'] = 15;
 }  }
   
 #ifdef XML  
   
 const int MAX_CONCURRENT_XML_GENERIC_ERROR_THREADS=10;  Hash<pa_thread_t, Request*> thread_request;
   void pa_register_thread_request(Request& r) {
           thread_request.put(pa_get_thread_id(), &r);
   }
   /// retrives request set by pa_set_request function, useful in contextless places [slow]
   Request& pa_thread_request() {
           return *thread_request.get(pa_get_thread_id());
   }
   
   #ifdef XML
   
 class XML_Generic_error_info {  class XML_Generic_error_info {
 public:  public:
         pa_thread_t thread_id;  
         char buf[MAX_STRING];          char buf[MAX_STRING];
         size_t used;          size_t used;
 public:  public:
Line 75  public: Line 88  public:
                 reset();                  reset();
         }          }
         void reset() {           void reset() { 
                 thread_id=0;   
                 buf[used=0]=0;                  buf[used=0]=0;
         }          }
         const char* getnd_reset() {          const char* get_and_reset() {
                 char* result=new(PointerFreeGC) char[used+1];                  if(used) {
                 memcpy(result, buf, used+1);                          char* result=pa_strdup(buf, used);
                 reset();                          reset();
                 return result;                          return result;
                   } else
                           return 0;               
         }          }
 } xml_generic_error_infos[MAX_CONCURRENT_XML_GENERIC_ERROR_THREADS];  };
   
 XML_Generic_error_info *xml_generic_error_info(pa_thread_t thread_id) {  Hash<pa_thread_t, XML_Generic_error_info*> xml_generic_error_infos;
         for(int i=0; i<MAX_CONCURRENT_XML_GENERIC_ERROR_THREADS; i++) {  
                 XML_Generic_error_info *p=xml_generic_error_infos+i;  
                 if(p->thread_id==thread_id)  
                         return p;  
         }  
         return 0;  
 }  
   
 static void  static void xmlParserGenericErrorFunc(void *  /*ctx*/, const char* msg, ...) { 
 xmlParserGenericErrorFunc(void *ctx, const char* msg, ...) {   //_asm int 3;
     pa_thread_t thread_id=pa_get_thread_id();          pa_thread_t thread_id=pa_get_thread_id();
   
         // infinitely looking for free slot to fill it          // infinitely looking for free slot to fill it
         while(true) {          while(true) {
                 SYNCHRONIZED;  // find+fill blocked                  SYNCHRONIZED;  // find+fill blocked
   
                 // first try to get existing for this thread_id                  // first try to get existing for this thread_id
                 XML_Generic_error_info *p=xml_generic_error_info(thread_id);                  XML_Generic_error_info *p=xml_generic_error_infos.get(thread_id);
                 if(!p) { // occupy empty one                  if(!p) // occupy empty one
                         p=xml_generic_error_info(0);                          xml_generic_error_infos.put(thread_id, (p=new(PointerFreeGC) XML_Generic_error_info));
                         if(!p) // wait for empty for it to appear  
                                 continue;  
                 }  
   
                 p->thread_id=thread_id;  
                                   
                 va_list args;                  va_list args;
                 va_start(args, msg);                  va_start(args, msg);
Line 123  xmlParserGenericErrorFunc(void *ctx, con Line 125  xmlParserGenericErrorFunc(void *ctx, con
 }  }
   
 bool xmlHaveGenericErrors() {  bool xmlHaveGenericErrors() {
     pa_thread_t thread_id=pa_get_thread_id();          pa_thread_t thread_id=pa_get_thread_id();
   
         SYNCHRONIZED;  // find blocked          SYNCHRONIZED;  // find blocked
   
         return xml_generic_error_info(thread_id)!=0;          return xml_generic_error_infos.get(thread_id)!=0;
 }  }
   
 const char* xmlGenericErrors() {  const char* xmlGenericErrors() {
     pa_thread_t thread_id=pa_get_thread_id();          pa_thread_t thread_id=pa_get_thread_id();
   
         SYNCHRONIZED;  // find+free blocked          SYNCHRONIZED;  // find+free blocked
   
         XML_Generic_error_info *p=xml_generic_error_info(thread_id);          if(XML_Generic_error_info *p=xml_generic_error_infos.get(thread_id))
         if(!p) // no errors for our thread_id registered                  return p->get_and_reset();
                 return 0;  
   
         return p->getnd_reset();          return 0; // no errors for our thread_id registered
 }  
   
 /**  
  * xmlFileMatchWithLocalhostEqDocumentRoot:  
  * filename:  the URI for matching  
  *  
  * check if the URI matches an HTTP one  
  *  
  * Returns 1 if matches, 0 otherwise  
  */  
 static int  
 xmlFileMatchLocalhost(const char* filename) {  
     if (!strncmp(filename, "http://localhost", 16))  
         return(1);  
     return(0);  
 }  
   
   
 /**  
  * xmlFileOpenHttpLocalhost :  
  * filename:  the URI for matching  
  *  
  * http://localhost/abc -> $ENV{DOCUMENT_ROOT}/abc | ./abc  
  *  
  * input from FILE *, supports compressed input  
  * if filename is " " then the standard input is used  
  *  
  * Returns an I/O context or NULL in case of error  
  */  
 static void *  
 xmlFileOpenLocalhost (const char* filename) {  
     FILE *fd;  
     const char* documentRoot;  
     char path[1000];  
   
         path[0]=0;  
         strcat(path, (documentRoot=getenv("DOCUMENT_ROOT"))?documentRoot:".");  
         strcat(path, &filename[16]);  
   
 #ifdef WIN32  
     fd = fopen(path, "rb");  
 #else  
     fd = fopen(path, "r");  
 #endif /* WIN32 */  
     return((void *) fd);  
 }  
   
 /**  
  * xmlFileRead:  
  * @context:  the I/O context  
  * @buffer:  where to drop data  
  * @len:  number of bytes to write  
  *  
  * Read @len bytes to @buffer from the I/O channel.  
  *  
  * Returns the number of bytes written  
  */  
 static int  
 pa_xmlFileRead (void * context, char * buffer, int len) {  
     return(fread(&buffer[0], 1,  len, (FILE *) context));  
 }  
   
 /**  
  * xmlFileClose:  
  * @context:  the I/O context  
  *  
  * Close an I/O channel  
  */  
 static int  
 pa_xmlFileClose (void * context) {  
     return ( ( fclose((FILE *) context) == EOF ) ? -1 : 0 );  
 }  }
   
 #endif  #endif
Line 220  void pa_globals_destroy(void *) { Line 150  void pa_globals_destroy(void *) {
 #ifdef XML  #ifdef XML
                 GdomeException exc;                  GdomeException exc;
                 gdome_di_unref (domimpl, &exc);                  gdome_di_unref (domimpl, &exc);
                   // uncomment SAPI::abort below if adding potential-throw code here
 #endif  #endif
         } catch(const Exception& e) {          } catch(const Exception& e) {
                 SAPI::abort("pa_globals_destroy failed: %s", e.comment());  //              SAPI::abort("pa_globals_destroy failed: %s", e.comment());
         }          }
 }  }
   
   
 #ifdef XML  #ifdef XML
   
 static char *pa_GC_strdup(const char *s) {  static char *pa_GC_strdup(const char *s) {
         if(!s)          if(!s)
                 return 0;                  return 0;
   
         size_t size=strlen(s)+1;          size_t size=strlen(s)+1;
         char *result=(char *)GC_malloc_atomic(size);          char *result=(char *)GC_malloc_atomic(size);
           if(!result)
                   SAPI::abort("out of memory (while duplicating XML string [size=%d])", size);
   
         memcpy(result, s, size);          memcpy(result, s, size);
         return result;          return result;
 }  }
   
 #ifdef PA_DEBUG_XML_GC_MEMORY  #ifdef PA_DEBUG_XML_GC_MEMORY
   void *pa_look_for[]={(void*)0x8abe000,(void*)0x0,(void*)0x0,(void*)0x0,
 static char *                          (void*)0x0,(void*)0x0,(void*)0x0,(void*)0x0};
 pa_xmlStrndup(const char *cur, int len) {  bool pa_looked(void*p) {
     char*ret;          for(int i=0; i<8; i++)
                       if(pa_look_for[i]==p)
     if ((cur == NULL) || (len < 0)) return(NULL);                          return true;
     ret = (char *) xmlMalloc((len + 1) * sizeof(char));          return false;
     if (ret == NULL) {  }
         xmlGenericError(xmlGenericErrorContext,  static void* pa_gc_malloc_log(size_t size){
                 "malloc of %ld byte failed\n",          void *p=pa_gc_malloc(size);
                 (len + 1) * (long)sizeof(char));          fprintf(stderr, "pa_gc_malloc_log(%d)=0x%p\n", size, p);
         return(NULL);  //      if(pa_looked(p))
     }  //              fprintf(stderr,"catched debug malloc(%d)=0x%p\n", size, p);
     memcpy(ret, cur, len * sizeof(char));          return p;
     ret[len] = 0;          
     return(ret);  }
   static void* pa_gc_malloc_atomic_log(size_t size){
           void *p=pa_gc_malloc_atomic(size);
           fprintf(stderr, "pa_gc_malloc_atomic_log(%d)=0x%p\n", size, p);
   //      if(pa_looked(p))
   //              fprintf(stderr,"catched debug malloc atomic(%d)=0x%p\n", size, p);
           return p;
   }
   static void* pa_gc_realloc_log(void *ptr, size_t size){
           void *p=pa_gc_realloc(ptr, size);
           fprintf(stderr, "pa_gc_realloc_log(0x%p, %d)=0x%p\n", ptr, size, p);
   //      if(pa_looked(p))
   //              fprintf(stderr,"catched debug realloc(%d)=0x%p\n", size, p);
           return p;
   }
   //static void pa_gc_free_ignore(void *){}
   static void pa_gc_free_log(void *p){
           fprintf(stderr, "pa_gc_free_log(0x%p)\n", p);
   //      if(pa_looked(p))
   //              fprintf(stderr,"catched debug free(0x%p)\n", p);
           pa_gc_free(p);
 }  }
   #else
   
 static char *  inline void *check(void *result, const char *where, size_t size) {
 pa_debug_xmlStrdup(const char *cur) {          if(!result)
     const char *p = cur;                  SAPI::abort("out of memory (while %s [size=%d])", where, size);
   
     if (cur == NULL) return(NULL);          return result;
     while (*p != 0) p++; /* non input consuming */  
     return(pa_xmlStrndup(cur, p - cur));  
 }  }
   static void* pa_gc_malloc_nonull(size_t size) { 
 static const int PA_CHECKBUF_SIZE=100000000;          return check(pa_gc_malloc(size), "allocating XML compsite memory", size);
 static bool maybe_valid_ptrs[PA_CHECKBUF_SIZE];  
   
 static void* add_valid_ptr(void* ptr) {  
         uint h=hash_code((int)ptr);  
         maybe_valid_ptrs[h%PA_CHECKBUF_SIZE]=true;  
         return ptr;  
 }  }
 static void* check_ptr(void* ptr) {  static void* pa_gc_malloc_atomic_nonull(size_t size) { 
         uint h=hash_code((uint)ptr);          return check(pa_gc_malloc_atomic(size), "allocating XML atomic memory", size);
         if(!maybe_valid_ptrs[h%PA_CHECKBUF_SIZE])  
                 _asm int 3;  
         return ptr;  
 }  }
   static void* pa_gc_realloc_nonull(void* ptr, size_t size) { 
 static bool pa_debug_xml=true;          return check(pa_gc_realloc(ptr, size), "reallocating XML memory", size);
 static void* pa_debug_GC_malloc(size_t size) {  
         if(pa_debug_xml)  
                 return add_valid_ptr(GC_malloc(size));  
         else  
                 return GC_malloc(size);  
 }  }
   
 static void *pa_debug_GC_realloc(void *ptr, size_t size) {  #endif
         GC_is_visible(ptr);  #endif
         //printf("realloc: 0x%p -> %u\n", ptr, size);  
         if(pa_debug_xml)  
                 return add_valid_ptr(GC_realloc(check_ptr(ptr), size));  
         else  
                 return GC_realloc(ptr, size);  
 }  
   
 static void pa_debug_GC_free(void*) {  void pa_CORD_oom_fn(void) {
         // ignore free          SAPI::abort("out of memory (while expanding string)");
 }  }
   
   /**
           @todo gc: libltdl: substitute lt_dlmalloc & co
   */
   static void gc_substitute_memory_management_functions() {
           // in libxml & libxslt
   #ifdef XML
           // asking to use GC memory
   #if LIBXML_VERSION >= 20507
   #ifdef PA_DEBUG_XML_GC_MEMORY
           xmlGcMemSetup(
                   /*xmlFreeFunc */pa_gc_free_log,
                   /*xmlMallocFunc */pa_gc_malloc_log,
                   /*xmlMallocFunc */pa_gc_malloc_atomic_log,
                   /*xmlReallocFunc */pa_gc_realloc_log,
                   /*xmlStrdupFunc */pa_GC_strdup);
   #else
           xmlGcMemSetup(
                   /*xmlFreeFunc */pa_gc_free,
                   /*xmlMallocFunc */pa_gc_malloc_nonull,
                   /*xmlMallocFunc */pa_gc_malloc_atomic_nonull,
                   /*xmlReallocFunc */pa_gc_realloc_nonull,
                   /*xmlStrdupFunc */pa_GC_strdup);
 #endif  #endif
   
   #else
           xmlMemSetup(
                   /*xmlFreeFunc */pa_gc_free,
                   /*xmlMallocFunc */pa_gc_malloc,
                   /*xmlReallocFunc */pa_gc_realloc,
                   /*xmlStrdupFunc */pa_GC_strdup);
   #endif
   
 #endif  #endif
   
 /// @test hint on one should call this for each thread xmlSubstituteEntitiesDefault(1);          // pcre
           pcre_malloc=pa_gc_malloc;
           pcre_free=pa_gc_free;
   
   
           // cord
           CORD_oom_fn=pa_CORD_oom_fn;
   }
   
   /**
           @test hint on one should call this for each thread xmlSubstituteEntitiesDefault(1);
   */
 void pa_globals_init() {  void pa_globals_init() {
           // global variables 
           cache_managers=new Cache_managers;
   
   
           // in various libraries
           gc_substitute_memory_management_functions();
   
         // hex value          // hex value
         setup_hex_value();          setup_hex_value();
   
 #ifdef XML  #ifdef XML
   
         // initializing xml libs          // initializing xml libs
   
 #ifndef PA_DEBUG_DISABLE_GC  
   
         // asking to use GC memory  
 #ifndef PA_DEBUG_XML_GC_MEMORY  
         xmlMemSetup(  
                 /*xmlFreeFunc */GC_free,  
                 /*xmlMallocFunc */GC_malloc,  
                 /*xmlReallocFunc */GC_realloc,  
                 /*xmlStrdupFunc */pa_GC_strdup);  
 #else  
         xmlMemSetup(  
                 /*xmlFreeFunc */pa_debug_GC_free,  
                 /*xmlMallocFunc */pa_debug_GC_malloc,  
                 /*xmlReallocFunc */pa_debug_GC_realloc,  
                 /*xmlStrdupFunc */pa_debug_xmlStrdup);  
 #endif  
   
 #endif  
   
         /* First get a DOMImplementation reference */          /* First get a DOMImplementation reference */
         domimpl = gdome_di_mkref ();          domimpl = gdome_di_mkref ();
         /*          /*
Line 382  void pa_globals_init() { Line 342  void pa_globals_init() {
 //      FILE *f=fopen("y:\\xslt.log", "wt");  //      FILE *f=fopen("y:\\xslt.log", "wt");
 //      xsltSetGenericDebugFunc(f/*stderr*/, 0);  //      xsltSetGenericDebugFunc(f/*stderr*/, 0);
   
         // http://localhost/abc -> $ENV{DOCUMENT_ROOT}/abc | ./abc          pa_xml_io_init();
         xmlRegisterInputCallbacks(  
                 xmlFileMatchLocalhost, xmlFileOpenLocalhost,  
                 pa_xmlFileRead, pa_xmlFileClose);  
 #endif  #endif
 }  }
   
 #ifdef _MSC_VER  #ifdef _MSC_VER
   
 #ifndef PA_DEBUG_DISABLE_GC  #ifndef PA_DEBUG_DISABLE_GC
 #       define GC_LIB "/parser3project/win32/gc"  #       define GC_LIB "../../../../win32/gc"
 #       ifdef _DEBUG  #       ifdef _DEBUG
 #               pragma comment(lib, GC_LIB "/Debug/gc.lib")  #               pragma comment(lib, GC_LIB "/Debug/gc.lib")
 #       else  #       else
Line 402  void pa_globals_init() { Line 359  void pa_globals_init() {
 #endif  #endif
   
 #ifdef XML  #ifdef XML
 #       define GNOME_LIBS "/parser3project/win32xml/win32/gnome"  #       define GNOME_LIBS "../../../../win32/gnome"
 #       pragma comment(lib, GNOME_LIBS "/glib/lib/libglib-1.3-11.lib")  #       pragma comment(lib, GNOME_LIBS "/glib/lib/libglib-1.3-11.lib")
 #       ifdef _DEBUG  #       ifdef _DEBUG
   
 #               ifdef LIBXML_STATIC  #               ifdef LIBXML_STATIC
 #                       pragma comment(lib, GNOME_LIBS "/gnome-xml/win32/dsp/libxml2_DebugStatic/libxml2.lib")  #                       pragma comment(lib, GNOME_LIBS "/gnome-xml/win32/binaries-debug/libxml2_a.lib")
 #               else  #               else
 #                       pragma comment(lib, GNOME_LIBS "/gnome-xml/win32/dsp/libxml2_DebugDynamic/libxml2.lib")  #                       pragma comment(lib, GNOME_LIBS "/gnome-xml/win32/binaries-debug/libxml2.lib")
 #               endif  #               endif
   
 #               ifdef LIBXSLT_STATIC  #               ifdef LIBXSLT_STATIC
Line 432  void pa_globals_init() { Line 389  void pa_globals_init() {
 #else  #else
   
 #               ifdef LIBXML_STATIC  #               ifdef LIBXML_STATIC
 #                       pragma comment(lib, GNOME_LIBS "/gnome-xml/win32/dsp/libxml2_ReleaseStatic/libxml2.lib")  #                       pragma comment(lib, GNOME_LIBS "/gnome-xml/win32/binaries-release/libxml2_a.lib")
 #               else  #               else
 #                       pragma comment(lib, GNOME_LIBS "/gnome-xml/win32/dsp/lixml2_ReleaseDynamic/libxml2.lib")  #                       pragma comment(lib, GNOME_LIBS "/gnome-xml/win32/binaries-release/libxml2.lib")
 #               endif  #               endif
   
 #               ifdef LIBXSLT_STATIC  #               ifdef LIBXSLT_STATIC
Removed from v.1.152.2.19.2.10  
changed lines
  Added in v.1.165

E-mail: