Diff for /parser3/src/main/pa_globals.C between versions 1.152.2.19.2.14 and 1.175

version 1.152.2.19.2.14, 2003/04/02 10:59:19 version 1.175, 2004/09/20 16:26:12
Line 1 Line 1
 /** @file  /** @file
         Parser: globals.          Parser: globals.
   
         Copyright (c) 2001-2003 ArtLebedev Group (http://www.artlebedev.com)          Copyright (c) 2001-2004 ArtLebedev Group (http://www.artlebedev.com)
         Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)          Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)
 */  */
   
 static const char* IDENT_GLOBALS_C="$Date$";  static const char * const IDENT_GLOBALS_C="$Date$";
   
 #include "pa_config_includes.h"  #include "pa_config_includes.h"
   
 #ifdef XML  #ifdef XML
   #include "libxml/xmlversion.h"
 #include "libxslt/extensions.h"  #include "libxslt/extensions.h"
 #include "libxslt/xsltutils.h"  #include "libxslt/xsltutils.h"
 extern "C" {  extern "C" {
Line 17  extern "C" { Line 18  extern "C" {
 };  };
 #endif  #endif
   
   #include "pcre.h"
   
 #include "pa_globals.h"  #include "pa_globals.h"
 #include "pa_string.h"  #include "pa_string.h"
 #include "pa_sapi.h"  #include "pa_sapi.h"
 #include "pa_threads.h"  #include "pa_threads.h"
   #include "pa_xml_io.h"
   #include "pa_common.h"
   
   #include "pa_cache_managers.h"
   
 // defines  // defines
   
 #define PA_DEBUG_XML_GC_MEMORY  //#define PA_DEBUG_XML_GC_MEMORY
   
   // 20040920 for now both workarounds needed. wait for new libxml/xsl versions
   // there is a problem with testcase, it's unstable. 
   // see paf@six/bug20040920/cgi-bin/t for it-showed-bug-on-20040920-day
   #define PA_WORKAROUND_BUGGY_FREE_IN_LIBXML_GC_MEMORY
   #define PA_WORKAROUND_BUGGY_MALLOCATOMIC_IN_LIBXML_GC_MEMORY
   
 // globals  // globals
   
Line 61  static void setup_hex_value() { Line 73  static void setup_hex_value() {
         hex_value['f'] = 15;          hex_value['f'] = 15;
 }  }
   
 #ifdef XML  
   
 const int MAX_CONCURRENT_XML_GENERIC_ERROR_THREADS=10;  Hash<pa_thread_t, Request*> thread_request;
   void pa_register_thread_request(Request& r) {
           thread_request.put(pa_get_thread_id(), &r);
   }
   /// retrives request set by pa_set_request function, useful in contextless places [slow]
   Request& pa_thread_request() {
           return *thread_request.get(pa_get_thread_id());
   }
   
   #ifdef XML
   
 class XML_Generic_error_info {  class XML_Generic_error_info {
 public:  public:/*internal, actually*/
         pa_thread_t thread_id;          char buf[MAX_STRING*5];
         char buf[MAX_STRING];  
         size_t used;          size_t used;
 public:  public:
         XML_Generic_error_info() {          XML_Generic_error_info() {
                 reset();  
         }  
         void reset() {   
                 thread_id=0;   
                 buf[used=0]=0;                  buf[used=0]=0;
         }          }
         const char* getnd_reset() {          const char* get() {
                 char* result=new(PointerFreeGC) char[used+1];                  return used? buf: 0;
                 memcpy(result, buf, used+1);  
                 reset();  
                 return result;  
         }          }
 } xml_generic_error_infos[MAX_CONCURRENT_XML_GENERIC_ERROR_THREADS];  };
   
 XML_Generic_error_info *xml_generic_error_info(pa_thread_t thread_id) {  static Hash<pa_thread_t, XML_Generic_error_info*> xml_generic_error_infos;
         for(int i=0; i<MAX_CONCURRENT_XML_GENERIC_ERROR_THREADS; i++) {  
                 XML_Generic_error_info *p=xml_generic_error_infos+i;  
                 if(p->thread_id==thread_id)  
                         return p;  
         }  
         return 0;  
 }  
   
 static void  static void xmlParserGenericErrorFunc(void *  /*ctx*/, const char* msg, ...) { 
 xmlParserGenericErrorFunc(void *ctx, const char* msg, ...) {   //_asm int 3;
     pa_thread_t thread_id=pa_get_thread_id();          pa_thread_t thread_id=pa_get_thread_id();
   
         // infinitely looking for free slot to fill it          XML_Generic_error_info* p;
         while(true) {          {
                 SYNCHRONIZED;  // find+fill blocked                  SYNCHRONIZED;  // find+fill blocked
   
                 // first try to get existing for this thread_id                  // first try to get existing for this thread_id
                 XML_Generic_error_info *p=xml_generic_error_info(thread_id);                  p=xml_generic_error_infos.get(thread_id);
                 if(!p) { // occupy empty one                  if(!p) // occupy empty one
                         p=xml_generic_error_info(0);                          xml_generic_error_infos.put(thread_id, (p=new(PointerFreeGC) XML_Generic_error_info));
                         if(!p) // wait for empty for it to appear  
                                 continue;  
                 }  
   
                 p->thread_id=thread_id;  
                   
                 va_list args;  
                 va_start(args, msg);  
                 p->used+=vsnprintf(p->buf+p->used, sizeof(p->buf)-p->used, msg, args);  
                 va_end(args);  
   
                 break;  
         }          }
                   
           va_list args;
           va_start(args, msg);
           p->used+=vsnprintf(p->buf+p->used, sizeof(p->buf)-p->used, msg, args);
           va_end(args);
 }  }
   
 bool xmlHaveGenericErrors() {  bool xmlHaveGenericErrors() {
     pa_thread_t thread_id=pa_get_thread_id();          pa_thread_t thread_id=pa_get_thread_id();
   
         SYNCHRONIZED;  // find blocked          SYNCHRONIZED;  // find blocked
   
         return xml_generic_error_info(thread_id)!=0;          return xml_generic_error_infos.get(thread_id)!=0;
 }  }
   
 const char* xmlGenericErrors() {  const char* xmlGenericErrors() {
     pa_thread_t thread_id=pa_get_thread_id();          pa_thread_t thread_id=pa_get_thread_id();
   
         SYNCHRONIZED;  // find+free blocked          SYNCHRONIZED;  // find+free blocked
   
         XML_Generic_error_info *p=xml_generic_error_info(thread_id);          if(XML_Generic_error_info *p=xml_generic_error_infos.get(thread_id)) {
         if(!p) // no errors for our thread_id registered                  xml_generic_error_infos.remove(thread_id);
                 return 0;                  return p->get();
           }
         return p->getnd_reset();  
 }  
   
 /**  
  * xmlFileMatchWithLocalhostEqDocumentRoot:  
  * filename:  the URI for matching  
  *  
  * check if the URI matches an HTTP one  
  *  
  * Returns 1 if matches, 0 otherwise  
  */  
 static int  
 xmlFileMatchLocalhost(const char* filename) {  
     if (!strncmp(filename, "http://localhost", 16))  
         return(1);  
     return(0);  
 }  
   
   
 /**  
  * xmlFileOpenHttpLocalhost :  
  * filename:  the URI for matching  
  *  
  * http://localhost/abc -> $ENV{DOCUMENT_ROOT}/abc | ./abc  
  *  
  * input from FILE *, supports compressed input  
  * if filename is " " then the standard input is used  
  *  
  * Returns an I/O context or NULL in case of error  
  */  
 static void *  
 xmlFileOpenLocalhost (const char* filename) {  
     FILE *fd;  
     const char* documentRoot;  
     char path[1000];  
   
         path[0]=0;  
         strcat(path, (documentRoot=getenv("DOCUMENT_ROOT"))?documentRoot:".");  
         strcat(path, &filename[16]);  
   
 #ifdef WIN32  
     fd = fopen(path, "rb");  
 #else  
     fd = fopen(path, "r");  
 #endif /* WIN32 */  
     return((void *) fd);  
 }  
   
 /**  
  * xmlFileRead:  
  * @context:  the I/O context  
  * @buffer:  where to drop data  
  * @len:  number of bytes to write  
  *  
  * Read @len bytes to @buffer from the I/O channel.  
  *  
  * Returns the number of bytes written  
  */  
 static int  
 pa_xmlFileRead (void * context, char * buffer, int len) {  
     return(fread(&buffer[0], 1,  len, (FILE *) context));  
 }  
   
 /**          return 0; // no errors for our thread_id registered
  * xmlFileClose:  
  * @context:  the I/O context  
  *  
  * Close an I/O channel  
  */  
 static int  
 pa_xmlFileClose (void * context) {  
     return ( ( fclose((FILE *) context) == EOF ) ? -1 : 0 );  
 }  }
   
 #endif  #endif
Line 220  void pa_globals_destroy(void *) { Line 148  void pa_globals_destroy(void *) {
 #ifdef XML  #ifdef XML
                 GdomeException exc;                  GdomeException exc;
                 gdome_di_unref (domimpl, &exc);                  gdome_di_unref (domimpl, &exc);
                   // uncomment SAPI::abort below if adding potential-throw code here
 #endif  #endif
         } catch(const Exception& e) {          } catch(const Exception& e) {
                 SAPI::abort("pa_globals_destroy failed: %s", e.comment());  //              SAPI::abort("pa_globals_destroy failed: %s", e.comment());
         }          }
 }  }
   
   
 #ifdef XML  #ifdef XML
   
 static char *pa_GC_strdup(const char *s) {  static char *pa_GC_strdup(const char *s) {
         if(!s)          if(!s)
                 return 0;                  return 0;
   
         size_t size=strlen(s)+1;          size_t size=strlen(s)+1;
         char *result=(char *)GC_malloc_atomic(size);          char *result=(char *)GC_MALLOC_ATOMIC(size);
           if(!result)
                   SAPI::abort("out of memory (while duplicating XML string [size=%d])", size);
   
         memcpy(result, s, size);          memcpy(result, s, size);
   #ifdef PA_DEBUG_XML_GC_MEMORY
           fprintf(stderr, "pa_GC_strdup(%p=%s, length=%d)=0x%p\n", s, s, size, result);
   #endif
           return result;
   }
   
   #ifdef PA_DEBUG_XML_GC_MEMORY
   void *pa_look_for[]={(void*)0x84ba980,(void*)0x8969460,(void*)0x0,(void*)0x0,
                           (void*)0x0,(void*)0x0,(void*)0x0,(void*)0x0};
   bool pa_looked(void*p) {
           for(int i=0; i<8; i++)
                   if(pa_look_for[i]==p) {
                           __asm__("int $3");
                           return true;
                   }
           if((((int)p)&~0xFF)==0x89a7700) {
                   __asm__("int $3");
                   return true;
           }
           return false;
   }
   static void* pa_gc_malloc_log(size_t size){
           void *p=pa_gc_malloc(size);
           fprintf(stderr, "pa_gc_malloc_log(%d)=0x%p\n", size, p);
           if(pa_looked(p))
                   fprintf(stderr,"catched debug malloc(%d)=0x%p\n", size, p);
           return p;
           
   }
   static void* pa_gc_malloc_atomic_log(size_t size){
   #ifdef PA_WORKAROUND_BUGGY_MALLOCATOMIC_IN_LIBXML_GC_MEMORY
           void *p=pa_gc_malloc(size);
           fprintf(stderr, "pa_gc_malloc_atomicFAKE_log(%d)=0x%p\n", size, p);
   #else
           void *p=pa_gc_malloc_atomic(size);
           fprintf(stderr, "pa_gc_malloc_atomic_log(%d)=0x%p\n", size, p);
   #endif
           if(pa_looked(p))
                   fprintf(stderr,"catched debug malloc atomic(%d)=0x%p\n", size, p);
           return p;
   }
   static void* pa_gc_realloc_log(void *ptr, size_t size){
           void *p=pa_gc_realloc(ptr, size);
           fprintf(stderr, "pa_gc_realloc_log(0x%p, %d)=0x%p\n", ptr, size, p);
           if(pa_looked(p))
                   fprintf(stderr,"catched debug realloc(%d)=0x%p\n", size, p);
           return p;
   }
   static void pa_gc_free_log(void *p){
   #ifdef PA_WORKAROUND_BUGGY_FREE_IN_LIBXML_GC_MEMORY
           fprintf(stderr, "pa_gc_freeIGNORE_log(0x%p)\n", p);
   #else
           fprintf(stderr, "pa_gc_free_log(0x%p)\n", p);
   #endif
           if(pa_looked(p))
                   fprintf(stderr,"catched debug free(0x%p)\n", p);
   #ifndef PA_WORKAROUND_BUGGY_FREE_IN_LIBXML_GC_MEMORY
           pa_gc_free(p);
   #endif
   }
   #else
   
   inline void *check(void *result, const char *where, size_t size) {
           if(!result)
                   SAPI::abort("out of memory (while %s [size=%d])", where, size);
   
         return result;          return result;
 }  }
   static void* pa_gc_malloc_nonull(size_t size) { 
           return check(pa_gc_malloc(size), "allocating XML compsite memory", size);
   }
   static void* pa_gc_malloc_atomic_nonull(size_t size) { 
   #ifdef PA_WORKAROUND_BUGGY_MALLOCATOMIC_IN_LIBXML_GC_MEMORY
           return check(pa_gc_malloc(size), "allocating XML composite memory (asked atomic)", size);
   #else
           return check(pa_gc_malloc_atomic(size), "allocating XML atomic memory", size);
   #endif
   }
   static void* pa_gc_realloc_nonull(void* ptr, size_t size) { 
           return check(pa_gc_realloc(ptr, size), "reallocating XML memory", size);
   }
   
   static void pa_gc_free_maybeignore(
           void* 
   #ifndef PA_WORKAROUND_BUGGY_FREE_IN_LIBXML_GC_MEMORY
                   ptr
   #endif
           ) {
   #ifndef PA_WORKAROUND_BUGGY_FREE_IN_LIBXML_GC_MEMORY
           pa_gc_free(ptr);
   #endif
   }
   
   #endif
 #endif  #endif
   
 void pa_CORD_oom_fn(void) {  void pa_CORD_oom_fn(void) {
Line 244  void pa_CORD_oom_fn(void) { Line 269  void pa_CORD_oom_fn(void) {
 }  }
   
 /**  /**
         @todo gc: pcre: substitute pcre_malloc &co  
         @todo gc: libltdl: substitute lt_dlmalloc & co          @todo gc: libltdl: substitute lt_dlmalloc & co
         @todo gc: figure out how to substitute glib memory allocator  
 */  */
 static void gc_substitute_memory_management_functions() {  static void gc_substitute_memory_management_functions() {
         // in libxml & libxslt          // in libxml & libxslt
 #ifdef XML  #ifdef XML
         // asking to use GC memory          // asking to use GC memory
   #if LIBXML_VERSION >= 20507
   #ifdef PA_DEBUG_XML_GC_MEMORY
           xmlGcMemSetup(
                   /*xmlFreeFunc */pa_gc_free_log,
                   /*xmlMallocFunc */pa_gc_malloc_log,
                   /*xmlMallocFunc */pa_gc_malloc_atomic_log,
                   /*xmlReallocFunc */pa_gc_realloc_log,
                   /*xmlStrdupFunc */pa_GC_strdup);
   #else
           xmlGcMemSetup(
                   /*xmlFreeFunc */pa_gc_free_maybeignore,
                   /*xmlMallocFunc */pa_gc_malloc_nonull,
                   /*xmlMallocFunc */pa_gc_malloc_atomic_nonull,
                   /*xmlReallocFunc */pa_gc_realloc_nonull,
                   /*xmlStrdupFunc */pa_GC_strdup);
   #endif
   
   #else
         xmlMemSetup(          xmlMemSetup(
                 /*xmlFreeFunc */pa_gc_free,                  /*xmlFreeFunc */pa_gc_free_maybeignore,
                 /*xmlMallocFunc */pa_gc_malloc,                  /*xmlMallocFunc */pa_gc_malloc,
                 /*xmlReallocFunc */pa_gc_realloc,                  /*xmlReallocFunc */pa_gc_realloc,
                 /*xmlStrdupFunc */pa_GC_strdup);                  /*xmlStrdupFunc */pa_GC_strdup);
 #endif  #endif
   
   #endif
   
           // pcre
           pcre_malloc=pa_gc_malloc;
           pcre_free=pa_gc_free;
   
   
           // cord
         CORD_oom_fn=pa_CORD_oom_fn;          CORD_oom_fn=pa_CORD_oom_fn;
 }  }
   
Line 266  static void gc_substitute_memory_managem Line 315  static void gc_substitute_memory_managem
         @test hint on one should call this for each thread xmlSubstituteEntitiesDefault(1);          @test hint on one should call this for each thread xmlSubstituteEntitiesDefault(1);
 */  */
 void pa_globals_init() {  void pa_globals_init() {
           // global variables 
           cache_managers=new Cache_managers;
   
   
         // in various libraries          // in various libraries
         gc_substitute_memory_management_functions();          gc_substitute_memory_management_functions();
   
Line 321  void pa_globals_init() { Line 374  void pa_globals_init() {
 //      FILE *f=fopen("y:\\xslt.log", "wt");  //      FILE *f=fopen("y:\\xslt.log", "wt");
 //      xsltSetGenericDebugFunc(f/*stderr*/, 0);  //      xsltSetGenericDebugFunc(f/*stderr*/, 0);
   
         // http://localhost/abc -> $ENV{DOCUMENT_ROOT}/abc | ./abc          pa_xml_io_init();
         xmlRegisterInputCallbacks(  
                 xmlFileMatchLocalhost, xmlFileOpenLocalhost,  
                 pa_xmlFileRead, pa_xmlFileClose);  
 #endif  #endif
 }  }
   
   void pa_globals_done() {
           delete cache_managers;  cache_managers=0;
   }
   
 #ifdef _MSC_VER  #ifdef _MSC_VER
   
 #ifndef PA_DEBUG_DISABLE_GC  #ifndef PA_DEBUG_DISABLE_GC
 #       define GC_LIB "/parser3project/win32/gc"  #       define GC_LIB "../../../../win32/gc"
 #       ifdef _DEBUG  #       ifdef _DEBUG
 #               pragma comment(lib, GC_LIB "/Debug/gc.lib")  #               pragma comment(lib, GC_LIB "/Debug/gc.lib")
 #       else  #       else
Line 341  void pa_globals_init() { Line 395  void pa_globals_init() {
 #endif  #endif
   
 #ifdef XML  #ifdef XML
 #       define GNOME_LIBS "/parser3project/win32xml/win32/gnome"  #       define GNOME_LIBS "../../../../win32/gnome"
 #       pragma comment(lib, GNOME_LIBS "/glib/lib/libglib-1.3-11.lib")  #       pragma comment(lib, GNOME_LIBS "/glib/lib/libglib-1.3-11.lib")
 #       ifdef _DEBUG  #       ifdef _DEBUG
   
 #               ifdef LIBXML_STATIC  #               ifdef LIBXML_STATIC
 #                       pragma comment(lib, GNOME_LIBS "/gnome-xml/win32/dsp/libxml2_DebugStatic/libxml2.lib")  #                       pragma comment(lib, GNOME_LIBS "/libxml2-x.x.x/win32/debug/lib/libxml2_a.lib")
 #               else  #               else
 #                       pragma comment(lib, GNOME_LIBS "/gnome-xml/win32/dsp/libxml2_DebugDynamic/libxml2.lib")  #                       pragma comment(lib, GNOME_LIBS "/libxml2-x.x.x/win32/debug/lib/libxml2.lib")
 #               endif  #               endif
   
 #               ifdef LIBXSLT_STATIC  #               ifdef LIBXSLT_STATIC
 #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/dsp/libxslt_DebugStatic/libxslt.lib")  #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/debug/lib/libxslt_a.lib")
 #               else  #               else
 #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/dsp/libxslt_DebugDynamic/libxslt.lib")  #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/debug/lib/libxslt.lib")
 #               endif  #               endif
 #               ifdef LIBEXSLT_STATIC  #               ifdef LIBEXSLT_STATIC
 #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/dsp/libexslt_DebugStatic/libexslt.lib")  #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/debug/lib/libexslt_a.lib")
 #               else  #               else
 #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/dsp/libexslt_DebugDynamic/libexslt.lib")  #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/debug/lib/libexslt.lib")
 #               endif  #               endif
   
 #               ifdef LIBGDOME_STATIC  #               ifdef LIBGDOME_STATIC
 #                       pragma comment(lib, GNOME_LIBS "/gdome2-x.x.x/win32/dsp/libgdome_DebugStatic/libgdome.lib")  #                       pragma comment(lib, GNOME_LIBS "/gdome2-x.x.x/win32/DebugStatic/libgdome.lib")
 #               else  #               else
 #                       pragma comment(lib, GNOME_LIBS "/gdome2-x.x.x/win32/dsp/libgdome_DebugDynamic/libgdome.lib")  #                       pragma comment(lib, GNOME_LIBS "/gdome2-x.x.x/win32/DebugDynamic/libgdome.lib")
 #               endif  #               endif
   
 #else  #else
   
 #               ifdef LIBXML_STATIC  #               ifdef LIBXML_STATIC
 #                       pragma comment(lib, GNOME_LIBS "/gnome-xml/win32/dsp/libxml2_ReleaseStatic/libxml2.lib")  #                       pragma comment(lib, GNOME_LIBS "/libxml2-x.x.x/win32/release/lib/libxml2_a.lib")
 #               else  #               else
 #                       pragma comment(lib, GNOME_LIBS "/gnome-xml/win32/dsp/lixml2_ReleaseDynamic/libxml2.lib")  #                       pragma comment(lib, GNOME_LIBS "/libxml2-x.x.x/win32/release/lib/libxml2.lib")
 #               endif  #               endif
   
 #               ifdef LIBXSLT_STATIC  #               ifdef LIBXSLT_STATIC
 #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/dsp/libxslt_ReleaseStatic/libxslt.lib")  #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/release/lib/libxslt_a.lib")
 #               else  #               else
 #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/dsp/libxslt_ReleaseDynamic/libxslt.lib")  #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/release/lib/libxslt.lib")
 #               endif  #               endif
 #               ifdef LIBEXSLT_STATIC  #               ifdef LIBEXSLT_STATIC
 #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/dsp/libexslt_ReleaseStatic/libexslt.lib")  #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/release/lib/libexslt_a.lib")
 #               else  #               else
 #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/dsp/libexslt_ReleaseDynamic/libexslt.lib")  #                       pragma comment(lib, GNOME_LIBS "/libxslt-x.x.x/win32/release/lib/libexslt.lib")
 #               endif  #               endif
   
 #               ifdef LIBGDOME_STATIC  #               ifdef LIBGDOME_STATIC
 #                       pragma comment(lib, GNOME_LIBS "/gdome2-x.x.x/win32/dsp/libgdome_ReleaseStatic/libgdome.lib")  #                       pragma comment(lib, GNOME_LIBS "/gdome2-x.x.x/win32/ReleaseStatic/libgdome.lib")
 #               else  #               else
 #                       pragma comment(lib, GNOME_LIBS "/gdome2-x.x.x/win32/dsp/libgdome_ReleaseDynamic/libgdome.lib")  #                       pragma comment(lib, GNOME_LIBS "/gdome2-x.x.x/win32/ReleaseDynamic/libgdome.lib")
 #               endif  #               endif
   
 #       endif  #       endif

Removed from v.1.152.2.19.2.14  
changed lines
  Added in v.1.175


E-mail: