Diff for /parser3/src/main/untaint.C between versions 1.61 and 1.115.2.12.2.1

version 1.61, 2001/09/11 09:20:57 version 1.115.2.12.2.1, 2003/03/18 15:14:19
Line 1 Line 1
 /** @file  /** @file
         Parser: String class part: untaint mechanizm.          Parser: String class part: untaint mechanizm.
   
         Copyright(c) 2001 ArtLebedev Group(http://www.artlebedev.com)          Copyright(c) 2001-2003 ArtLebedev Group (http://www.artlebedev.com)
           Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)
         Author: Alexander Petrosyan <paf@design.ru>(http://design.ru/paf)  
 */  */
 static const char *RCSId="$Id$";   
   
 #include "pa_pool.h"  static const char* IDENT_UNTAINT_C="$Date$";
   
   
 #include "pa_string.h"  #include "pa_string.h"
 #include "pa_hash.h"  #include "pa_hash.h"
 #include "pa_exception.h"  #include "pa_exception.h"
Line 15  static const char *RCSId="$Id$"; Line 15  static const char *RCSId="$Id$";
 #include "pa_globals.h"  #include "pa_globals.h"
 #include "pa_sql_connection.h"  #include "pa_sql_connection.h"
 #include "pa_dictionary.h"  #include "pa_dictionary.h"
   #include "pa_common.h"
   #include "pa_charset.h"
   #include "pa_request_charsets.h"
   
 #define escape(action) \  #define escape(action) \
         { \          { \
                 const char *src=row->item.ptr; \                  const char* src=fragment->ptr; \
                 for(int size=row->item.size; size--; src++) \                  for(int size=fragment->size; size--; src++) \
                         action \                          action \
         }          }
 #define _default  default: *dest++=*src; break  #define _default  default: *dest++=*src; break
 #define encode(need_encode_func, prefix)  \  #define encode(need_encode_func, prefix)  \
                 default: \  
                         if(need_encode_func(*src)) { \                          if(need_encode_func(*src)) { \
                                 static const char *hex="0123456789ABCDEF"; \                                  static const char* hex="0123456789ABCDEF"; \
                                 char chunk[3]={prefix}; \                                  char chunk[3]={prefix}; \
                                 chunk[1]=hex[((unsigned char)*src)/0x10]; \                                  chunk[1]=hex[((unsigned char)*src)/0x10]; \
                                 chunk[2]=hex[((unsigned char)*src)%0x10]; \                                  chunk[2]=hex[((unsigned char)*src)%0x10]; \
Line 40  static const char *RCSId="$Id$"; Line 42  static const char *RCSId="$Id$";
                 dest+=bsize; \                  dest+=bsize; \
   
 inline bool need_file_encode(unsigned char c){  inline bool need_file_encode(unsigned char c){
     if((c>='0') &&(c<='9') ||(c>='A') &&(c<='Z') ||(c>='a') &&(c<='z'))           // russian letters and space ENABLED
                 return false;          // encoding only these...
           return strchr(
     return !strchr(                            "*?'\"<>|"
 #ifdef WIN32  #ifndef WIN32
                 ":\\~"                            ":\\~"
 #endif  #endif
                 "./()_-", c);                            , c)!=0;
 }  }
 inline bool need_uri_encode(unsigned char c){  inline bool need_uri_encode(unsigned char c){
     if((c>='0') &&(c<='9') ||(c>='A') &&(c<='Z') ||(c>='a') &&(c<='z'))       if((c>='0') &&(c<='9') ||(c>='A') &&(c<='Z') ||(c>='a') &&(c<='z')) 
Line 64  inline bool need_http_header_encode(unsi Line 66  inline bool need_http_header_encode(unsi
   
 //  //
   
 static const char * String_Untaint_lang_name[]={  static const char*  String_Untaint_lang_name[]={
         "U", ///< zero value handy for hash lookup @see untaint_lang_name2enum          "U", ///< zero value handy for hash lookup @see untaint_lang_name2enum
         "C", ///< clean          "C", ///< clean
         "T",  ///< tainted, untaint language as assigned later           "T",  ///< tainted, untaint language as assigned later 
Line 75  static const char * String_Untaint_lang_ Line 77  static const char * String_Untaint_lang_
                         just a flag, that value not stored                          just a flag, that value not stored
                 */                  */
         "A",     ///< leave all characters intact          "A",     ///< leave all characters intact
         "F", ///< filename          "F", ///< file specification
         "H",    ///< text in HTTP response header          "H",    ///< ext in HTTP response header
         "M",    ///< text in mail header          "M",    ///< text in mail header
         "URI",       ///< text in uri          "URI",       ///< text in uri
         "T",     ///< ^table:set body          "T",     ///< ^table:set body
         "SQL",       ///< ^table:sql body          "SQL",       ///< ^table:sql body
         "JS",        ///< JavaScript code          "JS",        ///< JavaScript code
         "HTML",      ///< HTML code (for editing)          "XML",          ///< ^dom:set xml
         "UHTML", ///< HTML code with USER chars          "HTML"      ///< HTML code (for editing)
 };  };
   
   
 // String  // String
   
 static bool typo_present(Array::Item *value, const void *info) {  
         Array *row=static_cast<Array *>(value);  
         const char *src=static_cast<const char *>(info);  
   
         int partial;  
         row->get_string(0)->cmp(partial, src);  
         return   
                 partial==0 || // full match  
                 partial==1; // typo left column starts 'src'  
 }  
   
 /*  /*
   
 HTTP-header    = field-name ":" [ field-value ] CRLF  HTTP-header    = field-name ":" [ field-value ] CRLF
Line 135  quoted-pair    = "\" CHAR Line 126  quoted-pair    = "\" CHAR
   
   if(strchr("()<>@,;:\\\"/[]?={} \t", *ptr))    if(strchr("()<>@,;:\\\"/[]?={} \t", *ptr))
 */  */
 inline bool need_quote_http_header(const char *ptr, size_t size) {  inline bool need_quote_http_header(const char* ptr, size_t size) {
         for(; size--; ptr++)          for(; size--; ptr++)
                 if(strchr(";\\\"= \t" /* excluded ()<>@, :/ ? []{} */, *ptr))                  if(strchr(";\\\"= \t" /* excluded ()<>@, :/ ? []{} */, *ptr))
                         return true;                          return true;
         return false;          return false;
 }  }
   
 /** @todo maybe additional check "are all pieces are clean?" would be profitable?  //#include "pa_sapi.h"
         @todo fix potential forigins_mode buf overrun  /** 
           appends to other String,
           marking all tainted pieces of it with @a lang.
           or marking ALL pieces of it with a @a lang when @a forced to,
           and propagating OPTIMIZE language bit.
 */  */
 size_t String::cstr_bufsize(Untaint_lang lang) const {  String& String::append_to(String& dest, String_UL lang, bool forced) const {
         return (lang==UL_AS_IS?size():size()*UNTAINT_TIMES_BIGGER*(forigins_mode?10:1)) +1;          if(is_empty())
                   return dest;
   
           // without language-chage string?
           if(lang==UL_PASS_APPENDED) {
                   // can simply append elements
                   ssize_t delta=fused-(dest.fallocated-dest.fused);
                   if(delta>0) // they don't fit?
                           dest.expand(delta);
   
                   // felements[fused...]=src.felements[0..fused], fused+=src.fused
                   memcpy(&dest.felements[dest.fused], felements, sizeof(felements[0])*fused);
                   dest.fused+=fused;
                   dest.fsize+=fsize;
                   return dest;
           }
   
           // manually unrolled code to avoid do{if(const)} constructs
           if(forced) 
                   STRING_FOREACH_FRAGMENT(
                           dest.APPEND(fragment->ptr, fragment->size, 
                                   lang, //forcing passed lang
                                   fragment->origin.file, fragment->origin.line);
                   )
           else if(lang==UL_PASS_APPENDED) 
                   STRING_FOREACH_FRAGMENT(
                           dest.APPEND(fragment->ptr, fragment->size, 
                                   fragment->lang, // passing item's lang
                                   fragment->origin.file, fragment->origin.line);
                   )
           else if(lang&UL_OPTIMIZE_BIT) // main idea here
                   // tainted piece would get OPTIMIZED bit from 'lang'
                   // clean piece would be marked OPTIMIZED manually
                   // pieces with determined languages [not tainted|clean] would retain theirs langs
                   STRING_FOREACH_FRAGMENT(
                           dest.APPEND(fragment->ptr, fragment->size, 
                                   fragment->lang==UL_TAINTED?lang:(
                                           fragment->lang==UL_CLEAN?UL_CLEAN|UL_OPTIMIZE_BIT: // ORing with OPTIMIZED flag
                                                   fragment->lang
                                   ), 
                                   fragment->origin.file, fragment->origin.line);
                   )
           else
                   STRING_FOREACH_FRAGMENT(
                           dest.APPEND(fragment->ptr, fragment->size, 
                                   fragment->lang==UL_TAINTED?lang:fragment->lang,
                                   fragment->origin.file, fragment->origin.line);
                   );
   
           return dest;
   }
   
   size_t String::cstr_bufsize(Untaint_lang lang,
                                                           SQL_Connection *connection,
                                                           const Request_charsets *charsets) const {
           size_t dest=1; // for terminating 0
           STRING_FOREACH_FRAGMENT(
                   String_UL to_lang=lang==UL_UNSPECIFIED?fragment->lang:lang;
   
                   switch(to_lang & ~UL_OPTIMIZE_BIT) {
                   case UL_CLEAN:
                   case UL_TAINTED:
                   case UL_AS_IS:
                           // clean piece
   
                           // tainted piece, but undefined untaint language
                           // for VString.as_double of tainted values
                           // for ^process{body} evaluation
   
                           // tainted, untaint language: as-is
                           dest+=fragment->size;
                           break;
                   case UL_FILE_SPEC:
                           // tainted, untaint language: file [name]
                           dest+=fragment->size*3/* worst: Z->%XX */;
                           break;
                   case UL_URI:
                           // tainted, untaint language: uri
                           dest+=fragment->size*6*3/* worst utf8 x worst Z->%XX */;
                           break;
                   case UL_HTTP_HEADER:
                           // tainted, untaint language: http-field-content-text
                           dest+=fragment->size*3/* worst: Z->%XX */;
                           break;
                   case UL_MAIL_HEADER:
                           // tainted, untaint language: mail-header
                           if(charsets) {
                                   int parts_count=1;
                                   const char* prev=fragment->ptr;
                                   size_t size=fragment->size;
                                   while(const char* comma_at=(const char*)memchr(prev, ',', size)) {
                                           parts_count++;
                                           size-=comma_at-prev;
                                           prev=comma_at+1;
                                   }
                                   // Subject: Re: parser3: =?koi8-r?Q?=D3=C5=CD=C9=CE=C1=D2?=
                                   dest+=
                                           fragment->size*3+
                                           parts_count*(charsets->mail().name()->size()+MAX_STRING/* worst: =?charset?Q?=%XX?= */);
                           } else
                                   dest+=fragment->size;
                           break;
                   case UL_TABLE: 
                           // tainted, untaint language: table
                           dest+=fragment->size;
                           break;
                   case UL_SQL:
                           // tainted, untaint language: sql
                           if(connection)
                                   dest+=connection->quote(0, fragment->ptr, fragment->size);
                           break;
                   case UL_JS:
                           escape(switch(*src) {
                                   case '"': case '\'': case '\n': case '\\': case '\xFF':
                                           dest+=2;  break;
                                   default: 
                                           dest++;  break;
                           });
                           break;
                   case UL_XML:
                           escape(switch(*src) {
                                   case '&': case '>': case '<': case '"': case '\'': 
                                           dest+= 6;  break;
                                   default: 
                                           dest++;  break;
                           });
                           break;
                   case UL_HTML:
                           escape(switch(*src) {
                                   case '&': 
                                   case '>': 
                                   case '<': 
                                   case '"': 
                                           dest+=6;  break;
                                   default: 
                                           dest++;  break;
                           });
                           break;
                   }
           );
           return dest;
 }  }
   
 /** @todo fix theoretical \n mem overrun in TYPO replacements  /** http://www.ietf.org/rfc/rfc2047.txt
   RFC
   (3) As a replacement for a 'word' entity within a 'phrase', for example,
       one that precedes an address in a From, To, or Cc header.  The ABNF
       definition for 'phrase' from RFC 822 thus becomes:
   
       phrase = 1*( encoded-word / word )
   
       In this case the set of characters that may be used in a "Q"-encoded
       'encoded-word' is restricted to: <upper and lower case ASCII
       letters, decimal digits, "!", "*", "+", "-", "/", "=", and "_"
       (underscore, ASCII 95.)>.  An 'encoded-word' that appears within a
       'phrase' MUST be separated from any adjacent 'word', 'text' or
       'special' by 'linear-white-space'.
   ...
      (2) The 8-bit hexadecimal value 20 (e.g., ISO-8859-1 SPACE) may be
          represented as "_" (underscore, ASCII 95.).  (This character may
          not pass through some internetwork mail gateways, but its use
          will greatly enhance readability of "Q" encoded data with mail
          readers that do not support this encoding.)  Note that the "_"
          always represents hexadecimal 20, even if the SPACE character
          occupies a different code position in the character set in use.
   
           paf: obviously, 
                   without "=", or one could not differ "=E0" and "russian letter a"
                   and without "_", or in would mean 0x20
 */  */
   static bool mail_header_char_valid_within_Qencoded(char c) {
           return c>='A' && c<='Z'
                   || c>='a' && c<='Z'
                   || c>='0' && c<='9'
                   || strchr("!*+-/", c);
   }
 char *String::store_to(char *dest, Untaint_lang lang,   char *String::store_to(char *dest, Untaint_lang lang, 
                                            SQL_Connection *connection,                                             SQL_Connection *connection,
                                            const char *charset) const {                                             const Request_charsets *charsets) const {
         // $MAIN:html-typo table          // WARNING:
         Dictionary *user_typo_dict=static_cast<Dictionary *>(pool().tag());          //       before any changes check cstr_bufsize first!!!
         Dictionary *typo_dict=user_typo_dict?user_typo_dict:default_typo_dict;  
   
         bool whitespace=true;          bool whitespace=true;
         const Chunk *chunk=&head;   //      STRING_FOREACH_FRAGMENT(
         do {          element_type *last = felements+fused; element_type *fragment = felements; for(; fragment<last; fragment++) { 
                 const Chunk::Row *row=chunk->rows;  
                 for(size_t i=0; i<chunk->count; i++, row++) {                  String_UL to_lang=lang==UL_UNSPECIFIED?fragment->lang:lang;
                         if(row==append_here)  
                                 goto break2;                  char *start=dest;
   
                         Untaint_lang to_lang=lang==UL_UNSPECIFIED?row->item.lang:lang;                  switch(to_lang & ~UL_OPTIMIZE_BIT) {
                   case UL_CLEAN:
                         char *dest_before_origins=dest;                  case UL_TAINTED:
                   case UL_AS_IS:
                         if(forigins_mode) {                          // clean piece
 #ifndef NO_STRING_ORIGIN  
                                 if(row->item.origin.file)                          // tainted piece, but undefined untaint language
                                         dest+=sprintf(dest, "%s(%d)",                          // for VString.as_double of tainted values
                                                 row->item.origin.file,                          // for ^process{body} evaluation
                                                 1+row->item.origin.line);  
                                 else                          // tainted, untaint language: as-is
                                         dest+=sprintf(dest, "unknown");                          memcpy(dest, fragment->ptr, fragment->size); 
 #endif                          dest+=fragment->size;
                                 dest+=sprintf(dest, "#%s: ",                          break;
                                         String_Untaint_lang_name[to_lang]);                  case UL_FILE_SPEC:
                           // tainted, untaint language: file [name]
                           escape(
                                   // Macintosh has problems with small Russian letter 'r'
                                   if( *src=='\xF0' && charsets && *charsets->source().name()=="windows-1251" ) {
                                           // fixing that letter for most common charset
                                           to_char('p');
                                   } else // fallback to default
                                           encode(need_file_encode, '_'); 
                           );
                           break;
                   case UL_URI:
                           // tainted, untaint language: uri
                           const void *client_ptr;
                           size_t client_size;
                           if(charsets) 
                                   Charset::transcode(charsets->pool(), 
                                           charsets->source(), fragment->ptr, fragment->size,
                                           charsets->client(), client_ptr, client_size);
                           else {
                                   client_ptr=fragment->ptr; 
                                   client_size=fragment->size;
                         }                          }
                         char *dest_after_origins=dest;  
   
                         // WARNING:                          {
                         //      string can grow only UNTAINT_TIMES_BIGGER                                  const char* src=(const char* )client_ptr;
                         switch(to_lang) {                                  for(int size=client_size; size--; src++) 
                         case UL_CLEAN:  
                                 // clean piece  
                                 { // optimizing whitespace  
                                         const char *src=row->item.ptr;   
                                         for(int size=row->item.size; size--; src++)  
                                                 switch(*src) {  
                                                 case ' ': case '\n': case '\r': case '\t':  
                                                         if(!whitespace) {  
                                                                 *dest++=*src;  
                                                                 whitespace=true;  
                                                         }  
                                                         break;  
                                                 default:  
                                                         whitespace=false;  
                                                         *dest++=*src;  
                                                         break;  
                                                 }  
                                 }  
                                 break;  
                         case UL_TAINTED:  
                                 // tainted piece, but undefined untaint language  
                                 // for VString.as_double of tainted values  
                                 // for ^process{body} evaluation  
                         case UL_AS_IS:  
                                 // tainted, untaint language: as-is  
                                 memcpy(dest, row->item.ptr, row->item.size);   
                                 dest+=row->item.size;  
                                 break;  
                         case UL_FILE_NAME:  
                                 // tainted, untaint language: file [name]  
                                 escape(switch(*src) {  
                                         case ' ': to_char('_');  break;  
                                         encode(need_file_encode, '+');  
                                 });  
                                 break;  
                         case UL_URI:  
                                 // tainted, untaint language: uri  
                                 escape(switch(*src) {  
                                         case ' ': to_char('+');  break;  
                                         encode(need_uri_encode, '%');                                          encode(need_uri_encode, '%');
                                 });                          }
                                 break;                          break;
                         case UL_HTTP_HEADER:                  case UL_HTTP_HEADER:
                                 // tainted, untaint language: http-header                          // tainted, untaint language: http-field-content-text
                                 if(need_quote_http_header(row->item.ptr, row->item.size)) {                          escape(
                                         *dest++='\"';                                  encode(need_uri_encode, '%');
                                         escape(switch(*src) {                          );
                                                 case '\"': to_string("\\\"", 2);  break;                          break;
                                                 _default;                  case UL_MAIL_HEADER:
                                         });                          // tainted, untaint language: mail-header
                                         *dest++='\"';                          // http://www.ietf.org/rfc/rfc2047.txt
                                 } else {                          if(charsets) {
                                         memcpy(dest, row->item.ptr, row->item.size);                                   const void *mail_ptr=fragment->ptr;
                                         dest+=row->item.size;                                  size_t mail_size=fragment->size;
                                 }                                  const char* charset_name=charsets->mail().name()->cstr();
                                 break;  
                         case UL_MAIL_HEADER:                                  // Subject: Re: parser3: =?koi8-r?Q?=D3=C5=CD=C9=CE=C1=D2?=
                                 // tainted, untaint language: mail-header                                  const char* src=(const char* )mail_ptr;
                                 if(charset) {                                  bool to_quoted_printable=false;
                                         // Subject: Re: parser3: =?koi8-r?Q?=D3=C5=CD=C9=CE=C1=D2?=  
                                         const char *src=row->item.ptr;                                   bool email=false;
                                         bool to_quoted_printable=false;                                  for(const char* end=src+mail_size; src<end; src++) {
                                         for(int size=row->item.size; size--; src++) {                                          //RFC   + An 'encoded-word' MUST NOT appear in any portion of an 'addr-spec'.
                                                 if(*src & 0x80) {                                          if(to_quoted_printable && (*src==',' || *src=='<')) {
                                                         if(!to_quoted_printable) {                                                  email=*src=='<';
                                                                 dest+=sprintf(dest, "=?%.15s?Q?", charset);  
                                                                 to_quoted_printable=true;  
                                                         }  
                                                         dest+=sprintf(dest, "=%02X", *src & 0xFF);  
                                                 } else {  
                                                         *dest++=*src;                                             
                                                 }  
                                         }  
                                         if(to_quoted_printable) // close  
                                                 dest+=sprintf(dest, "?=");                                                  dest+=sprintf(dest, "?=");
                                 } else {                                                  to_quoted_printable=false;
                                         memcpy(dest, row->item.ptr, row->item.size);                                           }
                                         dest+=row->item.size;                                          if(!email && (
                                 }                                                  !to_quoted_printable && (*src & 0x80)  // starting quote-printable-encoding on first 8bit char
                                 break;                                                  || to_quoted_printable && !mail_header_char_valid_within_Qencoded(*src)
                         case UL_TABLE:                                                   )) {
                                 // tainted, untaint language: table                                                  if(!to_quoted_printable) {
                                 escape(switch(*src) {                                                          dest+=sprintf(dest, "=?%s?Q?", charset_name.get());
                                         case '\t': to_char(' ');  break;                                                          to_quoted_printable=true;
                                         case '\n': to_char(' ');  break;  
                                         _default;  
                                 });  
                                 break;  
                         case UL_SQL:  
                                 // tainted, untaint language: sql  
                                 if(connection)  
                                         dest+=connection->quote(dest, row->item.ptr, row->item.size);  
                                 else  
                                         THROW(0, 0,  
                                                 this,  
                                                 "untaint in SQL language failed - no connection specified");  
                                 break;  
                         case UL_JS:  
                                 escape(switch(*src) {  
                                         case '"': to_string("\\\"", 2);  break;  
                                         case '\'': to_string("\\'", 2);  break;  
                                         case '\n': to_string("\\n", 2);  break;  
                                         case '\\': to_string("\\\\", 2);  break;  
                                         case '\xFF': to_string("\\\xFF", 2);  break;  
                                         _default;  
                                 });  
                                 break;  
                         case UL_XML:  
                                 escape(switch(*src) {  
                                         case '&': to_string("&amp;", 5);  break;  
                                         case '>': to_string("&gt;", 4);  break;  
                                         case '<': to_string("&lt;", 4);  break;  
                                         case '"': to_string("&quot;", 6);  break;  
                                         case '\'': to_string("&apos;", 6);  break;  
                                         _default;  
                                 });  
                                 break;  
                         case UL_HTML:  
                                 escape(switch(*src) {  
                                         case '&': to_string("&amp;", 5);  break;  
                                         case '>': to_string("&gt;", 4);  break;  
                                         case '<': to_string("&lt;", 4);  break;  
                                         case '"': to_string("&quot;", 6);  break;  
                                         _default;  
                                 });  
                                 break;  
                         case UL_USER_HTML: {  
                                 // tainted, untaint language: html-typo  
                                 if(!typo_dict) // never, always has default  
                                         THROW(0, 0,  
                                                 this,  
                                                 "untaint to user-html lang failed, no typo table");  
   
                                 char *html_for_typo=  
                                         (char *)malloc(row->item.size*2/* '\n' -> '\' 'n' */+1);  
                                 // note:  
                                 //   there still is a possibility that user   
                                 //   would not replace \n as she supposed to  
                                 //   and rather replace \ and n into huge strings  
                                 //   thus causing memory overrun  
                                 //   this can be dealed by allocating *2 memory, but that's too expensive  
                                 size_t html_for_typo_size;  
                                 { // local dest  
                                         char *dest=html_for_typo;  
                                         escape(switch(*src) {  
                                                 // convinient name for typo match "\n"  
                                                 case '\r':   
                                                         to_string("\\n", 2); // \r -> "\n"  
                                                         if(size && src[1]=='\n') { // \r\n -> remove \n  
                                                                 size--; src++;  
                                                         }  
                                                         break;  
                                                 case '\n':   
                                                         to_string("\\n", 2);  
                                                         break;  
                                                 _default;  
                                         });  
                                         *dest=0;  
                                         html_for_typo_size=dest-html_for_typo;  
                                 }  
                                 // typo table replacements  
                                 const char *src=html_for_typo;  
                                 do {  
                                         // there is a row where first column starts 'src'  
                                         if(Table::Item *item=typo_dict->first_that_starts(src)) {  
                                                 // get a=>b values  
                                                 const String& a=*static_cast<Array *>(item)->get_string(0);  
                                                 const String& b=*static_cast<Array *>(item)->get_string(1);  
                                                 // overflow check:  
                                                 //   b allowed to be max UNTAINT_TIMES_BIGGER then a  
                                                 if(b.size()>UNTAINT_TIMES_BIGGER*a.size()) {  
                                                         pool().set_tag(0); // avoid recursion  
                                                         THROW(0, 0,   
                                                                 &b,   
                                                                 "is %g times longer then '%s', "  
                                                                 "while maximum, handled by Parser, is %d",   
                                                                         ((double)b.size())/a.size(),   
                                                                         a.cstr(),   
                                                                         UNTAINT_TIMES_BIGGER);  
                                                 }                                                  }
                                                                                                   //RFC Upper case should be used for hexadecimal digits "A" through "F"
                                                 // skip 'a' in 'src'                                                  if(*src == 0x20) // RFC The 8-bit hexadecimal value 20 (e.g., ISO-8859-1 SPACE) 
                                                 src+=a.size();                                                          *dest++='_'; // RFC may be represented as "_" 
                                                 // write 'b' to 'dest'                                                  else
                                                 b.store_to(dest);                                                          dest+=sprintf(dest, "=%02X", *src & 0xFF);
                                                 // skip 'b' in 'dest'  
                                                 dest+=b.size();  
                                         } else                                          } else
                                                 *dest++=*src++;                                                  *dest++=*src;
                                 } while(*src);                                          if(*src=='>')
                                 break;                                                  email=false;
                                 }                                  }
                         default:                                  if(to_quoted_printable) // close
                                 THROW(0, 0,                                           dest+=sprintf(dest, "?=");
                                         this,                           
                                         "unknown untaint language #%d of %d piece",                           } else {
                                                 static_cast<int>(row->item.lang),                                   memcpy(dest, fragment->ptr, fragment->size); 
                                                 i); // never                                  dest+=fragment->size;
                                 break; // never  
                         }                          }
                           break;
                   case UL_TABLE: 
                           // tainted, untaint language: table
                           escape(switch(*src) {
                                   case '\t': to_char(' ');  break;
                                   case '\n': to_char(' ');  break;
                                   _default;
                           });
                           break;
                   case UL_SQL:
                           // tainted, untaint language: sql
                           if(connection)
                                   dest+=connection->quote(dest, fragment->ptr, fragment->size);
                           else
                                   throw Exception(Exception::undefined_type,
                                           Exception::undefined_source,
                                           "untaint in SQL language failed - no connection specified");
                           break;
                   case UL_JS:
                           escape(switch(*src) {
                                   case '"': to_string("\\\"", 2);  break;
                                   case '\'': to_string("\\'", 2);  break;
                                   case '\n': to_string("\\n", 2);  break;
                                   case '\\': to_string("\\\\", 2);  break;
                                   case '\xFF': to_string("\\\xFF", 2);  break;
                                   _default;
                           });
                           break;
                   case UL_XML:
                           escape(switch(*src) {
                                   case '&': to_string("&amp;", 5);  break;
                                   case '>': to_string("&gt;", 4);  break;
                                   case '<': to_string("&lt;", 4);  break;
                                   case '"': to_string("&quot;", 6);  break;
                                   case '\'': to_string("&apos;", 6);  break;
                                   _default;
                           });
                           break;
                   case UL_HTML:
                           escape(switch(*src) {
                                   case '&': to_string("&amp;", 5);  break;
                                   case '>': to_string("&gt;", 4);  break;
                                   case '<': to_string("&lt;", 4);  break;
                                   case '"': to_string("&quot;", 6);  break;
                                   _default;
                           });
                           break;
                   default:
                           throw Exception(Exception::undefined_type, 
                                   Exception::undefined_source, 
                                   "unknown untaint language #%d", 
                                           static_cast<int>(to_lang)); // should never
                           break; // never
                   }
   
                         if((lang==UL_UNSPECIFIED?row->item.lang:lang)!=UL_CLEAN)                  if(to_lang & UL_OPTIMIZE_BIT) { 
                                 whitespace=false;                          // optimizing whitespace
                           char *stop=dest;  dest=start;
                         if(forigins_mode)                          for(char *src=start; src<stop; src++)
                                 if(dest==dest_after_origins) // never moved==optimized space                                  switch(*src) {
                                         dest=dest_before_origins;                                  // of all consequent white space chars leaving only first one
                                 else {                                  case ' ': case '\r': case '\n': case '\t':
                                         for(char *p=dest_after_origins; p<dest; p++)                                          if(!whitespace) {
                                                 if(*p=='\n')                                                  *dest++=*src;
                                                         *p='|';                                                  whitespace=true;
                                           }
                                           break;
                                   default:
                                           whitespace=false;
                                           *dest++=*src;
                                           break;
                                   };
                   } else // piece without optimization
                           whitespace=false;
   //      );
           }
   
                                         to_char('\n');  
                                 }  
                 }  
                 chunk=row->link;  
         } while(chunk);  
 break2:  
         return dest;          return dest;
 }  }
   
   char *String::cstr_debug_origins() const {
           //_asm int 3;
           char *result=new char[size()+fused*MAX_STRING*2];
           char *dest=result;
           
           STRING_FOREACH_FRAGMENT(
   IFNDEF_NO_STRING_ORIGIN(
                   if(fragment->origin.file)
                           dest+=sprintf(dest, ORIGIN_FILE_LINE_FORMAT,
                                   fragment->origin.file,
                                   1+fragment->origin.line);
                   else
                           dest+=sprintf(dest, "<unknown>");
   );
                   String_UL show_lang=fragment->lang & ~UL_OPTIMIZE_BIT;
                   if(show_lang>=sizeof(String_Untaint_lang_name)/sizeof(String_Untaint_lang_name[0]))
                           throw Exception(Exception::undefined_type, 
                                   Exception::undefined_source, 
                                   "unknown untaint language #%d", 
                                           static_cast<int>(show_lang)); // sould never
   
                   dest+=sprintf(dest, "#%s%s: ",
                           String_Untaint_lang_name[show_lang],
                           fragment->lang & UL_OPTIMIZE_BIT?".O":"");
                   char *dest_after_origins=dest;
   
                   memcpy(dest, fragment->ptr, fragment->size); 
                   dest+=fragment->size;
   
                   remove_crlf(dest_after_origins, dest);
                   to_char('\n');
           );
   
           *dest=0;
           return result;
   }

Removed from v.1.61  
changed lines
  Added in v.1.115.2.12.2.1


E-mail: