[BACK]Return to untaint.C CVS log [TXT] [DIR] Up to [parser3project] / parser3 / src / main

Diff for /parser3/src/main/untaint.C between versions 1.21 and 1.115.2.6

version 1.21, 2001/03/25 10:30:43 version 1.115.2.6, 2003/01/31 12:34:38
Line 1 Line 1
 /** @file  /** @file
         Parser: String class part: untaint mechanizm.          Parser: String class part: untaint mechanizm.
   
         Copyright(c) 2001 ArtLebedev Group(http://www.artlebedev.com)          Copyright(c) 2001-2003 ArtLebedev Group (http://www.artlebedev.com)
           Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)
         Author: Alexander Petrosyan <paf@design.ru>(http://design.ru/paf)  
   
         $Id$  
 */  */
   
 #include "pa_config_includes.h"  static const char* IDENT_UNTAINT_C="$Date$";
   
 #include "pa_pool.h"  #include "pa_pool.h"
   #include "pa_value_includes.h"
 #include "pa_string.h"  #include "pa_string.h"
 #include "pa_hash.h"  #include "pa_hash.h"
 #include "pa_exception.h"  #include "pa_exception.h"
 #include "pa_table.h"  #include "pa_table.h"
   #include "pa_globals.h"
   #include "pa_sql_connection.h"
   #include "pa_dictionary.h"
   #include "pa_common.h"
   #include "pa_charset.h"
   #include "pa_request_charsets.h"
   
 #define escape(action) \  #define escape(action) \
         { \          { \
                 const char *src=row->item.ptr; \                  const char* src=fragment->ptr; \
                 for(int size=row->item.size; size--; src++) \                  for(int size=fragment->size; size--; src++) \
                         action \                          action \
         }          }
 #define _default  default: *dest++=*src; break  #define _default  default: *dest++=*src; break
 #define encode(need_encode_func, prefix)  \  #define encode(need_encode_func, prefix)  \
                 default: \  
                         if(need_encode_func(*src)) { \                          if(need_encode_func(*src)) { \
                                 static const char *hex="0123456789ABCDEF"; \                                  static const char* hex="0123456789ABCDEF"; \
                                 char chunk[3]={prefix}; \                                  char chunk[3]={prefix}; \
                                 chunk[1]=hex[((unsigned char)*src)/0x10]; \                                  chunk[1]=hex[((unsigned char)*src)/0x10]; \
                                 chunk[2]=hex[((unsigned char)*src)%0x10]; \                                  chunk[2]=hex[((unsigned char)*src)%0x10]; \
                                 strncpy(dest, chunk, 3);  dest+=3; \                                  memcpy(dest, chunk, 3);  dest+=3; \
                         } else \                          } else \
                                 *dest++=*src; \                                  *dest++=*src; \
                         break                          break
 #define to_char(c)  *dest++=c  #define to_char(c)  *dest++=c
 #define to_string(b, bsize)  \  #define to_string(b, bsize)  \
                 strncpy(dest, b, bsize); \                  memcpy(dest, b, bsize); \
                 dest+=bsize; \                  dest+=bsize; \
   
 inline bool need_file_encode(unsigned char c){  inline bool need_file_encode(unsigned char c){
     if((c>='0') &&(c<='9') ||(c>='A') &&(c<='Z') ||(c>='a') &&(c<='z'))           // russian letters and space ENABLED
                 return false;          // encoding only these...
           return strchr(
     return !strchr("./", c);                            "*?'\"<>|"
   #ifndef WIN32
                             ":\\~"
   #endif
                             , c)!=0;
 }  }
 inline bool need_uri_encode(unsigned char c){  inline bool need_uri_encode(unsigned char c){
     if((c>='0') &&(c<='9') ||(c>='A') &&(c<='Z') ||(c>='a') &&(c<='z'))       if((c>='0') &&(c<='9') ||(c>='A') &&(c<='Z') ||(c>='a') &&(c<='z')) 
Line 51  inline bool need_uri_encode(unsigned cha Line 58  inline bool need_uri_encode(unsigned cha
   
     return !strchr("_-./", c);      return !strchr("_-./", c);
 }  }
 inline bool need_header_encode(unsigned char c){  inline bool need_http_header_encode(unsigned char c){
     if(strchr(" , :", c))      if(strchr(" , :", c))
                 return false;                  return false;
   
         return need_uri_encode(c);          return need_uri_encode(c);
 }  }
   
   //
   
   static const char*  String_Untaint_lang_name[]={
           "U", ///< zero value handy for hash lookup @see untaint_lang_name2enum
           "C", ///< clean
           "T",  ///< tainted, untaint language as assigned later 
           // untaint languages. assigned by ^untaint[lang]{...}
           "P",
                   /**<
                           leave language built into string being appended.
                           just a flag, that value not stored
                   */
           "A",     ///< leave all characters intact
           "F", ///< file specification
           "H",    ///< ext in HTTP response header
           "M",    ///< text in mail header
           "URI",       ///< text in uri
           "T",     ///< ^table:set body
           "SQL",       ///< ^table:sql body
           "JS",        ///< JavaScript code
           "XML",          ///< ^dom:set xml
           "HTML"      ///< HTML code (for editing)
   };
   
   
 // String  // String
   
 static bool typo_present(Array::Item *value, const void *info) {  /*
         Array *row=static_cast<Array *>(value);  
         const char *src=static_cast<const char *>(info);  HTTP-header    = field-name ":" [ field-value ] CRLF
   
         int partial;         field-name     = token
         row->get_string(0)->cmp(src, partial);         field-value    = *( field-content | LWS )
         return   
                 partial==0 || // full match         field-content  = <the OCTETs making up the field-value
                 partial==1; // typo left column starts 'src'                          and consisting of either *TEXT or combinations
 }                          of token, tspecials, and quoted-string>
   
 /// @todo optimize whitespaces for all but 'html'  
 char *String::store_to(char *dest) const {  
         // $MAIN:html-typo table  word           = token | quoted-string
         Table *user_typo_table=static_cast<Table *>(pool().tag());  
         Table *typo_table=user_typo_table?user_typo_table:default_typo_table;  token          = 1*<any CHAR except CTLs or tspecials>
   
         const Chunk *chunk=&head;   
         do {  
                 const Chunk::Row *row=chunk->rows;  tspecials      = "(" | ")" | "<" | ">" | "@"
                 for(int i=0; i<chunk->count; i++) {                        | "," | ";" | ":" | "\" | <">
                         if(row==append_here)                        | "/" | "[" | "]" | "?" | "="
                                 goto break2;                        | "{" | "}" | SP | HT
   
                         // WARNING:  SP             = <US-ASCII SP, space (32)>
                         //      string can grow only UNTAINT_TIMES_BIGGER  HT             = <US-ASCII HT, horizontal-tab (9)>
                         switch(row->item.lang) {  
                         case UL_NO:  LWS            = [CRLF] 1*( SP | HT )
                                 // clean piece  TEXT           = <any OCTET except CTLs,
                         case UL_YES:                          but including LWS>
                                 // tainted piece, but undefined untaint language  
                                 // for VString.get_double of tainted values  quoted-pair    = "\" CHAR
                                 // for ^process{body} evaluation  
                         case UL_AS_IS:    if(strchr("()<>@,;:\\\"/[]?={} \t", *ptr))
                                 // tainted, untaint language: as-is  */
                                 memcpy(dest, row->item.ptr, row->item.size);   inline bool need_quote_http_header(const char* ptr, size_t size) {
                                 dest+=row->item.size;          for(; size--; ptr++)
                                 break;                  if(strchr(";\\\"= \t" /* excluded ()<>@, :/ ? []{} */, *ptr))
                         case UL_FILE_NAME:                          return true;
                                 // tainted, untaint language: file [name]          return false;
                                 escape(switch(*src) {  }
                                         case ' ': to_char('_');  break;  
                                         encode(need_file_encode, '-');  //#include "pa_sapi.h"
                                 });  /** 
                                 break;          appends to other String,
                         case UL_URI:          marking all tainted pieces of it with @a lang.
                                 // tainted, untaint language: uri          or marking ALL pieces of it with a @a lang when @a forced to,
                                 escape(switch(*src) {          and propagating OPTIMIZE language bit.
                                         case ' ': to_char('+');  break;  */
                                         encode(need_uri_encode, '%');  String& String::append_to(String& dest, uchar lang, bool forced) const {
                                 });          if(is_empty())
                                 break;                  return dest;
                         case UL_HEADER:  
                                 // tainted, untaint language: header          // without language-chage, small[fitting dest tail] string?
                                 escape(switch(*src) {          if(lang==UL_PASS_APPENDED && fused<=(dest.fallocated-dest.fused)) {
                                         encode(need_header_encode, '%');                  // felements[fused...]=src.felements[0..fused], fused+=src.fused
                                 });                  memcpy(&dest.felements[dest.fused], felements, sizeof(felements[0])*fused);
                                 break;                  dest.fused+=fused;
                         case UL_TABLE:                   return dest;
                                 // tainted, untaint language: table          }
                                 escape(switch(*src) {  
                                         case '\t': to_char(' ');  break;          // manually unrolled code to avoid do{if(const)} constructs
                                         case '\n': to_char(' ');  break;          if(forced) 
                                         _default;                  STRING_FOREACH_FRAGMENT(
                                 });                          dest.APPEND(fragment->ptr, fragment->size, 
                                 break;                                  lang, //forcing passed lang
                         case UL_SQL:                                  fragment->origin.file, fragment->origin.line);
                                 // tainted, untaint language: sql                  )
                                 // TODO: зависимость от sql сервера          else if(lang==UL_PASS_APPENDED) 
                                 memset(dest, '?', row->item.size);                   STRING_FOREACH_FRAGMENT(
                                 dest+=row->item.size;                          dest.APPEND(fragment->ptr, fragment->size, 
                                 break;                                  fragment->lang, // passing item's lang
                         case UL_JS:                                  fragment->origin.file, fragment->origin.line);
                                 escape(switch(*src) {                  )
                                         case '"': to_string("\\\"", 2);  break;          else if(lang&UL_OPTIMIZE_BIT) // main idea here
                                         case '\'': to_string("\\'", 2);  break;                  // tainted piece would get OPTIMIZED bit from 'lang'
                                         case '\n': to_string("\\n", 2);  break;                  // clean piece would be marked OPTIMIZED manually
                                         case '\\': to_string("\\\\", 2);  break;                  // pieces with determined languages [not tainted|clean] would retain theirs langs
                                         case '\xFF': to_string("\\\xFF", 2);  break;                  STRING_FOREACH_FRAGMENT(
                                         _default;                          dest.APPEND(fragment->ptr, fragment->size, 
                                 });                                  fragment->lang==UL_TAINTED?lang:(
                                 break;                                          fragment->lang==UL_CLEAN?UL_CLEAN|UL_OPTIMIZE_BIT: // ORing with OPTIMIZED flag
                         case UL_HTML:                                                  fragment->lang
                                 escape(switch(*src) {                                  ), 
                                         case '&': to_string("&amp;", 5);  break;                                  fragment->origin.file, fragment->origin.line);
                                         case '>': to_string("&gt;", 4);  break;                  )
                                         case '<': to_string("&lt;", 4);  break;          else
                                         case '"': to_string("&quot;", 6);  break;                  STRING_FOREACH_FRAGMENT(
                                         //TODO: XSLT case '\'': to_string("&apos;", 6);  break;                          dest.APPEND(fragment->ptr, fragment->size, 
                                         _default;                                  fragment->lang==UL_TAINTED?lang:fragment->lang,
                                 });                                  fragment->origin.file, fragment->origin.line);
                                 break;                  );
                         case UL_HTML_TYPO: {  
                                 // tainted, untaint language: html-typo          return dest;
                                 char *html_for_typo=(char *)malloc(size()*2/* '\n' -> '\' 'n' */+1);  }
                                 // note:  
                                 //   there still is a possibility that user   size_t String::cstr_bufsize(Untaint_lang lang,
                                 //   would not replace \n as she supposed to                                                          SQL_Connection *connection,
                                 //   and rather replace \ and n into huge strings                                                          const Request_charsets *charsets) const {
                                 //   thus causing memory overrun          size_t dest=1; // for terminating 0
                                 //   this can be dealed by allocating *2 memory, but that's too expensive          STRING_FOREACH_FRAGMENT(
                                 // todo parser4: fix that                  uchar to_lang=lang==UL_UNSPECIFIED?fragment->lang:lang;
                                 size_t html_for_typo_size;  
                                 { // local dest                  switch(to_lang & ~UL_OPTIMIZE_BIT) {
                                         char *dest=html_for_typo;                  case UL_CLEAN:
                                         escape(switch(*src) {                  case UL_TAINTED:
                                                 // convinient name for typo match "\n"                  case UL_AS_IS:
                                                 case '\r':                           // clean piece
                                                         if(typo_table) {  
                                                                 *dest++='\\';  *dest++='n'; // \r -> \n                          // tainted piece, but undefined untaint language
                                                                 if(src[1]=='\n') // \r\n -> remove \n                          // for VString.as_double of tainted values
                                                                         src++;                          // for ^process{body} evaluation
                                                         }  
                                                         break;                          // tainted, untaint language: as-is
                                                 case '\n':                           dest+=fragment->size;
                                                         if(typo_table)                          break;
                                                                 to_string("\\n", 2);                  case UL_FILE_SPEC:
                                                         break;                          // tainted, untaint language: file [name]
                                                 //TODO: XSLT case '\'': to_string("&apos;", 6);  break;                          dest+=fragment->size*3/* worst: Z->%XX */;
                                                 _default;                          break;
                                         });                  case UL_URI:
                                         *dest=0;                          // tainted, untaint language: uri
                                         html_for_typo_size=dest-html_for_typo;                          dest+=fragment->size*6*3/* worst utf8 x worst Z->%XX */;
                           break;
                   case UL_HTTP_HEADER:
                           // tainted, untaint language: http-field-content-text
                           dest+=fragment->size*3/* worst: Z->%XX */;
                           break;
                   case UL_MAIL_HEADER:
                           // tainted, untaint language: mail-header
                           if(charsets) {
                                   int parts_count=1;
                                   const char* prev=fragment->ptr;
                                   size_t size=fragment->size;
                                   while(const char* comma_at=(const char*)memchr(prev, ',', size)) {
                                           parts_count++;
                                           size-=comma_at-prev;
                                           prev=comma_at+1;
                                 }                                  }
                                 // typo table replacements                                  // Subject: Re: parser3: =?koi8-r?Q?=D3=C5=CD=C9=CE=C1=D2?=
                                 const char *src=html_for_typo;                                  dest+=
                                 do {                                          fragment->size*3+
                                         // there is a row where first column starts 'src'                                          parts_count*(charsets->mail().name()->size()+MAX_STRING/* worst: =?charset?Q?=%XX?= */);
                                         if(Table::Item *item=typo_table->first_that(typo_present, src)) {                          } else
                                                 // get a=>b values                                  dest+=fragment->size;
                                                 const String& a=*static_cast<Array *>(item)->get_string(0);                          break;
                                                 const String& b=*static_cast<Array *>(item)->get_string(1);                  case UL_TABLE: 
                                                 // empty 'a' | 'b' checks                          // tainted, untaint language: table
                                                 if(a.size()==0 || b.size()==0) {                          dest+=fragment->size;
                                                         pool().set_tag(default_typo_table); // avoid recursion                          break;
                                                         THROW(0, 0,                   case UL_SQL:
                                                                 typo_table->origin_string(),                           // tainted, untaint language: sql
                                                                 "typo table column elements must not be empty");                          if(connection)
                                                 }                                  dest+=connection->quote(0, fragment->ptr, fragment->size);
                                                 // overflow check:                          break;
                                                 //   b allowed to be max UNTAINT_TIMES_BIGGER then a                  case UL_JS:
                                                 if(b.size()>UNTAINT_TIMES_BIGGER*a.size()) {                          escape(switch(*src) {
                                                         pool().set_tag(default_typo_table); // avoid recursion                                  case '"': case '\'': case '\n': case '\\': case '\xFF':
                                                         THROW(0, 0,                                           dest+=2;  break;
                                                                 &b,                                   default: 
                                                                 "is %g times longer then '%s', "                                          dest++;  break;
                                                                 "while maximum, handled by Parser, is %d",                           });
                                                                 ((double)b.size())/a.size(),                           break;
                                                                 a.cstr(),                   case UL_XML:
                                                                 UNTAINT_TIMES_BIGGER);                          escape(switch(*src) {
                                   case '&': case '>': case '<': case '"': case '\'': 
                                           dest+= 6;  break;
                                   default: 
                                           dest++;  break;
                           });
                           break;
                   case UL_HTML:
                           escape(switch(*src) {
                                   case '&': 
                                   case '>': 
                                   case '<': 
                                   case '"': 
                                           dest+=6;  break;
                                   default: 
                                           dest++;  break;
                           });
                           break;
                   }
           );
           return dest;
   }
   
   /** http://www.ietf.org/rfc/rfc2047.txt
   RFC
   (3) As a replacement for a 'word' entity within a 'phrase', for example,
       one that precedes an address in a From, To, or Cc header.  The ABNF
       definition for 'phrase' from RFC 822 thus becomes:
   
       phrase = 1*( encoded-word / word )
   
       In this case the set of characters that may be used in a "Q"-encoded
       'encoded-word' is restricted to: <upper and lower case ASCII
       letters, decimal digits, "!", "*", "+", "-", "/", "=", and "_"
       (underscore, ASCII 95.)>.  An 'encoded-word' that appears within a
       'phrase' MUST be separated from any adjacent 'word', 'text' or
       'special' by 'linear-white-space'.
   ...
      (2) The 8-bit hexadecimal value 20 (e.g., ISO-8859-1 SPACE) may be
          represented as "_" (underscore, ASCII 95.).  (This character may
          not pass through some internetwork mail gateways, but its use
          will greatly enhance readability of "Q" encoded data with mail
          readers that do not support this encoding.)  Note that the "_"
          always represents hexadecimal 20, even if the SPACE character
          occupies a different code position in the character set in use.
   
           paf: obviously, 
                   without "=", or one could not differ "=E0" and "russian letter a"
                   and without "_", or in would mean 0x20
   */
   static bool mail_header_char_valid_within_Qencoded(char c) {
           return c>='A' && c<='Z'
                   || c>='a' && c<='Z'
                   || c>='0' && c<='9'
                   || strchr("!*+-/", c);
   }
   char *String::store_to(char *dest, Untaint_lang lang, 
                                              SQL_Connection *connection,
                                              const Request_charsets *charsets) const {
           // WARNING:
           //       before any changes check cstr_bufsize first!!!
           bool whitespace=true;
   //      STRING_FOREACH_FRAGMENT(
           element_type *last = felements+fused; element_type *fragment = felements; for(; fragment<last; fragment++) { 
   
                   uchar to_lang=lang==UL_UNSPECIFIED?fragment->lang:lang;
   
                   char *start=dest;
   
                   switch(to_lang & ~UL_OPTIMIZE_BIT) {
                   case UL_CLEAN:
                   case UL_TAINTED:
                   case UL_AS_IS:
                           // clean piece
   
                           // tainted piece, but undefined untaint language
                           // for VString.as_double of tainted values
                           // for ^process{body} evaluation
   
                           // tainted, untaint language: as-is
                           memcpy(dest, fragment->ptr, fragment->size); 
                           dest+=fragment->size;
                           break;
                   case UL_FILE_SPEC:
                           // tainted, untaint language: file [name]
                           escape(
                                   // Macintosh has problems with small Russian letter 'r'
                                   if( *src=='\xF0' && charsets && *charsets->source().name()=="windows-1251" ) {
                                           // fixing that letter for most common charset
                                           to_char('p');
                                   } else // fallback to default
                                           encode(need_file_encode, '_'); 
                           );
                           break;
                   case UL_URI:
                           // tainted, untaint language: uri
                           const void *client_ptr;
                           size_t client_size;
                           if(charsets) 
                                   Charset::transcode(charsets->pool(), 
                                           charsets->source(), fragment->ptr, fragment->size,
                                           charsets->client(), client_ptr, client_size);
                           else {
                                   client_ptr=fragment->ptr; 
                                   client_size=fragment->size;
                           }
   
                           {
                                   const char* src=(const char* )client_ptr;
                                   for(int size=client_size; size--; src++) 
                                           encode(need_uri_encode, '%');
                           }
                           break;
                   case UL_HTTP_HEADER:
                           // tainted, untaint language: http-field-content-text
                           escape(
                                   encode(need_uri_encode, '%');
                           );
                           break;
                   case UL_MAIL_HEADER:
                           // tainted, untaint language: mail-header
                           // http://www.ietf.org/rfc/rfc2047.txt
                           if(charsets) {
                                   const void *mail_ptr;
                                   size_t mail_size;
                                   Charset::transcode(charsets->pool(), 
                                           charsets->source(), fragment->ptr, fragment->size,
                                           charsets->mail(), mail_ptr, mail_size);
                                   CharPtr charset_name=charsets->mail().name()->cstr();
   
                                   // Subject: Re: parser3: =?koi8-r?Q?=D3=C5=CD=C9=CE=C1=D2?=
                                   const char* src=(const char* )mail_ptr;
                                   bool to_quoted_printable=false;
   
                                   bool email=false;
                                   for(const char* end=src+mail_size; src<end; src++) {
                                           //RFC   + An 'encoded-word' MUST NOT appear in any portion of an 'addr-spec'.
                                           if(to_quoted_printable && (*src==',' || *src=='<')) {
                                                   email=*src=='<';
                                                   dest+=sprintf(dest, "?=");
                                                   to_quoted_printable=false;
                                           }
                                           if(!email && (
                                                   !to_quoted_printable && (*src & 0x80)  // starting quote-printable-encoding on first 8bit char
                                                   || to_quoted_printable && !mail_header_char_valid_within_Qencoded(*src)
                                                   )) {
                                                   if(!to_quoted_printable) {
                                                           dest+=sprintf(dest, "=?%s?Q?", charset_name);
                                                           to_quoted_printable=true;
                                                 }                                                  }
                                                                                                   //RFC Upper case should be used for hexadecimal digits "A" through "F"
                                                 // skip 'a' in 'src'                                                  if(*src == 0x20) // RFC The 8-bit hexadecimal value 20 (e.g., ISO-8859-1 SPACE) 
                                                 src+=a.size();                                                          *dest++='_'; // RFC may be represented as "_" 
                                                 // write 'b' to 'dest'                                                  else
                                                 b.store_to(dest);                                                          dest+=sprintf(dest, "=%02X", *src & 0xFF);
                                                 dest+=b.size();  
                                         } else                                          } else
                                                 *dest++=*src++;                                                  *dest++=*src;
                                 } while(*src);                                          if(*src=='>')
                                 break;                                                  email=false;
                                 }                                  }
                         default:                                  if(to_quoted_printable) // close
                                 THROW(0, 0,                                           dest+=sprintf(dest, "?=");
                                         this,                           
                                         "unknown untaint language #%d of %d piece",                           } else {
                                                 static_cast<int>(row->item.lang),                                   memcpy(dest, fragment->ptr, fragment->size); 
                                                 i);                                  dest+=fragment->size;
                         }                          }
                         row++;                          break;
                   case UL_TABLE: 
                           // tainted, untaint language: table
                           escape(switch(*src) {
                                   case '\t': to_char(' ');  break;
                                   case '\n': to_char(' ');  break;
                                   _default;
                           });
                           break;
                   case UL_SQL:
                           // tainted, untaint language: sql
                           if(connection)
                                   dest+=connection->quote(dest, fragment->ptr, fragment->size);
                           else
                                   throw Exception(Exception::undefined_type,
                                           Exception::undefined_source,
                                           "untaint in SQL language failed - no connection specified");
                           break;
                   case UL_JS:
                           escape(switch(*src) {
                                   case '"': to_string("\\\"", 2);  break;
                                   case '\'': to_string("\\'", 2);  break;
                                   case '\n': to_string("\\n", 2);  break;
                                   case '\\': to_string("\\\\", 2);  break;
                                   case '\xFF': to_string("\\\xFF", 2);  break;
                                   _default;
                           });
                           break;
                   case UL_XML:
                           escape(switch(*src) {
                                   case '&': to_string("&amp;", 5);  break;
                                   case '>': to_string("&gt;", 4);  break;
                                   case '<': to_string("&lt;", 4);  break;
                                   case '"': to_string("&quot;", 6);  break;
                                   case '\'': to_string("&apos;", 6);  break;
                                   _default;
                           });
                           break;
                   case UL_HTML:
                           escape(switch(*src) {
                                   case '&': to_string("&amp;", 5);  break;
                                   case '>': to_string("&gt;", 4);  break;
                                   case '<': to_string("&lt;", 4);  break;
                                   case '"': to_string("&quot;", 6);  break;
                                   _default;
                           });
                           break;
                   default:
                           throw Exception(Exception::undefined_type, 
                                   Exception::undefined_source, 
                                   "unknown untaint language #%d", 
                                           static_cast<int>(to_lang)); // should never
                           break; // never
                 }                  }
                 chunk=row->link;  
         } while(chunk);                  if(to_lang & UL_OPTIMIZE_BIT) { 
 break2:                          // optimizing whitespace
                           char *stop=dest;  dest=start;
                           for(char *src=start; src<stop; src++)
                                   switch(*src) {
                                   // of all consequent white space chars leaving only first one
                                   case ' ': case '\r': case '\n': case '\t':
                                           if(!whitespace) {
                                                   *dest++=*src;
                                                   whitespace=true;
                                           }
                                           break;
                                   default:
                                           whitespace=false;
                                           *dest++=*src;
                                           break;
                                   };
                   } else // piece without optimization
                           whitespace=false;
   //      );
           }
   
         return dest;          return dest;
 }  }
   
   char *String::cstr_debug_origins(Pool& pool) const {
           //_asm int 3;
           char *result=new(pool) char[size()+fused*MAX_STRING*2];
           char *dest=result;
           
           STRING_FOREACH_FRAGMENT(
   IFNDEF_NO_STRING_ORIGIN(
                   if(fragment->origin.file)
                           dest+=sprintf(dest, ORIGIN_FILE_LINE_FORMAT,
                                   fragment->origin.file,
                                   1+fragment->origin.line);
                   else
                           dest+=sprintf(dest, "<unknown>");
   );
                   uchar show_lang=fragment->lang & ~UL_OPTIMIZE_BIT;
                   if(show_lang>=sizeof(String_Untaint_lang_name)/sizeof(String_Untaint_lang_name[0]))
                           throw Exception(Exception::undefined_type, 
                                   Exception::undefined_source, 
                                   "unknown untaint language #%d", 
                                           static_cast<int>(show_lang)); // sould never
   
                   dest+=sprintf(dest, "#%s%s: ",
                           String_Untaint_lang_name[show_lang],
                           fragment->lang & UL_OPTIMIZE_BIT?".O":"");
                   char *dest_after_origins=dest;
   
                   memcpy(dest, fragment->ptr, fragment->size); 
                   dest+=fragment->size;
   
                   remove_crlf(dest_after_origins, dest);
                   to_char('\n');
           );
   
           *dest=0;
           return result;
   }
Removed from v.1.21  
changed lines
  Added in v.1.115.2.6

E-mail: