[BACK]Return to pa_sql_driver_manager.C CVS log [TXT] [DIR] Up to [parser3project] / parser3 / src / main

Diff for /parser3/src/main/pa_sql_driver_manager.C between versions 1.69.2.2 and 1.100

version 1.69.2.2, 2003/01/27 16:19:11 version 1.100, 2020/12/11 11:31:22
Line 1 Line 1
 /** @file  /** @file
         Parser: sql driver manager implementation.          Parser: sql driver manager implementation.
   
         Copyright (c) 2001, 2003 ArtLebedev Group (http://www.artlebedev.com)          Copyright (c) 2001-2017 Art. Lebedev Studio (http://www.artlebedev.com)
         Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)          Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)
 */  */
   
 static const char* IDENT_SQL_DRIVER_MANAGER_C="$Date$";  
   
 #include "pa_sql_driver_manager.h"  #include "pa_sql_driver_manager.h"
 #include "ltdl.h"  #include "ltdl.h"
   #include "pa_threads.h"
 #include "pa_sql_connection.h"  #include "pa_sql_connection.h"
 #include "pa_exception.h"  #include "pa_exception.h"
 #include "pa_common.h"  #include "pa_common.h"
 #include "pa_threads.h"  
 #include "pa_vhash.h"  #include "pa_vhash.h"
 #include "pa_vtable.h"  #include "pa_vtable.h"
   #include "pa_charsets.h"
   
   volatile const char * IDENT_PA_SQL_DRIVER_MANAGER_C="$Id$" IDENT_PA_SQL_DRIVER_MANAGER_H IDENT_PA_SQL_CONNECTION_H;
   
 // globals  // globals
   
 SQL_Driver_manager SQL_driver_manager;  SQL_Driver_manager* SQL_driver_manager=0;
   
 // consts  // consts
   
 const int EXPIRE_UNUSED_CONNECTION_SECONDS=60;  const time_t EXPIRE_UNUSED_CONNECTION_SECONDS=10;
 const int CHECK_EXPIRED_CONNECTIONS_SECONDS=EXPIRE_UNUSED_CONNECTION_SECONDS*2;  const time_t CHECK_EXPIRED_CONNECTIONS_SECONDS=EXPIRE_UNUSED_CONNECTION_SECONDS*2;
   
 // helpers  // helpers
   
 ConstStringPtr url_without_login(Pool& pool, ConstStringPtr url) {  const String& SQL_Driver_services_impl::url_without_login() const {
         String& result=*new(pool) String(pool);          String& result=*new String;
         result << url.mid(0, url.pos(":")) << "://****";          result << furl->mid(0, furl->pos(':')) << "://****";
   
         int at_pos=url.pos("@");          size_t at_pos=0;
         if(at_pos>0)          size_t new_at_pos;
                 result << url.mid(at_pos, url.size());          while( (new_at_pos=furl->pos('@', at_pos+1))!=STRING_NOT_FOUND)
                   at_pos=new_at_pos;
           if(at_pos)
                   result << furl->mid(at_pos, furl->length());
   
         return result;          return result;
 }  }
   
 /// SQL_Driver_services Pooled implementation  void SQL_Driver_services_impl::transcode(const char* src, size_t src_length,
 class SQL_Driver_services_impl : public SQL_Driver_services, public Pooled {          const char*& dst, size_t& dst_length,
 public:          const char* charset_from_name,
         SQL_Driver_services_impl(Pool& apool, ConstStringPtr aurl) : Pooled(apool),          const char* charset_to_name
                 furl(aurl) {          ) 
         }  {
           try {
         virtual void *malloc(size_t size) { return Pooled::malloc(size, 8); }                  // to speed up sql transcode [lots of charsets::get-s -- twice for each cell]
         virtual void *calloc(size_t size) { return Pooled::calloc(size); }                  // without complicating sql driver API
                   // we need to cache couple of name->charset pairs
                   // assuming pointers to names are are NOT to local vars 
   
                   struct cache_record {
                           const char* name;
                           Charset* object;
                   } cache[2]={{0,0}, {0,0}};
   
                   Charset* charset_from_object;
                   Charset* charset_to_object;
                   if(charset_from_name==cache[0].name) {
                           charset_from_object=cache[0].object;
                   } else {
                           cache[0].name=charset_from_name;
                           cache[0].object=charset_from_object=&pa_charsets.get_direct(charset_from_name);
                   }
                   if(charset_to_name==cache[1].name) {
                           charset_to_object=cache[1].object;
                   } else {
                           cache[1].name=charset_to_name;
                           cache[1].object=charset_to_object=&pa_charsets.get_direct(charset_to_name);
                   }
   
         /**                  String::C result=Charset::transcode(String::C(src, src_length), *charset_from_object, *charset_to_object);
                 normally we can't 'throw' from dynamic library, so                  dst=result.str;
                 the idea is to #1 jump to C++ some function to main body, where                  dst_length=result.length;
                 every function stack frame has exception unwind information          } catch(const Exception& e) {
                 and from there... #2 propagate_exception()                  _throw(SQL_Error(e.type(), e.comment()));
           } catch(...) {
         but when parser configured --with-sjlj-exceptions                  _throw(SQL_Error("unknown error while transcoding in sql driver"));
                 one can simply 'throw' from dynamic library.  
                 [sad story: one can not longjump/throw due to some bug in gcc as of 3.2.1 version]  
         */  
         virtual void _throw(const SQL_Error& aexception) {   
                 // converting SQL_exception to parser Exception  
                 // hiding passwords and addresses from accidental show [imagine user forgot @exception]  
 #ifdef PA_WITH_SJLJ_EXCEPTIONS  
                 throw  
 #else  
                 fexception=  
 #endif  
                         Exception(aexception.type(),   
                                 aexception.problem_source()?static_cast<const String*>(aexception.problem_source())  
                                         :&url_without_login(pool(), furl),  
                                 aexception.comment());   
   
 #ifndef PA_WITH_SJLJ_EXCEPTIONS  
                 longjmp(mark, 1);  
 #endif  
         }  
         virtual void propagate_exception() {  
 #ifndef PA_WITH_SJLJ_EXCEPTIONS  
                 throw fexception;  
 #endif  
         }          }
   }
 private:  
         ConstStringPtr furl;  
         Exception fexception;  
 };  
   
 // helpers  // helpers
   
 static void expire_connection(Array::Item *value, void *info) {  static void expire_connection(SQL_Connection& connection, time_t older_dies) {
         SQL_Connection& connection=*static_cast<SQL_Connection *>(value);  
         time_t older_dies=reinterpret_cast<time_t>(info);  
   
         if(connection.connected() && connection.expired(older_dies))          if(connection.connected() && connection.expired(older_dies))
                 connection.disconnect();                  connection.disconnect();
 }  }
 static void expire_connections(const Hash::Key& key, Hash::Val *value, void *info) {  static void expire_connections(SQL_Driver_manager::connection_cache_type::key_type /*key*/, SQL_Driver_manager::connection_cache_type::value_type stack, time_t older_dies) {
         Stack& stack=*static_cast<Stack *>(value);          for(size_t i=0; i<stack->top_index(); i++)
         for(int i=0; i<=stack.top_index(); i++)                  expire_connection(*stack->get(i), older_dies);
                 expire_connection(stack.get(i), info);  
 }  }
   
 // SQL_Driver_manager  // SQL_Driver_manager
   
 SQL_Driver_manager::SQL_Driver_manager():   SQL_Driver_manager::SQL_Driver_manager(): prev_expiration_pass_time(0) {}
         prev_expiration_pass_time(0) {  
 }  
   
 SQL_Driver_manager::~SQL_Driver_manager() {  SQL_Driver_manager::~SQL_Driver_manager() {
         connection_cache.for_each(expire_connections,           connection_cache.for_each<time_t>(expire_connections, time(0)+(time_t)10/*=in future=expire all*/);
                 reinterpret_cast<void *>(time(0)+1/*=in future=expire all*/));  
 }  }
   
 /// @param request_url protocol://[driver-dependent]  /// @param aurl protocol://[driver-dependent]
 SQL_ConnectionPtr SQL_Driver_manager::get_connection(ConstStringPtr request_url,  SQL_Connection* SQL_Driver_manager::get_connection(const String& aurl, Table *protocol2driver_and_client, const char* arequest_charset, const char* adocument_root) {
                                                                                                    ConstStringPtr request_origin,  
                                                                                                    Table *protocol2driver_and_client) {  
         Pool& pool=request_origin.pool(); // request pool                                                                                            
   
         // we have table for locating protocol's library          // we have table for locating protocol's library
         if(!protocol2driver_and_client)          if(!protocol2driver_and_client)
                 throw Exception("parser.runtime",                  throw Exception(PARSER_RUNTIME, &aurl, "$" MAIN_SQL_NAME ":" MAIN_SQL_DRIVERS_NAME " table must be defined");
                         &request_url,  
                         "$"MAIN_SQL_NAME":"MAIN_SQL_DRIVERS_NAME" table must be defined");  
   
         // construct services[request]  (deassociates at close)  
         SQL_Driver_services *services=new(pool) SQL_Driver_services_impl(pool, request_url);   
   
         // first trying to get cached connection          // first trying to get cached connection
         SQL_Connection *connection=get_connection_from_cache(request_url);          SQL_Connection* connection=get_connection_from_cache(aurl);
         if(connection) {          if(connection) {
                 connection->set_services(services);                  connection->set_url();
                 if(!connection->ping()) { // we have some cached connection, is it pingable?                  if(!connection->ping()) { // we have some cached connection, is it pingable?
                         connection->disconnect(); // kill unpingabe=dead connection                          connection->disconnect(); // kill unpingabe=dead connection
                         connection=0;                          connection=0;
                 }                  }
         }          }
   
         char *request_url_cstr;          char *url_cstr;
         if(connection)          if(connection)
                 request_url_cstr=0; // calm, compiler                  url_cstr=0; // calm, compiler
         else { // no cached connection or it were unpingabe: connect/reconnect          else { // no cached connection or it were unpingabe: connect/reconnect
                 int pos=request_url.pos("://", 3);                  url_cstr=aurl.cstrm();
                 if(pos<0)                  if(!strstr(url_cstr, "://"))
                         throw Exception("parser.runtime",                          throw Exception(PARSER_RUNTIME, aurl.length()?&aurl:0, "connection string must start with protocol://");
                                 request_url.size()?&request_url:&request_origin,  
                                 "connection string must start with protocol://");  
                   char *protocol_cstr=lsplit(&url_cstr, ':');
                 // make global_url C-string on global pool  
                 request_url_cstr=request_url.cstr();  
                 char *global_url_cstr=(char *)malloc(strlen(request_url_cstr)+1);  
                 strcpy(global_url_cstr, request_url_cstr);  
                 // make global_url string on global pool  
                 String& global_url=*new(this->pool()) String(this->pool(), global_url_cstr);  
                   
                 char *request_protocol_cstr=lsplit(&request_url_cstr, ':');  
                 // skip "//" after ':'                  // skip "//" after ':'
                 while(*request_url_cstr=='/')                  while(*url_cstr=='/')
                         request_url_cstr++;                          url_cstr++;
                 // make global_protocol C-string on global pool                  const String& protocol=*new String(protocol_cstr);
                 char *global_protocol_cstr=(char *)malloc(strlen(request_protocol_cstr)+1);  
                 strcpy(global_protocol_cstr, request_protocol_cstr);  
                 // make global_protocol string on global pool  
                 String& global_protocol=*new(this->pool()) String(this->pool(),   
                         global_protocol_cstr);  
   
                 SQL_Driver *driver;                  SQL_Driver *driver;
                 // first trying to get cached driver                  // first trying to get cached driver
                 if(!(driver=get_driver_from_cache(global_protocol))) {                  if(!(driver=get_driver_from_cache(protocol))) {
                         // no cached                          // no cached
                         const String *library=0;                          const String* library=0;
                         const String *dlopen_file_spec=0;                          const String* dlopen_file_spec=0;
                         if(protocol2driver_and_client->locate(0, global_protocol)) {                          Table::Action_options options;
                                 if(!(library=protocol2driver_and_client->item(1)) || library->size()==0)                          if(protocol2driver_and_client->locate(0, protocol, options)) {
                                         throw Exception("parser.runtime",                                  if(!(library=protocol2driver_and_client->item(1)) || library->length()==0)
                                                 protocol2driver_and_client->origin_string(),                                          throw Exception(PARSER_RUNTIME, 0, "driver library column for protocol '%s' is empty", protocol_cstr);
                                                 "driver library column for protocol '%s' is empty",   
                                                         request_protocol_cstr);  
                                 dlopen_file_spec=protocol2driver_and_client->item(2);                                  dlopen_file_spec=protocol2driver_and_client->item(2);
                         } else                          } else
                                 throw Exception("parser.runtime",                                  throw Exception(PARSER_RUNTIME, &aurl, "undefined protocol '%s'", protocol_cstr);
                                         &request_url,  
                                         "undefined protocol '%s'",   
                                                 request_protocol_cstr);  
   
                         if(lt_dlinit())  
                                 throw Exception(0,  
                                         library,  
                                         "prepare to dynamic loading failed, %s", lt_dlerror());  
   
                         const char *filename=library->cstr(String::UL_FILE_SPEC);                          pa_dlinit();
   
                           const char* filename=library->taint_cstr(String::L_FILE_SPEC);
                         lt_dlhandle handle=lt_dlopen(filename);                          lt_dlhandle handle=lt_dlopen(filename);
                         if (!handle)                          if (!handle) {
                                 throw Exception(0,                                  const char* error=lt_dlerror();
                                         library,                                  throw Exception(0, library, error ? error : "can not open the module");
                                         "can not open the module, %s", lt_dlerror());                          }
   
                         SQL_Driver_create_func create=(SQL_Driver_create_func)lt_dlsym(handle,                           SQL_Driver_create_func create=(SQL_Driver_create_func)(lt_dlsym(handle, 
                                 SQL_DRIVER_CREATE_NAME);                                  SQL_DRIVER_CREATE_NAME));
                         if(!create)                          if(!create)
                                 throw Exception(0,                                  throw Exception(0, library, "function '" SQL_DRIVER_CREATE_NAME "' was not found");
                                         library,  
                                         "function '"SQL_DRIVER_CREATE_NAME"' was not found");  
   
                         // create library-driver!                          // create library-driver!
                         driver=(*create)();                          driver=(*create)();
Line 209  SQL_ConnectionPtr SQL_Driver_manager::ge Line 168  SQL_ConnectionPtr SQL_Driver_manager::ge
                         // validate driver api version                          // validate driver api version
                         int driver_api_version=driver->api_version();                          int driver_api_version=driver->api_version();
                         if(driver_api_version!=SQL_DRIVER_API_VERSION)                          if(driver_api_version!=SQL_DRIVER_API_VERSION)
                                 throw Exception(0,                                  throw Exception(0, library, "driver implements API version 0x%04X not equal to 0x%04X", driver_api_version, SQL_DRIVER_API_VERSION);
                                         library,  
                                         "driver implements API version 0x%04X not equal to 0x%04X",  
                                                 driver_api_version, SQL_DRIVER_API_VERSION);  
   
                         // initialise by connecting to sql client dynamic link library                          // initialise by connecting to sql client dynamic link library
                         char *dlopen_file_spec_cstr=                          char* dlopen_file_spec_cstr=
                                 dlopen_file_spec && dlopen_file_spec->size()?                                  dlopen_file_spec && dlopen_file_spec->length()?
                                 dlopen_file_spec->cstr(String::UL_AS_IS):0;                                  dlopen_file_spec->taint_cstrm(String::L_AS_IS):0;
                         if(const char *error=driver->initialize(                          if(const char* error=driver->initialize(dlopen_file_spec_cstr))
                                 dlopen_file_spec_cstr))                                  throw Exception(0, library, "driver failed to initialize client library '%s', %s", dlopen_file_spec_cstr ? dlopen_file_spec_cstr : "unspecifed", error);
                                 throw Exception(0,  
                                         library,  
                                         "driver failed to initialize client library '%s', %s",  
                                                 dlopen_file_spec_cstr?dlopen_file_spec_cstr:"unspecifed",   
                                                 error);  
   
                         // cache it                          // cache it
                         put_driver_to_cache(global_protocol, *driver);                          put_driver_to_cache(protocol, driver);
                 }                  }
                   
                 // allocate in global pool                   connection=new SQL_Connection(aurl, *driver, arequest_charset, adocument_root);
                 // associate with services[request]                  // associate with pool[request]  (deassociates at close)
                 // NOTE: never freed up!                  connection->set_url(); 
                 connection=new(this->pool()) SQL_Connection(this->pool(), global_url, *driver);  
                 // associate with services[request]  (deassociates at close)  
                 connection->set_services(services);   
         }          }
   
         // if not connected yet, do that now, when connection has services          // if not connected yet, do that now, when connection has services
         if(!connection->connected())          if(!connection->connected())
                 connection->connect(request_url_cstr);                  connection->connect(url_cstr);
         // return autoclosing object for it          // return autoclosing object for it
         return SQL_ConnectionPtr(connection);          return connection;
 }  }
   
 void SQL_Driver_manager::close_connection(ConstStringPtr url,   void SQL_Driver_manager::close_connection(connection_cache_type::key_type url, SQL_Connection* connection) {
                                                                                   SQL_Connection& connection) {  
         // deassociate from services[request]  
         connection.set_services(0);  
         put_connection_to_cache(url, connection);          put_connection_to_cache(url, connection);
 }  }
   
   
 // driver cache  // driver cache
   
 SQL_Driver *SQL_Driver_manager::get_driver_from_cache(ConstStringPtr protocol) {  SQL_Driver *SQL_Driver_manager::get_driver_from_cache(driver_cache_type::key_type protocol) {
         SYNCHRONIZED;          SYNCHRONIZED;
   
         return static_cast<SQL_Driver *>(driver_cache.get(protocol));          return driver_cache.get(protocol);
 }  }
   
 void SQL_Driver_manager::put_driver_to_cache(ConstStringPtr protocol,   void SQL_Driver_manager::put_driver_to_cache(driver_cache_type::key_type protocol, driver_cache_type::value_type driver) {
                                                                                          SQL_Driver& driver) {  
         SYNCHRONIZED;          SYNCHRONIZED;
   
         driver_cache.put(protocol, &driver);          driver_cache.put(protocol, driver);
 }  }
   
 // connection cache  // connection cache
 /// @todo get rid of memory spending Stack [zeros deep inside got accumulated]  /// @todo get rid of memory spending Stack [zeros deep inside got accumulated]
 SQL_Connection *SQL_Driver_manager::get_connection_from_cache(ConstStringPtr url) {   SQL_Connection* SQL_Driver_manager::get_connection_from_cache(connection_cache_type::key_type url) {
         SYNCHRONIZED;          SYNCHRONIZED;
   
         if(Stack *connections=static_cast<Stack *>(connection_cache.get(url)))          if(connection_cache_type::value_type connections=connection_cache.get(url))
                 while(connections->top_index()>=0) { // there are cached connections to that 'url'                  while(!connections->is_empty()) { // there are cached connections to that 'url'
                         SQL_Connection *result=static_cast<SQL_Connection *>(connections->pop());                          SQL_Connection* result=connections->pop();
                         if(result->connected()) // not expired?                          if(result->connected()) // not expired?
                                 return result;                                  return result;
                 }                  }
Line 283  SQL_Connection *SQL_Driver_manager::get_ Line 227  SQL_Connection *SQL_Driver_manager::get_
         return 0;          return 0;
 }  }
   
 void SQL_Driver_manager::put_connection_to_cache(ConstStringPtr url,   void SQL_Driver_manager::put_connection_to_cache(connection_cache_type::key_type url, SQL_Connection* connection) {
                                                                                                  SQL_Connection& connection) {   
         SYNCHRONIZED;          SYNCHRONIZED;
   
         Stack *connections=static_cast<Stack *>(connection_cache.get(url));          connection_cache_type::value_type connections=connection_cache.get(url);
         if(!connections) { // there are no cached connections to that 'url' yet?          if(!connections) { // there are no cached connections to that 'url' yet?
                 connections=NEW Stack(pool()); // NOTE: never freed up!                  connections=new connection_cache_element_base_type;
                 connection_cache.put(url, connections);                  connection_cache.put(url, connections);
         }                 }       
         connections->push(&connection);          connections->push(connection);
 }  }
   
 void SQL_Driver_manager::maybe_expire_cache() {  void SQL_Driver_manager::maybe_expire_cache() {
         time_t now=time(0);          time_t now=time(0);
   
         if(prev_expiration_pass_time<now-CHECK_EXPIRED_CONNECTIONS_SECONDS) {          if(prev_expiration_pass_time<now-CHECK_EXPIRED_CONNECTIONS_SECONDS) {
                 connection_cache.for_each(expire_connections,                   connection_cache.for_each<time_t>(expire_connections, time_t(now-EXPIRE_UNUSED_CONNECTION_SECONDS));
                         reinterpret_cast<void *>(now-EXPIRE_UNUSED_CONNECTION_SECONDS));  
   
                 prev_expiration_pass_time=now;                  prev_expiration_pass_time=now;
         }          }
 }  }
   
 static void add_connection_to_status_cache_table(Array::Item *value, void *info) {  static void add_connection_to_status_cache_table(SQL_Connection& connection, Table* table) {
         SQL_Connection& connection=*static_cast<SQL_Connection *>(value);  
         Table& table=*static_cast<Table *>(info);  
   
         if(connection.connected()) {          if(connection.connected()) {
                 Pool& pool=table.pool();                  ArrayString& row=*new ArrayString;
                 Array& row=*new(pool) Array(pool);  
   
                 // url                  // url
                 row+=&url_without_login(pool, connection.get_url());                  row+=&connection.services().url_without_login();
                 // time                  // time
                 time_t time_used=connection.get_time_used();                  time_t time_used=connection.get_time_used();
                 const char *unsafe_time_cstr=ctime(&time_used);                  row+=new String(pa_strdup(ctime(&time_used)));
                 int time_buf_size=strlen(unsafe_time_cstr);  
                 char *safe_time_buf=(char *)pool.malloc(time_buf_size);  
                 memcpy(safe_time_buf, unsafe_time_cstr, time_buf_size);  
                 row+=new(pool) String(pool, safe_time_buf, time_buf_size);  
   
                 table+=&row;                  *table+=&row;
         }          }
 }  }
 static void add_connections_to_status_cache_table(const Hash::Key& key, Hash::Val *value, void *info) {  static void add_connections_to_status_cache_table(SQL_Driver_manager::connection_cache_type::key_type /*key*/, SQL_Driver_manager::connection_cache_type::value_type stack, Table* table) {
         Stack& stack=*static_cast<Stack *>(value);          for(Array_iterator<SQL_Connection*> i(*stack); i.has_next(); )
         Array_iter iter(stack);                  add_connection_to_status_cache_table(*i.next(), table);
         for(int countdown=stack.top_index(); countdown-->=0; )  
                 add_connection_to_status_cache_table(iter.next(), info);  
 }  }
 ValuePtr SQL_Driver_manager::get_status(Pool& pool, ConstStringPtr source) {  
         VHash& result=*new(pool) VHash(pool);  Value* SQL_Driver_manager::get_status() {
                   Value* result=new VHash;
   
         // cache          // cache
         {          {
                 Array& columns=*new(pool) Array(pool);                  ArrayString& columns=*new ArrayString;
                 columns+=new(pool) String(pool, "url");                  columns+=new String("url");
                 columns+=new(pool) String(pool, "time");                  columns+=new String("time");
                 Table& table=*new(pool) Table(pool, 0, &columns, connection_cache.size());                  Table& table=*new Table(&columns, connection_cache.count());
   
                 connection_cache.for_each(add_connections_to_status_cache_table, &table);                  connection_cache.for_each<Table*>(add_connections_to_status_cache_table, &table);
   
                 result.hash(source).put(*new(pool) String(pool, "cache"), new(pool) VTable(pool, &table));                  result->get_hash()->put(*new String("cache"), new VTable(&table));
         }          }
   
         return result;          return result;
Removed from v.1.69.2.2  
changed lines
  Added in v.1.100

E-mail: