Diff for /parser3/src/main/pa_sql_driver_manager.C between versions 1.49 and 1.53

version 1.49, 2001/11/05 10:21:28 version 1.53, 2001/11/11 10:52:50
Line 1 Line 1
 /** @file  /** @file
         Parser: sql driver manager implementation.          Parser: sql driver manager implementation.
   
         Copyright (c) 2001 ArtLebedev Group (http://www.artlebedev.com)          Copyright (c) 2001 ArtLebedev Group (http://www.artlebedev.com)
         Author: Alexander Petrosyan <paf@design.ru> (http://design.ru/paf)          Author: Alexander Petrosyan <paf@design.ru> (http://paf.design.ru)
   
         $Id$          $Id$
 */  */
   
 #include "pa_sql_driver_manager.h"  #include "pa_sql_driver_manager.h"
 #include "ltdl.h"  #include "ltdl.h"
 #include "pa_sql_connection.h"  #include "pa_sql_connection.h"
 #include "pa_exception.h"  #include "pa_exception.h"
 #include "pa_common.h"  #include "pa_common.h"
 #include "pa_threads.h"  #include "pa_threads.h"
 #include "pa_stack.h"  #include "pa_stack.h"
 #include "pa_vhash.h"  #include "pa_vhash.h"
 #include "pa_vtable.h"  #include "pa_vtable.h"
   
 // globals  // globals
   
 SQL_Driver_manager *SQL_driver_manager;  SQL_Driver_manager *SQL_driver_manager;
   
 // consts  // consts
   
 const int EXPIRE_UNUSED_CONNECTION_SECONDS=60;  const int EXPIRE_UNUSED_CONNECTION_SECONDS=60;
 const int CHECK_EXPIRED_CONNECTIONS_SECONDS=EXPIRE_UNUSED_CONNECTION_SECONDS*2;  const int CHECK_EXPIRED_CONNECTIONS_SECONDS=EXPIRE_UNUSED_CONNECTION_SECONDS*2;
   
 // helpers  // helpers
   
 const String& url_without_login(Pool& pool, const String& url) {  const String& url_without_login(Pool& pool, const String& url) {
         String& result=*new(pool) String(pool);          String& result=*new(pool) String(pool);
         result << url.mid(0, url.pos(":")) << "://****";          result << url.mid(0, url.pos(":")) << "://****";
   
         int at_pos=url.pos("@");          int at_pos=url.pos("@");
         if(at_pos>0)          if(at_pos>0)
                 result << url.mid(at_pos, url.size());                  result << url.mid(at_pos, url.size());
   
         return result;          return result;
 }  }
   
 /// SQL_Driver_services Pooled implementation  /// SQL_Driver_services Pooled implementation
 class SQL_Driver_services_impl : public SQL_Driver_services, public Pooled {  class SQL_Driver_services_impl : public SQL_Driver_services, public Pooled {
 public:  public:
         SQL_Driver_services_impl(Pool& apool, const String& aurl) : Pooled(apool),          SQL_Driver_services_impl(Pool& apool, const String& aurl) : Pooled(apool),
                 furl(aurl) {                  furl(aurl) {
         }          }
   
         virtual void *malloc(size_t size) { return Pooled::malloc(size, 8); }          virtual void *malloc(size_t size) { return Pooled::malloc(size, 8); }
         virtual void *calloc(size_t size) { return Pooled::calloc(size); }          virtual void *calloc(size_t size) { return Pooled::calloc(size); }
   
         /**          /**
                 the idea is to #1 jump to C++ some function to main body, where                  the idea is to #1 jump to C++ some function to main body, where
                 every function stack frame has exception unwind information                  every function stack frame has exception unwind information
                 and from there... #2 propagate_exception()                  and from there... #2 propagate_exception()
         */          */
         virtual void _throw(const char *comment) {           virtual void _throw(const char *comment) {
                 // hiding passwords and addresses from accidental show [imagine user forgot @exception]                  // hiding passwords and addresses from accidental show [imagine user forgot @exception]
                 e=Exception(0, 0,                   e=Exception(0, 0,
                         &url_without_login(pool(), furl),                          &url_without_login(pool(), furl),
                         comment);                           comment);
   
                 longjmp(mark, 1);                  longjmp(mark, 1);
         }          }
         virtual void propagate_exception() {          virtual void propagate_exception() {
                 throw e;                  throw e;
         }          }
   
 private:  private:
         const String& furl;          const String& furl;
         Exception e;          Exception e;
 };  };
   
 // helpers  // helpers
   
 static void expire_connection(Array::Item *value, void *info) {  static void expire_connection(Array::Item *value, void *info) {
         SQL_Connection& connection=*static_cast<SQL_Connection *>(value);          SQL_Connection& connection=*static_cast<SQL_Connection *>(value);
         time_t older_dies=reinterpret_cast<time_t>(info);          time_t older_dies=reinterpret_cast<time_t>(info);
   
         if(connection.connected() && connection.expired(older_dies))          if(connection.connected() && connection.expired(older_dies))
                 connection.disconnect();                  connection.disconnect();
 }  }
 static void expire_connections(const Hash::Key& key, Hash::Val *value, void *info) {  static void expire_connections(const Hash::Key& key, Hash::Val *value, void *info) {
         Stack& stack=*static_cast<Stack *>(value);          Stack& stack=*static_cast<Stack *>(value);
         for(int i=0; i<=stack.top_index(); i++)          for(int i=0; i<=stack.top_index(); i++)
                 expire_connection(stack.get(i), info);                  expire_connection(stack.get(i), info);
 }  }
   
 // SQL_Driver_manager  // SQL_Driver_manager
   
 SQL_Driver_manager::SQL_Driver_manager(Pool& apool) : Pooled(apool),  SQL_Driver_manager::SQL_Driver_manager(Pool& apool) : Cache_manager(apool),
                 driver_cache(apool),                  driver_cache(apool),
                 connection_cache(apool),                  connection_cache(apool),
                 prev_expiration_pass_time(0) {                  prev_expiration_pass_time(0) {
   }
         status_providers->put(*NEW String(pool(), "sql"), this);  
 }  SQL_Driver_manager::~SQL_Driver_manager() {
           connection_cache.for_each(expire_connections,
 SQL_Driver_manager::~SQL_Driver_manager() {                  reinterpret_cast<void *>((time_t)0/*=in past=expire all*/));
         connection_cache.for_each(expire_connections,   }
                 reinterpret_cast<void *>((time_t)0/*=in past=expire all*/));  
 }  /// @param request_url protocol://[driver-dependent]
   SQL_Connection& SQL_Driver_manager::get_connection(const String& request_url,
 /// @param request_url protocol://[driver-dependent]                                                                                                     const String& request_origin,
 SQL_Connection& SQL_Driver_manager::get_connection(const String& request_url,                                                                                                     Table *protocol2driver_and_client) {
                                                                                                    const String& request_origin,          Pool& pool=request_origin.pool(); // request pool                                                                                          
                                                                                                    Table *protocol2driver_and_client) {  
         Pool& pool=request_origin.pool(); // request pool                                                                                                    // we have table for locating protocol's library
           if(!protocol2driver_and_client)
         // we have table for locating protocol's library                  throw Exception(0, 0,
         if(!protocol2driver_and_client)                          &request_url,
                 throw Exception(0, 0,                          "$"MAIN_SQL_NAME":"MAIN_SQL_DRIVERS_NAME" table must be defined");
                         &request_url,  
                         "$"MAIN_SQL_NAME":"MAIN_SQL_DRIVERS_NAME" table must be defined");          // construct services[request]  (deassociates at close)
           SQL_Driver_services *services=new(pool) SQL_Driver_services_impl(pool, request_url);
         // construct services[request]  (deassociates at close)  
         SQL_Driver_services *services=new(pool) SQL_Driver_services_impl(pool, request_url);           // first trying to get cached connection
           SQL_Connection *result=get_connection_from_cache(request_url);
         // first trying to get cached connection          if(result) {
         SQL_Connection *result=get_connection_from_cache(request_url);                  result->set_services(services);
         if(result) {                  if(!result->ping()) { // we have some cached connection, is it pingable?
                 result->set_services(services);                          result->disconnect(); // kill unpingabe=dead connection
                 if(!result->ping()) { // we have some cached connection, is it pingable?                          result=0;
                         result->disconnect(); // kill unpingabe=dead connection                  }
                         result=0;          }
                 }  
         }          char *request_url_cstr;
           if(result)
         char *request_url_cstr;                  request_url_cstr=0; // calm, compiler
         if(result)          else { // no cached connection or it were unpingabe: connect/reconnect
                 request_url_cstr=0; // calm, compiler                  int pos=request_url.pos("://", 3);
         else { // no cached connection or it were unpingabe: connect/reconnect                  if(pos<0)
                 int pos=request_url.pos("://", 3);                          throw Exception(0, 0,
                 if(pos<0)                                  request_url.size()?&request_url:&request_origin,
                         throw Exception(0, 0,                                  "connection string must start with protocol://"); // NOTE: not THROW, but PTHROW
                                 request_url.size()?&request_url:&request_origin,  
                                 "connection string must start with protocol://"); // NOTE: not THROW, but PTHROW                  // make global_url C-string on global pool
                   request_url_cstr=request_url.cstr();
                 // make global_url C-string on global pool                  char *global_url_cstr=(char *)malloc(strlen(request_url_cstr)+1);
                 request_url_cstr=request_url.cstr();                  strcpy(global_url_cstr, request_url_cstr);
                 char *global_url_cstr=(char *)malloc(strlen(request_url_cstr)+1);                  // make global_url string on global pool
                 strcpy(global_url_cstr, request_url_cstr);                  String& global_url=*new(this->pool()) String(this->pool(), global_url_cstr);
                 // make global_url string on global pool                 
                 String& global_url=*new(this->pool()) String(this->pool(), global_url_cstr);                  char *request_protocol_cstr=lsplit(&request_url_cstr, ':');
                                   // skip "//" after ':'
                 char *request_protocol_cstr=lsplit(&request_url_cstr, ':');                  while(*request_url_cstr=='/')
                 // skip "//" after ':'                          request_url_cstr++;
                 while(*request_url_cstr=='/')                  // make global_protocol C-string on global pool
                         request_url_cstr++;                  char *global_protocol_cstr=(char *)malloc(strlen(request_protocol_cstr)+1);
                 // make global_protocol C-string on global pool                  strcpy(global_protocol_cstr, request_protocol_cstr);
                 char *global_protocol_cstr=(char *)malloc(strlen(request_protocol_cstr)+1);                  // make global_protocol string on global pool
                 strcpy(global_protocol_cstr, request_protocol_cstr);                  String& global_protocol=*new(this->pool()) String(this->pool(),
                 // make global_protocol string on global pool                          global_protocol_cstr);
                 String& global_protocol=*new(this->pool()) String(this->pool(),   
                         global_protocol_cstr);                  SQL_Driver *driver;
                   // first trying to get cached driver
                 SQL_Driver *driver;                  if(!(driver=get_driver_from_cache(global_protocol))) {
                 const String *dlopen_file_spec=0;                          // no cached
                 // first trying to get cached driver                          const String *library=0;
                 if(!(driver=get_driver_from_cache(global_protocol))) {                          const String *dlopen_file_spec=0;
                         // no cached                          if(protocol2driver_and_client->locate(0, global_protocol)) {
                         const String *library=0;                                  if(!(library=protocol2driver_and_client->item(1)) || library->size()==0)
                         if(protocol2driver_and_client->locate(0, global_protocol)) {                                          throw Exception(0, 0,
                                 if(!(library=protocol2driver_and_client->item(1)) || library->size()==0)                                                  protocol2driver_and_client->origin_string(),
                                         throw Exception(0, 0,                                                  "driver library column for protocol '%s' is empty",
                                                 protocol2driver_and_client->origin_string(),                                                          request_protocol_cstr);
                                                 "driver library column for protocol '%s' is empty",                                   dlopen_file_spec=protocol2driver_and_client->item(2);
                                                         request_protocol_cstr);                          } else
                                 dlopen_file_spec=protocol2driver_and_client->item(2);                                  throw Exception(0, 0,
                         } else                                          &request_url,
                                 throw Exception(0, 0,                                          "undefined protocol '%s'",
                                         &request_url,                                                  request_protocol_cstr);
                                         "undefined protocol '%s'",   
                                                 request_protocol_cstr);                          if(lt_dlinit())
                                   throw Exception(0, 0,
                         if(lt_dlinit())                                          library,
                                 throw Exception(0, 0,                                          "prepare to dynamic loading failed, %s", lt_dlerror());
                                         library,  
                                         "prepare to dynamic loading failed, %s", lt_dlerror());                          const char *filename=library->cstr(String::UL_FILE_SPEC);
                           lt_dlhandle handle=lt_dlopen(filename);
                         const char *filename=library->cstr(String::UL_FILE_SPEC);                          if (!handle)
                         lt_dlhandle handle=lt_dlopen(filename);                                  throw Exception(0, 0,
                         if (!handle)                                          library,
                                 throw Exception(0, 0,                                          "can not open the module, %s", lt_dlerror());
                                         library,  
                                         "can not open the module, %s", lt_dlerror());                          SQL_Driver_create_func create=(SQL_Driver_create_func)lt_dlsym(handle,
                                   SQL_DRIVER_CREATE_NAME);
                         SQL_Driver_create_func create=(SQL_Driver_create_func)lt_dlsym(handle,                           if(!create)
                                 SQL_DRIVER_CREATE_NAME);                                  throw Exception(0, 0,
                         if(!create)                                          library,
                                 throw Exception(0, 0,                                          "function '"SQL_DRIVER_CREATE_NAME"' was not found");
                                         library,  
                                         "function '"SQL_DRIVER_CREATE_NAME"' was not found");                          // create library-driver!
                           driver=(*create)();
                         // create library-driver!  
                         driver=(*create)();                          // validate driver api version
                           int driver_api_version=driver->api_version();
                         // validate driver api version                          if(driver_api_version!=SQL_DRIVER_API_VERSION)
                         int driver_api_version=driver->api_version();                                  throw Exception(0, 0,
                         if(driver_api_version!=SQL_DRIVER_API_VERSION)                                          library,
                                 throw Exception(0, 0,                                          "driver implements API version 0x%04X not equal to 0x%04X",
                                         library,                                                  driver_api_version, SQL_DRIVER_API_VERSION);
                                         "driver implements API version 0x%04X not equal to 0x%04X",  
                                                 driver_api_version, SQL_DRIVER_API_VERSION);                          // initialise by connecting to sql client dynamic link library
                           char *dlopen_file_spec_cstr=
                         // initialise by connecting to sql client dynamic link library                                  dlopen_file_spec && dlopen_file_spec->size()?
                         bool specified_dlopen_file_spec=dlopen_file_spec && dlopen_file_spec->size();                                  dlopen_file_spec->cstr(String::UL_AS_IS):0;
                         const char *dlopen_file_spec_cstr=                          if(const char *error=driver->initialize(
                                 specified_dlopen_file_spec?                                  dlopen_file_spec_cstr))
                                 dlopen_file_spec->cstr(String::UL_FILE_SPEC):0;                                  throw Exception(0, 0,
                         if(const char *error=driver->initialize(                                          library,
                                 dlopen_file_spec_cstr))                                          "driver failed to initialize client library '%s', %s",
                                 throw Exception(0, 0,                                                  dlopen_file_spec_cstr?dlopen_file_spec_cstr:"unspecifed",
                                         library,                                                  error);
                                         "driver failed to initialize client library '%s', %s",  
                                                 specified_dlopen_file_spec?dlopen_file_spec_cstr:"unspecifed",                           // cache it
                                                 error);                          put_driver_to_cache(global_protocol, *driver);
                   }
                         // cache it         
                         put_driver_to_cache(global_protocol, *driver);                  // allocate in global pool
                 }                  // associate with services[request]
                           // NOTE: never freed up!
                 // allocate in global pool                   result=new(this->pool()) SQL_Connection(this->pool(), global_url, *driver);
                 // associate with services[request]                  // associate with services[request]  (deassociates at close)
                 // NOTE: never freed up!                  result->set_services(services);
                 result=new(this->pool()) SQL_Connection(this->pool(), global_url, *driver);          }
                 // associate with services[request]  (deassociates at close)  
                 result->set_services(services);           // if not connected yet, do that now, when result has services
         }          if(!result->connected())
                   result->connect(request_url_cstr);
         // if not connected yet, do that now, when result has services          // return it
         if(!result->connected())          return *result;
                 result->connect(request_url_cstr);  }
         // return it  
         return *result;  void SQL_Driver_manager::close_connection(const String& url,
 }                                                                                    SQL_Connection& connection) {
           // deassociate from services[request]
 void SQL_Driver_manager::close_connection(const String& url,           connection.set_services(0);
                                                                                   SQL_Connection& connection) {          put_connection_to_cache(url, connection);
         // deassociate from services[request]  }
         connection.set_services(0);  
         put_connection_to_cache(url, connection);  
 }  // driver cache
   
   SQL_Driver *SQL_Driver_manager::get_driver_from_cache(const String& protocol) {
 // driver cache          SYNCHRONIZED;
   
 SQL_Driver *SQL_Driver_manager::get_driver_from_cache(const String& protocol) {          return static_cast<SQL_Driver *>(driver_cache.get(protocol));
         SYNCHRONIZED;  }
   
         return static_cast<SQL_Driver *>(driver_cache.get(protocol));  void SQL_Driver_manager::put_driver_to_cache(const String& protocol,
 }                                                                                           SQL_Driver& driver) {
           SYNCHRONIZED;
 void SQL_Driver_manager::put_driver_to_cache(const String& protocol,   
                                                                                          SQL_Driver& driver) {          driver_cache.put(protocol, &driver);
         SYNCHRONIZED;  }
   
         driver_cache.put(protocol, &driver);  // connection cache
 }  /// @todo get rid of memory spending Stack [zeros deep inside got accumulated]
   SQL_Connection *SQL_Driver_manager::get_connection_from_cache(const String& url) {
 // connection cache          SYNCHRONIZED;
 /// @todo get rid of memory spending Stack [zeros deep inside got accumulated]  
 SQL_Connection *SQL_Driver_manager::get_connection_from_cache(const String& url) {           if(Stack *connections=static_cast<Stack *>(connection_cache.get(url)))
         SYNCHRONIZED;                  while(connections->top_index()>=0) { // there are cached connections to that 'url'
                           SQL_Connection *result=static_cast<SQL_Connection *>(connections->pop());
         maybe_expire_connection_cache();                          if(result->connected()) // not expired?
                                   return result;
         if(Stack *connections=static_cast<Stack *>(connection_cache.get(url)))                  }
                 while(connections->top_index()>=0) { // there are cached connections to that 'url'  
                         SQL_Connection *result=static_cast<SQL_Connection *>(connections->pop());          return 0;
                         if(result->connected()) // not expired?  }
                                 return result;  
                 }  void SQL_Driver_manager::put_connection_to_cache(const String& url,
                                                                                                    SQL_Connection& connection) {
         return 0;          SYNCHRONIZED;
 }  
           Stack *connections=static_cast<Stack *>(connection_cache.get(url));
 void SQL_Driver_manager::put_connection_to_cache(const String& url,           if(!connections) { // there are no cached connections to that 'url' yet?
                                                                                                  SQL_Connection& connection) {                   connections=NEW Stack(pool()); // NOTE: never freed up!
         SYNCHRONIZED;                  connection_cache.put(url, connections);
           }      
         Stack *connections=static_cast<Stack *>(connection_cache.get(url));          connections->push(&connection);
         if(!connections) { // there are no cached connections to that 'url' yet?  }
                 connections=NEW Stack(pool()); // NOTE: never freed up!  
                 connection_cache.put(url, connections);  void SQL_Driver_manager::maybe_expire_cache() {
         }                 time_t now=time(0);
         connections->push(&connection);  
 }          if(prev_expiration_pass_time<now-CHECK_EXPIRED_CONNECTIONS_SECONDS) {
                   connection_cache.for_each(expire_connections,
 void SQL_Driver_manager::maybe_expire_connection_cache() {                          reinterpret_cast<void *>(now-EXPIRE_UNUSED_CONNECTION_SECONDS));
         time_t now=time(0);  
                   prev_expiration_pass_time=now;
         if(prev_expiration_pass_time<now-CHECK_EXPIRED_CONNECTIONS_SECONDS) {          }
                 connection_cache.for_each(expire_connections,   }
                         reinterpret_cast<void *>(now-EXPIRE_UNUSED_CONNECTION_SECONDS));  
   static void add_connection_to_status_cache_table(Array::Item *value, void *info) {
                 prev_expiration_pass_time=now;          SQL_Connection& connection=*static_cast<SQL_Connection *>(value);
         }          Table& table=*static_cast<Table *>(info);
 }  
           if(connection.connected()) {
 static void add_connection_to_status_cache_table(Array::Item *value, void *info) {                  Pool& pool=table.pool();
         SQL_Connection& connection=*static_cast<SQL_Connection *>(value);                  Array& row=*new(pool) Array(pool);
         Table& table=*static_cast<Table *>(info);  
                   // url
         if(connection.connected()) {                  row+=&url_without_login(pool, connection.get_url());
                 Pool& pool=table.pool();                  // time
                 Array& row=*new(pool) Array(pool, 3);                  time_t time_stamp=connection.get_time_stamp();
                   const char *unsafe_time_cstr=ctime(&time_stamp);
                 row+=&url_without_login(pool, connection.get_url());                  int time_buf_size=strlen(unsafe_time_cstr);
                 time_t time_stamp=connection.get_time_stamp();                  char *safe_time_buf=(char *)pool.malloc(time_buf_size);
                 const char *unsafe_time_cstr=ctime(&time_stamp);                  memcpy(safe_time_buf, unsafe_time_cstr, time_buf_size);
                 int time_buf_size=strlen(unsafe_time_cstr);                  row+=new(pool) String(pool, safe_time_buf, time_buf_size);
                 char *safe_time_buf=(char *)pool.malloc(time_buf_size);  
                 memcpy(safe_time_buf, unsafe_time_cstr, time_buf_size);                  table+=&row;
                 row+=new(pool) String(pool, safe_time_buf, time_buf_size);          }
   }
                 table+=&row;  static void add_connections_to_status_cache_table(const Hash::Key& key, Hash::Val *value, void *info) {
         }          Stack& stack=*static_cast<Stack *>(value);
 }          Array_iter iter(stack);
 static void add_connections_to_status_cache_table(const Hash::Key& key, Hash::Val *value, void *info) {          for(int countdown=stack.top_index(); countdown-->=0; )
         Stack& stack=*static_cast<Stack *>(value);                  add_connection_to_status_cache_table(iter.next(), info);
         Array_iter iter(stack);  }
         for(int countdown=stack.top_index(); countdown-->=0; )  
                 add_connection_to_status_cache_table(iter.next(), info);  
 }  Value& SQL_Driver_manager::get_status(Pool& pool, const String *source) {
           VHash& result=*new(pool) VHash(pool);
          
 Value& SQL_Driver_manager::get_status(Pool& pool, const String *source) {          // cache
         VHash& result=*new(pool) VHash(pool);          {
                           Array& columns=*new(pool) Array(pool);
         // cache                  columns+=new(pool) String(pool, "url");
         {                  columns+=new(pool) String(pool, "time");
                 Array& columns=*new(pool) Array(pool, 3);                  Table& table=*new(pool) Table(pool, 0, &columns, connection_cache.size());
                 columns+=new(pool) String(pool, "url");  
                 columns+=new(pool) String(pool, "time");                  connection_cache.for_each(add_connections_to_status_cache_table, &table);
                 Table& table=*new(pool) Table(pool, 0, &columns, connection_cache.size());  
                   result.hash(source).put(*new(pool) String(pool, "cache"), new(pool) VTable(pool, &table));
                 connection_cache.for_each(add_connections_to_status_cache_table, &table);          }
   
                 result.hash(source).put(*new(pool) String(pool, "cache"), new(pool) VTable(pool, &table));          return result;
         }  
   
         return result;  
 }  }
   

Removed from v.1.49  
changed lines
  Added in v.1.53


E-mail: