[BACK]Return to pa_sql_driver_manager.C CVS log [TXT] [DIR] Up to [parser3project] / parser3 / src / main

Diff for /parser3/src/main/pa_sql_driver_manager.C between versions 1.28 and 1.93

version 1.28, 2001/08/27 12:02:24 version 1.93, 2015/04/02 22:18:26
Line 1 Line 1
 /** @file  /** @file
         Parser: sql driver manager implementation.          Parser: sql driver manager implementation.
   
         Copyright (c) 2001 ArtLebedev Group (http://www.artlebedev.com)          Copyright (c) 2001-2012 Art. Lebedev Studio (http://www.artlebedev.com)
           Author: Alexandr Petrosian <paf@design.ru> (http://paf.design.ru)
         Author: Alexander Petrosyan <paf@design.ru> (http://design.ru/paf)  */
 */  
 static const char *RCSId="$Id$";  #include "pa_sql_driver_manager.h"
   #include "ltdl.h"
 #include "pa_sql_driver_manager.h"  #include "pa_threads.h"
 #include "ltdl.h"  #include "pa_sql_connection.h"
 #include "pa_sql_connection.h"  #include "pa_exception.h"
 #include "pa_exception.h"  #include "pa_common.h"
 #include "pa_common.h"  #include "pa_vhash.h"
 #include "pa_threads.h"  #include "pa_vtable.h"
   #include "pa_charsets.h"
 #include "pa_sapi.h"  
   volatile const char * IDENT_PA_SQL_DRIVER_MANAGER_C="$Id$" IDENT_PA_SQL_DRIVER_MANAGER_H IDENT_PA_SQL_CONNECTION_H;
 // globals  
   // globals
 SQL_Driver_manager *SQL_driver_manager;  
   SQL_Driver_manager* SQL_driver_manager=0;
 // consts  
   // consts
 const char *LIBRARY_CREATE_FUNC_NAME="create";  
 const int EXPIRE_UNUSED_CONNECTION_SECONDS=60;  const time_t EXPIRE_UNUSED_CONNECTION_SECONDS=60;
 const int CHECK_EXPIRED_CONNECTIONS_SECONDS=60*2;  const time_t CHECK_EXPIRED_CONNECTIONS_SECONDS=EXPIRE_UNUSED_CONNECTION_SECONDS*2;
   
   // helpers
 /// SQL_Driver_services Pooled implementation  
 class SQL_Driver_services_impl : public SQL_Driver_services, public Pooled {  const String& SQL_Driver_services_impl::url_without_login() const {
 public:          String& result=*new String;
         SQL_Driver_services_impl(Pool& apool, const String& aurl) : Pooled(apool),          result << furl->mid(0, furl->pos(':')) << "://****";
                 furl(aurl) {  
         }          size_t at_pos=0;
           size_t new_at_pos;
         /// allocates some bytes on pool          while( (new_at_pos=furl->pos('@', at_pos+1))!=STRING_NOT_FOUND)
         void *malloc(size_t size) { return Pooled::malloc(size); }                  at_pos=new_at_pos;
         /// allocates some bytes clearing them with zeros          if(at_pos)
         void *calloc(size_t size) { return Pooled::calloc(size); }                  result << furl->mid(at_pos, furl->length());
         /// throw exception  
         void _throw(const char *comment) {          return result;
                 THROW(0, 0,  }
                         &furl,  
                         comment);  void SQL_Driver_services_impl::transcode(const char* src, size_t src_length,
         }          const char*& dst, size_t& dst_length,
           const char* charset_from_name,
 private:          const char* charset_to_name
         const String& furl;          ) 
 };  {
           try {
 // SQL_Driver_manager                  // to speed up sql transcode [lots of charsets::get-s -- twice for each cell]
                   // without complicating sql driver API
 /// @param request_url protocol://[driver-dependent]                  // we need to cache couple of name->charset pairs
 SQL_Connection& SQL_Driver_manager::get_connection(const String& request_url,                  // assuming pointers to names are are NOT to local vars 
                                                                                                    Table *protocol2driver_and_client) {  
         Pool& pool=request_url.pool(); // request pool                                                                                                      struct cache_record {
                           const char* name;
         // we have table for locating protocol's library                          Charset* object;
         if(!protocol2driver_and_client)                  } cache[2]={{0,0}, {0,0}};
                 PTHROW(0, 0,  
                         &request_url,                  Charset* charset_from_object;
                         "$SQL:drivers table must be defined");                  Charset* charset_to_object;
                   if(charset_from_name==cache[0].name) {
         // first trying to get cached connection                          charset_from_object=cache[0].object;
         SQL_Connection *result=get_connection_from_cache(request_url);                  } else {
         if(result && !result->ping()) { // we have some cached connection, is it pingable?                          cache[0].name=charset_from_name;
                 result->disconnect(); // kill unpingabe=dead connection                          cache[0].object=charset_from_object=&charsets.get(charset_from_name);
                 result=0;                  }
         }                  if(charset_to_name==cache[1].name) {
                           charset_to_object=cache[1].object;
         char *request_url_cstr;                  } else {
         if(result)                          cache[1].name=charset_to_name;
                 request_url_cstr=0; // calm, compiler                          cache[1].object=charset_to_object=&charsets.get(charset_to_name);
         else { // no cached connection or it were unpingabe: connect/reconnect                  }
                 int pos=request_url.pos("://", 3);  
                 if(pos<0)                  String::C result=Charset::transcode(String::C(src, src_length), 
                         PTHROW(0, 0,                          *charset_from_object,
                                 &request_url,                          *charset_to_object);
                                 "no protocol specified"); // NOTE: not THROW, but PTHROW                  dst=result.str;
                   dst_length=result.length;
                 // make global_url C-string on global pool          } catch(const Exception& e) {
                 request_url_cstr=request_url.cstr(String::UL_AS_IS);                  _throw(SQL_Error(e.type(), e.comment()));
                 char *global_url_cstr=(char *)malloc(strlen(request_url_cstr)+1);          } catch(...) {
                 strcpy(global_url_cstr, request_url_cstr);                  _throw(SQL_Error(0, "unknown error while transcoding in sql driver"));
                 // make global_url string on global pool          }
                 String& global_url=*new(this->pool()) String(this->pool(), global_url_cstr);  }
                  
                 char *request_protocol_cstr=lsplit(&request_url_cstr, ':');  // helpers
                 // skip "//" after ':'  
                 while(*request_url_cstr=='/')  static void expire_connection(SQL_Connection& connection, time_t older_dies) {
                         request_url_cstr++;          if(connection.connected() && connection.expired(older_dies))
                 // make global_protocol C-string on global pool                  connection.disconnect();
                 char *global_protocol_cstr=(char *)malloc(strlen(request_protocol_cstr)+1);  }
                 strcpy(global_protocol_cstr, request_protocol_cstr);  static void expire_connections(SQL_Driver_manager::connection_cache_type::key_type /*key*/, 
                 // make global_protocol string on global pool                                 SQL_Driver_manager::connection_cache_type::value_type stack, 
                 String& global_protocol=*new(this->pool()) String(this->pool(),                                 time_t older_dies) {
                         global_protocol_cstr);          for(size_t i=0; i<stack->top_index(); i++)
                   expire_connection(*stack->get(i), older_dies);
                 SQL_Driver *driver;  }
                 const String *dlopen_file_spec=0;  
                 // first trying to get cached driver  // SQL_Driver_manager
                 if(!(driver=get_driver_from_cache(global_protocol))) {  
                         // no cached  SQL_Driver_manager::SQL_Driver_manager(): prev_expiration_pass_time(0) {}
                         const String *library=0;  
                         if(protocol2driver_and_client->locate(0, global_protocol)) {  SQL_Driver_manager::~SQL_Driver_manager() {
                                 if(!(library=protocol2driver_and_client->item(1)) || library->size()==0)          connection_cache.for_each<time_t>(expire_connections, time(0)+(time_t)10/*=in future=expire all*/);
                                         PTHROW(0, 0,  }
                                                 protocol2driver_and_client->origin_string(),  
                                                 "driver library column for protocol '%s' is empty",  /// @param aurl protocol://[driver-dependent]
                                                         request_protocol_cstr);  SQL_Connection* SQL_Driver_manager::get_connection(const String& aurl,
                                 dlopen_file_spec=protocol2driver_and_client->item(2);                                                     Table *protocol2driver_and_client,
                         } else                                                     const char* arequest_charset,
                                 PTHROW(0, 0,                                                     const char* adocument_root) {
                                         &request_url,          // we have table for locating protocol's library
                                         "undefined protocol '%s'",          if(!protocol2driver_and_client)
                                                 request_protocol_cstr);                  throw Exception(PARSER_RUNTIME,
                           &aurl,
                         if(lt_dlinit())                          "$" MAIN_SQL_NAME ":" MAIN_SQL_DRIVERS_NAME " table must be defined");
                                 PTHROW(0, 0,  
                                         library,          // first trying to get cached connection
                                         "prepare to dynamic loading failed, %s", lt_dlerror());          SQL_Connection* connection=get_connection_from_cache(aurl);
           if(connection) {
                         const char *filename=library->cstr(String::UL_FILE_NAME);                  connection->set_url();
                         lt_dlhandle handle=lt_dlopen(filename);                  if(!connection->ping()) { // we have some cached connection, is it pingable?
                         if (!handle)                          connection->disconnect(); // kill unpingabe=dead connection
                                 PTHROW(0, 0,                          connection=0;
                                         library,                  }
                                         "can not open the module, %s", lt_dlerror());          }
   
                         SQL_Driver_create_func create=(SQL_Driver_create_func)lt_dlsym(handle,          char *url_cstr;
                                 LIBRARY_CREATE_FUNC_NAME);            if(connection)
                         if(!create)                  url_cstr=0; // calm, compiler
                                 PTHROW(0, 0,          else { // no cached connection or it were unpingabe: connect/reconnect
                                         library,                  url_cstr=aurl.cstrm();
                                         "function '%s' was not found", LIBRARY_CREATE_FUNC_NAME);                  if(!strstr(url_cstr, "://"))
                           throw Exception(PARSER_RUNTIME,
                         // create library-driver!                                  aurl.length()?&aurl:0,
                         driver=(*create)();                                  "connection string must start with protocol://");
   
                         // validate driver api version  
                         int driver_api_version=driver->api_version();                  char *protocol_cstr=lsplit(&url_cstr, ':');
                         if(driver_api_version!=SQL_DRIVER_API_VERSION)                  // skip "//" after ':'
                                 PTHROW(0, 0,                  while(*url_cstr=='/')
                                         library,                          url_cstr++;
                                         "driver implements API version 0x%04X not equal to 0x%04X",                  const String& protocol=*new String(protocol_cstr);
                                                 driver_api_version, SQL_DRIVER_API_VERSION);  
                   SQL_Driver *driver;
                         // initialise by connecting to sql client dynamic link library                  // first trying to get cached driver
                         bool specified_dlopen_file_spec=dlopen_file_spec && dlopen_file_spec->size();                  if(!(driver=get_driver_from_cache(protocol))) {
                         const char *dlopen_file_spec_cstr=                          // no cached
                                 specified_dlopen_file_spec?                          const String* library=0;
                                 dlopen_file_spec->cstr(String::UL_FILE_NAME):0;                          const String* dlopen_file_spec=0;
                         if(const char *error=driver->initialize(                          Table::Action_options options;
                                 dlopen_file_spec_cstr))                          if(protocol2driver_and_client->locate(0, protocol, options)) {
                                 PTHROW(0, 0,                                  if(!(library=protocol2driver_and_client->item(1)) || library->length()==0)
                                         library,                                          throw Exception(PARSER_RUNTIME,
                                         "driver failed to initialize client library '%s', %s",                                                  0,
                                                 specified_dlopen_file_spec?dlopen_file_spec_cstr:"unspecifed",                                                  "driver library column for protocol '%s' is empty", 
                                                 error);                                                          protocol_cstr);
                                   dlopen_file_spec=protocol2driver_and_client->item(2);
                         // cache it                          } else
                         put_driver_to_cache(global_protocol, *driver);                                  throw Exception(PARSER_RUNTIME,
                 }                                          &aurl,
                                                  "undefined protocol '%s'", 
                 // allocate in global pool                                                  protocol_cstr);
                 // associate with services[request]  
                 // NOTE: never freed up!                          pa_dlinit();
                 result=new(this->pool()) SQL_Connection(this->pool(), global_url, *driver);  
         }                          const char* filename=library->taint_cstr(String::L_FILE_SPEC);
                           lt_dlhandle handle=lt_dlopen(filename);
         // associate with services[request]  (deassociates at close)                          if (!handle) {
         result->set_services(new(pool) SQL_Driver_services_impl(pool, request_url));                                  const char* error=lt_dlerror();
         // if not connected yet, do that now, when result has services                                  throw Exception(0,
         if(!result->connected())                                          library,
                 result->connect(request_url_cstr);                                          error?error:"can not open the module");
         // return it                          }
         return *result;  
 }                          SQL_Driver_create_func create=(SQL_Driver_create_func)(lt_dlsym(handle, 
                                   SQL_DRIVER_CREATE_NAME));
 void SQL_Driver_manager::close_connection(const String& url,                          if(!create)
                                                                                   SQL_Connection& connection) {                                  throw Exception(0,
         // deassociate from services[request]                                          library,
         connection.set_services(0);                                          "function '" SQL_DRIVER_CREATE_NAME "' was not found");
         put_connection_to_cache(url, connection);  
 }                          // create library-driver!
                           driver=(*create)();
   
 // driver cache                          // validate driver api version
                           int driver_api_version=driver->api_version();
 SQL_Driver *SQL_Driver_manager::get_driver_from_cache(const String& protocol) {                          if(driver_api_version!=SQL_DRIVER_API_VERSION)
         SYNCHRONIZED;                                  throw Exception(0,
                                           library,
         return static_cast<SQL_Driver *>(driver_cache.get(protocol));                                          "driver implements API version 0x%04X not equal to 0x%04X",
 }                                                  driver_api_version, SQL_DRIVER_API_VERSION);
   
 void SQL_Driver_manager::put_driver_to_cache(const String& protocol,                          // initialise by connecting to sql client dynamic link library
                                                                                          SQL_Driver& driver) {                          char* dlopen_file_spec_cstr=
         SYNCHRONIZED;                                  dlopen_file_spec && dlopen_file_spec->length()?
                                   dlopen_file_spec->taint_cstrm(String::L_AS_IS):0;
         driver_cache.put(protocol, &driver);                          if(const char* error=driver->initialize(dlopen_file_spec_cstr))
 }                                  throw Exception(0,
                                           library,
 // connection cache                                          "driver failed to initialize client library '%s', %s",
 /// @todo get rid of memory spending Stack [zeros deep inside got accumulated]                                                  dlopen_file_spec_cstr?dlopen_file_spec_cstr:"unspecifed",
 SQL_Connection *SQL_Driver_manager::get_connection_from_cache(const String& url) {                                                  error);
         SYNCHRONIZED;  
                           // cache it
         maybe_expire_connection_cache();                          put_driver_to_cache(protocol, driver);
                   }
         if(Stack *connections=static_cast<Stack *>(connection_cache.get(url)))          
                 while(connections->top_index()>=0) { // there are cached connections to that 'url'                  connection=new SQL_Connection(aurl, *driver, arequest_charset, adocument_root);
                         SQL_Connection *result=static_cast<SQL_Connection *>(connections->pop());                  // associate with pool[request]  (deassociates at close)
                         if(result->connected()) // not expired?                  connection->set_url(); 
                                 return result;          }
                 }  
           // if not connected yet, do that now, when connection has services
         return 0;          if(!connection->connected())
 }                  connection->connect(url_cstr);
           // return autoclosing object for it
 void SQL_Driver_manager::put_connection_to_cache(const String& url,          return connection;
                                                                                                  SQL_Connection& connection) {  }
         SYNCHRONIZED;  
   void SQL_Driver_manager::close_connection(connection_cache_type::key_type url, 
         Stack *connections=static_cast<Stack *>(connection_cache.get(url));                                            SQL_Connection* connection) {
         if(!connections) { // there are no cached connections to that 'url' yet?          put_connection_to_cache(url, connection);
                 connections=NEW Stack(pool()); // NOTE: never freed up!  }
                 connection_cache.put(url, connections);  
         }        
         connections->push(&connection);  // driver cache
 }  
   SQL_Driver *SQL_Driver_manager::get_driver_from_cache(driver_cache_type::key_type protocol) {
 static void expire_connection(Array::Item *value, void *info) {          SYNCHRONIZED;
         SQL_Connection& connection=*static_cast<SQL_Connection *>(value);  
         time_t older_dies=reinterpret_cast<time_t>(info);          return driver_cache.get(protocol);
   }
         if(connection.connected() && connection.expired(older_dies))  
                 connection.disconnect();  void SQL_Driver_manager::put_driver_to_cache(
 }                                                                                           driver_cache_type::key_type protocol, 
 static void expire_connections(const Hash::Key& key, Hash::Val *value, void *info) {                                                                                           driver_cache_type::value_type driver) {
         Stack& stack=*static_cast<Stack *>(value);          SYNCHRONIZED;
         for(int i=0; i<=stack.top_index(); i++)  
                 expire_connection(stack.get(i), info);          driver_cache.put(protocol, driver);
 }  }
 void SQL_Driver_manager::maybe_expire_connection_cache() {  
         time_t now=time(0);  // connection cache
   /// @todo get rid of memory spending Stack [zeros deep inside got accumulated]
         if(prev_expiration_pass_time<now-CHECK_EXPIRED_CONNECTIONS_SECONDS) {  SQL_Connection* SQL_Driver_manager::get_connection_from_cache(connection_cache_type::key_type url) { 
                 connection_cache.for_each(expire_connections,          SYNCHRONIZED;
                         reinterpret_cast<void *>(now-EXPIRE_UNUSED_CONNECTION_SECONDS));  
           if(connection_cache_type::value_type connections=connection_cache.get(url))
                 prev_expiration_pass_time=now;                  while(!connections->is_empty()) { // there are cached connections to that 'url'
         }                          SQL_Connection* result=connections->pop();
 }                          if(result->connected()) // not expired?
                                   return result;
                   }
   
           return 0;
   }
   
   void SQL_Driver_manager::put_connection_to_cache(
                                                    connection_cache_type::key_type url, 
                                                    SQL_Connection* connection) { 
           SYNCHRONIZED;
   
           connection_cache_type::value_type connections=connection_cache.get(url);
           if(!connections) { // there are no cached connections to that 'url' yet?
                   connections=new connection_cache_element_base_type;
                   connection_cache.put(url, connections);
           }       
           connections->push(connection);
   }
   
   void SQL_Driver_manager::maybe_expire_cache() {
           time_t now=time(0);
   
           if(prev_expiration_pass_time<now-CHECK_EXPIRED_CONNECTIONS_SECONDS) {
                   connection_cache.for_each<time_t>(expire_connections, time_t(now-EXPIRE_UNUSED_CONNECTION_SECONDS));
   
                   prev_expiration_pass_time=now;
           }
   }
   
   static void add_connection_to_status_cache_table(SQL_Connection& connection, Table* table) {
           if(connection.connected()) {
                   ArrayString& row=*new ArrayString;
   
                   // url
                   row+=&connection.services().url_without_login();
                   // time
                   time_t time_used=connection.get_time_used();
                   row+=new String(pa_strdup(ctime(&time_used)));
   
                   *table+=&row;
           }
   }
   static void add_connections_to_status_cache_table(
           SQL_Driver_manager::connection_cache_type::key_type /*key*/, 
           SQL_Driver_manager::connection_cache_type::value_type stack, Table* table) 
   {
           for(Array_iterator<SQL_Connection*> i(*stack); i.has_next(); )
                   add_connection_to_status_cache_table(*i.next(), table);
   }
   
   Value* SQL_Driver_manager::get_status() {
           Value* result=new VHash;
   
           // cache
           {
                   ArrayString& columns=*new ArrayString;
                   columns+=new String("url");
                   columns+=new String("time");
                   Table& table=*new Table(&columns, connection_cache.count());
   
                   connection_cache.for_each<Table*>(add_connections_to_status_cache_table, &table);
   
                   result->get_hash()->put(*new String("cache"), new VTable(&table));
           }
   
           return result;
   }
Removed from v.1.28  
changed lines
  Added in v.1.93

E-mail: