5344628358d9a579a380adf24541e4da65ad83fe
[clsql.git] / sql / database.lisp
1 ;;;; -*- Mode: LISP; Syntax: ANSI-Common-Lisp; Base: 10 -*-
2 ;;;; *************************************************************************
3 ;;;;
4 ;;;; $Id$
5 ;;;;
6 ;;;; Base database functions
7 ;;;;
8 ;;;; This file is part of CLSQL.
9 ;;;;
10 ;;;; CLSQL users are granted the rights to distribute and use this software
11 ;;;; as governed by the terms of the Lisp Lesser GNU Public License
12 ;;;; (http://opensource.franz.com/preamble.html), also known as the LLGPL.
13 ;;;; *************************************************************************
14
15 (in-package #:clsql-sys)
16
17
18 (defvar *connect-if-exists* :error
19   "Default value for the if-exists keyword argument in calls to
20 CONNECT. Meaningful values are :new, :warn-new, :error, :warn-old
21 and :old.")
22
23 (defvar *connected-databases* nil
24   "List of active database objects.")
25
26 (defun connected-databases ()
27   "Returns the list of active database objects."
28   *connected-databases*)
29
30 (defvar *default-database* nil
31   "Specifies the default database to be used.")
32
33 (defun is-database-open (database)
34   (eql (database-state database) :open))
35
36 (defun find-database (database &key (errorp t) (db-type nil))
37   "Returns the connected databases of type DB-TYPE whose names
38 match the string DATABASE. If DATABASE is a database object, it
39 is returned. If DB-TYPE is nil all databases matching the string
40 DATABASE are considered.  If no matching databases are found and
41 ERRORP is nil then nil is returned. If ERRORP is nil and one or
42 more matching databases are found, then the most recently
43 connected database is returned as a first value and the number of
44 matching databases is returned as a second value. If no, or more
45 than one, matching databases are found and ERRORP is true, an
46 error is signalled."
47   (etypecase database
48     (database
49      (values database 1))
50     (string
51      (let* ((matches (remove-if
52                       #'(lambda (db)
53                           (not (and (string= (database-name db) database)
54                                     (if db-type
55                                         (equal (database-type db) db-type)
56                                         t))))
57                       (connected-databases)))
58             (count (length matches)))
59        (if (or (not errorp) (= count 1))
60            (values (car matches) count)
61            (cerror "Return nil."
62                    'sql-database-error
63                    :message
64                    (format nil "There exists ~A database called ~A."
65                            (if (zerop count) "no" "more than one")
66                            database)))))
67     (null
68      (error "A database must be specified rather than NIL."))))
69
70
71 (defun connect (connection-spec
72                 &key (if-exists *connect-if-exists*)
73                 (make-default t)
74                 (pool nil)
75                 (database-type *default-database-type*))
76   "Connects to a database of the supplied DATABASE-TYPE which
77 defaults to *DEFAULT-DATABASE-TYPE*, using the type-specific
78 connection specification CONNECTION-SPEC. The value of IF-EXISTS,
79 which defaults to *CONNECT-IF-EXISTS*, determines what happens if
80 a connection to the database specified by CONNECTION-SPEC is
81 already established.  A value of :new means create a new
82 connection.  A value of :warn-new means warn the user and create
83 a new connect.  A value of :warn-old means warn the user and use
84 the old connection.  A value of :error means fail, notifying the
85 user.  A value of :old means return the old connection.
86 MAKE-DEFAULT is t by default which means that *DEFAULT-DATABASE*
87 is set to the new connection, otherwise *DEFAULT-DATABASE* is not
88 changed. If POOL is t the connection will be taken from the
89 general pool, if POOL is a CONN-POOL object the connection will
90 be taken from this pool."
91
92   (unless database-type
93     (error 'sql-database-error :message "Must specify a database-type."))
94
95   (when (stringp connection-spec)
96     (setq connection-spec (string-to-list-connection-spec connection-spec)))
97
98   (unless (member database-type *loaded-database-types*)
99     (asdf:operate 'asdf:load-op (ensure-keyword
100                                  (concatenate 'string
101                                               (symbol-name '#:clsql-)
102                                               (symbol-name database-type)))
103                   :verbose nil))
104
105   (if pool
106       (let ((conn (acquire-from-pool connection-spec database-type pool)))
107         (when make-default (setq *default-database* conn))
108         conn)
109       (let* ((db-name (database-name-from-spec connection-spec database-type))
110              (old-db (unless (eq if-exists :new)
111                        (find-database db-name :db-type database-type
112                                       :errorp nil)))
113              (result nil))
114         (if old-db
115             (ecase if-exists
116               (:warn-new
117                (setq result
118                      (database-connect connection-spec database-type))
119                (warn 'sql-warning
120                      :message
121                      (format nil
122                              "Created new connection ~A to database ~A~%, although there is an existing connection (~A)."
123                              result (database-name result) old-db)))
124               (:error
125                (restart-case
126                    (error 'sql-connection-error
127                           :message
128                           (format nil "There is an existing connection ~A to database ~A."
129                           old-db
130                           (database-name old-db)))
131                  (create-new ()
132                    :report "Create a new connection."
133                    (setq result
134                          (database-connect connection-spec database-type)))
135                  (use-old ()
136                    :report "Use the existing connection."
137                    (setq result old-db))))
138               (:warn-old
139                (setq result old-db)
140                (warn 'sql-warning
141                      :message
142                      (format nil
143                              "Using existing connection ~A to database ~A."
144                              old-db
145                              (database-name old-db))))
146               (:old
147                (setq result old-db)))
148             (setq result
149                   (database-connect connection-spec database-type)))
150         (when result
151           (setf (slot-value result 'state) :open)
152           (pushnew result *connected-databases*)
153           (when make-default (setq *default-database* result))
154           result))))
155
156
157 (defun disconnect (&key (database *default-database*) (error nil))
158
159   "Closes the connection to DATABASE and resets
160 *DEFAULT-DATABASE* if that database was disconnected. If DATABASE
161 is a database instance, this object is closed. If DATABASE is a
162 string, then a connected database whose name matches DATABASE is
163 sought in the list of connected databases. If no matching
164 database is found and ERROR and DATABASE are both non-nil an
165 error is signaled, otherwise nil is returned. If the database is
166 from a pool it will be released to this pool."
167   (let ((database (find-database database :errorp (and database error))))
168     (when database
169       (if (conn-pool database)
170           (with-process-lock ((conn-pool-lock (conn-pool database)) "Delete from pool")
171             (when (release-to-pool database)
172               (setf *connected-databases* (delete database *connected-databases*))
173               (when (eq database *default-database*)
174                 (setf *default-database* (car *connected-databases*)))
175               t))
176           (when (database-disconnect database)
177             (setf *connected-databases* (delete database *connected-databases*))
178             (when (eq database *default-database*)
179               (setf *default-database* (car *connected-databases*)))
180             (setf (slot-value database 'state) :closed)
181             t)))))
182
183
184 ;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;
185
186
187 (defmacro check-connection-spec (connection-spec database-type template)
188   "Check the connection specification against the provided template,
189 and signal an sql-user-error if they don't match. This function
190 is called by database backends."
191   `(handler-case
192     (destructuring-bind ,template ,connection-spec
193       (declare (ignore ,@(remove '&optional template)))
194       t)
195     (error ()
196      (error 'sql-user-error
197       :message
198       (format nil
199               "The connection specification ~A~%is invalid for database type ~A.~%The connection specification must conform to ~A"
200               ,connection-spec
201               ,database-type
202               (quote ,template))))))
203
204 (defun reconnect (&key (database *default-database*) (error nil) (force t))
205   "Reconnects DATABASE which defaults to *DEFAULT-DATABASE* to
206 the underlying database management system. On success, t is
207 returned and the variable *DEFAULT-DATABASE* is set to the newly
208 reconnected database. If DATABASE is a database instance, this
209 object is closed. If DATABASE is a string, then a connected
210 database whose name matches DATABASE is sought in the list of
211 connected databases. If no matching database is found and ERROR
212 and DATABASE are both non-nil an error is signaled, otherwise nil
213 is returned. When the current database connection cannot be
214 closed, if FORCE is non-nil, as it is by default, the connection
215 is closed and errors are suppressed. If force is nil and the
216 database connection cannot be closed, an error is signalled."
217   (let ((db (etypecase database
218               (database database)
219               ((or string list)
220                (let ((db (find-database database :errorp nil)))
221                  (when (null db)
222                    (if (and database error)
223                        (error 'sql-connection-error
224                               :message
225                               (format nil "Unable to find database with connection-spec ~A." database))
226                        (return-from reconnect nil)))
227                  db)))))
228
229     (when (is-database-open db)
230       (if force
231           (ignore-errors (disconnect :database db))
232           (disconnect :database db :error nil)))
233
234     (connect (connection-spec db))))
235
236
237 (defun status (&optional full)
238   "Prints information about the currently connected databases to
239 *STANDARD-OUTPUT*. The argument FULL is nil by default and a
240 value of t means that more detailed information about each
241 database is printed."
242   (flet ((get-data ()
243            (let ((data '()))
244              (dolist (db (connected-databases) data)
245                (push
246                 (append
247                  (list (if (equal db *default-database*) "*" "")
248                        (database-name db)
249                        (string-downcase (string (database-type db)))
250                        (cond ((and (command-recording-stream db)
251                                    (result-recording-stream db))
252                               "Both")
253                              ((command-recording-stream db) "Commands")
254                              ((result-recording-stream db) "Results")
255                              (t "nil")))
256                  (when full
257                    (list
258                     (if (conn-pool db) "t" "nil")
259                     (format nil "~A" (length (database-list-tables db)))
260                     (format nil "~A" (length (database-list-views db))))))
261                 data))))
262          (compute-sizes (data)
263            (mapcar #'(lambda (x) (apply #'max (mapcar #'length x)))
264                    (apply #'mapcar (cons #'list data))))
265          (print-separator (size)
266            (format t "~&~A" (make-string size :initial-element #\-))))
267     (format t "~&CLSQL STATUS: ~A~%" (iso-timestring (get-time)))
268     (let ((data (get-data)))
269       (when data
270         (let* ((titles (if full
271                            (list "" "DATABASE" "TYPE" "RECORDING" "POOLED"
272                                  "TABLES" "VIEWS")
273                            (list "" "DATABASE" "TYPE" "RECORDING")))
274                (sizes (compute-sizes (cons titles data)))
275                (total-size (+ (apply #'+ sizes) (* 2 (1- (length titles)))))
276                (control-string (format nil "~~&~~{~{~~~AA  ~}~~}" sizes)))
277           (print-separator total-size)
278           (format t control-string titles)
279           (print-separator total-size)
280           (dolist (d data) (format t control-string d))
281           (print-separator total-size))))
282     (values)))
283
284 (defun create-database (connection-spec &key (database-type *default-database-type*))
285   "This function creates a database in the database system specified
286 by DATABASE-TYPE."
287   (when (stringp connection-spec)
288     (setq connection-spec (string-to-list-connection-spec connection-spec)))
289   (database-create connection-spec database-type))
290
291 (defun probe-database (connection-spec &key (database-type *default-database-type*))
292   "This function tests for the existence of a database in the database
293 system specified by DATABASE-TYPE."
294   (when (stringp connection-spec)
295     (setq connection-spec (string-to-list-connection-spec connection-spec)))
296   (database-probe connection-spec database-type))
297
298 (defun destroy-database (connection-spec &key (database-type *default-database-type*))
299   "This function destroys a database in the database system specified
300 by DATABASE-TYPE."
301   (when (stringp connection-spec)
302     (setq connection-spec (string-to-list-connection-spec connection-spec)))
303   (database-destroy connection-spec database-type))
304
305 (defun list-databases (connection-spec &key (database-type *default-database-type*))
306   "This function returns a list of databases existing in the database
307 system specified by DATABASE-TYPE."
308   (when (stringp connection-spec)
309     (setq connection-spec (string-to-list-connection-spec connection-spec)))
310   (database-list connection-spec database-type))
311
312 (defmacro with-database ((db-var connection-spec
313                                  &key make-default pool
314                                  (if-exists *connect-if-exists*)
315                                  (database-type *default-database-type*))
316                                  &body body)
317   "Evaluate the body in an environment, where DB-VAR is bound to the
318 database connection given by CONNECTION-SPEC and CONNECT-ARGS.  The
319 connection is automatically closed or released to the pool on exit
320 from the body. MAKE-DEFAULT has a default value of NIL."
321   `(let ((,db-var (connect ,connection-spec
322                            :database-type ,database-type
323                            :if-exists ,if-exists
324                            :pool ,pool
325                            :make-default ,make-default)))
326      (unwind-protect
327       (let ((,db-var ,db-var))
328         (progn ,@body))
329        (disconnect :database ,db-var))))
330
331 (defmacro with-default-database ((database) &rest body)
332   "Perform BODY with DATABASE bound as *default-database*."
333   `(progv '(*default-database*)
334        (list ,database)
335      ,@body))
336