0b4c4b73b1d1a36a7c8778cea96ca5c3d0101538
[dbsrgits/DBIx-Class.git] / lib / DBIx / Class / Storage / DBI.pm
1 package DBIx::Class::Storage::DBI;
2 # -*- mode: cperl; cperl-indent-level: 2 -*-
3
4 use base 'DBIx::Class::Storage';
5
6 use strict;    
7 use warnings;
8 use Carp::Clan qw/^DBIx::Class/;
9 use DBI;
10 use DBIx::Class::Storage::DBI::Cursor;
11 use DBIx::Class::Storage::Statistics;
12 use Scalar::Util();
13 use List::Util();
14
15 __PACKAGE__->mk_group_accessors('simple' =>
16     qw/_connect_info _dbi_connect_info _dbh _sql_maker _sql_maker_opts
17        _conn_pid _conn_tid transaction_depth _dbh_autocommit savepoints/
18 );
19
20 # the values for these accessors are picked out (and deleted) from
21 # the attribute hashref passed to connect_info
22 my @storage_options = qw/
23   on_connect_do on_disconnect_do disable_sth_caching unsafe auto_savepoint
24 /;
25 __PACKAGE__->mk_group_accessors('simple' => @storage_options);
26
27
28 # default cursor class, overridable in connect_info attributes
29 __PACKAGE__->cursor_class('DBIx::Class::Storage::DBI::Cursor');
30
31 __PACKAGE__->mk_group_accessors('inherited' => qw/sql_maker_class/);
32 __PACKAGE__->sql_maker_class('DBIx::Class::SQLAHacks');
33
34
35 =head1 NAME
36
37 DBIx::Class::Storage::DBI - DBI storage handler
38
39 =head1 SYNOPSIS
40
41   my $schema = MySchema->connect('dbi:SQLite:my.db');
42
43   $schema->storage->debug(1);
44   $schema->dbh_do("DROP TABLE authors");
45
46   $schema->resultset('Book')->search({
47      written_on => $schema->storage->datetime_parser(DateTime->now)
48   });
49
50 =head1 DESCRIPTION
51
52 This class represents the connection to an RDBMS via L<DBI>.  See
53 L<DBIx::Class::Storage> for general information.  This pod only
54 documents DBI-specific methods and behaviors.
55
56 =head1 METHODS
57
58 =cut
59
60 sub new {
61   my $new = shift->next::method(@_);
62
63   $new->transaction_depth(0);
64   $new->_sql_maker_opts({});
65   $new->{savepoints} = [];
66   $new->{_in_dbh_do} = 0;
67   $new->{_dbh_gen} = 0;
68
69   $new;
70 }
71
72 =head2 connect_info
73
74 This method is normally called by L<DBIx::Class::Schema/connection>, which
75 encapsulates its argument list in an arrayref before passing them here.
76
77 The argument list may contain:
78
79 =over
80
81 =item *
82
83 The same 4-element argument set one would normally pass to
84 L<DBI/connect>, optionally followed by
85 L<extra attributes|/DBIx::Class specific connection attributes>
86 recognized by DBIx::Class:
87
88   $connect_info_args = [ $dsn, $user, $password, \%dbi_attributes?, \%extra_attributes? ];
89
90 =item *
91
92 A single code reference which returns a connected 
93 L<DBI database handle|DBI/connect> optionally followed by 
94 L<extra attributes|/DBIx::Class specific connection attributes> recognized
95 by DBIx::Class:
96
97   $connect_info_args = [ sub { DBI->connect (...) }, \%extra_attributes? ];
98
99 =item *
100
101 A single hashref with all the attributes and the dsn/user/password
102 mixed together:
103
104   $connect_info_args = [{
105     dsn => $dsn,
106     user => $user,
107     password => $pass,
108     %dbi_attributes,
109     %extra_attributes,
110   }];
111
112 This is particularly useful for L<Catalyst> based applications, allowing the 
113 following config (L<Config::General> style):
114
115   <Model::DB>
116     schema_class   App::DB
117     <connect_info>
118       dsn          dbi:mysql:database=test
119       user         testuser
120       password     TestPass
121       AutoCommit   1
122     </connect_info>
123   </Model::DB>
124
125 =back
126
127 Please note that the L<DBI> docs recommend that you always explicitly
128 set C<AutoCommit> to either I<0> or I<1>.  L<DBIx::Class> further
129 recommends that it be set to I<1>, and that you perform transactions
130 via our L<DBIx::Class::Schema/txn_do> method.  L<DBIx::Class> will set it
131 to I<1> if you do not do explicitly set it to zero.  This is the default 
132 for most DBDs. See L</DBIx::Class and AutoCommit> for details.
133
134 =head3 DBIx::Class specific connection attributes
135
136 In addition to the standard L<DBI|DBI/ATTRIBUTES_COMMON_TO_ALL_HANDLES>
137 L<connection|DBI/Database_Handle_Attributes> attributes, DBIx::Class recognizes
138 the following connection options. These options can be mixed in with your other
139 L<DBI> connection attributes, or placed in a seperate hashref
140 (C<\%extra_attributes>) as shown above.
141
142 Every time C<connect_info> is invoked, any previous settings for
143 these options will be cleared before setting the new ones, regardless of
144 whether any options are specified in the new C<connect_info>.
145
146
147 =over
148
149 =item on_connect_do
150
151 Specifies things to do immediately after connecting or re-connecting to
152 the database.  Its value may contain:
153
154 =over
155
156 =item a scalar
157
158 This contains one SQL statement to execute.
159
160 =item an array reference
161
162 This contains SQL statements to execute in order.  Each element contains
163 a string or a code reference that returns a string.
164
165 =item a code reference
166
167 This contains some code to execute.  Unlike code references within an
168 array reference, its return value is ignored.
169
170 =back
171
172 =item on_disconnect_do
173
174 Takes arguments in the same form as L</on_connect_do> and executes them
175 immediately before disconnecting from the database.
176
177 Note, this only runs if you explicitly call L</disconnect> on the
178 storage object.
179
180 =item disable_sth_caching
181
182 If set to a true value, this option will disable the caching of
183 statement handles via L<DBI/prepare_cached>.
184
185 =item limit_dialect 
186
187 Sets the limit dialect. This is useful for JDBC-bridge among others
188 where the remote SQL-dialect cannot be determined by the name of the
189 driver alone. See also L<SQL::Abstract::Limit>.
190
191 =item quote_char
192
193 Specifies what characters to use to quote table and column names. If 
194 you use this you will want to specify L</name_sep> as well.
195
196 C<quote_char> expects either a single character, in which case is it
197 is placed on either side of the table/column name, or an arrayref of length
198 2 in which case the table/column name is placed between the elements.
199
200 For example under MySQL you should use C<< quote_char => '`' >>, and for
201 SQL Server you should use C<< quote_char => [qw/[ ]/] >>.
202
203 =item name_sep
204
205 This only needs to be used in conjunction with C<quote_char>, and is used to 
206 specify the charecter that seperates elements (schemas, tables, columns) from 
207 each other. In most cases this is simply a C<.>.
208
209 The consequences of not supplying this value is that L<SQL::Abstract>
210 will assume DBIx::Class' uses of aliases to be complete column
211 names. The output will look like I<"me.name"> when it should actually
212 be I<"me"."name">.
213
214 =item unsafe
215
216 This Storage driver normally installs its own C<HandleError>, sets
217 C<RaiseError> and C<ShowErrorStatement> on, and sets C<PrintError> off on
218 all database handles, including those supplied by a coderef.  It does this
219 so that it can have consistent and useful error behavior.
220
221 If you set this option to a true value, Storage will not do its usual
222 modifications to the database handle's attributes, and instead relies on
223 the settings in your connect_info DBI options (or the values you set in
224 your connection coderef, in the case that you are connecting via coderef).
225
226 Note that your custom settings can cause Storage to malfunction,
227 especially if you set a C<HandleError> handler that suppresses exceptions
228 and/or disable C<RaiseError>.
229
230 =item auto_savepoint
231
232 If this option is true, L<DBIx::Class> will use savepoints when nesting
233 transactions, making it possible to recover from failure in the inner
234 transaction without having to abort all outer transactions.
235
236 =item cursor_class
237
238 Use this argument to supply a cursor class other than the default
239 L<DBIx::Class::Storage::DBI::Cursor>.
240
241 =back
242
243 Some real-life examples of arguments to L</connect_info> and
244 L<DBIx::Class::Schema/connect>
245
246   # Simple SQLite connection
247   ->connect_info([ 'dbi:SQLite:./foo.db' ]);
248
249   # Connect via subref
250   ->connect_info([ sub { DBI->connect(...) } ]);
251
252   # A bit more complicated
253   ->connect_info(
254     [
255       'dbi:Pg:dbname=foo',
256       'postgres',
257       'my_pg_password',
258       { AutoCommit => 1 },
259       { quote_char => q{"}, name_sep => q{.} },
260     ]
261   );
262
263   # Equivalent to the previous example
264   ->connect_info(
265     [
266       'dbi:Pg:dbname=foo',
267       'postgres',
268       'my_pg_password',
269       { AutoCommit => 1, quote_char => q{"}, name_sep => q{.} },
270     ]
271   );
272
273   # Same, but with hashref as argument
274   # See parse_connect_info for explanation
275   ->connect_info(
276     [{
277       dsn         => 'dbi:Pg:dbname=foo',
278       user        => 'postgres',
279       password    => 'my_pg_password',
280       AutoCommit  => 1,
281       quote_char  => q{"},
282       name_sep    => q{.},
283     }]
284   );
285
286   # Subref + DBIx::Class-specific connection options
287   ->connect_info(
288     [
289       sub { DBI->connect(...) },
290       {
291           quote_char => q{`},
292           name_sep => q{@},
293           on_connect_do => ['SET search_path TO myschema,otherschema,public'],
294           disable_sth_caching => 1,
295       },
296     ]
297   );
298
299
300
301 =cut
302
303 sub connect_info {
304   my ($self, $info_arg) = @_;
305
306   return $self->_connect_info if !$info_arg;
307
308   my @args = @$info_arg;  # take a shallow copy for further mutilation
309   $self->_connect_info([@args]); # copy for _connect_info
310
311
312   # combine/pre-parse arguments depending on invocation style
313
314   my %attrs;
315   if (ref $args[0] eq 'CODE') {     # coderef with optional \%extra_attributes
316     %attrs = %{ $args[1] || {} };
317     @args = $args[0];
318   }
319   elsif (ref $args[0] eq 'HASH') { # single hashref (i.e. Catalyst config)
320     %attrs = %{$args[0]};
321     @args = ();
322     for (qw/password user dsn/) {
323       unshift @args, delete $attrs{$_};
324     }
325   }
326   else {                # otherwise assume dsn/user/password + \%attrs + \%extra_attrs
327     %attrs = (
328       % { $args[3] || {} },
329       % { $args[4] || {} },
330     );
331     @args = @args[0,1,2];
332   }
333
334   # Kill sql_maker/_sql_maker_opts, so we get a fresh one with only
335   #  the new set of options
336   $self->_sql_maker(undef);
337   $self->_sql_maker_opts({});
338
339   if(keys %attrs) {
340     for my $storage_opt (@storage_options, 'cursor_class') {    # @storage_options is declared at the top of the module
341       if(my $value = delete $attrs{$storage_opt}) {
342         $self->$storage_opt($value);
343       }
344     }
345     for my $sql_maker_opt (qw/limit_dialect quote_char name_sep/) {
346       if(my $opt_val = delete $attrs{$sql_maker_opt}) {
347         $self->_sql_maker_opts->{$sql_maker_opt} = $opt_val;
348       }
349     }
350   }
351
352   %attrs = () if (ref $args[0] eq 'CODE');  # _connect() never looks past $args[0] in this case
353
354   $self->_dbi_connect_info([@args, keys %attrs ? \%attrs : ()]);
355   $self->_connect_info;
356 }
357
358 =head2 on_connect_do
359
360 This method is deprecated in favour of setting via L</connect_info>.
361
362
363 =head2 dbh_do
364
365 Arguments: ($subref | $method_name), @extra_coderef_args?
366
367 Execute the given $subref or $method_name using the new exception-based
368 connection management.
369
370 The first two arguments will be the storage object that C<dbh_do> was called
371 on and a database handle to use.  Any additional arguments will be passed
372 verbatim to the called subref as arguments 2 and onwards.
373
374 Using this (instead of $self->_dbh or $self->dbh) ensures correct
375 exception handling and reconnection (or failover in future subclasses).
376
377 Your subref should have no side-effects outside of the database, as
378 there is the potential for your subref to be partially double-executed
379 if the database connection was stale/dysfunctional.
380
381 Example:
382
383   my @stuff = $schema->storage->dbh_do(
384     sub {
385       my ($storage, $dbh, @cols) = @_;
386       my $cols = join(q{, }, @cols);
387       $dbh->selectrow_array("SELECT $cols FROM foo");
388     },
389     @column_list
390   );
391
392 =cut
393
394 sub dbh_do {
395   my $self = shift;
396   my $code = shift;
397
398   my $dbh = $self->_dbh;
399
400   return $self->$code($dbh, @_) if $self->{_in_dbh_do}
401       || $self->{transaction_depth};
402
403   local $self->{_in_dbh_do} = 1;
404
405   my @result;
406   my $want_array = wantarray;
407
408   eval {
409     $self->_verify_pid if $dbh;
410     if(!$self->_dbh) {
411         $self->_populate_dbh;
412         $dbh = $self->_dbh;
413     }
414
415     if($want_array) {
416         @result = $self->$code($dbh, @_);
417     }
418     elsif(defined $want_array) {
419         $result[0] = $self->$code($dbh, @_);
420     }
421     else {
422         $self->$code($dbh, @_);
423     }
424   };
425
426   my $exception = $@;
427   if(!$exception) { return $want_array ? @result : $result[0] }
428
429   $self->throw_exception($exception) if $self->connected;
430
431   # We were not connected - reconnect and retry, but let any
432   #  exception fall right through this time
433   $self->_populate_dbh;
434   $self->$code($self->_dbh, @_);
435 }
436
437 # This is basically a blend of dbh_do above and DBIx::Class::Storage::txn_do.
438 # It also informs dbh_do to bypass itself while under the direction of txn_do,
439 #  via $self->{_in_dbh_do} (this saves some redundant eval and errorcheck, etc)
440 sub txn_do {
441   my $self = shift;
442   my $coderef = shift;
443
444   ref $coderef eq 'CODE' or $self->throw_exception
445     ('$coderef must be a CODE reference');
446
447   return $coderef->(@_) if $self->{transaction_depth} && ! $self->auto_savepoint;
448
449   local $self->{_in_dbh_do} = 1;
450
451   my @result;
452   my $want_array = wantarray;
453
454   my $tried = 0;
455   while(1) {
456     eval {
457       $self->_verify_pid if $self->_dbh;
458       $self->_populate_dbh if !$self->_dbh;
459
460       $self->txn_begin;
461       if($want_array) {
462           @result = $coderef->(@_);
463       }
464       elsif(defined $want_array) {
465           $result[0] = $coderef->(@_);
466       }
467       else {
468           $coderef->(@_);
469       }
470       $self->txn_commit;
471     };
472
473     my $exception = $@;
474     if(!$exception) { return $want_array ? @result : $result[0] }
475
476     if($tried++ > 0 || $self->connected) {
477       eval { $self->txn_rollback };
478       my $rollback_exception = $@;
479       if($rollback_exception) {
480         my $exception_class = "DBIx::Class::Storage::NESTED_ROLLBACK_EXCEPTION";
481         $self->throw_exception($exception)  # propagate nested rollback
482           if $rollback_exception =~ /$exception_class/;
483
484         $self->throw_exception(
485           "Transaction aborted: ${exception}. "
486           . "Rollback failed: ${rollback_exception}"
487         );
488       }
489       $self->throw_exception($exception)
490     }
491
492     # We were not connected, and was first try - reconnect and retry
493     # via the while loop
494     $self->_populate_dbh;
495   }
496 }
497
498 =head2 disconnect
499
500 Our C<disconnect> method also performs a rollback first if the
501 database is not in C<AutoCommit> mode.
502
503 =cut
504
505 sub disconnect {
506   my ($self) = @_;
507
508   if( $self->connected ) {
509     my $connection_do = $self->on_disconnect_do;
510     $self->_do_connection_actions($connection_do) if ref($connection_do);
511
512     $self->_dbh->rollback unless $self->_dbh_autocommit;
513     $self->_dbh->disconnect;
514     $self->_dbh(undef);
515     $self->{_dbh_gen}++;
516   }
517 }
518
519 =head2 with_deferred_fk_checks
520
521 =over 4
522
523 =item Arguments: C<$coderef>
524
525 =item Return Value: The return value of $coderef
526
527 =back
528
529 Storage specific method to run the code ref with FK checks deferred or
530 in MySQL's case disabled entirely.
531
532 =cut
533
534 # Storage subclasses should override this
535 sub with_deferred_fk_checks {
536   my ($self, $sub) = @_;
537
538   $sub->();
539 }
540
541 sub connected {
542   my ($self) = @_;
543
544   if(my $dbh = $self->_dbh) {
545       if(defined $self->_conn_tid && $self->_conn_tid != threads->tid) {
546           $self->_dbh(undef);
547           $self->{_dbh_gen}++;
548           return;
549       }
550       else {
551           $self->_verify_pid;
552           return 0 if !$self->_dbh;
553       }
554       return ($dbh->FETCH('Active') && $dbh->ping);
555   }
556
557   return 0;
558 }
559
560 # handle pid changes correctly
561 #  NOTE: assumes $self->_dbh is a valid $dbh
562 sub _verify_pid {
563   my ($self) = @_;
564
565   return if defined $self->_conn_pid && $self->_conn_pid == $$;
566
567   $self->_dbh->{InactiveDestroy} = 1;
568   $self->_dbh(undef);
569   $self->{_dbh_gen}++;
570
571   return;
572 }
573
574 sub ensure_connected {
575   my ($self) = @_;
576
577   unless ($self->connected) {
578     $self->_populate_dbh;
579   }
580 }
581
582 =head2 dbh
583
584 Returns the dbh - a data base handle of class L<DBI>.
585
586 =cut
587
588 sub dbh {
589   my ($self) = @_;
590
591   $self->ensure_connected;
592   return $self->_dbh;
593 }
594
595 sub _sql_maker_args {
596     my ($self) = @_;
597     
598     return ( bindtype=>'columns', array_datatypes => 1, limit_dialect => $self->dbh, %{$self->_sql_maker_opts} );
599 }
600
601 sub sql_maker {
602   my ($self) = @_;
603   unless ($self->_sql_maker) {
604     my $sql_maker_class = $self->sql_maker_class;
605     $self->ensure_class_loaded ($sql_maker_class);
606     $self->_sql_maker($sql_maker_class->new( $self->_sql_maker_args ));
607   }
608   return $self->_sql_maker;
609 }
610
611 sub _rebless {}
612
613 sub _populate_dbh {
614   my ($self) = @_;
615   my @info = @{$self->_dbi_connect_info || []};
616   $self->_dbh($self->_connect(@info));
617
618   $self->_conn_pid($$);
619   $self->_conn_tid(threads->tid) if $INC{'threads.pm'};
620
621   $self->_determine_driver;
622
623   # Always set the transaction depth on connect, since
624   #  there is no transaction in progress by definition
625   $self->{transaction_depth} = $self->_dbh_autocommit ? 0 : 1;
626
627   my $connection_do = $self->on_connect_do;
628   $self->_do_connection_actions($connection_do) if $connection_do;
629 }
630
631 sub _determine_driver {
632   my ($self) = @_;
633
634   if (ref $self eq 'DBIx::Class::Storage::DBI') {
635     my $driver;
636
637     if ($self->_dbh) { # we are connected
638       $driver = $self->_dbh->{Driver}{Name};
639     } else {
640       # try to use dsn to not require being connected, the driver may still
641       # force a connection in _rebless to determine version
642       ($driver) = $self->_dbi_connect_info->[0] =~ /dbi:([^:]+):/i;
643     }
644
645     if ($self->load_optional_class("DBIx::Class::Storage::DBI::${driver}")) {
646       bless $self, "DBIx::Class::Storage::DBI::${driver}";
647       $self->_rebless();
648     }
649   }
650 }
651
652 sub _do_connection_actions {
653   my $self = shift;
654   my $connection_do = shift;
655
656   if (!ref $connection_do) {
657     $self->_do_query($connection_do);
658   }
659   elsif (ref $connection_do eq 'ARRAY') {
660     $self->_do_query($_) foreach @$connection_do;
661   }
662   elsif (ref $connection_do eq 'CODE') {
663     $connection_do->($self);
664   }
665   else {
666     $self->throw_exception (sprintf ("Don't know how to process conection actions of type '%s'", ref $connection_do) );
667   }
668
669   return $self;
670 }
671
672 sub _do_query {
673   my ($self, $action) = @_;
674
675   if (ref $action eq 'CODE') {
676     $action = $action->($self);
677     $self->_do_query($_) foreach @$action;
678   }
679   else {
680     # Most debuggers expect ($sql, @bind), so we need to exclude
681     # the attribute hash which is the second argument to $dbh->do
682     # furthermore the bind values are usually to be presented
683     # as named arrayref pairs, so wrap those here too
684     my @do_args = (ref $action eq 'ARRAY') ? (@$action) : ($action);
685     my $sql = shift @do_args;
686     my $attrs = shift @do_args;
687     my @bind = map { [ undef, $_ ] } @do_args;
688
689     $self->_query_start($sql, @bind);
690     $self->_dbh->do($sql, $attrs, @do_args);
691     $self->_query_end($sql, @bind);
692   }
693
694   return $self;
695 }
696
697 sub _connect {
698   my ($self, @info) = @_;
699
700   $self->throw_exception("You failed to provide any connection info")
701     if !@info;
702
703   my ($old_connect_via, $dbh);
704
705   if ($INC{'Apache/DBI.pm'} && $ENV{MOD_PERL}) {
706     $old_connect_via = $DBI::connect_via;
707     $DBI::connect_via = 'connect';
708   }
709
710   eval {
711     if(ref $info[0] eq 'CODE') {
712        $dbh = &{$info[0]}
713     }
714     else {
715        $dbh = DBI->connect(@info);
716     }
717
718     if($dbh && !$self->unsafe) {
719       my $weak_self = $self;
720       Scalar::Util::weaken($weak_self);
721       $dbh->{HandleError} = sub {
722           if ($weak_self) {
723             $weak_self->throw_exception("DBI Exception: $_[0]");
724           }
725           else {
726             croak ("DBI Exception: $_[0]");
727           }
728       };
729       $dbh->{ShowErrorStatement} = 1;
730       $dbh->{RaiseError} = 1;
731       $dbh->{PrintError} = 0;
732     }
733   };
734
735   $DBI::connect_via = $old_connect_via if $old_connect_via;
736
737   $self->throw_exception("DBI Connection failed: " . ($@||$DBI::errstr))
738     if !$dbh || $@;
739
740   $self->_dbh_autocommit($dbh->{AutoCommit});
741
742   $dbh;
743 }
744
745 sub svp_begin {
746   my ($self, $name) = @_;
747
748   $name = $self->_svp_generate_name
749     unless defined $name;
750
751   $self->throw_exception ("You can't use savepoints outside a transaction")
752     if $self->{transaction_depth} == 0;
753
754   $self->throw_exception ("Your Storage implementation doesn't support savepoints")
755     unless $self->can('_svp_begin');
756   
757   push @{ $self->{savepoints} }, $name;
758
759   $self->debugobj->svp_begin($name) if $self->debug;
760   
761   return $self->_svp_begin($name);
762 }
763
764 sub svp_release {
765   my ($self, $name) = @_;
766
767   $self->throw_exception ("You can't use savepoints outside a transaction")
768     if $self->{transaction_depth} == 0;
769
770   $self->throw_exception ("Your Storage implementation doesn't support savepoints")
771     unless $self->can('_svp_release');
772
773   if (defined $name) {
774     $self->throw_exception ("Savepoint '$name' does not exist")
775       unless grep { $_ eq $name } @{ $self->{savepoints} };
776
777     # Dig through the stack until we find the one we are releasing.  This keeps
778     # the stack up to date.
779     my $svp;
780
781     do { $svp = pop @{ $self->{savepoints} } } while $svp ne $name;
782   } else {
783     $name = pop @{ $self->{savepoints} };
784   }
785
786   $self->debugobj->svp_release($name) if $self->debug;
787
788   return $self->_svp_release($name);
789 }
790
791 sub svp_rollback {
792   my ($self, $name) = @_;
793
794   $self->throw_exception ("You can't use savepoints outside a transaction")
795     if $self->{transaction_depth} == 0;
796
797   $self->throw_exception ("Your Storage implementation doesn't support savepoints")
798     unless $self->can('_svp_rollback');
799
800   if (defined $name) {
801       # If they passed us a name, verify that it exists in the stack
802       unless(grep({ $_ eq $name } @{ $self->{savepoints} })) {
803           $self->throw_exception("Savepoint '$name' does not exist!");
804       }
805
806       # Dig through the stack until we find the one we are releasing.  This keeps
807       # the stack up to date.
808       while(my $s = pop(@{ $self->{savepoints} })) {
809           last if($s eq $name);
810       }
811       # Add the savepoint back to the stack, as a rollback doesn't remove the
812       # named savepoint, only everything after it.
813       push(@{ $self->{savepoints} }, $name);
814   } else {
815       # We'll assume they want to rollback to the last savepoint
816       $name = $self->{savepoints}->[-1];
817   }
818
819   $self->debugobj->svp_rollback($name) if $self->debug;
820   
821   return $self->_svp_rollback($name);
822 }
823
824 sub _svp_generate_name {
825     my ($self) = @_;
826
827     return 'savepoint_'.scalar(@{ $self->{'savepoints'} });
828 }
829
830 sub txn_begin {
831   my $self = shift;
832   $self->ensure_connected();
833   if($self->{transaction_depth} == 0) {
834     $self->debugobj->txn_begin()
835       if $self->debug;
836     # this isn't ->_dbh-> because
837     #  we should reconnect on begin_work
838     #  for AutoCommit users
839     $self->dbh->begin_work;
840   } elsif ($self->auto_savepoint) {
841     $self->svp_begin;
842   }
843   $self->{transaction_depth}++;
844 }
845
846 sub txn_commit {
847   my $self = shift;
848   if ($self->{transaction_depth} == 1) {
849     my $dbh = $self->_dbh;
850     $self->debugobj->txn_commit()
851       if ($self->debug);
852     $dbh->commit;
853     $self->{transaction_depth} = 0
854       if $self->_dbh_autocommit;
855   }
856   elsif($self->{transaction_depth} > 1) {
857     $self->{transaction_depth}--;
858     $self->svp_release
859       if $self->auto_savepoint;
860   }
861 }
862
863 sub txn_rollback {
864   my $self = shift;
865   my $dbh = $self->_dbh;
866   eval {
867     if ($self->{transaction_depth} == 1) {
868       $self->debugobj->txn_rollback()
869         if ($self->debug);
870       $self->{transaction_depth} = 0
871         if $self->_dbh_autocommit;
872       $dbh->rollback;
873     }
874     elsif($self->{transaction_depth} > 1) {
875       $self->{transaction_depth}--;
876       if ($self->auto_savepoint) {
877         $self->svp_rollback;
878         $self->svp_release;
879       }
880     }
881     else {
882       die DBIx::Class::Storage::NESTED_ROLLBACK_EXCEPTION->new;
883     }
884   };
885   if ($@) {
886     my $error = $@;
887     my $exception_class = "DBIx::Class::Storage::NESTED_ROLLBACK_EXCEPTION";
888     $error =~ /$exception_class/ and $self->throw_exception($error);
889     # ensure that a failed rollback resets the transaction depth
890     $self->{transaction_depth} = $self->_dbh_autocommit ? 0 : 1;
891     $self->throw_exception($error);
892   }
893 }
894
895 # This used to be the top-half of _execute.  It was split out to make it
896 #  easier to override in NoBindVars without duping the rest.  It takes up
897 #  all of _execute's args, and emits $sql, @bind.
898 sub _prep_for_execute {
899   my ($self, $op, $extra_bind, $ident, $args) = @_;
900
901   if( Scalar::Util::blessed($ident) && $ident->isa("DBIx::Class::ResultSource") ) {
902     $ident = $ident->from();
903   }
904
905   my ($sql, @bind) = $self->sql_maker->$op($ident, @$args);
906
907   unshift(@bind,
908     map { ref $_ eq 'ARRAY' ? $_ : [ '!!dummy', $_ ] } @$extra_bind)
909       if $extra_bind;
910   return ($sql, \@bind);
911 }
912
913
914 sub _fix_bind_params {
915     my ($self, @bind) = @_;
916
917     ### Turn @bind from something like this:
918     ###   ( [ "artist", 1 ], [ "cdid", 1, 3 ] )
919     ### to this:
920     ###   ( "'1'", "'1'", "'3'" )
921     return
922         map {
923             if ( defined( $_ && $_->[1] ) ) {
924                 map { qq{'$_'}; } @{$_}[ 1 .. $#$_ ];
925             }
926             else { q{'NULL'}; }
927         } @bind;
928 }
929
930 sub _query_start {
931     my ( $self, $sql, @bind ) = @_;
932
933     if ( $self->debug ) {
934         @bind = $self->_fix_bind_params(@bind);
935
936         $self->debugobj->query_start( $sql, @bind );
937     }
938 }
939
940 sub _query_end {
941     my ( $self, $sql, @bind ) = @_;
942
943     if ( $self->debug ) {
944         @bind = $self->_fix_bind_params(@bind);
945         $self->debugobj->query_end( $sql, @bind );
946     }
947 }
948
949 sub _dbh_execute {
950   my ($self, $dbh, $op, $extra_bind, $ident, $bind_attributes, @args) = @_;
951
952   my ($sql, $bind) = $self->_prep_for_execute($op, $extra_bind, $ident, \@args);
953
954   $self->_query_start( $sql, @$bind );
955
956   my $sth = $self->sth($sql,$op);
957
958   my $placeholder_index = 1; 
959
960   foreach my $bound (@$bind) {
961     my $attributes = {};
962     my($column_name, @data) = @$bound;
963
964     if ($bind_attributes) {
965       $attributes = $bind_attributes->{$column_name}
966       if defined $bind_attributes->{$column_name};
967     }
968
969     foreach my $data (@data) {
970       my $ref = ref $data;
971       $data = $ref && $ref ne 'ARRAY' ? ''.$data : $data; # stringify args (except arrayrefs)
972
973       $sth->bind_param($placeholder_index, $data, $attributes);
974       $placeholder_index++;
975     }
976   }
977
978   # Can this fail without throwing an exception anyways???
979   my $rv = $sth->execute();
980   $self->throw_exception($sth->errstr) if !$rv;
981
982   $self->_query_end( $sql, @$bind );
983
984   return (wantarray ? ($rv, $sth, @$bind) : $rv);
985 }
986
987 sub _execute {
988     my $self = shift;
989     $self->dbh_do('_dbh_execute', @_)
990 }
991
992 sub insert {
993   my ($self, $source, $to_insert) = @_;
994
995   my $ident = $source->from;
996   my $bind_attributes = $self->source_bind_attributes($source);
997
998   my $updated_cols = {};
999
1000   $self->ensure_connected;
1001   foreach my $col ( $source->columns ) {
1002     if ( !defined $to_insert->{$col} ) {
1003       my $col_info = $source->column_info($col);
1004
1005       if ( $col_info->{auto_nextval} ) {
1006         $updated_cols->{$col} = $to_insert->{$col} = $self->_sequence_fetch( 'nextval', $col_info->{sequence} || $self->_dbh_get_autoinc_seq($self->dbh, $source) );
1007       }
1008     }
1009   }
1010
1011   $self->_execute('insert' => [], $source, $bind_attributes, $to_insert);
1012
1013   return $updated_cols;
1014 }
1015
1016 ## Still not quite perfect, and EXPERIMENTAL
1017 ## Currently it is assumed that all values passed will be "normal", i.e. not 
1018 ## scalar refs, or at least, all the same type as the first set, the statement is
1019 ## only prepped once.
1020 sub insert_bulk {
1021   my ($self, $source, $cols, $data) = @_;
1022   my %colvalues;
1023   my $table = $source->from;
1024   @colvalues{@$cols} = (0..$#$cols);
1025   my ($sql, @bind) = $self->sql_maker->insert($table, \%colvalues);
1026   
1027   $self->_query_start( $sql, @bind );
1028   my $sth = $self->sth($sql);
1029
1030 #  @bind = map { ref $_ ? ''.$_ : $_ } @bind; # stringify args
1031
1032   ## This must be an arrayref, else nothing works!
1033   my $tuple_status = [];
1034
1035   ## Get the bind_attributes, if any exist
1036   my $bind_attributes = $self->source_bind_attributes($source);
1037
1038   ## Bind the values and execute
1039   my $placeholder_index = 1; 
1040
1041   foreach my $bound (@bind) {
1042
1043     my $attributes = {};
1044     my ($column_name, $data_index) = @$bound;
1045
1046     if( $bind_attributes ) {
1047       $attributes = $bind_attributes->{$column_name}
1048       if defined $bind_attributes->{$column_name};
1049     }
1050
1051     my @data = map { $_->[$data_index] } @$data;
1052
1053     $sth->bind_param_array( $placeholder_index, [@data], $attributes );
1054     $placeholder_index++;
1055   }
1056   my $rv = eval { $sth->execute_array({ArrayTupleStatus => $tuple_status}) };
1057   if (my $err = $@) {
1058     my $i = 0;
1059     ++$i while $i <= $#$tuple_status && !ref $tuple_status->[$i];
1060
1061     $self->throw_exception($sth->errstr || "Unexpected populate error: $err")
1062       if ($i > $#$tuple_status);
1063
1064     require Data::Dumper;
1065     local $Data::Dumper::Terse = 1;
1066     local $Data::Dumper::Indent = 1;
1067     local $Data::Dumper::Useqq = 1;
1068     local $Data::Dumper::Quotekeys = 0;
1069
1070     $self->throw_exception(sprintf "%s for populate slice:\n%s",
1071       $tuple_status->[$i][1],
1072       Data::Dumper::Dumper(
1073         { map { $cols->[$_] => $data->[$i][$_] } (0 .. $#$cols) }
1074       ),
1075     );
1076   }
1077   $self->throw_exception($sth->errstr) if !$rv;
1078
1079   $self->_query_end( $sql, @bind );
1080   return (wantarray ? ($rv, $sth, @bind) : $rv);
1081 }
1082
1083 sub update {
1084   my $self = shift @_;
1085   my $source = shift @_;
1086   my $bind_attributes = $self->source_bind_attributes($source);
1087   
1088   return $self->_execute('update' => [], $source, $bind_attributes, @_);
1089 }
1090
1091
1092 sub delete {
1093   my $self = shift @_;
1094   my $source = shift @_;
1095   
1096   my $bind_attrs = $self->source_bind_attributes($source);
1097   
1098   return $self->_execute('delete' => [], $source, $bind_attrs, @_);
1099 }
1100
1101 # We were sent here because the $rs contains a complex search
1102 # which will require a subquery to select the correct rows
1103 # (i.e. joined or limited resultsets)
1104 #
1105 # Genarating a single PK column subquery is trivial and supported
1106 # by all RDBMS. However if we have a multicolumn PK, things get ugly.
1107 # Look at _multipk_update_delete()
1108 sub _subq_update_delete {
1109   my $self = shift;
1110   my ($rs, $op, $values) = @_;
1111
1112   my $rsrc = $rs->result_source;
1113
1114   # we already check this, but double check naively just in case. Should be removed soon
1115   my $sel = $rs->_resolved_attrs->{select};
1116   $sel = [ $sel ] unless ref $sel eq 'ARRAY';
1117   my @pcols = $rsrc->primary_columns;
1118   if (@$sel != @pcols) {
1119     $self->throw_exception (
1120       'Subquery update/delete can not be called on resultsets selecting a'
1121      .' number of columns different than the number of primary keys'
1122     );
1123   }
1124
1125   if (@pcols == 1) {
1126     return $self->$op (
1127       $rsrc,
1128       $op eq 'update' ? $values : (),
1129       { $pcols[0] => { -in => $rs->as_query } },
1130     );
1131   }
1132
1133   else {
1134     return $self->_multipk_update_delete (@_);
1135   }
1136 }
1137
1138 # ANSI SQL does not provide a reliable way to perform a multicol-PK
1139 # resultset update/delete involving subqueries. So by default resort
1140 # to simple (and inefficient) delete_all style per-row opearations,
1141 # while allowing specific storages to override this with a faster
1142 # implementation.
1143 #
1144 sub _multipk_update_delete {
1145   return shift->_per_row_update_delete (@_);
1146 }
1147
1148 # This is the default loop used to delete/update rows for multi PK
1149 # resultsets, and used by mysql exclusively (because it can't do anything
1150 # else).
1151 #
1152 # We do not use $row->$op style queries, because resultset update/delete
1153 # is not expected to cascade (this is what delete_all/update_all is for).
1154 #
1155 # There should be no race conditions as the entire operation is rolled
1156 # in a transaction.
1157 #
1158 sub _per_row_update_delete {
1159   my $self = shift;
1160   my ($rs, $op, $values) = @_;
1161
1162   my $rsrc = $rs->result_source;
1163   my @pcols = $rsrc->primary_columns;
1164
1165   my $guard = $self->txn_scope_guard;
1166
1167   # emulate the return value of $sth->execute for non-selects
1168   my $row_cnt = '0E0';
1169
1170   my $subrs_cur = $rs->cursor;
1171   while (my @pks = $subrs_cur->next) {
1172
1173     my $cond;
1174     for my $i (0.. $#pcols) {
1175       $cond->{$pcols[$i]} = $pks[$i];
1176     }
1177
1178     $self->$op (
1179       $rsrc,
1180       $op eq 'update' ? $values : (),
1181       $cond,
1182     );
1183
1184     $row_cnt++;
1185   }
1186
1187   $guard->commit;
1188
1189   return $row_cnt;
1190 }
1191
1192 sub _select {
1193   my $self = shift;
1194   my $sql_maker = $self->sql_maker;
1195   return $self->_execute($self->_select_args(@_));
1196 }
1197
1198 sub _select_args_to_query {
1199   my $self = shift;
1200
1201   # my ($op, $bind, $ident, $bind_attrs, $select, $cond, $order, $rows, $offset)
1202   #  = $self->_select_args($ident, $select, $cond, $attrs);
1203   my ($op, $bind, $ident, $bind_attrs, @args) =
1204     $self->_select_args(@_);
1205
1206   # my ($sql, $prepared_bind) = $self->_prep_for_execute($op, $bind, $ident, [ $select, $cond, $order, $rows, $offset ]);
1207   my ($sql, $prepared_bind) = $self->_prep_for_execute($op, $bind, $ident, \@args);
1208
1209   return \[ "($sql)", @{ $prepared_bind || [] }];
1210 }
1211
1212 sub _select_args {
1213   my ($self, $ident, $select, $condition, $attrs) = @_;
1214
1215   my $for = delete $attrs->{for};
1216   my $sql_maker = $self->sql_maker;
1217
1218   local $sql_maker->{for} = $for;
1219
1220   my $order = { map
1221     { $attrs->{$_} ? ( $_ => $attrs->{$_} ) : ()  }
1222     (qw/order_by group_by having _virtual_order_by/ )
1223   };
1224
1225
1226   my $bind_attrs = {};
1227
1228   my $alias2source = $self->_resolve_ident_sources ($ident);
1229
1230   for my $alias (keys %$alias2source) {
1231     my $bindtypes = $self->source_bind_attributes ($alias2source->{$alias}) || {};
1232     for my $col (keys %$bindtypes) {
1233
1234       my $fqcn = join ('.', $alias, $col);
1235       $bind_attrs->{$fqcn} = $bindtypes->{$col} if $bindtypes->{$col};
1236
1237       # so that unqualified searches can be bound too
1238       $bind_attrs->{$col} = $bind_attrs->{$fqcn} if $alias eq 'me';
1239     }
1240   }
1241
1242   # This would be the point to deflate anything found in $condition
1243   # (and leave $attrs->{bind} intact). Problem is - inflators historically
1244   # expect a row object. And all we have is a resultsource (it is trivial
1245   # to extract deflator coderefs via $alias2source above).
1246   #
1247   # I don't see a way forward other than changing the way deflators are
1248   # invoked, and that's just bad...
1249
1250   my @args = ('select', $attrs->{bind}, $ident, $bind_attrs, $select, $condition, $order);
1251   if ($attrs->{software_limit} ||
1252       $sql_maker->_default_limit_syntax eq "GenericSubQ") {
1253         $attrs->{software_limit} = 1;
1254   } else {
1255     $self->throw_exception("rows attribute must be positive if present")
1256       if (defined($attrs->{rows}) && !($attrs->{rows} > 0));
1257
1258     # MySQL actually recommends this approach.  I cringe.
1259     $attrs->{rows} = 2**48 if not defined $attrs->{rows} and defined $attrs->{offset};
1260     push @args, $attrs->{rows}, $attrs->{offset};
1261   }
1262   return @args;
1263 }
1264
1265 sub _resolve_ident_sources {
1266   my ($self, $ident) = @_;
1267
1268   my $alias2source = {};
1269
1270   # the reason this is so contrived is that $ident may be a {from}
1271   # structure, specifying multiple tables to join
1272   if ( Scalar::Util::blessed($ident) && $ident->isa("DBIx::Class::ResultSource") ) {
1273     # this is compat mode for insert/update/delete which do not deal with aliases
1274     $alias2source->{me} = $ident;
1275   }
1276   elsif (ref $ident eq 'ARRAY') {
1277
1278     for (@$ident) {
1279       my $tabinfo;
1280       if (ref $_ eq 'HASH') {
1281         $tabinfo = $_;
1282       }
1283       if (ref $_ eq 'ARRAY' and ref $_->[0] eq 'HASH') {
1284         $tabinfo = $_->[0];
1285       }
1286
1287       $alias2source->{$tabinfo->{-alias}} = $tabinfo->{-result_source}
1288         if ($tabinfo->{-result_source});
1289     }
1290   }
1291
1292   return $alias2source;
1293 }
1294
1295 sub count {
1296   my ($self, $source, $attrs) = @_;
1297
1298   my $tmp_attrs = { %$attrs };
1299
1300   # take off any pagers, record_filter is cdbi, and no point of ordering a count
1301   delete $tmp_attrs->{$_} for (qw/select as rows offset page order_by record_filter/);
1302
1303   # overwrite the selector
1304   $tmp_attrs->{select} = { count => '*' };
1305
1306   my $tmp_rs = $source->resultset_class->new($source, $tmp_attrs);
1307   my ($count) = $tmp_rs->cursor->next;
1308
1309   # if the offset/rows attributes are still present, we did not use
1310   # a subquery, so we need to make the calculations in software
1311   $count -= $attrs->{offset} if $attrs->{offset};
1312   $count = $attrs->{rows} if $attrs->{rows} and $attrs->{rows} < $count;
1313   $count = 0 if ($count < 0);
1314
1315   return $count;
1316 }
1317
1318 sub count_grouped {
1319   my ($self, $source, $attrs) = @_;
1320
1321   # copy for the subquery, we need to do some adjustments to it too
1322   my $sub_attrs = { %$attrs };
1323
1324   # these can not go in the subquery, and there is no point of ordering it
1325   delete $sub_attrs->{$_} for qw/prefetch collapse select as order_by/;
1326
1327   # if we prefetch, we group_by primary keys only as this is what we would get out of the rs via ->next/->all
1328   # simply deleting group_by suffices, as the code below will re-fill it
1329   # Note: we check $attrs, as $sub_attrs has collapse deleted
1330   if (ref $attrs->{collapse} and keys %{$attrs->{collapse}} ) {
1331     delete $sub_attrs->{group_by};
1332   }
1333
1334   $sub_attrs->{group_by} ||= [ map { "$attrs->{alias}.$_" } ($source->primary_columns) ];
1335   $sub_attrs->{select} = $self->_grouped_count_select ($source, $sub_attrs);
1336
1337   $attrs->{from} = [{
1338     count_subq => $source->resultset_class->new ($source, $sub_attrs )->as_query
1339   }];
1340
1341   # the subquery replaces this
1342   delete $attrs->{$_} for qw/where bind prefetch collapse group_by having having_bind rows offset page pager/;
1343
1344   return $self->count ($source, $attrs);
1345 }
1346
1347 #
1348 # Returns a SELECT to go with a supplied GROUP BY
1349 # (caled by count_grouped so a group_by is present)
1350 # Most databases expect them to match, but some
1351 # choke in various ways.
1352 #
1353 sub _grouped_count_select {
1354   my ($self, $source, $rs_args) = @_;
1355   return $rs_args->{group_by};
1356 }
1357
1358 sub source_bind_attributes {
1359   my ($self, $source) = @_;
1360   
1361   my $bind_attributes;
1362   foreach my $column ($source->columns) {
1363   
1364     my $data_type = $source->column_info($column)->{data_type} || '';
1365     $bind_attributes->{$column} = $self->bind_attribute_by_data_type($data_type)
1366      if $data_type;
1367   }
1368
1369   return $bind_attributes;
1370 }
1371
1372 =head2 select
1373
1374 =over 4
1375
1376 =item Arguments: $ident, $select, $condition, $attrs
1377
1378 =back
1379
1380 Handle a SQL select statement.
1381
1382 =cut
1383
1384 sub select {
1385   my $self = shift;
1386   my ($ident, $select, $condition, $attrs) = @_;
1387   return $self->cursor_class->new($self, \@_, $attrs);
1388 }
1389
1390 sub select_single {
1391   my $self = shift;
1392   my ($rv, $sth, @bind) = $self->_select(@_);
1393   my @row = $sth->fetchrow_array;
1394   my @nextrow = $sth->fetchrow_array if @row;
1395   if(@row && @nextrow) {
1396     carp "Query returned more than one row.  SQL that returns multiple rows is DEPRECATED for ->find and ->single";
1397   }
1398   # Need to call finish() to work round broken DBDs
1399   $sth->finish();
1400   return @row;
1401 }
1402
1403 =head2 sth
1404
1405 =over 4
1406
1407 =item Arguments: $sql
1408
1409 =back
1410
1411 Returns a L<DBI> sth (statement handle) for the supplied SQL.
1412
1413 =cut
1414
1415 sub _dbh_sth {
1416   my ($self, $dbh, $sql) = @_;
1417
1418   # 3 is the if_active parameter which avoids active sth re-use
1419   my $sth = $self->disable_sth_caching
1420     ? $dbh->prepare($sql)
1421     : $dbh->prepare_cached($sql, {}, 3);
1422
1423   # XXX You would think RaiseError would make this impossible,
1424   #  but apparently that's not true :(
1425   $self->throw_exception($dbh->errstr) if !$sth;
1426
1427   $sth;
1428 }
1429
1430 sub sth {
1431   my ($self, $sql) = @_;
1432   $self->dbh_do('_dbh_sth', $sql);
1433 }
1434
1435 sub _dbh_columns_info_for {
1436   my ($self, $dbh, $table) = @_;
1437
1438   if ($dbh->can('column_info')) {
1439     my %result;
1440     eval {
1441       my ($schema,$tab) = $table =~ /^(.+?)\.(.+)$/ ? ($1,$2) : (undef,$table);
1442       my $sth = $dbh->column_info( undef,$schema, $tab, '%' );
1443       $sth->execute();
1444       while ( my $info = $sth->fetchrow_hashref() ){
1445         my %column_info;
1446         $column_info{data_type}   = $info->{TYPE_NAME};
1447         $column_info{size}      = $info->{COLUMN_SIZE};
1448         $column_info{is_nullable}   = $info->{NULLABLE} ? 1 : 0;
1449         $column_info{default_value} = $info->{COLUMN_DEF};
1450         my $col_name = $info->{COLUMN_NAME};
1451         $col_name =~ s/^\"(.*)\"$/$1/;
1452
1453         $result{$col_name} = \%column_info;
1454       }
1455     };
1456     return \%result if !$@ && scalar keys %result;
1457   }
1458
1459   my %result;
1460   my $sth = $dbh->prepare($self->sql_maker->select($table, undef, \'1 = 0'));
1461   $sth->execute;
1462   my @columns = @{$sth->{NAME_lc}};
1463   for my $i ( 0 .. $#columns ){
1464     my %column_info;
1465     $column_info{data_type} = $sth->{TYPE}->[$i];
1466     $column_info{size} = $sth->{PRECISION}->[$i];
1467     $column_info{is_nullable} = $sth->{NULLABLE}->[$i] ? 1 : 0;
1468
1469     if ($column_info{data_type} =~ m/^(.*?)\((.*?)\)$/) {
1470       $column_info{data_type} = $1;
1471       $column_info{size}    = $2;
1472     }
1473
1474     $result{$columns[$i]} = \%column_info;
1475   }
1476   $sth->finish;
1477
1478   foreach my $col (keys %result) {
1479     my $colinfo = $result{$col};
1480     my $type_num = $colinfo->{data_type};
1481     my $type_name;
1482     if(defined $type_num && $dbh->can('type_info')) {
1483       my $type_info = $dbh->type_info($type_num);
1484       $type_name = $type_info->{TYPE_NAME} if $type_info;
1485       $colinfo->{data_type} = $type_name if $type_name;
1486     }
1487   }
1488
1489   return \%result;
1490 }
1491
1492 sub columns_info_for {
1493   my ($self, $table) = @_;
1494   $self->dbh_do('_dbh_columns_info_for', $table);
1495 }
1496
1497 =head2 last_insert_id
1498
1499 Return the row id of the last insert.
1500
1501 =cut
1502
1503 sub _dbh_last_insert_id {
1504     # All Storage's need to register their own _dbh_last_insert_id
1505     # the old SQLite-based method was highly inappropriate
1506
1507     my $self = shift;
1508     my $class = ref $self;
1509     $self->throw_exception (<<EOE);
1510
1511 No _dbh_last_insert_id() method found in $class.
1512 Since the method of obtaining the autoincrement id of the last insert
1513 operation varies greatly between different databases, this method must be
1514 individually implemented for every storage class.
1515 EOE
1516 }
1517
1518 sub last_insert_id {
1519   my $self = shift;
1520   $self->dbh_do('_dbh_last_insert_id', @_);
1521 }
1522
1523 =head2 sqlt_type
1524
1525 Returns the database driver name.
1526
1527 =cut
1528
1529 sub sqlt_type { shift->dbh->{Driver}->{Name} }
1530
1531 =head2 bind_attribute_by_data_type
1532
1533 Given a datatype from column info, returns a database specific bind
1534 attribute for C<< $dbh->bind_param($val,$attribute) >> or nothing if we will
1535 let the database planner just handle it.
1536
1537 Generally only needed for special case column types, like bytea in postgres.
1538
1539 =cut
1540
1541 sub bind_attribute_by_data_type {
1542     return;
1543 }
1544
1545 =head2 is_datatype_numeric
1546
1547 Given a datatype from column_info, returns a boolean value indicating if
1548 the current RDBMS considers it a numeric value. This controls how
1549 L<DBIx::Class::Row/set_column> decides whether to mark the column as
1550 dirty - when the datatype is deemed numeric a C<< != >> comparison will
1551 be performed instead of the usual C<eq>.
1552
1553 =cut
1554
1555 sub is_datatype_numeric {
1556   my ($self, $dt) = @_;
1557
1558   return 0 unless $dt;
1559
1560   return $dt =~ /^ (?:
1561     numeric | int(?:eger)? | (?:tiny|small|medium|big)int | dec(?:imal)? | real | float | double (?: \s+ precision)? | (?:big)?serial
1562   ) $/ix;
1563 }
1564
1565
1566 =head2 create_ddl_dir (EXPERIMENTAL)
1567
1568 =over 4
1569
1570 =item Arguments: $schema \@databases, $version, $directory, $preversion, \%sqlt_args
1571
1572 =back
1573
1574 Creates a SQL file based on the Schema, for each of the specified
1575 database engines in C<\@databases> in the given directory.
1576 (note: specify L<SQL::Translator> names, not L<DBI> driver names).
1577
1578 Given a previous version number, this will also create a file containing
1579 the ALTER TABLE statements to transform the previous schema into the
1580 current one. Note that these statements may contain C<DROP TABLE> or
1581 C<DROP COLUMN> statements that can potentially destroy data.
1582
1583 The file names are created using the C<ddl_filename> method below, please
1584 override this method in your schema if you would like a different file
1585 name format. For the ALTER file, the same format is used, replacing
1586 $version in the name with "$preversion-$version".
1587
1588 See L<SQL::Translator/METHODS> for a list of values for C<\%sqlt_args>.
1589 The most common value for this would be C<< { add_drop_table => 1 } >>
1590 to have the SQL produced include a C<DROP TABLE> statement for each table
1591 created. For quoting purposes supply C<quote_table_names> and
1592 C<quote_field_names>.
1593
1594 If no arguments are passed, then the following default values are assumed:
1595
1596 =over 4
1597
1598 =item databases  - ['MySQL', 'SQLite', 'PostgreSQL']
1599
1600 =item version    - $schema->schema_version
1601
1602 =item directory  - './'
1603
1604 =item preversion - <none>
1605
1606 =back
1607
1608 By default, C<\%sqlt_args> will have
1609
1610  { add_drop_table => 1, ignore_constraint_names => 1, ignore_index_names => 1 }
1611
1612 merged with the hash passed in. To disable any of those features, pass in a 
1613 hashref like the following
1614
1615  { ignore_constraint_names => 0, # ... other options }
1616
1617
1618 Note that this feature is currently EXPERIMENTAL and may not work correctly 
1619 across all databases, or fully handle complex relationships.
1620
1621 WARNING: Please check all SQL files created, before applying them.
1622
1623 =cut
1624
1625 sub create_ddl_dir {
1626   my ($self, $schema, $databases, $version, $dir, $preversion, $sqltargs) = @_;
1627
1628   if(!$dir || !-d $dir) {
1629     carp "No directory given, using ./\n";
1630     $dir = "./";
1631   }
1632   $databases ||= ['MySQL', 'SQLite', 'PostgreSQL'];
1633   $databases = [ $databases ] if(ref($databases) ne 'ARRAY');
1634
1635   my $schema_version = $schema->schema_version || '1.x';
1636   $version ||= $schema_version;
1637
1638   $sqltargs = {
1639     add_drop_table => 1, 
1640     ignore_constraint_names => 1,
1641     ignore_index_names => 1,
1642     %{$sqltargs || {}}
1643   };
1644
1645   $self->throw_exception(q{Can't create a ddl file without SQL::Translator 0.09003: '}
1646       . $self->_check_sqlt_message . q{'})
1647           if !$self->_check_sqlt_version;
1648
1649   my $sqlt = SQL::Translator->new( $sqltargs );
1650
1651   $sqlt->parser('SQL::Translator::Parser::DBIx::Class');
1652   my $sqlt_schema = $sqlt->translate({ data => $schema })
1653     or $self->throw_exception ($sqlt->error);
1654
1655   foreach my $db (@$databases) {
1656     $sqlt->reset();
1657     $sqlt->{schema} = $sqlt_schema;
1658     $sqlt->producer($db);
1659
1660     my $file;
1661     my $filename = $schema->ddl_filename($db, $version, $dir);
1662     if (-e $filename && ($version eq $schema_version )) {
1663       # if we are dumping the current version, overwrite the DDL
1664       carp "Overwriting existing DDL file - $filename";
1665       unlink($filename);
1666     }
1667
1668     my $output = $sqlt->translate;
1669     if(!$output) {
1670       carp("Failed to translate to $db, skipping. (" . $sqlt->error . ")");
1671       next;
1672     }
1673     if(!open($file, ">$filename")) {
1674       $self->throw_exception("Can't open $filename for writing ($!)");
1675       next;
1676     }
1677     print $file $output;
1678     close($file);
1679   
1680     next unless ($preversion);
1681
1682     require SQL::Translator::Diff;
1683
1684     my $prefilename = $schema->ddl_filename($db, $preversion, $dir);
1685     if(!-e $prefilename) {
1686       carp("No previous schema file found ($prefilename)");
1687       next;
1688     }
1689
1690     my $difffile = $schema->ddl_filename($db, $version, $dir, $preversion);
1691     if(-e $difffile) {
1692       carp("Overwriting existing diff file - $difffile");
1693       unlink($difffile);
1694     }
1695     
1696     my $source_schema;
1697     {
1698       my $t = SQL::Translator->new($sqltargs);
1699       $t->debug( 0 );
1700       $t->trace( 0 );
1701
1702       $t->parser( $db )
1703         or $self->throw_exception ($t->error);
1704
1705       my $out = $t->translate( $prefilename )
1706         or $self->throw_exception ($t->error);
1707
1708       $source_schema = $t->schema;
1709
1710       $source_schema->name( $prefilename )
1711         unless ( $source_schema->name );
1712     }
1713
1714     # The "new" style of producers have sane normalization and can support 
1715     # diffing a SQL file against a DBIC->SQLT schema. Old style ones don't
1716     # And we have to diff parsed SQL against parsed SQL.
1717     my $dest_schema = $sqlt_schema;
1718
1719     unless ( "SQL::Translator::Producer::$db"->can('preprocess_schema') ) {
1720       my $t = SQL::Translator->new($sqltargs);
1721       $t->debug( 0 );
1722       $t->trace( 0 );
1723
1724       $t->parser( $db )
1725         or $self->throw_exception ($t->error);
1726
1727       my $out = $t->translate( $filename )
1728         or $self->throw_exception ($t->error);
1729
1730       $dest_schema = $t->schema;
1731
1732       $dest_schema->name( $filename )
1733         unless $dest_schema->name;
1734     }
1735     
1736     my $diff = SQL::Translator::Diff::schema_diff($source_schema, $db,
1737                                                   $dest_schema,   $db,
1738                                                   $sqltargs
1739                                                  );
1740     if(!open $file, ">$difffile") { 
1741       $self->throw_exception("Can't write to $difffile ($!)");
1742       next;
1743     }
1744     print $file $diff;
1745     close($file);
1746   }
1747 }
1748
1749 =head2 deployment_statements
1750
1751 =over 4
1752
1753 =item Arguments: $schema, $type, $version, $directory, $sqlt_args
1754
1755 =back
1756
1757 Returns the statements used by L</deploy> and L<DBIx::Class::Schema/deploy>.
1758
1759 The L<SQL::Translator> (not L<DBI>) database driver name can be explicitly
1760 provided in C<$type>, otherwise the result of L</sqlt_type> is used as default.
1761
1762 C<$directory> is used to return statements from files in a previously created
1763 L</create_ddl_dir> directory and is optional. The filenames are constructed
1764 from L<DBIx::Class::Schema/ddl_filename>, the schema name and the C<$version>.
1765
1766 If no C<$directory> is specified then the statements are constructed on the
1767 fly using L<SQL::Translator> and C<$version> is ignored.
1768
1769 See L<SQL::Translator/METHODS> for a list of values for C<$sqlt_args>.
1770
1771 =cut
1772
1773 sub deployment_statements {
1774   my ($self, $schema, $type, $version, $dir, $sqltargs) = @_;
1775   # Need to be connected to get the correct sqlt_type
1776   $self->ensure_connected() unless $type;
1777   $type ||= $self->sqlt_type;
1778   $version ||= $schema->schema_version || '1.x';
1779   $dir ||= './';
1780   my $filename = $schema->ddl_filename($type, $version, $dir);
1781   if(-f $filename)
1782   {
1783       my $file;
1784       open($file, "<$filename") 
1785         or $self->throw_exception("Can't open $filename ($!)");
1786       my @rows = <$file>;
1787       close($file);
1788       return join('', @rows);
1789   }
1790
1791   $self->throw_exception(q{Can't deploy without SQL::Translator 0.09003: '}
1792       . $self->_check_sqlt_message . q{'})
1793           if !$self->_check_sqlt_version;
1794
1795   require SQL::Translator::Parser::DBIx::Class;
1796   eval qq{use SQL::Translator::Producer::${type}};
1797   $self->throw_exception($@) if $@;
1798
1799   # sources needs to be a parser arg, but for simplicty allow at top level 
1800   # coming in
1801   $sqltargs->{parser_args}{sources} = delete $sqltargs->{sources}
1802       if exists $sqltargs->{sources};
1803
1804   my $tr = SQL::Translator->new(%$sqltargs);
1805   SQL::Translator::Parser::DBIx::Class::parse( $tr, $schema );
1806   return "SQL::Translator::Producer::${type}"->can('produce')->($tr);
1807 }
1808
1809 sub deploy {
1810   my ($self, $schema, $type, $sqltargs, $dir) = @_;
1811   my $deploy = sub {
1812     my $line = shift;
1813     return if($line =~ /^--/);
1814     return if(!$line);
1815     # next if($line =~ /^DROP/m);
1816     return if($line =~ /^BEGIN TRANSACTION/m);
1817     return if($line =~ /^COMMIT/m);
1818     return if $line =~ /^\s+$/; # skip whitespace only
1819     $self->_query_start($line);
1820     eval {
1821       $self->dbh->do($line); # shouldn't be using ->dbh ?
1822     };
1823     if ($@) {
1824       carp qq{$@ (running "${line}")};
1825     }
1826     $self->_query_end($line);
1827   };
1828   my @statements = $self->deployment_statements($schema, $type, undef, $dir, { %{ $sqltargs || {} }, no_comments => 1 } );
1829   if (@statements > 1) {
1830     foreach my $statement (@statements) {
1831       $deploy->( $statement );
1832     }
1833   }
1834   elsif (@statements == 1) {
1835     foreach my $line ( split(";\n", $statements[0])) {
1836       $deploy->( $line );
1837     }
1838   }
1839 }
1840
1841 =head2 datetime_parser
1842
1843 Returns the datetime parser class
1844
1845 =cut
1846
1847 sub datetime_parser {
1848   my $self = shift;
1849   return $self->{datetime_parser} ||= do {
1850     $self->ensure_connected;
1851     $self->build_datetime_parser(@_);
1852   };
1853 }
1854
1855 =head2 datetime_parser_type
1856
1857 Defines (returns) the datetime parser class - currently hardwired to
1858 L<DateTime::Format::MySQL>
1859
1860 =cut
1861
1862 sub datetime_parser_type { "DateTime::Format::MySQL"; }
1863
1864 =head2 build_datetime_parser
1865
1866 See L</datetime_parser>
1867
1868 =cut
1869
1870 sub build_datetime_parser {
1871   my $self = shift;
1872   my $type = $self->datetime_parser_type(@_);
1873   eval "use ${type}";
1874   $self->throw_exception("Couldn't load ${type}: $@") if $@;
1875   return $type;
1876 }
1877
1878 {
1879     my $_check_sqlt_version; # private
1880     my $_check_sqlt_message; # private
1881     sub _check_sqlt_version {
1882         return $_check_sqlt_version if defined $_check_sqlt_version;
1883         eval 'use SQL::Translator "0.09003"';
1884         $_check_sqlt_message = $@ || '';
1885         $_check_sqlt_version = !$@;
1886     }
1887
1888     sub _check_sqlt_message {
1889         _check_sqlt_version if !defined $_check_sqlt_message;
1890         $_check_sqlt_message;
1891     }
1892 }
1893
1894 =head2 is_replicating
1895
1896 A boolean that reports if a particular L<DBIx::Class::Storage::DBI> is set to
1897 replicate from a master database.  Default is undef, which is the result
1898 returned by databases that don't support replication.
1899
1900 =cut
1901
1902 sub is_replicating {
1903     return;
1904     
1905 }
1906
1907 =head2 lag_behind_master
1908
1909 Returns a number that represents a certain amount of lag behind a master db
1910 when a given storage is replicating.  The number is database dependent, but
1911 starts at zero and increases with the amount of lag. Default in undef
1912
1913 =cut
1914
1915 sub lag_behind_master {
1916     return;
1917 }
1918
1919 sub DESTROY {
1920   my $self = shift;
1921   return if !$self->_dbh;
1922   $self->_verify_pid;
1923   $self->_dbh(undef);
1924 }
1925
1926 1;
1927
1928 =head1 USAGE NOTES
1929
1930 =head2 DBIx::Class and AutoCommit
1931
1932 DBIx::Class can do some wonderful magic with handling exceptions,
1933 disconnections, and transactions when you use C<< AutoCommit => 1 >>
1934 combined with C<txn_do> for transaction support.
1935
1936 If you set C<< AutoCommit => 0 >> in your connect info, then you are always
1937 in an assumed transaction between commits, and you're telling us you'd
1938 like to manage that manually.  A lot of the magic protections offered by
1939 this module will go away.  We can't protect you from exceptions due to database
1940 disconnects because we don't know anything about how to restart your
1941 transactions.  You're on your own for handling all sorts of exceptional
1942 cases if you choose the C<< AutoCommit => 0 >> path, just as you would
1943 be with raw DBI.
1944
1945
1946
1947 =head1 AUTHORS
1948
1949 Matt S. Trout <mst@shadowcatsystems.co.uk>
1950
1951 Andy Grundman <andy@hybridized.org>
1952
1953 =head1 LICENSE
1954
1955 You may distribute this code under the same terms as Perl itself.
1956
1957 =cut