fb541840af9cf93d1c9b86c71c8609008d4fb37a
[dbsrgits/DBIx-Class.git] / lib / DBIx / Class / Storage / DBI.pm
1 package DBIx::Class::Storage::DBI;
2 # -*- mode: cperl; cperl-indent-level: 2 -*-
3
4 use base 'DBIx::Class::Storage';
5
6 use strict;    
7 use warnings;
8 use Carp::Clan qw/^DBIx::Class/;
9 use DBI;
10 use DBIx::Class::Storage::DBI::Cursor;
11 use DBIx::Class::Storage::Statistics;
12 use Scalar::Util();
13 use List::Util();
14
15 __PACKAGE__->mk_group_accessors('simple' =>
16     qw/_connect_info _dbi_connect_info _dbh _sql_maker _sql_maker_opts
17        _conn_pid _conn_tid transaction_depth _dbh_autocommit _on_connect_do
18        _on_disconnect_do savepoints/
19 );
20
21 # the values for these accessors are picked out (and deleted) from
22 # the attribute hashref passed to connect_info
23 my @storage_options = qw/
24   on_connect_call on_disconnect_call disable_sth_caching unsafe auto_savepoint
25 /;
26 __PACKAGE__->mk_group_accessors('simple' => @storage_options);
27
28
29 # default cursor class, overridable in connect_info attributes
30 __PACKAGE__->cursor_class('DBIx::Class::Storage::DBI::Cursor');
31
32 __PACKAGE__->mk_group_accessors('inherited' => qw/sql_maker_class/);
33 __PACKAGE__->sql_maker_class('DBIx::Class::SQLAHacks');
34
35
36 =head1 NAME
37
38 DBIx::Class::Storage::DBI - DBI storage handler
39
40 =head1 SYNOPSIS
41
42   my $schema = MySchema->connect('dbi:SQLite:my.db');
43
44   $schema->storage->debug(1);
45   $schema->dbh_do("DROP TABLE authors");
46
47   $schema->resultset('Book')->search({
48      written_on => $schema->storage->datetime_parser(DateTime->now)
49   });
50
51 =head1 DESCRIPTION
52
53 This class represents the connection to an RDBMS via L<DBI>.  See
54 L<DBIx::Class::Storage> for general information.  This pod only
55 documents DBI-specific methods and behaviors.
56
57 =head1 METHODS
58
59 =cut
60
61 sub new {
62   my $new = shift->next::method(@_);
63
64   $new->transaction_depth(0);
65   $new->_sql_maker_opts({});
66   $new->{savepoints} = [];
67   $new->{_in_dbh_do} = 0;
68   $new->{_dbh_gen} = 0;
69
70   $new;
71 }
72
73 =head2 connect_info
74
75 This method is normally called by L<DBIx::Class::Schema/connection>, which
76 encapsulates its argument list in an arrayref before passing them here.
77
78 The argument list may contain:
79
80 =over
81
82 =item *
83
84 The same 4-element argument set one would normally pass to
85 L<DBI/connect>, optionally followed by
86 L<extra attributes|/DBIx::Class specific connection attributes>
87 recognized by DBIx::Class:
88
89   $connect_info_args = [ $dsn, $user, $password, \%dbi_attributes?, \%extra_attributes? ];
90
91 =item *
92
93 A single code reference which returns a connected 
94 L<DBI database handle|DBI/connect> optionally followed by 
95 L<extra attributes|/DBIx::Class specific connection attributes> recognized
96 by DBIx::Class:
97
98   $connect_info_args = [ sub { DBI->connect (...) }, \%extra_attributes? ];
99
100 =item *
101
102 A single hashref with all the attributes and the dsn/user/password
103 mixed together:
104
105   $connect_info_args = [{
106     dsn => $dsn,
107     user => $user,
108     password => $pass,
109     %dbi_attributes,
110     %extra_attributes,
111   }];
112
113 This is particularly useful for L<Catalyst> based applications, allowing the 
114 following config (L<Config::General> style):
115
116   <Model::DB>
117     schema_class   App::DB
118     <connect_info>
119       dsn          dbi:mysql:database=test
120       user         testuser
121       password     TestPass
122       AutoCommit   1
123     </connect_info>
124   </Model::DB>
125
126 =back
127
128 Please note that the L<DBI> docs recommend that you always explicitly
129 set C<AutoCommit> to either I<0> or I<1>.  L<DBIx::Class> further
130 recommends that it be set to I<1>, and that you perform transactions
131 via our L<DBIx::Class::Schema/txn_do> method.  L<DBIx::Class> will set it
132 to I<1> if you do not do explicitly set it to zero.  This is the default 
133 for most DBDs. See L</DBIx::Class and AutoCommit> for details.
134
135 =head3 DBIx::Class specific connection attributes
136
137 In addition to the standard L<DBI|DBI/ATTRIBUTES_COMMON_TO_ALL_HANDLES>
138 L<connection|DBI/Database_Handle_Attributes> attributes, DBIx::Class recognizes
139 the following connection options. These options can be mixed in with your other
140 L<DBI> connection attributes, or placed in a seperate hashref
141 (C<\%extra_attributes>) as shown above.
142
143 Every time C<connect_info> is invoked, any previous settings for
144 these options will be cleared before setting the new ones, regardless of
145 whether any options are specified in the new C<connect_info>.
146
147
148 =over
149
150 =item on_connect_do
151
152 Specifies things to do immediately after connecting or re-connecting to
153 the database.  Its value may contain:
154
155 =over
156
157 =item a scalar
158
159 This contains one SQL statement to execute.
160
161 =item an array reference
162
163 This contains SQL statements to execute in order.  Each element contains
164 a string or a code reference that returns a string.
165
166 =item a code reference
167
168 This contains some code to execute.  Unlike code references within an
169 array reference, its return value is ignored.
170
171 =back
172
173 =item on_disconnect_do
174
175 Takes arguments in the same form as L</on_connect_do> and executes them
176 immediately before disconnecting from the database.
177
178 Note, this only runs if you explicitly call L</disconnect> on the
179 storage object.
180
181 =item on_connect_call
182
183 A more generalized form of L</on_connect_do> that calls the specified
184 C<connect_call_METHOD> methods in your storage driver.
185
186   on_connect_do => 'select 1'
187
188 is equivalent to:
189
190   on_connect_call => [ [ do_sql => 'select 1' ] ]
191
192 Its values may contain:
193
194 =over
195
196 =item a scalar
197
198 Will call the C<connect_call_METHOD> method.
199
200 =item a code reference
201
202 Will execute C<< $code->($storage) >>
203
204 =item an array reference
205
206 Each value can be a method name or code reference.
207
208 =item an array of arrays
209
210 For each array, the first item is taken to be the C<connect_call_> method name
211 or code reference, and the rest are parameters to it.
212
213 =back
214
215 Some predefined storage methods you may use:
216
217 =over
218
219 =item do_sql
220
221 Executes a SQL string or a code reference that returns a SQL string. This is
222 what L</on_connect_do> and L</on_disconnect_do> use.
223
224 =item set_datetime_format
225
226 Execute any statements necessary to initialize the database session to return
227 and accept datetime/timestamp values used with
228 L<DBIx::Class::InflateColumn::DateTime>.
229
230 =back
231
232 =item on_disconnect_call
233
234 Takes arguments in the same form as L</on_connect_call> and executes them
235 immediately before disconnecting from the database.
236
237 Calls the C<disconnect_call_METHOD> methods as opposed to the
238 C<connect_call_METHOD> methods called by L</on_connect_call>.
239
240 Note, this only runs if you explicitly call L</disconnect> on the
241 storage object.
242
243 =item disable_sth_caching
244
245 If set to a true value, this option will disable the caching of
246 statement handles via L<DBI/prepare_cached>.
247
248 =item limit_dialect 
249
250 Sets the limit dialect. This is useful for JDBC-bridge among others
251 where the remote SQL-dialect cannot be determined by the name of the
252 driver alone. See also L<SQL::Abstract::Limit>.
253
254 =item quote_char
255
256 Specifies what characters to use to quote table and column names. If 
257 you use this you will want to specify L</name_sep> as well.
258
259 C<quote_char> expects either a single character, in which case is it
260 is placed on either side of the table/column name, or an arrayref of length
261 2 in which case the table/column name is placed between the elements.
262
263 For example under MySQL you should use C<< quote_char => '`' >>, and for
264 SQL Server you should use C<< quote_char => [qw/[ ]/] >>.
265
266 =item name_sep
267
268 This only needs to be used in conjunction with C<quote_char>, and is used to 
269 specify the charecter that seperates elements (schemas, tables, columns) from 
270 each other. In most cases this is simply a C<.>.
271
272 The consequences of not supplying this value is that L<SQL::Abstract>
273 will assume DBIx::Class' uses of aliases to be complete column
274 names. The output will look like I<"me.name"> when it should actually
275 be I<"me"."name">.
276
277 =item unsafe
278
279 This Storage driver normally installs its own C<HandleError>, sets
280 C<RaiseError> and C<ShowErrorStatement> on, and sets C<PrintError> off on
281 all database handles, including those supplied by a coderef.  It does this
282 so that it can have consistent and useful error behavior.
283
284 If you set this option to a true value, Storage will not do its usual
285 modifications to the database handle's attributes, and instead relies on
286 the settings in your connect_info DBI options (or the values you set in
287 your connection coderef, in the case that you are connecting via coderef).
288
289 Note that your custom settings can cause Storage to malfunction,
290 especially if you set a C<HandleError> handler that suppresses exceptions
291 and/or disable C<RaiseError>.
292
293 =item auto_savepoint
294
295 If this option is true, L<DBIx::Class> will use savepoints when nesting
296 transactions, making it possible to recover from failure in the inner
297 transaction without having to abort all outer transactions.
298
299 =item cursor_class
300
301 Use this argument to supply a cursor class other than the default
302 L<DBIx::Class::Storage::DBI::Cursor>.
303
304 =back
305
306 Some real-life examples of arguments to L</connect_info> and
307 L<DBIx::Class::Schema/connect>
308
309   # Simple SQLite connection
310   ->connect_info([ 'dbi:SQLite:./foo.db' ]);
311
312   # Connect via subref
313   ->connect_info([ sub { DBI->connect(...) } ]);
314
315   # A bit more complicated
316   ->connect_info(
317     [
318       'dbi:Pg:dbname=foo',
319       'postgres',
320       'my_pg_password',
321       { AutoCommit => 1 },
322       { quote_char => q{"}, name_sep => q{.} },
323     ]
324   );
325
326   # Equivalent to the previous example
327   ->connect_info(
328     [
329       'dbi:Pg:dbname=foo',
330       'postgres',
331       'my_pg_password',
332       { AutoCommit => 1, quote_char => q{"}, name_sep => q{.} },
333     ]
334   );
335
336   # Same, but with hashref as argument
337   # See parse_connect_info for explanation
338   ->connect_info(
339     [{
340       dsn         => 'dbi:Pg:dbname=foo',
341       user        => 'postgres',
342       password    => 'my_pg_password',
343       AutoCommit  => 1,
344       quote_char  => q{"},
345       name_sep    => q{.},
346     }]
347   );
348
349   # Subref + DBIx::Class-specific connection options
350   ->connect_info(
351     [
352       sub { DBI->connect(...) },
353       {
354           quote_char => q{`},
355           name_sep => q{@},
356           on_connect_do => ['SET search_path TO myschema,otherschema,public'],
357           disable_sth_caching => 1,
358       },
359     ]
360   );
361
362
363
364 =cut
365
366 sub connect_info {
367   my ($self, $info_arg) = @_;
368
369   return $self->_connect_info if !$info_arg;
370
371   my @args = @$info_arg;  # take a shallow copy for further mutilation
372   $self->_connect_info([@args]); # copy for _connect_info
373
374
375   # combine/pre-parse arguments depending on invocation style
376
377   my %attrs;
378   if (ref $args[0] eq 'CODE') {     # coderef with optional \%extra_attributes
379     %attrs = %{ $args[1] || {} };
380     @args = $args[0];
381   }
382   elsif (ref $args[0] eq 'HASH') { # single hashref (i.e. Catalyst config)
383     %attrs = %{$args[0]};
384     @args = ();
385     for (qw/password user dsn/) {
386       unshift @args, delete $attrs{$_};
387     }
388   }
389   else {                # otherwise assume dsn/user/password + \%attrs + \%extra_attrs
390     %attrs = (
391       % { $args[3] || {} },
392       % { $args[4] || {} },
393     );
394     @args = @args[0,1,2];
395   }
396
397   # Kill sql_maker/_sql_maker_opts, so we get a fresh one with only
398   #  the new set of options
399   $self->_sql_maker(undef);
400   $self->_sql_maker_opts({});
401
402   if(keys %attrs) {
403     for my $storage_opt (@storage_options, 'cursor_class') {    # @storage_options is declared at the top of the module
404       if(my $value = delete $attrs{$storage_opt}) {
405         $self->$storage_opt($value);
406       }
407     }
408     for my $sql_maker_opt (qw/limit_dialect quote_char name_sep/) {
409       if(my $opt_val = delete $attrs{$sql_maker_opt}) {
410         $self->_sql_maker_opts->{$sql_maker_opt} = $opt_val;
411       }
412     }
413     for my $connect_do_opt (qw/on_connect_do on_disconnect_do/) {
414       if(my $opt_val = delete $attrs{$connect_do_opt}) {
415         $self->$connect_do_opt($opt_val);
416       }
417     }
418   }
419
420   %attrs = () if (ref $args[0] eq 'CODE');  # _connect() never looks past $args[0] in this case
421
422   $self->_dbi_connect_info([@args, keys %attrs ? \%attrs : ()]);
423   $self->_connect_info;
424 }
425
426 =head2 on_connect_do
427
428 This method is deprecated in favour of setting via L</connect_info>.
429
430 =cut
431
432 sub on_connect_do {
433   my $self = shift;
434   $self->_setup_connect_do(on_connect_do => @_);
435 }
436
437 =head2 on_disconnect_do
438
439 This method is deprecated in favour of setting via L</connect_info>.
440
441 =cut
442
443 sub on_disconnect_do {
444   my $self = shift;
445   $self->_setup_connect_do(on_disconnect_do => @_);
446 }
447
448 sub _setup_connect_do {
449   my ($self, $opt) = (shift, shift);
450
451   my $accessor = "_$opt";
452
453   return $self->$accessor if not @_;
454
455   my $val = shift;
456
457   (my $call = $opt) =~ s/_do\z/_call/;
458
459   if (ref($self->$call) ne 'ARRAY') {
460     $self->$call([
461       defined $self->$call ?  $self->$call : ()
462     ]);
463   }
464
465   if (not ref($val)) {
466     push @{ $self->$call }, [ 'do_sql', $val ];
467   } elsif (ref($val) eq 'CODE') {
468     push @{ $self->$call }, $val;
469   } elsif (ref($val) eq 'ARRAY') {
470     push @{ $self->$call },
471     map [ 'do_sql', $_ ], @$val;
472   } else {
473     $self->throw_exception("Invalid type for $opt ".ref($val));
474   }
475
476   $self->$accessor($val);
477 }
478
479 =head2 dbh_do
480
481 Arguments: ($subref | $method_name), @extra_coderef_args?
482
483 Execute the given $subref or $method_name using the new exception-based
484 connection management.
485
486 The first two arguments will be the storage object that C<dbh_do> was called
487 on and a database handle to use.  Any additional arguments will be passed
488 verbatim to the called subref as arguments 2 and onwards.
489
490 Using this (instead of $self->_dbh or $self->dbh) ensures correct
491 exception handling and reconnection (or failover in future subclasses).
492
493 Your subref should have no side-effects outside of the database, as
494 there is the potential for your subref to be partially double-executed
495 if the database connection was stale/dysfunctional.
496
497 Example:
498
499   my @stuff = $schema->storage->dbh_do(
500     sub {
501       my ($storage, $dbh, @cols) = @_;
502       my $cols = join(q{, }, @cols);
503       $dbh->selectrow_array("SELECT $cols FROM foo");
504     },
505     @column_list
506   );
507
508 =cut
509
510 sub dbh_do {
511   my $self = shift;
512   my $code = shift;
513
514   my $dbh = $self->_dbh;
515
516   return $self->$code($dbh, @_) if $self->{_in_dbh_do}
517       || $self->{transaction_depth};
518
519   local $self->{_in_dbh_do} = 1;
520
521   my @result;
522   my $want_array = wantarray;
523
524   eval {
525     $self->_verify_pid if $dbh;
526     if(!$self->_dbh) {
527         $self->_populate_dbh;
528         $dbh = $self->_dbh;
529     }
530
531     if($want_array) {
532         @result = $self->$code($dbh, @_);
533     }
534     elsif(defined $want_array) {
535         $result[0] = $self->$code($dbh, @_);
536     }
537     else {
538         $self->$code($dbh, @_);
539     }
540   };
541
542   my $exception = $@;
543   if(!$exception) { return $want_array ? @result : $result[0] }
544
545   $self->throw_exception($exception) if $self->connected;
546
547   # We were not connected - reconnect and retry, but let any
548   #  exception fall right through this time
549   $self->_populate_dbh;
550   $self->$code($self->_dbh, @_);
551 }
552
553 # This is basically a blend of dbh_do above and DBIx::Class::Storage::txn_do.
554 # It also informs dbh_do to bypass itself while under the direction of txn_do,
555 #  via $self->{_in_dbh_do} (this saves some redundant eval and errorcheck, etc)
556 sub txn_do {
557   my $self = shift;
558   my $coderef = shift;
559
560   ref $coderef eq 'CODE' or $self->throw_exception
561     ('$coderef must be a CODE reference');
562
563   return $coderef->(@_) if $self->{transaction_depth} && ! $self->auto_savepoint;
564
565   local $self->{_in_dbh_do} = 1;
566
567   my @result;
568   my $want_array = wantarray;
569
570   my $tried = 0;
571   while(1) {
572     eval {
573       $self->_verify_pid if $self->_dbh;
574       $self->_populate_dbh if !$self->_dbh;
575
576       $self->txn_begin;
577       if($want_array) {
578           @result = $coderef->(@_);
579       }
580       elsif(defined $want_array) {
581           $result[0] = $coderef->(@_);
582       }
583       else {
584           $coderef->(@_);
585       }
586       $self->txn_commit;
587     };
588
589     my $exception = $@;
590     if(!$exception) { return $want_array ? @result : $result[0] }
591
592     if($tried++ > 0 || $self->connected) {
593       eval { $self->txn_rollback };
594       my $rollback_exception = $@;
595       if($rollback_exception) {
596         my $exception_class = "DBIx::Class::Storage::NESTED_ROLLBACK_EXCEPTION";
597         $self->throw_exception($exception)  # propagate nested rollback
598           if $rollback_exception =~ /$exception_class/;
599
600         $self->throw_exception(
601           "Transaction aborted: ${exception}. "
602           . "Rollback failed: ${rollback_exception}"
603         );
604       }
605       $self->throw_exception($exception)
606     }
607
608     # We were not connected, and was first try - reconnect and retry
609     # via the while loop
610     $self->_populate_dbh;
611   }
612 }
613
614 =head2 disconnect
615
616 Our C<disconnect> method also performs a rollback first if the
617 database is not in C<AutoCommit> mode.
618
619 =cut
620
621 sub disconnect {
622   my ($self) = @_;
623
624   if( $self->connected ) {
625     my $connection_call = $self->on_disconnect_call;
626     $self->_do_connection_actions(disconnect_call_ => $connection_call)
627       if $connection_call;
628
629     $self->_dbh->rollback unless $self->_dbh_autocommit;
630     $self->_dbh->disconnect;
631     $self->_dbh(undef);
632     $self->{_dbh_gen}++;
633   }
634 }
635
636 =head2 with_deferred_fk_checks
637
638 =over 4
639
640 =item Arguments: C<$coderef>
641
642 =item Return Value: The return value of $coderef
643
644 =back
645
646 Storage specific method to run the code ref with FK checks deferred or
647 in MySQL's case disabled entirely.
648
649 =cut
650
651 # Storage subclasses should override this
652 sub with_deferred_fk_checks {
653   my ($self, $sub) = @_;
654
655   $sub->();
656 }
657
658 sub connected {
659   my ($self) = @_;
660
661   if(my $dbh = $self->_dbh) {
662       if(defined $self->_conn_tid && $self->_conn_tid != threads->tid) {
663           $self->_dbh(undef);
664           $self->{_dbh_gen}++;
665           return;
666       }
667       else {
668           $self->_verify_pid;
669           return 0 if !$self->_dbh;
670       }
671       return ($dbh->FETCH('Active') && $dbh->ping);
672   }
673
674   return 0;
675 }
676
677 # handle pid changes correctly
678 #  NOTE: assumes $self->_dbh is a valid $dbh
679 sub _verify_pid {
680   my ($self) = @_;
681
682   return if defined $self->_conn_pid && $self->_conn_pid == $$;
683
684   $self->_dbh->{InactiveDestroy} = 1;
685   $self->_dbh(undef);
686   $self->{_dbh_gen}++;
687
688   return;
689 }
690
691 sub ensure_connected {
692   my ($self) = @_;
693
694   unless ($self->connected) {
695     $self->_populate_dbh;
696   }
697 }
698
699 =head2 dbh
700
701 Returns the dbh - a data base handle of class L<DBI>.
702
703 =cut
704
705 sub dbh {
706   my ($self) = @_;
707
708   $self->ensure_connected;
709   return $self->_dbh;
710 }
711
712 sub _sql_maker_args {
713     my ($self) = @_;
714     
715     return ( bindtype=>'columns', array_datatypes => 1, limit_dialect => $self->dbh, %{$self->_sql_maker_opts} );
716 }
717
718 sub sql_maker {
719   my ($self) = @_;
720   unless ($self->_sql_maker) {
721     my $sql_maker_class = $self->sql_maker_class;
722     $self->ensure_class_loaded ($sql_maker_class);
723     $self->_sql_maker($sql_maker_class->new( $self->_sql_maker_args ));
724   }
725   return $self->_sql_maker;
726 }
727
728 sub _rebless {}
729
730 sub _populate_dbh {
731   my ($self) = @_;
732   my @info = @{$self->_dbi_connect_info || []};
733   $self->_dbh($self->_connect(@info));
734
735   $self->_conn_pid($$);
736   $self->_conn_tid(threads->tid) if $INC{'threads.pm'};
737
738   $self->_determine_driver;
739
740   # Always set the transaction depth on connect, since
741   #  there is no transaction in progress by definition
742   $self->{transaction_depth} = $self->_dbh_autocommit ? 0 : 1;
743
744   my $connection_call = $self->on_connect_call;
745   $self->_do_connection_actions(connect_call_ => $connection_call)
746     if $connection_call;
747 }
748
749 sub _determine_driver {
750   my ($self) = @_;
751
752   if (ref $self eq 'DBIx::Class::Storage::DBI') {
753     my $driver;
754
755     if ($self->_dbh) { # we are connected
756       $driver = $self->_dbh->{Driver}{Name};
757     } else {
758       # try to use dsn to not require being connected, the driver may still
759       # force a connection in _rebless to determine version
760       ($driver) = $self->_dbi_connect_info->[0] =~ /dbi:([^:]+):/i;
761     }
762
763     if ($self->load_optional_class("DBIx::Class::Storage::DBI::${driver}")) {
764       bless $self, "DBIx::Class::Storage::DBI::${driver}";
765       $self->_rebless();
766     }
767   }
768 }
769
770 sub _do_connection_actions {
771   my $self          = shift;
772   my $method_prefix = shift;
773   my $call          = shift;
774
775   if (not ref($call)) {
776     my $method = $method_prefix . $call;
777     $self->$method(@_);
778   } elsif (ref($call) eq 'CODE') {
779     $self->$call(@_);
780   } elsif (ref($call) eq 'ARRAY') {
781     if (ref($call->[0]) ne 'ARRAY') {
782       $self->_do_connection_actions($method_prefix, $_) for @$call;
783     } else {
784       $self->_do_connection_actions($method_prefix, @$_) for @$call;
785     }
786   } else {
787     $self->throw_exception (sprintf ("Don't know how to process conection actions of type '%s'", ref($call)) );
788   }
789
790   return $self;
791 }
792
793 sub connect_call_do_sql {
794   my $self = shift;
795   $self->_do_query(@_);
796 }
797
798 sub disconnect_call_do_sql {
799   my $self = shift;
800   $self->_do_query(@_);
801 }
802
803 # override in db-specific backend when necessary
804 sub connect_call_set_datetime_format { 1 }
805
806 sub _do_query {
807   my ($self, $action) = @_;
808
809   if (ref $action eq 'CODE') {
810     $action = $action->($self);
811     $self->_do_query($_) foreach @$action;
812   }
813   else {
814     # Most debuggers expect ($sql, @bind), so we need to exclude
815     # the attribute hash which is the second argument to $dbh->do
816     # furthermore the bind values are usually to be presented
817     # as named arrayref pairs, so wrap those here too
818     my @do_args = (ref $action eq 'ARRAY') ? (@$action) : ($action);
819     my $sql = shift @do_args;
820     my $attrs = shift @do_args;
821     my @bind = map { [ undef, $_ ] } @do_args;
822
823     $self->_query_start($sql, @bind);
824     $self->_dbh->do($sql, $attrs, @do_args);
825     $self->_query_end($sql, @bind);
826   }
827
828   return $self;
829 }
830
831 sub _connect {
832   my ($self, @info) = @_;
833
834   $self->throw_exception("You failed to provide any connection info")
835     if !@info;
836
837   my ($old_connect_via, $dbh);
838
839   if ($INC{'Apache/DBI.pm'} && $ENV{MOD_PERL}) {
840     $old_connect_via = $DBI::connect_via;
841     $DBI::connect_via = 'connect';
842   }
843
844   eval {
845     if(ref $info[0] eq 'CODE') {
846        $dbh = &{$info[0]}
847     }
848     else {
849        $dbh = DBI->connect(@info);
850     }
851
852     if($dbh && !$self->unsafe) {
853       my $weak_self = $self;
854       Scalar::Util::weaken($weak_self);
855       $dbh->{HandleError} = sub {
856           if ($weak_self) {
857             $weak_self->throw_exception("DBI Exception: $_[0]");
858           }
859           else {
860             croak ("DBI Exception: $_[0]");
861           }
862       };
863       $dbh->{ShowErrorStatement} = 1;
864       $dbh->{RaiseError} = 1;
865       $dbh->{PrintError} = 0;
866     }
867   };
868
869   $DBI::connect_via = $old_connect_via if $old_connect_via;
870
871   $self->throw_exception("DBI Connection failed: " . ($@||$DBI::errstr))
872     if !$dbh || $@;
873
874   $self->_dbh_autocommit($dbh->{AutoCommit});
875
876   $dbh;
877 }
878
879 sub svp_begin {
880   my ($self, $name) = @_;
881
882   $name = $self->_svp_generate_name
883     unless defined $name;
884
885   $self->throw_exception ("You can't use savepoints outside a transaction")
886     if $self->{transaction_depth} == 0;
887
888   $self->throw_exception ("Your Storage implementation doesn't support savepoints")
889     unless $self->can('_svp_begin');
890   
891   push @{ $self->{savepoints} }, $name;
892
893   $self->debugobj->svp_begin($name) if $self->debug;
894   
895   return $self->_svp_begin($name);
896 }
897
898 sub svp_release {
899   my ($self, $name) = @_;
900
901   $self->throw_exception ("You can't use savepoints outside a transaction")
902     if $self->{transaction_depth} == 0;
903
904   $self->throw_exception ("Your Storage implementation doesn't support savepoints")
905     unless $self->can('_svp_release');
906
907   if (defined $name) {
908     $self->throw_exception ("Savepoint '$name' does not exist")
909       unless grep { $_ eq $name } @{ $self->{savepoints} };
910
911     # Dig through the stack until we find the one we are releasing.  This keeps
912     # the stack up to date.
913     my $svp;
914
915     do { $svp = pop @{ $self->{savepoints} } } while $svp ne $name;
916   } else {
917     $name = pop @{ $self->{savepoints} };
918   }
919
920   $self->debugobj->svp_release($name) if $self->debug;
921
922   return $self->_svp_release($name);
923 }
924
925 sub svp_rollback {
926   my ($self, $name) = @_;
927
928   $self->throw_exception ("You can't use savepoints outside a transaction")
929     if $self->{transaction_depth} == 0;
930
931   $self->throw_exception ("Your Storage implementation doesn't support savepoints")
932     unless $self->can('_svp_rollback');
933
934   if (defined $name) {
935       # If they passed us a name, verify that it exists in the stack
936       unless(grep({ $_ eq $name } @{ $self->{savepoints} })) {
937           $self->throw_exception("Savepoint '$name' does not exist!");
938       }
939
940       # Dig through the stack until we find the one we are releasing.  This keeps
941       # the stack up to date.
942       while(my $s = pop(@{ $self->{savepoints} })) {
943           last if($s eq $name);
944       }
945       # Add the savepoint back to the stack, as a rollback doesn't remove the
946       # named savepoint, only everything after it.
947       push(@{ $self->{savepoints} }, $name);
948   } else {
949       # We'll assume they want to rollback to the last savepoint
950       $name = $self->{savepoints}->[-1];
951   }
952
953   $self->debugobj->svp_rollback($name) if $self->debug;
954   
955   return $self->_svp_rollback($name);
956 }
957
958 sub _svp_generate_name {
959     my ($self) = @_;
960
961     return 'savepoint_'.scalar(@{ $self->{'savepoints'} });
962 }
963
964 sub txn_begin {
965   my $self = shift;
966   $self->ensure_connected();
967   if($self->{transaction_depth} == 0) {
968     $self->debugobj->txn_begin()
969       if $self->debug;
970     # this isn't ->_dbh-> because
971     #  we should reconnect on begin_work
972     #  for AutoCommit users
973     $self->dbh->begin_work;
974   } elsif ($self->auto_savepoint) {
975     $self->svp_begin;
976   }
977   $self->{transaction_depth}++;
978 }
979
980 sub txn_commit {
981   my $self = shift;
982   if ($self->{transaction_depth} == 1) {
983     my $dbh = $self->_dbh;
984     $self->debugobj->txn_commit()
985       if ($self->debug);
986     $dbh->commit;
987     $self->{transaction_depth} = 0
988       if $self->_dbh_autocommit;
989   }
990   elsif($self->{transaction_depth} > 1) {
991     $self->{transaction_depth}--;
992     $self->svp_release
993       if $self->auto_savepoint;
994   }
995 }
996
997 sub txn_rollback {
998   my $self = shift;
999   my $dbh = $self->_dbh;
1000   eval {
1001     if ($self->{transaction_depth} == 1) {
1002       $self->debugobj->txn_rollback()
1003         if ($self->debug);
1004       $self->{transaction_depth} = 0
1005         if $self->_dbh_autocommit;
1006       $dbh->rollback;
1007     }
1008     elsif($self->{transaction_depth} > 1) {
1009       $self->{transaction_depth}--;
1010       if ($self->auto_savepoint) {
1011         $self->svp_rollback;
1012         $self->svp_release;
1013       }
1014     }
1015     else {
1016       die DBIx::Class::Storage::NESTED_ROLLBACK_EXCEPTION->new;
1017     }
1018   };
1019   if ($@) {
1020     my $error = $@;
1021     my $exception_class = "DBIx::Class::Storage::NESTED_ROLLBACK_EXCEPTION";
1022     $error =~ /$exception_class/ and $self->throw_exception($error);
1023     # ensure that a failed rollback resets the transaction depth
1024     $self->{transaction_depth} = $self->_dbh_autocommit ? 0 : 1;
1025     $self->throw_exception($error);
1026   }
1027 }
1028
1029 # This used to be the top-half of _execute.  It was split out to make it
1030 #  easier to override in NoBindVars without duping the rest.  It takes up
1031 #  all of _execute's args, and emits $sql, @bind.
1032 sub _prep_for_execute {
1033   my ($self, $op, $extra_bind, $ident, $args) = @_;
1034
1035   if( Scalar::Util::blessed($ident) && $ident->isa("DBIx::Class::ResultSource") ) {
1036     $ident = $ident->from();
1037   }
1038
1039   my ($sql, @bind) = $self->sql_maker->$op($ident, @$args);
1040
1041   unshift(@bind,
1042     map { ref $_ eq 'ARRAY' ? $_ : [ '!!dummy', $_ ] } @$extra_bind)
1043       if $extra_bind;
1044   return ($sql, \@bind);
1045 }
1046
1047
1048 sub _fix_bind_params {
1049     my ($self, @bind) = @_;
1050
1051     ### Turn @bind from something like this:
1052     ###   ( [ "artist", 1 ], [ "cdid", 1, 3 ] )
1053     ### to this:
1054     ###   ( "'1'", "'1'", "'3'" )
1055     return
1056         map {
1057             if ( defined( $_ && $_->[1] ) ) {
1058                 map { qq{'$_'}; } @{$_}[ 1 .. $#$_ ];
1059             }
1060             else { q{'NULL'}; }
1061         } @bind;
1062 }
1063
1064 sub _query_start {
1065     my ( $self, $sql, @bind ) = @_;
1066
1067     if ( $self->debug ) {
1068         @bind = $self->_fix_bind_params(@bind);
1069
1070         $self->debugobj->query_start( $sql, @bind );
1071     }
1072 }
1073
1074 sub _query_end {
1075     my ( $self, $sql, @bind ) = @_;
1076
1077     if ( $self->debug ) {
1078         @bind = $self->_fix_bind_params(@bind);
1079         $self->debugobj->query_end( $sql, @bind );
1080     }
1081 }
1082
1083 sub _dbh_execute {
1084   my ($self, $dbh, $op, $extra_bind, $ident, $bind_attributes, @args) = @_;
1085
1086   my ($sql, $bind) = $self->_prep_for_execute($op, $extra_bind, $ident, \@args);
1087
1088   $self->_query_start( $sql, @$bind );
1089
1090   my $sth = $self->sth($sql,$op);
1091
1092   my $placeholder_index = 1; 
1093
1094   foreach my $bound (@$bind) {
1095     my $attributes = {};
1096     my($column_name, @data) = @$bound;
1097
1098     if ($bind_attributes) {
1099       $attributes = $bind_attributes->{$column_name}
1100       if defined $bind_attributes->{$column_name};
1101     }
1102
1103     foreach my $data (@data) {
1104       my $ref = ref $data;
1105       $data = $ref && $ref ne 'ARRAY' ? ''.$data : $data; # stringify args (except arrayrefs)
1106
1107       $sth->bind_param($placeholder_index, $data, $attributes);
1108       $placeholder_index++;
1109     }
1110   }
1111
1112   # Can this fail without throwing an exception anyways???
1113   my $rv = $sth->execute();
1114   $self->throw_exception($sth->errstr) if !$rv;
1115
1116   $self->_query_end( $sql, @$bind );
1117
1118   return (wantarray ? ($rv, $sth, @$bind) : $rv);
1119 }
1120
1121 sub _execute {
1122     my $self = shift;
1123     $self->dbh_do('_dbh_execute', @_)
1124 }
1125
1126 sub insert {
1127   my ($self, $source, $to_insert) = @_;
1128
1129   my $ident = $source->from;
1130   my $bind_attributes = $self->source_bind_attributes($source);
1131
1132   my $updated_cols = {};
1133
1134   $self->ensure_connected;
1135   foreach my $col ( $source->columns ) {
1136     if ( !defined $to_insert->{$col} ) {
1137       my $col_info = $source->column_info($col);
1138
1139       if ( $col_info->{auto_nextval} ) {
1140         $updated_cols->{$col} = $to_insert->{$col} = $self->_sequence_fetch( 'nextval', $col_info->{sequence} || $self->_dbh_get_autoinc_seq($self->dbh, $source) );
1141       }
1142     }
1143   }
1144
1145   $self->_execute('insert' => [], $source, $bind_attributes, $to_insert);
1146
1147   return $updated_cols;
1148 }
1149
1150 ## Still not quite perfect, and EXPERIMENTAL
1151 ## Currently it is assumed that all values passed will be "normal", i.e. not 
1152 ## scalar refs, or at least, all the same type as the first set, the statement is
1153 ## only prepped once.
1154 sub insert_bulk {
1155   my ($self, $source, $cols, $data) = @_;
1156   my %colvalues;
1157   my $table = $source->from;
1158   @colvalues{@$cols} = (0..$#$cols);
1159   my ($sql, @bind) = $self->sql_maker->insert($table, \%colvalues);
1160   
1161   $self->_query_start( $sql, @bind );
1162   my $sth = $self->sth($sql);
1163
1164 #  @bind = map { ref $_ ? ''.$_ : $_ } @bind; # stringify args
1165
1166   ## This must be an arrayref, else nothing works!
1167   my $tuple_status = [];
1168
1169   ## Get the bind_attributes, if any exist
1170   my $bind_attributes = $self->source_bind_attributes($source);
1171
1172   ## Bind the values and execute
1173   my $placeholder_index = 1; 
1174
1175   foreach my $bound (@bind) {
1176
1177     my $attributes = {};
1178     my ($column_name, $data_index) = @$bound;
1179
1180     if( $bind_attributes ) {
1181       $attributes = $bind_attributes->{$column_name}
1182       if defined $bind_attributes->{$column_name};
1183     }
1184
1185     my @data = map { $_->[$data_index] } @$data;
1186
1187     $sth->bind_param_array( $placeholder_index, [@data], $attributes );
1188     $placeholder_index++;
1189   }
1190   my $rv = eval { $sth->execute_array({ArrayTupleStatus => $tuple_status}) };
1191   if (my $err = $@) {
1192     my $i = 0;
1193     ++$i while $i <= $#$tuple_status && !ref $tuple_status->[$i];
1194
1195     $self->throw_exception($sth->errstr || "Unexpected populate error: $err")
1196       if ($i > $#$tuple_status);
1197
1198     require Data::Dumper;
1199     local $Data::Dumper::Terse = 1;
1200     local $Data::Dumper::Indent = 1;
1201     local $Data::Dumper::Useqq = 1;
1202     local $Data::Dumper::Quotekeys = 0;
1203
1204     $self->throw_exception(sprintf "%s for populate slice:\n%s",
1205       $tuple_status->[$i][1],
1206       Data::Dumper::Dumper(
1207         { map { $cols->[$_] => $data->[$i][$_] } (0 .. $#$cols) }
1208       ),
1209     );
1210   }
1211   $self->throw_exception($sth->errstr) if !$rv;
1212
1213   $self->_query_end( $sql, @bind );
1214   return (wantarray ? ($rv, $sth, @bind) : $rv);
1215 }
1216
1217 sub update {
1218   my $self = shift @_;
1219   my $source = shift @_;
1220   my $bind_attributes = $self->source_bind_attributes($source);
1221   
1222   return $self->_execute('update' => [], $source, $bind_attributes, @_);
1223 }
1224
1225
1226 sub delete {
1227   my $self = shift @_;
1228   my $source = shift @_;
1229   
1230   my $bind_attrs = $self->source_bind_attributes($source);
1231   
1232   return $self->_execute('delete' => [], $source, $bind_attrs, @_);
1233 }
1234
1235 # We were sent here because the $rs contains a complex search
1236 # which will require a subquery to select the correct rows
1237 # (i.e. joined or limited resultsets)
1238 #
1239 # Genarating a single PK column subquery is trivial and supported
1240 # by all RDBMS. However if we have a multicolumn PK, things get ugly.
1241 # Look at _multipk_update_delete()
1242 sub _subq_update_delete {
1243   my $self = shift;
1244   my ($rs, $op, $values) = @_;
1245
1246   my $rsrc = $rs->result_source;
1247
1248   # we already check this, but double check naively just in case. Should be removed soon
1249   my $sel = $rs->_resolved_attrs->{select};
1250   $sel = [ $sel ] unless ref $sel eq 'ARRAY';
1251   my @pcols = $rsrc->primary_columns;
1252   if (@$sel != @pcols) {
1253     $self->throw_exception (
1254       'Subquery update/delete can not be called on resultsets selecting a'
1255      .' number of columns different than the number of primary keys'
1256     );
1257   }
1258
1259   if (@pcols == 1) {
1260     return $self->$op (
1261       $rsrc,
1262       $op eq 'update' ? $values : (),
1263       { $pcols[0] => { -in => $rs->as_query } },
1264     );
1265   }
1266
1267   else {
1268     return $self->_multipk_update_delete (@_);
1269   }
1270 }
1271
1272 # ANSI SQL does not provide a reliable way to perform a multicol-PK
1273 # resultset update/delete involving subqueries. So by default resort
1274 # to simple (and inefficient) delete_all style per-row opearations,
1275 # while allowing specific storages to override this with a faster
1276 # implementation.
1277 #
1278 sub _multipk_update_delete {
1279   return shift->_per_row_update_delete (@_);
1280 }
1281
1282 # This is the default loop used to delete/update rows for multi PK
1283 # resultsets, and used by mysql exclusively (because it can't do anything
1284 # else).
1285 #
1286 # We do not use $row->$op style queries, because resultset update/delete
1287 # is not expected to cascade (this is what delete_all/update_all is for).
1288 #
1289 # There should be no race conditions as the entire operation is rolled
1290 # in a transaction.
1291 #
1292 sub _per_row_update_delete {
1293   my $self = shift;
1294   my ($rs, $op, $values) = @_;
1295
1296   my $rsrc = $rs->result_source;
1297   my @pcols = $rsrc->primary_columns;
1298
1299   my $guard = $self->txn_scope_guard;
1300
1301   # emulate the return value of $sth->execute for non-selects
1302   my $row_cnt = '0E0';
1303
1304   my $subrs_cur = $rs->cursor;
1305   while (my @pks = $subrs_cur->next) {
1306
1307     my $cond;
1308     for my $i (0.. $#pcols) {
1309       $cond->{$pcols[$i]} = $pks[$i];
1310     }
1311
1312     $self->$op (
1313       $rsrc,
1314       $op eq 'update' ? $values : (),
1315       $cond,
1316     );
1317
1318     $row_cnt++;
1319   }
1320
1321   $guard->commit;
1322
1323   return $row_cnt;
1324 }
1325
1326 sub _select {
1327   my $self = shift;
1328   my $sql_maker = $self->sql_maker;
1329   local $sql_maker->{for};
1330   return $self->_execute($self->_select_args(@_));
1331 }
1332
1333 sub _select_args_to_query {
1334   my $self = shift;
1335
1336   my $sql_maker = $self->sql_maker;
1337   local $sql_maker->{for};
1338
1339   # my ($op, $bind, $ident, $bind_attrs, $select, $cond, $order, $rows, $offset) 
1340   #  = $self->_select_args($ident, $select, $cond, $attrs);
1341   my ($op, $bind, $ident, $bind_attrs, @args) =
1342     $self->_select_args(@_);
1343
1344   # my ($sql, $bind) = $self->_prep_for_execute($op, $bind, $ident, [ $select, $cond, $order, $rows, $offset ]);
1345   my ($sql, $prepared_bind) = $self->_prep_for_execute($op, $bind, $ident, \@args);
1346
1347   return \[ "($sql)", @{ $prepared_bind || [] }];
1348 }
1349
1350 sub _select_args {
1351   my ($self, $ident, $select, $condition, $attrs) = @_;
1352
1353   my $for = delete $attrs->{for};
1354   my $sql_maker = $self->sql_maker;
1355   $sql_maker->{for} = $for;
1356
1357   my $order = { map
1358     { $attrs->{$_} ? ( $_ => $attrs->{$_} ) : ()  }
1359     (qw/order_by group_by having _virtual_order_by/ )
1360   };
1361
1362
1363   my $bind_attrs = {};
1364
1365   my $alias2source = $self->_resolve_ident_sources ($ident);
1366
1367   for my $alias (keys %$alias2source) {
1368     my $bindtypes = $self->source_bind_attributes ($alias2source->{$alias}) || {};
1369     for my $col (keys %$bindtypes) {
1370
1371       my $fqcn = join ('.', $alias, $col);
1372       $bind_attrs->{$fqcn} = $bindtypes->{$col} if $bindtypes->{$col};
1373
1374       # so that unqualified searches can be bound too
1375       $bind_attrs->{$col} = $bind_attrs->{$fqcn} if $alias eq 'me';
1376     }
1377   }
1378
1379   # This would be the point to deflate anything found in $condition
1380   # (and leave $attrs->{bind} intact). Problem is - inflators historically
1381   # expect a row object. And all we have is a resultsource (it is trivial
1382   # to extract deflator coderefs via $alias2source above).
1383   #
1384   # I don't see a way forward other than changing the way deflators are
1385   # invoked, and that's just bad...
1386
1387   my @args = ('select', $attrs->{bind}, $ident, $bind_attrs, $select, $condition, $order);
1388   if ($attrs->{software_limit} ||
1389       $sql_maker->_default_limit_syntax eq "GenericSubQ") {
1390         $attrs->{software_limit} = 1;
1391   } else {
1392     $self->throw_exception("rows attribute must be positive if present")
1393       if (defined($attrs->{rows}) && !($attrs->{rows} > 0));
1394
1395     # MySQL actually recommends this approach.  I cringe.
1396     $attrs->{rows} = 2**48 if not defined $attrs->{rows} and defined $attrs->{offset};
1397     push @args, $attrs->{rows}, $attrs->{offset};
1398   }
1399   return @args;
1400 }
1401
1402 sub _resolve_ident_sources {
1403   my ($self, $ident) = @_;
1404
1405   my $alias2source = {};
1406
1407   # the reason this is so contrived is that $ident may be a {from}
1408   # structure, specifying multiple tables to join
1409   if ( Scalar::Util::blessed($ident) && $ident->isa("DBIx::Class::ResultSource") ) {
1410     # this is compat mode for insert/update/delete which do not deal with aliases
1411     $alias2source->{me} = $ident;
1412   }
1413   elsif (ref $ident eq 'ARRAY') {
1414
1415     for (@$ident) {
1416       my $tabinfo;
1417       if (ref $_ eq 'HASH') {
1418         $tabinfo = $_;
1419       }
1420       if (ref $_ eq 'ARRAY' and ref $_->[0] eq 'HASH') {
1421         $tabinfo = $_->[0];
1422       }
1423
1424       $alias2source->{$tabinfo->{-alias}} = $tabinfo->{-result_source}
1425         if ($tabinfo->{-result_source});
1426     }
1427   }
1428
1429   return $alias2source;
1430 }
1431
1432 sub count {
1433   my ($self, $source, $attrs) = @_;
1434
1435   my $tmp_attrs = { %$attrs };
1436
1437   # take off any pagers, record_filter is cdbi, and no point of ordering a count
1438   delete $tmp_attrs->{$_} for (qw/select as rows offset page order_by record_filter/);
1439
1440   # overwrite the selector
1441   $tmp_attrs->{select} = { count => '*' };
1442
1443   my $tmp_rs = $source->resultset_class->new($source, $tmp_attrs);
1444   my ($count) = $tmp_rs->cursor->next;
1445
1446   # if the offset/rows attributes are still present, we did not use
1447   # a subquery, so we need to make the calculations in software
1448   $count -= $attrs->{offset} if $attrs->{offset};
1449   $count = $attrs->{rows} if $attrs->{rows} and $attrs->{rows} < $count;
1450   $count = 0 if ($count < 0);
1451
1452   return $count;
1453 }
1454
1455 sub count_grouped {
1456   my ($self, $source, $attrs) = @_;
1457
1458   # copy for the subquery, we need to do some adjustments to it too
1459   my $sub_attrs = { %$attrs };
1460
1461   # these can not go in the subquery, and there is no point of ordering it
1462   delete $sub_attrs->{$_} for qw/prefetch collapse select as order_by/;
1463
1464   # if we prefetch, we group_by primary keys only as this is what we would get out of the rs via ->next/->all
1465   # simply deleting group_by suffices, as the code below will re-fill it
1466   # Note: we check $attrs, as $sub_attrs has collapse deleted
1467   if (ref $attrs->{collapse} and keys %{$attrs->{collapse}} ) {
1468     delete $sub_attrs->{group_by};
1469   }
1470
1471   $sub_attrs->{group_by} ||= [ map { "$attrs->{alias}.$_" } ($source->primary_columns) ];
1472   $sub_attrs->{select} = $self->_grouped_count_select ($source, $sub_attrs);
1473
1474   $attrs->{from} = [{
1475     count_subq => $source->resultset_class->new ($source, $sub_attrs )->as_query
1476   }];
1477
1478   # the subquery replaces this
1479   delete $attrs->{$_} for qw/where bind prefetch collapse group_by having having_bind rows offset page pager/;
1480
1481   return $self->count ($source, $attrs);
1482 }
1483
1484 #
1485 # Returns a SELECT to go with a supplied GROUP BY
1486 # (caled by count_grouped so a group_by is present)
1487 # Most databases expect them to match, but some
1488 # choke in various ways.
1489 #
1490 sub _grouped_count_select {
1491   my ($self, $source, $rs_args) = @_;
1492   return $rs_args->{group_by};
1493 }
1494
1495 sub source_bind_attributes {
1496   my ($self, $source) = @_;
1497   
1498   my $bind_attributes;
1499   foreach my $column ($source->columns) {
1500   
1501     my $data_type = $source->column_info($column)->{data_type} || '';
1502     $bind_attributes->{$column} = $self->bind_attribute_by_data_type($data_type)
1503      if $data_type;
1504   }
1505
1506   return $bind_attributes;
1507 }
1508
1509 =head2 select
1510
1511 =over 4
1512
1513 =item Arguments: $ident, $select, $condition, $attrs
1514
1515 =back
1516
1517 Handle a SQL select statement.
1518
1519 =cut
1520
1521 sub select {
1522   my $self = shift;
1523   my ($ident, $select, $condition, $attrs) = @_;
1524   return $self->cursor_class->new($self, \@_, $attrs);
1525 }
1526
1527 sub select_single {
1528   my $self = shift;
1529   my ($rv, $sth, @bind) = $self->_select(@_);
1530   my @row = $sth->fetchrow_array;
1531   my @nextrow = $sth->fetchrow_array if @row;
1532   if(@row && @nextrow) {
1533     carp "Query returned more than one row.  SQL that returns multiple rows is DEPRECATED for ->find and ->single";
1534   }
1535   # Need to call finish() to work round broken DBDs
1536   $sth->finish();
1537   return @row;
1538 }
1539
1540 =head2 sth
1541
1542 =over 4
1543
1544 =item Arguments: $sql
1545
1546 =back
1547
1548 Returns a L<DBI> sth (statement handle) for the supplied SQL.
1549
1550 =cut
1551
1552 sub _dbh_sth {
1553   my ($self, $dbh, $sql) = @_;
1554
1555   # 3 is the if_active parameter which avoids active sth re-use
1556   my $sth = $self->disable_sth_caching
1557     ? $dbh->prepare($sql)
1558     : $dbh->prepare_cached($sql, {}, 3);
1559
1560   # XXX You would think RaiseError would make this impossible,
1561   #  but apparently that's not true :(
1562   $self->throw_exception($dbh->errstr) if !$sth;
1563
1564   $sth;
1565 }
1566
1567 sub sth {
1568   my ($self, $sql) = @_;
1569   $self->dbh_do('_dbh_sth', $sql);
1570 }
1571
1572 sub _dbh_columns_info_for {
1573   my ($self, $dbh, $table) = @_;
1574
1575   if ($dbh->can('column_info')) {
1576     my %result;
1577     eval {
1578       my ($schema,$tab) = $table =~ /^(.+?)\.(.+)$/ ? ($1,$2) : (undef,$table);
1579       my $sth = $dbh->column_info( undef,$schema, $tab, '%' );
1580       $sth->execute();
1581       while ( my $info = $sth->fetchrow_hashref() ){
1582         my %column_info;
1583         $column_info{data_type}   = $info->{TYPE_NAME};
1584         $column_info{size}      = $info->{COLUMN_SIZE};
1585         $column_info{is_nullable}   = $info->{NULLABLE} ? 1 : 0;
1586         $column_info{default_value} = $info->{COLUMN_DEF};
1587         my $col_name = $info->{COLUMN_NAME};
1588         $col_name =~ s/^\"(.*)\"$/$1/;
1589
1590         $result{$col_name} = \%column_info;
1591       }
1592     };
1593     return \%result if !$@ && scalar keys %result;
1594   }
1595
1596   my %result;
1597   my $sth = $dbh->prepare($self->sql_maker->select($table, undef, \'1 = 0'));
1598   $sth->execute;
1599   my @columns = @{$sth->{NAME_lc}};
1600   for my $i ( 0 .. $#columns ){
1601     my %column_info;
1602     $column_info{data_type} = $sth->{TYPE}->[$i];
1603     $column_info{size} = $sth->{PRECISION}->[$i];
1604     $column_info{is_nullable} = $sth->{NULLABLE}->[$i] ? 1 : 0;
1605
1606     if ($column_info{data_type} =~ m/^(.*?)\((.*?)\)$/) {
1607       $column_info{data_type} = $1;
1608       $column_info{size}    = $2;
1609     }
1610
1611     $result{$columns[$i]} = \%column_info;
1612   }
1613   $sth->finish;
1614
1615   foreach my $col (keys %result) {
1616     my $colinfo = $result{$col};
1617     my $type_num = $colinfo->{data_type};
1618     my $type_name;
1619     if(defined $type_num && $dbh->can('type_info')) {
1620       my $type_info = $dbh->type_info($type_num);
1621       $type_name = $type_info->{TYPE_NAME} if $type_info;
1622       $colinfo->{data_type} = $type_name if $type_name;
1623     }
1624   }
1625
1626   return \%result;
1627 }
1628
1629 sub columns_info_for {
1630   my ($self, $table) = @_;
1631   $self->dbh_do('_dbh_columns_info_for', $table);
1632 }
1633
1634 =head2 last_insert_id
1635
1636 Return the row id of the last insert.
1637
1638 =cut
1639
1640 sub _dbh_last_insert_id {
1641     # All Storage's need to register their own _dbh_last_insert_id
1642     # the old SQLite-based method was highly inappropriate
1643
1644     my $self = shift;
1645     my $class = ref $self;
1646     $self->throw_exception (<<EOE);
1647
1648 No _dbh_last_insert_id() method found in $class.
1649 Since the method of obtaining the autoincrement id of the last insert
1650 operation varies greatly between different databases, this method must be
1651 individually implemented for every storage class.
1652 EOE
1653 }
1654
1655 sub last_insert_id {
1656   my $self = shift;
1657   $self->dbh_do('_dbh_last_insert_id', @_);
1658 }
1659
1660 =head2 sqlt_type
1661
1662 Returns the database driver name.
1663
1664 =cut
1665
1666 sub sqlt_type { shift->dbh->{Driver}->{Name} }
1667
1668 =head2 bind_attribute_by_data_type
1669
1670 Given a datatype from column info, returns a database specific bind
1671 attribute for C<< $dbh->bind_param($val,$attribute) >> or nothing if we will
1672 let the database planner just handle it.
1673
1674 Generally only needed for special case column types, like bytea in postgres.
1675
1676 =cut
1677
1678 sub bind_attribute_by_data_type {
1679     return;
1680 }
1681
1682 =head2 is_datatype_numeric
1683
1684 Given a datatype from column_info, returns a boolean value indicating if
1685 the current RDBMS considers it a numeric value. This controls how
1686 L<DBIx::Class::Row/set_column> decides whether to mark the column as
1687 dirty - when the datatype is deemed numeric a C<< != >> comparison will
1688 be performed instead of the usual C<eq>.
1689
1690 =cut
1691
1692 sub is_datatype_numeric {
1693   my ($self, $dt) = @_;
1694
1695   return 0 unless $dt;
1696
1697   return $dt =~ /^ (?:
1698     numeric | int(?:eger)? | (?:tiny|small|medium|big)int | dec(?:imal)? | real | float | double (?: \s+ precision)? | (?:big)?serial
1699   ) $/ix;
1700 }
1701
1702
1703 =head2 create_ddl_dir (EXPERIMENTAL)
1704
1705 =over 4
1706
1707 =item Arguments: $schema \@databases, $version, $directory, $preversion, \%sqlt_args
1708
1709 =back
1710
1711 Creates a SQL file based on the Schema, for each of the specified
1712 database engines in C<\@databases> in the given directory.
1713 (note: specify L<SQL::Translator> names, not L<DBI> driver names).
1714
1715 Given a previous version number, this will also create a file containing
1716 the ALTER TABLE statements to transform the previous schema into the
1717 current one. Note that these statements may contain C<DROP TABLE> or
1718 C<DROP COLUMN> statements that can potentially destroy data.
1719
1720 The file names are created using the C<ddl_filename> method below, please
1721 override this method in your schema if you would like a different file
1722 name format. For the ALTER file, the same format is used, replacing
1723 $version in the name with "$preversion-$version".
1724
1725 See L<SQL::Translator/METHODS> for a list of values for C<\%sqlt_args>.
1726 The most common value for this would be C<< { add_drop_table => 1 } >>
1727 to have the SQL produced include a C<DROP TABLE> statement for each table
1728 created. For quoting purposes supply C<quote_table_names> and
1729 C<quote_field_names>.
1730
1731 If no arguments are passed, then the following default values are assumed:
1732
1733 =over 4
1734
1735 =item databases  - ['MySQL', 'SQLite', 'PostgreSQL']
1736
1737 =item version    - $schema->schema_version
1738
1739 =item directory  - './'
1740
1741 =item preversion - <none>
1742
1743 =back
1744
1745 By default, C<\%sqlt_args> will have
1746
1747  { add_drop_table => 1, ignore_constraint_names => 1, ignore_index_names => 1 }
1748
1749 merged with the hash passed in. To disable any of those features, pass in a 
1750 hashref like the following
1751
1752  { ignore_constraint_names => 0, # ... other options }
1753
1754
1755 Note that this feature is currently EXPERIMENTAL and may not work correctly 
1756 across all databases, or fully handle complex relationships.
1757
1758 WARNING: Please check all SQL files created, before applying them.
1759
1760 =cut
1761
1762 sub create_ddl_dir {
1763   my ($self, $schema, $databases, $version, $dir, $preversion, $sqltargs) = @_;
1764
1765   if(!$dir || !-d $dir) {
1766     carp "No directory given, using ./\n";
1767     $dir = "./";
1768   }
1769   $databases ||= ['MySQL', 'SQLite', 'PostgreSQL'];
1770   $databases = [ $databases ] if(ref($databases) ne 'ARRAY');
1771
1772   my $schema_version = $schema->schema_version || '1.x';
1773   $version ||= $schema_version;
1774
1775   $sqltargs = {
1776     add_drop_table => 1, 
1777     ignore_constraint_names => 1,
1778     ignore_index_names => 1,
1779     %{$sqltargs || {}}
1780   };
1781
1782   $self->throw_exception(q{Can't create a ddl file without SQL::Translator 0.09003: '}
1783       . $self->_check_sqlt_message . q{'})
1784           if !$self->_check_sqlt_version;
1785
1786   my $sqlt = SQL::Translator->new( $sqltargs );
1787
1788   $sqlt->parser('SQL::Translator::Parser::DBIx::Class');
1789   my $sqlt_schema = $sqlt->translate({ data => $schema })
1790     or $self->throw_exception ($sqlt->error);
1791
1792   foreach my $db (@$databases) {
1793     $sqlt->reset();
1794     $sqlt->{schema} = $sqlt_schema;
1795     $sqlt->producer($db);
1796
1797     my $file;
1798     my $filename = $schema->ddl_filename($db, $version, $dir);
1799     if (-e $filename && ($version eq $schema_version )) {
1800       # if we are dumping the current version, overwrite the DDL
1801       carp "Overwriting existing DDL file - $filename";
1802       unlink($filename);
1803     }
1804
1805     my $output = $sqlt->translate;
1806     if(!$output) {
1807       carp("Failed to translate to $db, skipping. (" . $sqlt->error . ")");
1808       next;
1809     }
1810     if(!open($file, ">$filename")) {
1811       $self->throw_exception("Can't open $filename for writing ($!)");
1812       next;
1813     }
1814     print $file $output;
1815     close($file);
1816   
1817     next unless ($preversion);
1818
1819     require SQL::Translator::Diff;
1820
1821     my $prefilename = $schema->ddl_filename($db, $preversion, $dir);
1822     if(!-e $prefilename) {
1823       carp("No previous schema file found ($prefilename)");
1824       next;
1825     }
1826
1827     my $difffile = $schema->ddl_filename($db, $version, $dir, $preversion);
1828     if(-e $difffile) {
1829       carp("Overwriting existing diff file - $difffile");
1830       unlink($difffile);
1831     }
1832     
1833     my $source_schema;
1834     {
1835       my $t = SQL::Translator->new($sqltargs);
1836       $t->debug( 0 );
1837       $t->trace( 0 );
1838
1839       $t->parser( $db )
1840         or $self->throw_exception ($t->error);
1841
1842       my $out = $t->translate( $prefilename )
1843         or $self->throw_exception ($t->error);
1844
1845       $source_schema = $t->schema;
1846
1847       $source_schema->name( $prefilename )
1848         unless ( $source_schema->name );
1849     }
1850
1851     # The "new" style of producers have sane normalization and can support 
1852     # diffing a SQL file against a DBIC->SQLT schema. Old style ones don't
1853     # And we have to diff parsed SQL against parsed SQL.
1854     my $dest_schema = $sqlt_schema;
1855
1856     unless ( "SQL::Translator::Producer::$db"->can('preprocess_schema') ) {
1857       my $t = SQL::Translator->new($sqltargs);
1858       $t->debug( 0 );
1859       $t->trace( 0 );
1860
1861       $t->parser( $db )
1862         or $self->throw_exception ($t->error);
1863
1864       my $out = $t->translate( $filename )
1865         or $self->throw_exception ($t->error);
1866
1867       $dest_schema = $t->schema;
1868
1869       $dest_schema->name( $filename )
1870         unless $dest_schema->name;
1871     }
1872     
1873     my $diff = SQL::Translator::Diff::schema_diff($source_schema, $db,
1874                                                   $dest_schema,   $db,
1875                                                   $sqltargs
1876                                                  );
1877     if(!open $file, ">$difffile") { 
1878       $self->throw_exception("Can't write to $difffile ($!)");
1879       next;
1880     }
1881     print $file $diff;
1882     close($file);
1883   }
1884 }
1885
1886 =head2 deployment_statements
1887
1888 =over 4
1889
1890 =item Arguments: $schema, $type, $version, $directory, $sqlt_args
1891
1892 =back
1893
1894 Returns the statements used by L</deploy> and L<DBIx::Class::Schema/deploy>.
1895
1896 The L<SQL::Translator> (not L<DBI>) database driver name can be explicitly
1897 provided in C<$type>, otherwise the result of L</sqlt_type> is used as default.
1898
1899 C<$directory> is used to return statements from files in a previously created
1900 L</create_ddl_dir> directory and is optional. The filenames are constructed
1901 from L<DBIx::Class::Schema/ddl_filename>, the schema name and the C<$version>.
1902
1903 If no C<$directory> is specified then the statements are constructed on the
1904 fly using L<SQL::Translator> and C<$version> is ignored.
1905
1906 See L<SQL::Translator/METHODS> for a list of values for C<$sqlt_args>.
1907
1908 =cut
1909
1910 sub deployment_statements {
1911   my ($self, $schema, $type, $version, $dir, $sqltargs) = @_;
1912   # Need to be connected to get the correct sqlt_type
1913   $self->ensure_connected() unless $type;
1914   $type ||= $self->sqlt_type;
1915   $version ||= $schema->schema_version || '1.x';
1916   $dir ||= './';
1917   my $filename = $schema->ddl_filename($type, $version, $dir);
1918   if(-f $filename)
1919   {
1920       my $file;
1921       open($file, "<$filename") 
1922         or $self->throw_exception("Can't open $filename ($!)");
1923       my @rows = <$file>;
1924       close($file);
1925       return join('', @rows);
1926   }
1927
1928   $self->throw_exception(q{Can't deploy without SQL::Translator 0.09003: '}
1929       . $self->_check_sqlt_message . q{'})
1930           if !$self->_check_sqlt_version;
1931
1932   require SQL::Translator::Parser::DBIx::Class;
1933   eval qq{use SQL::Translator::Producer::${type}};
1934   $self->throw_exception($@) if $@;
1935
1936   # sources needs to be a parser arg, but for simplicty allow at top level 
1937   # coming in
1938   $sqltargs->{parser_args}{sources} = delete $sqltargs->{sources}
1939       if exists $sqltargs->{sources};
1940
1941   my $tr = SQL::Translator->new(%$sqltargs);
1942   SQL::Translator::Parser::DBIx::Class::parse( $tr, $schema );
1943   return "SQL::Translator::Producer::${type}"->can('produce')->($tr);
1944 }
1945
1946 sub deploy {
1947   my ($self, $schema, $type, $sqltargs, $dir) = @_;
1948   my $deploy = sub {
1949     my $line = shift;
1950     return if($line =~ /^--/);
1951     return if(!$line);
1952     # next if($line =~ /^DROP/m);
1953     return if($line =~ /^BEGIN TRANSACTION/m);
1954     return if($line =~ /^COMMIT/m);
1955     return if $line =~ /^\s+$/; # skip whitespace only
1956     $self->_query_start($line);
1957     eval {
1958       $self->dbh->do($line); # shouldn't be using ->dbh ?
1959     };
1960     if ($@) {
1961       carp qq{$@ (running "${line}")};
1962     }
1963     $self->_query_end($line);
1964   };
1965   my @statements = $self->deployment_statements($schema, $type, undef, $dir, { %{ $sqltargs || {} }, no_comments => 1 } );
1966   if (@statements > 1) {
1967     foreach my $statement (@statements) {
1968       $deploy->( $statement );
1969     }
1970   }
1971   elsif (@statements == 1) {
1972     foreach my $line ( split(";\n", $statements[0])) {
1973       $deploy->( $line );
1974     }
1975   }
1976 }
1977
1978 =head2 datetime_parser
1979
1980 Returns the datetime parser class
1981
1982 =cut
1983
1984 sub datetime_parser {
1985   my $self = shift;
1986   return $self->{datetime_parser} ||= do {
1987     $self->ensure_connected;
1988     $self->build_datetime_parser(@_);
1989   };
1990 }
1991
1992 =head2 datetime_parser_type
1993
1994 Defines (returns) the datetime parser class - currently hardwired to
1995 L<DateTime::Format::MySQL>
1996
1997 =cut
1998
1999 sub datetime_parser_type { "DateTime::Format::MySQL"; }
2000
2001 =head2 build_datetime_parser
2002
2003 See L</datetime_parser>
2004
2005 =cut
2006
2007 sub build_datetime_parser {
2008   my $self = shift;
2009   my $type = $self->datetime_parser_type(@_);
2010   eval "use ${type}";
2011   $self->throw_exception("Couldn't load ${type}: $@") if $@;
2012   return $type;
2013 }
2014
2015 {
2016     my $_check_sqlt_version; # private
2017     my $_check_sqlt_message; # private
2018     sub _check_sqlt_version {
2019         return $_check_sqlt_version if defined $_check_sqlt_version;
2020         eval 'use SQL::Translator "0.09003"';
2021         $_check_sqlt_message = $@ || '';
2022         $_check_sqlt_version = !$@;
2023     }
2024
2025     sub _check_sqlt_message {
2026         _check_sqlt_version if !defined $_check_sqlt_message;
2027         $_check_sqlt_message;
2028     }
2029 }
2030
2031 =head2 is_replicating
2032
2033 A boolean that reports if a particular L<DBIx::Class::Storage::DBI> is set to
2034 replicate from a master database.  Default is undef, which is the result
2035 returned by databases that don't support replication.
2036
2037 =cut
2038
2039 sub is_replicating {
2040     return;
2041     
2042 }
2043
2044 =head2 lag_behind_master
2045
2046 Returns a number that represents a certain amount of lag behind a master db
2047 when a given storage is replicating.  The number is database dependent, but
2048 starts at zero and increases with the amount of lag. Default in undef
2049
2050 =cut
2051
2052 sub lag_behind_master {
2053     return;
2054 }
2055
2056 sub DESTROY {
2057   my $self = shift;
2058   return if !$self->_dbh;
2059   $self->_verify_pid;
2060   $self->_dbh(undef);
2061 }
2062
2063 1;
2064
2065 =head1 USAGE NOTES
2066
2067 =head2 DBIx::Class and AutoCommit
2068
2069 DBIx::Class can do some wonderful magic with handling exceptions,
2070 disconnections, and transactions when you use C<< AutoCommit => 1 >>
2071 combined with C<txn_do> for transaction support.
2072
2073 If you set C<< AutoCommit => 0 >> in your connect info, then you are always
2074 in an assumed transaction between commits, and you're telling us you'd
2075 like to manage that manually.  A lot of the magic protections offered by
2076 this module will go away.  We can't protect you from exceptions due to database
2077 disconnects because we don't know anything about how to restart your
2078 transactions.  You're on your own for handling all sorts of exceptional
2079 cases if you choose the C<< AutoCommit => 0 >> path, just as you would
2080 be with raw DBI.
2081
2082
2083
2084 =head1 AUTHORS
2085
2086 Matt S. Trout <mst@shadowcatsystems.co.uk>
2087
2088 Andy Grundman <andy@hybridized.org>
2089
2090 =head1 LICENSE
2091
2092 You may distribute this code under the same terms as Perl itself.
2093
2094 =cut