fix erroneous default_value for MySQL NOT NULL columns (RT#57225)
[dbsrgits/DBIx-Class-Schema-Loader.git] / t / lib / dbixcsl_common_tests.pm
1 package dbixcsl_common_tests;
2
3 use strict;
4 use warnings;
5
6 use Test::More;
7 use Test::Exception;
8 use DBIx::Class::Schema::Loader;
9 use Class::Unload;
10 use File::Path;
11 use DBI;
12 use Digest::MD5;
13 use File::Find 'find';
14 use Class::Unload ();
15 use Data::Dumper::Concise;
16 use List::MoreUtils 'apply';
17
18 my $DUMP_DIR = './t/_common_dump';
19 rmtree $DUMP_DIR;
20
21 sub new {
22     my $class = shift;
23
24     my $self;
25
26     if( ref($_[0]) eq 'HASH') {
27        my $args = shift;
28        $self = { (%$args) };
29     }
30     else {
31        $self = { @_ };
32     }
33
34     # Only MySQL uses this
35     $self->{innodb} ||= '';
36
37     # DB2 and Firebird don't support 'field type NULL'
38     $self->{null} = 'NULL' unless defined $self->{null};
39     
40     $self->{verbose} = $ENV{TEST_VERBOSE} || 0;
41
42     # Optional extra tables and tests
43     $self->{extra} ||= {};
44
45     $self->{date_datatype} ||= 'DATE';
46
47     # Not all DBS do SQL-standard CURRENT_TIMESTAMP
48     $self->{default_function} ||= "current_timestamp";
49     $self->{default_function_def} ||= "timestamp default $self->{default_function}";
50
51     $self = bless $self, $class;
52
53     $self->setup_data_type_tests;
54
55     return $self;
56 }
57
58 sub skip_tests {
59     my ($self, $why) = @_;
60
61     plan skip_all => $why;
62 }
63
64 sub _monikerize {
65     my $name = shift;
66     return 'LoaderTest2X' if $name =~ /^loader_test2$/i;
67     return undef;
68 }
69
70 sub run_tests {
71     my $self = shift;
72
73     my @connect_info;
74
75     if ($self->{dsn}) {
76         push @connect_info, [ @{$self}{qw/dsn user password connect_info_opts/ } ];
77     }
78     else {
79         foreach my $info (@{ $self->{connect_info} || [] }) {
80             push @connect_info, [ @{$info}{qw/dsn user password connect_info_opts/ } ];
81         }
82     }
83     
84     if ($ENV{SCHEMA_LOADER_TESTS_EXTRA_ONLY}) {
85         $self->run_only_extra_tests(\@connect_info);
86         return;
87     }
88
89     my $extra_count = $self->{extra}{count} || 0;
90
91     plan tests => @connect_info * (178 + $extra_count + ($self->{data_type_tests}{test_count} || 0));
92
93     foreach my $info_idx (0..$#connect_info) {
94         my $info = $connect_info[$info_idx];
95
96         @{$self}{qw/dsn user password connect_info_opts/} = @$info;
97
98         $self->create();
99
100         my $schema_class = $self->setup_schema($info);
101         $self->test_schema($schema_class);
102
103         rmtree $DUMP_DIR
104             unless $ENV{SCHEMA_LOADER_TESTS_NOCLEANUP} && $info_idx == $#connect_info;
105     }
106 }
107
108 sub run_only_extra_tests {
109     my ($self, $connect_info) = @_;
110
111     plan tests => @$connect_info * (4 + ($self->{extra}{count} || 0) + ($self->{data_type_tests}{test_count} || 0));
112
113     rmtree $DUMP_DIR;
114
115     foreach my $info_idx (0..$#$connect_info) {
116         my $info = $connect_info->[$info_idx];
117
118         @{$self}{qw/dsn user password connect_info_opts/} = @$info;
119
120         $self->drop_extra_tables_only;
121
122         my $dbh = $self->dbconnect(1);
123         {
124             # Silence annoying but harmless postgres "NOTICE:  CREATE TABLE..."
125             local $SIG{__WARN__} = sub {
126                 my $msg = shift;
127                 warn $msg unless $msg =~ m{^NOTICE:\s+CREATE TABLE};
128             };
129
130
131             $dbh->do($_) for @{ $self->{extra}{create} || [] };
132             $dbh->do($self->{data_type_tests}{ddl}) if $self->{data_type_tests}{ddl};
133         }
134         $self->{_created} = 1;
135
136         my $file_count = grep /CREATE (?:TABLE|VIEW)/i, @{ $self->{extra}{create} || [] };
137         $file_count++; # schema
138         $file_count++ if $self->{data_type_tests}{ddl};
139
140         my $schema_class = $self->setup_schema($info, $file_count);
141         my ($monikers, $classes) = $self->monikers_and_classes($schema_class);
142         my $conn = $schema_class->clone;
143
144         $self->test_data_types($conn);
145         $self->{extra}{run}->($conn, $monikers, $classes) if $self->{extra}{run};
146
147         if (not ($ENV{SCHEMA_LOADER_TESTS_NOCLEANUP} && $info_idx == $#$connect_info)) {
148             $self->drop_extra_tables_only;
149             rmtree $DUMP_DIR;
150         }
151     }
152 }
153
154 sub drop_extra_tables_only {
155     my $self = shift;
156
157     my $dbh = $self->dbconnect(0);
158     $dbh->do($_) for @{ $self->{extra}{pre_drop_ddl} || [] };
159     $dbh->do("DROP TABLE $_") for @{ $self->{extra}{drop} || [] };
160
161     if (my $data_type_table = $self->{data_type_tests}{table_name}) {
162         $dbh->do("DROP TABLE $data_type_table");
163     }
164 }
165
166 # defined in sub create
167 my (@statements, @statements_reltests, @statements_advanced,
168     @statements_advanced_sqlite, @statements_inline_rels,
169     @statements_implicit_rels);
170
171 sub setup_schema {
172     my ($self, $connect_info, $expected_count) = @_;
173
174     my $schema_class = 'DBIXCSL_Test::Schema';
175
176     my $debug = ($self->{verbose} > 1) ? 1 : 0;
177
178     my %loader_opts = (
179         constraint              =>
180             qr/^(?:\S+\.)?(?:(?:$self->{vendor}|extra)_)?loader_test[0-9]+(?!.*_)/i,
181         relationships           => 1,
182         additional_classes      => 'TestAdditional',
183         additional_base_classes => 'TestAdditionalBase',
184         left_base_classes       => [ qw/TestLeftBase/ ],
185         components              => [ qw/TestComponent/ ],
186         resultset_components    => [ qw/TestRSComponent/ ],
187         inflect_plural          => { loader_test4 => 'loader_test4zes' },
188         inflect_singular        => { fkid => 'fkid_singular' },
189         moniker_map             => \&_monikerize,
190         custom_column_info      => \&_custom_column_info,
191         debug                   => $debug,
192         use_namespaces          => 0,
193         dump_directory          => $DUMP_DIR,
194         datetime_timezone       => 'Europe/Berlin',
195         datetime_locale         => 'de_DE',
196         %{ $self->{loader_options} || {} },
197     );
198
199     $loader_opts{db_schema} = $self->{db_schema} if $self->{db_schema};
200
201     Class::Unload->unload($schema_class);
202
203     my $file_count;
204     {
205         my @loader_warnings;
206         local $SIG{__WARN__} = sub { push(@loader_warnings, $_[0]); };
207          eval qq{
208              package $schema_class;
209              use base qw/DBIx::Class::Schema::Loader/;
210      
211              __PACKAGE__->loader_options(\%loader_opts);
212              __PACKAGE__->connection(\@\$connect_info);
213          };
214  
215         ok(!$@, "Loader initialization") or diag $@;
216
217         find sub { return if -d; $file_count++ }, $DUMP_DIR;
218
219         my $standard_sources = not defined $expected_count;
220
221         if ($standard_sources) {
222             $expected_count = 36 + ($self->{data_type_tests}{test_count} ? 1 : 0);
223
224             $expected_count += grep /CREATE (?:TABLE|VIEW)/i,
225                 @{ $self->{extra}{create} || [] };
226      
227             $expected_count -= grep /CREATE TABLE/, @statements_inline_rels
228                 if $self->{skip_rels} || $self->{no_inline_rels};
229      
230             $expected_count -= grep /CREATE TABLE/, @statements_implicit_rels
231                 if $self->{skip_rels} || $self->{no_implicit_rels};
232      
233             $expected_count -= grep /CREATE TABLE/, ($self->{vendor} =~ /sqlite/ ? @statements_advanced_sqlite : @statements_advanced), @statements_reltests
234                 if $self->{skip_rels};
235         }
236  
237         is $file_count, $expected_count, 'correct number of files generated';
238  
239         my $warn_count = 2;
240         $warn_count++ if grep /ResultSetManager/, @loader_warnings;
241  
242         $warn_count++ for grep /^Bad table or view/, @loader_warnings;
243  
244         $warn_count++ for grep /renaming \S+ relation/, @loader_warnings;
245  
246         $warn_count++ for grep /\b(?!loader_test9)\w+ has no primary key/i, @loader_warnings;
247
248         if ($standard_sources) {
249             if($self->{skip_rels}) {
250                 SKIP: {
251                     is(scalar(@loader_warnings), $warn_count, "No loader warnings")
252                         or diag @loader_warnings;
253                     skip "No missing PK warnings without rels", 1;
254                 }
255             }
256             else {
257                 $warn_count++;
258                 is(scalar(@loader_warnings), $warn_count, "Expected loader warning")
259                     or diag @loader_warnings;
260                 is(grep(/loader_test9 has no primary key/i, @loader_warnings), 1,
261                      "Missing PK warning");
262             }
263         }
264         else {
265             SKIP: {
266                 is scalar(@loader_warnings), $warn_count, 'Correct number of warnings'
267                     or diag @loader_warnings;
268                 skip "not testing standard sources", 1;
269             }
270         }
271     }
272
273     exit if $file_count != $expected_count;
274    
275     return $schema_class;
276 }
277
278 sub test_schema {
279     my $self = shift;
280     my $schema_class = shift;
281
282     my $conn = $schema_class->clone;
283
284     ($self->{before_tests_run} || sub {})->($conn);
285
286     my ($monikers, $classes) = $self->monikers_and_classes($schema_class);
287
288     my $moniker1 = $monikers->{loader_test1s};
289     my $class1   = $classes->{loader_test1s};
290     my $rsobj1   = $conn->resultset($moniker1);
291     check_no_duplicate_unique_constraints($class1);
292
293     my $moniker2 = $monikers->{loader_test2};
294     my $class2   = $classes->{loader_test2};
295     my $rsobj2   = $conn->resultset($moniker2);
296     check_no_duplicate_unique_constraints($class2);
297
298     my $moniker23 = $monikers->{LOADER_test23} || $monikers->{loader_test23};
299     my $class23   = $classes->{LOADER_test23}  || $classes->{loader_test23};
300     my $rsobj23   = $conn->resultset($moniker1);
301
302     my $moniker24 = $monikers->{LoAdEr_test24} || $monikers->{loader_test24};
303     my $class24   = $classes->{LoAdEr_test24}  || $classes->{loader_test24};
304     my $rsobj24   = $conn->resultset($moniker2);
305
306     my $moniker35 = $monikers->{loader_test35};
307     my $class35   = $classes->{loader_test35};
308     my $rsobj35   = $conn->resultset($moniker35);
309
310     isa_ok( $rsobj1, "DBIx::Class::ResultSet" );
311     isa_ok( $rsobj2, "DBIx::Class::ResultSet" );
312     isa_ok( $rsobj23, "DBIx::Class::ResultSet" );
313     isa_ok( $rsobj24, "DBIx::Class::ResultSet" );
314     isa_ok( $rsobj35, "DBIx::Class::ResultSet" );
315
316     my @columns_lt2 = $class2->columns;
317     is_deeply( \@columns_lt2, [ qw/id dat dat2 set_primary_key dbix_class_testcomponent/ ], "Column Ordering" );
318
319     is $class2->column_info('set_primary_key')->{accessor}, undef,
320         'accessor for column name that conflicts with a result base class method removed';
321
322     is $class2->column_info('dbix_class_testcomponent')->{accessor}, undef,
323         'accessor for column name that conflicts with a component class method removed';
324
325     my %uniq1 = $class1->unique_constraints;
326     my $uniq1_test = 0;
327     foreach my $ucname (keys %uniq1) {
328         my $cols_arrayref = $uniq1{$ucname};
329         if(@$cols_arrayref == 1 && $cols_arrayref->[0] eq 'dat') {
330            $uniq1_test = 1;
331            last;
332         }
333     }
334     ok($uniq1_test, "Unique constraint");
335
336     is($moniker1, 'LoaderTest1', 'moniker singularisation');
337
338     my %uniq2 = $class2->unique_constraints;
339     my $uniq2_test = 0;
340     foreach my $ucname (keys %uniq2) {
341         my $cols_arrayref = $uniq2{$ucname};
342         if(@$cols_arrayref == 2
343            && $cols_arrayref->[0] eq 'dat2'
344            && $cols_arrayref->[1] eq 'dat') {
345             $uniq2_test = 2;
346             last;
347         }
348     }
349     ok($uniq2_test, "Multi-col unique constraint");
350
351     is($moniker2, 'LoaderTest2X', "moniker_map testing");
352
353     SKIP: {
354         can_ok( $class1, 'test_additional_base' )
355             or skip "Pre-requisite test failed", 1;
356         is( $class1->test_additional_base, "test_additional_base",
357             "Additional Base method" );
358     }
359
360     SKIP: {
361         can_ok( $class1, 'test_additional_base_override' )
362             or skip "Pre-requisite test failed", 1;
363         is( $class1->test_additional_base_override,
364             "test_left_base_override",
365             "Left Base overrides Additional Base method" );
366     }
367
368     SKIP: {
369         can_ok( $class1, 'test_additional_base_additional' )
370             or skip "Pre-requisite test failed", 1;
371         is( $class1->test_additional_base_additional, "test_additional",
372             "Additional Base can use Additional package method" );
373     }
374
375     SKIP: {
376         can_ok( $class1, 'dbix_class_testcomponent' )
377             or skip "Pre-requisite test failed", 1;
378         is( $class1->dbix_class_testcomponent,
379             'dbix_class_testcomponent works',
380             'Additional Component' );
381     }
382
383     SKIP: {
384         can_ok($rsobj1, 'dbix_class_testrscomponent')
385             or skip "Pre-requisite test failed", 1;
386         is( $rsobj1->dbix_class_testrscomponent,
387             'dbix_class_testrscomponent works',
388             'ResultSet component' );
389     }
390
391     SKIP: {
392         can_ok( $class1, 'loader_test1_classmeth' )
393             or skip "Pre-requisite test failed", 1;
394         is( $class1->loader_test1_classmeth, 'all is well', 'Class method' );
395     }
396
397     SKIP: {
398         can_ok( $rsobj1, 'loader_test1_rsmeth' )
399             or skip "Pre-requisite test failed";
400         is( $rsobj1->loader_test1_rsmeth, 'all is still well', 'Result set method' );
401     }
402     
403     ok( $class1->column_info('id')->{is_auto_increment}, 'is_auto_increment detection' );
404
405     my $obj    = $rsobj1->find(1);
406     is( $obj->id,  1, "Find got the right row" );
407     is( $obj->dat, "foo", "Column value" );
408     is( $rsobj2->count, 4, "Count" );
409     my $saved_id;
410     eval {
411         my $new_obj1 = $rsobj1->create({ dat => 'newthing' });
412         $saved_id = $new_obj1->id;
413     };
414     ok(!$@, "Inserting new record using a PK::Auto key didn't die") or diag $@;
415     ok($saved_id, "Got PK::Auto-generated id");
416
417     my $new_obj1 = $rsobj1->search({ dat => 'newthing' })->first;
418     ok($new_obj1, "Found newly inserted PK::Auto record");
419     is($new_obj1->id, $saved_id, "Correct PK::Auto-generated id");
420
421     my ($obj2) = $rsobj2->search({ dat => 'bbb' })->first;
422     is( $obj2->id, 2 );
423
424     is(
425         $class35->column_info('a_varchar')->{default_value}, 'foo',
426         'constant character default',
427     );
428
429     is(
430         $class35->column_info('an_int')->{default_value}, 42,
431         'constant integer default',
432     );
433
434     cmp_ok(
435         $class35->column_info('a_double')->{default_value}, '==', 10.555,
436         'constant numeric default',
437     );
438
439     my $function_default = $class35->column_info('a_function')->{default_value};
440
441     isa_ok( $function_default, 'SCALAR', 'default_value for function default' );
442     is_deeply(
443         $function_default, \$self->{default_function},
444         'default_value for function default is correct'
445     );
446
447     SKIP: {
448         skip $self->{skip_rels}, 116 if $self->{skip_rels};
449
450         my $moniker3 = $monikers->{loader_test3};
451         my $class3   = $classes->{loader_test3};
452         my $rsobj3   = $conn->resultset($moniker3);
453
454         my $moniker4 = $monikers->{loader_test4};
455         my $class4   = $classes->{loader_test4};
456         my $rsobj4   = $conn->resultset($moniker4);
457
458         my $moniker5 = $monikers->{loader_test5};
459         my $class5   = $classes->{loader_test5};
460         my $rsobj5   = $conn->resultset($moniker5);
461
462         my $moniker6 = $monikers->{loader_test6};
463         my $class6   = $classes->{loader_test6};
464         my $rsobj6   = $conn->resultset($moniker6);
465
466         my $moniker7 = $monikers->{loader_test7};
467         my $class7   = $classes->{loader_test7};
468         my $rsobj7   = $conn->resultset($moniker7);
469
470         my $moniker8 = $monikers->{loader_test8};
471         my $class8   = $classes->{loader_test8};
472         my $rsobj8   = $conn->resultset($moniker8);
473
474         my $moniker9 = $monikers->{loader_test9};
475         my $class9   = $classes->{loader_test9};
476         my $rsobj9   = $conn->resultset($moniker9);
477
478         my $moniker16 = $monikers->{loader_test16};
479         my $class16   = $classes->{loader_test16};
480         my $rsobj16   = $conn->resultset($moniker16);
481
482         my $moniker17 = $monikers->{loader_test17};
483         my $class17   = $classes->{loader_test17};
484         my $rsobj17   = $conn->resultset($moniker17);
485
486         my $moniker18 = $monikers->{loader_test18};
487         my $class18   = $classes->{loader_test18};
488         my $rsobj18   = $conn->resultset($moniker18);
489
490         my $moniker19 = $monikers->{loader_test19};
491         my $class19   = $classes->{loader_test19};
492         my $rsobj19   = $conn->resultset($moniker19);
493
494         my $moniker20 = $monikers->{loader_test20};
495         my $class20   = $classes->{loader_test20};
496         my $rsobj20   = $conn->resultset($moniker20);
497
498         my $moniker21 = $monikers->{loader_test21};
499         my $class21   = $classes->{loader_test21};
500         my $rsobj21   = $conn->resultset($moniker21);
501
502         my $moniker22 = $monikers->{loader_test22};
503         my $class22   = $classes->{loader_test22};
504         my $rsobj22   = $conn->resultset($moniker22);
505
506         my $moniker25 = $monikers->{loader_test25};
507         my $class25   = $classes->{loader_test25};
508         my $rsobj25   = $conn->resultset($moniker25);
509
510         my $moniker26 = $monikers->{loader_test26};
511         my $class26   = $classes->{loader_test26};
512         my $rsobj26   = $conn->resultset($moniker26);
513
514         my $moniker27 = $monikers->{loader_test27};
515         my $class27   = $classes->{loader_test27};
516         my $rsobj27   = $conn->resultset($moniker27);
517
518         my $moniker28 = $monikers->{loader_test28};
519         my $class28   = $classes->{loader_test28};
520         my $rsobj28   = $conn->resultset($moniker28);
521
522         my $moniker29 = $monikers->{loader_test29};
523         my $class29   = $classes->{loader_test29};
524         my $rsobj29   = $conn->resultset($moniker29);
525
526         my $moniker31 = $monikers->{loader_test31};
527         my $class31   = $classes->{loader_test31};
528         my $rsobj31   = $conn->resultset($moniker31);
529
530         my $moniker32 = $monikers->{loader_test32};
531         my $class32   = $classes->{loader_test32};
532         my $rsobj32   = $conn->resultset($moniker32);
533
534         my $moniker33 = $monikers->{loader_test33};
535         my $class33   = $classes->{loader_test33};
536         my $rsobj33   = $conn->resultset($moniker33);
537
538         my $moniker34 = $monikers->{loader_test34};
539         my $class34   = $classes->{loader_test34};
540         my $rsobj34   = $conn->resultset($moniker34);
541
542         my $moniker36 = $monikers->{loader_test36};
543         my $class36   = $classes->{loader_test36};
544         my $rsobj36   = $conn->resultset($moniker36);
545         
546         isa_ok( $rsobj3, "DBIx::Class::ResultSet" );
547         isa_ok( $rsobj4, "DBIx::Class::ResultSet" );
548         isa_ok( $rsobj5, "DBIx::Class::ResultSet" );
549         isa_ok( $rsobj6, "DBIx::Class::ResultSet" );
550         isa_ok( $rsobj7, "DBIx::Class::ResultSet" );
551         isa_ok( $rsobj8, "DBIx::Class::ResultSet" );
552         isa_ok( $rsobj9, "DBIx::Class::ResultSet" );
553         isa_ok( $rsobj16, "DBIx::Class::ResultSet" );
554         isa_ok( $rsobj17, "DBIx::Class::ResultSet" );
555         isa_ok( $rsobj18, "DBIx::Class::ResultSet" );
556         isa_ok( $rsobj19, "DBIx::Class::ResultSet" );
557         isa_ok( $rsobj20, "DBIx::Class::ResultSet" );
558         isa_ok( $rsobj21, "DBIx::Class::ResultSet" );
559         isa_ok( $rsobj22, "DBIx::Class::ResultSet" );
560         isa_ok( $rsobj25, "DBIx::Class::ResultSet" );
561         isa_ok( $rsobj26, "DBIx::Class::ResultSet" );
562         isa_ok( $rsobj27, "DBIx::Class::ResultSet" );
563         isa_ok( $rsobj28, "DBIx::Class::ResultSet" );
564         isa_ok( $rsobj29, "DBIx::Class::ResultSet" );
565         isa_ok( $rsobj31, "DBIx::Class::ResultSet" );
566         isa_ok( $rsobj32, "DBIx::Class::ResultSet" );
567         isa_ok( $rsobj33, "DBIx::Class::ResultSet" );
568         isa_ok( $rsobj34, "DBIx::Class::ResultSet" );
569         isa_ok( $rsobj36, "DBIx::Class::ResultSet" );
570
571         # basic rel test
572         my $obj4 = $rsobj4->find(123);
573         isa_ok( $obj4->fkid_singular, $class3);
574
575         ok($class4->column_info('fkid')->{is_foreign_key}, 'Foreign key detected');
576
577         my $obj3 = $rsobj3->find(1);
578         my $rs_rel4 = $obj3->search_related('loader_test4zes');
579         isa_ok( $rs_rel4->first, $class4);
580
581         # check rel naming with prepositions
582         ok ($rsobj4->result_source->has_relationship('loader_test5s_to'),
583             "rel with preposition 'to' pluralized correctly");
584
585         ok ($rsobj4->result_source->has_relationship('loader_test5s_from'),
586             "rel with preposition 'from' pluralized correctly");
587
588         # check default relationship attributes
589         is $rsobj3->result_source->relationship_info('loader_test4zes')->{attrs}{cascade_delete}, 0,
590             'cascade_delete => 0 on has_many by default';
591
592         is $rsobj3->result_source->relationship_info('loader_test4zes')->{attrs}{cascade_copy}, 0,
593             'cascade_copy => 0 on has_many by default';
594
595         ok ((not exists $rsobj3->result_source->relationship_info('loader_test4zes')->{attrs}{on_delete}),
596             'has_many does not have on_delete');
597
598         ok ((not exists $rsobj3->result_source->relationship_info('loader_test4zes')->{attrs}{on_update}),
599             'has_many does not have on_update');
600
601         ok ((not exists $rsobj3->result_source->relationship_info('loader_test4zes')->{attrs}{is_deferrable}),
602             'has_many does not have is_deferrable');
603
604         is $rsobj4->result_source->relationship_info('fkid_singular')->{attrs}{on_delete}, 'CASCADE',
605             "on_delete => 'CASCADE' on belongs_to by default";
606
607         is $rsobj4->result_source->relationship_info('fkid_singular')->{attrs}{on_update}, 'CASCADE',
608             "on_update => 'CASCADE' on belongs_to by default";
609
610         ok ((not exists $rsobj4->result_source->relationship_info('fkid_singular')->{attrs}{is_deferrable}),
611             "is_deferrable => 1 not on belongs_to by default");
612
613         ok ((not exists $rsobj4->result_source->relationship_info('fkid_singular')->{attrs}{cascade_delete}),
614             'belongs_to does not have cascade_delete');
615
616         ok ((not exists $rsobj4->result_source->relationship_info('fkid_singular')->{attrs}{cascade_copy}),
617             'belongs_to does not have cascade_copy');
618
619         is $rsobj27->result_source->relationship_info('loader_test28')->{attrs}{cascade_delete}, 0,
620             'cascade_delete => 0 on might_have by default';
621
622         is $rsobj27->result_source->relationship_info('loader_test28')->{attrs}{cascade_copy}, 0,
623             'cascade_copy => 0 on might_have by default';
624
625         ok ((not exists $rsobj27->result_source->relationship_info('loader_test28')->{attrs}{on_delete}),
626             'might_have does not have on_delete');
627
628         ok ((not exists $rsobj27->result_source->relationship_info('loader_test28')->{attrs}{on_update}),
629             'might_have does not have on_update');
630
631         ok ((not exists $rsobj27->result_source->relationship_info('loader_test28')->{attrs}{is_deferrable}),
632             'might_have does not have is_deferrable');
633
634         # find on multi-col pk
635         my $obj5 = 
636             eval { $rsobj5->find({id1 => 1, iD2 => 1}) } ||
637             eval { $rsobj5->find({id1 => 1, id2 => 1}) };
638         die $@ if $@;
639
640         is( (eval { $obj5->id2 } || eval { $obj5->i_d2 }), 1, "Find on multi-col PK" );
641
642         # mulit-col fk def
643         my $obj6 = $rsobj6->find(1);
644         isa_ok( $obj6->loader_test2, $class2);
645         isa_ok( $obj6->loader_test5, $class5);
646
647         ok($class6->column_info('loader_test2_id')->{is_foreign_key}, 'Foreign key detected');
648         ok($class6->column_info('id')->{is_foreign_key}, 'Foreign key detected');
649
650         my $id2_info = eval { $class6->column_info('id2') } ||
651                         $class6->column_info('Id2');
652         ok($id2_info->{is_foreign_key}, 'Foreign key detected');
653
654         # fk that references a non-pk key (UNIQUE)
655         my $obj8 = $rsobj8->find(1);
656         isa_ok( $obj8->loader_test7, $class7);
657
658         ok($class8->column_info('loader_test7')->{is_foreign_key}, 'Foreign key detected');
659
660         # test double-fk 17 ->-> 16
661         my $obj17 = $rsobj17->find(33);
662
663         my $rs_rel16_one = $obj17->loader16_one;
664         isa_ok($rs_rel16_one, $class16);
665         is($rs_rel16_one->dat, 'y16', "Multiple FKs to same table");
666
667         ok($class17->column_info('loader16_one')->{is_foreign_key}, 'Foreign key detected');
668
669         my $rs_rel16_two = $obj17->loader16_two;
670         isa_ok($rs_rel16_two, $class16);
671         is($rs_rel16_two->dat, 'z16', "Multiple FKs to same table");
672
673         ok($class17->column_info('loader16_two')->{is_foreign_key}, 'Foreign key detected');
674
675         my $obj16 = $rsobj16->find(2);
676         my $rs_rel17 = $obj16->search_related('loader_test17_loader16_ones');
677         isa_ok($rs_rel17->first, $class17);
678         is($rs_rel17->first->id, 3, "search_related with multiple FKs from same table");
679         
680         # XXX test m:m 18 <- 20 -> 19
681         ok($class20->column_info('parent')->{is_foreign_key}, 'Foreign key detected');
682         ok($class20->column_info('child')->{is_foreign_key}, 'Foreign key detected');
683         
684         # XXX test double-fk m:m 21 <- 22 -> 21
685         ok($class22->column_info('parent')->{is_foreign_key}, 'Foreign key detected');
686         ok($class22->column_info('child')->{is_foreign_key}, 'Foreign key detected');
687
688         # test double multi-col fk 26 -> 25
689         my $obj26 = $rsobj26->find(33);
690
691         my $rs_rel25_one = $obj26->loader_test25_id_rel1;
692         isa_ok($rs_rel25_one, $class25);
693         is($rs_rel25_one->dat, 'x25', "Multiple multi-col FKs to same table");
694
695         ok($class26->column_info('id')->{is_foreign_key}, 'Foreign key detected');
696         ok($class26->column_info('rel1')->{is_foreign_key}, 'Foreign key detected');
697         ok($class26->column_info('rel2')->{is_foreign_key}, 'Foreign key detected');
698
699         my $rs_rel25_two = $obj26->loader_test25_id_rel2;
700         isa_ok($rs_rel25_two, $class25);
701         is($rs_rel25_two->dat, 'y25', "Multiple multi-col FKs to same table");
702
703         my $obj25 = $rsobj25->find(3,42);
704         my $rs_rel26 = $obj25->search_related('loader_test26_id_rel1s');
705         isa_ok($rs_rel26->first, $class26);
706         is($rs_rel26->first->id, 3, "search_related with multiple multi-col FKs from same table");
707
708         # test one-to-one rels
709         my $obj27 = $rsobj27->find(1);
710         my $obj28 = $obj27->loader_test28;
711         isa_ok($obj28, $class28);
712         is($obj28->get_column('id'), 1, "One-to-one relationship with PRIMARY FK");
713
714         ok($class28->column_info('id')->{is_foreign_key}, 'Foreign key detected');
715
716         my $obj29 = $obj27->loader_test29;
717         isa_ok($obj29, $class29);
718         is($obj29->id, 1, "One-to-one relationship with UNIQUE FK");
719
720         ok($class29->column_info('fk')->{is_foreign_key}, 'Foreign key detected');
721
722         $obj27 = $rsobj27->find(2);
723         is($obj27->loader_test28, undef, "Undef for missing one-to-one row");
724         is($obj27->loader_test29, undef, "Undef for missing one-to-one row");
725
726         # test outer join for nullable referring columns:
727         is $class32->column_info('rel2')->{is_nullable}, 1,
728           'is_nullable detection';
729
730         ok($class32->column_info('rel1')->{is_foreign_key}, 'Foreign key detected');
731         ok($class32->column_info('rel2')->{is_foreign_key}, 'Foreign key detected');
732         
733         my $obj32 = $rsobj32->find(1,{prefetch=>[qw/rel1 rel2/]});
734         my $obj34 = $rsobj34->find(
735           1,{prefetch=>[qw/loader_test33_id_rel1 loader_test33_id_rel2/]}
736         );
737         isa_ok($obj32,$class32);
738         isa_ok($obj34,$class34);
739
740         ok($class34->column_info('id')->{is_foreign_key}, 'Foreign key detected');
741         ok($class34->column_info('rel1')->{is_foreign_key}, 'Foreign key detected');
742         ok($class34->column_info('rel2')->{is_foreign_key}, 'Foreign key detected');
743
744         my $rs_rel31_one = $obj32->rel1;
745         my $rs_rel31_two = $obj32->rel2;
746         isa_ok($rs_rel31_one, $class31);
747         is($rs_rel31_two, undef);
748
749         my $rs_rel33_one = $obj34->loader_test33_id_rel1;
750         my $rs_rel33_two = $obj34->loader_test33_id_rel2;
751
752         isa_ok($rs_rel33_one,$class33);
753         is($rs_rel33_two, undef);
754
755         # from Chisel's tests...
756         my $moniker10 = $monikers->{loader_test10};
757         my $class10   = $classes->{loader_test10};
758         my $rsobj10   = $conn->resultset($moniker10);
759
760         my $moniker11 = $monikers->{loader_test11};
761         my $class11   = $classes->{loader_test11};
762         my $rsobj11   = $conn->resultset($moniker11);
763
764         isa_ok( $rsobj10, "DBIx::Class::ResultSet" );
765         isa_ok( $rsobj11, "DBIx::Class::ResultSet" );
766
767         ok($class10->column_info('loader_test11')->{is_foreign_key}, 'Foreign key detected');
768         ok($class11->column_info('loader_test10')->{is_foreign_key}, 'Foreign key detected');
769
770         my $obj10 = $rsobj10->create({ subject => 'xyzzy' });
771
772         $obj10->update();
773         ok( defined $obj10, 'Create row' );
774
775         my $obj11 = $rsobj11->create({ loader_test10 => $obj10->id() });
776         $obj11->update();
777         ok( defined $obj11, 'Create related row' );
778
779         eval {
780             my $obj10_2 = $obj11->loader_test10;
781             $obj10_2->update({ loader_test11 => $obj11->id11 });
782         };
783         diag $@ if $@;
784         ok(!$@, "Setting up circular relationship");
785
786         SKIP: {
787             skip 'Previous eval block failed', 3 if $@;
788     
789             my $results = $rsobj10->search({ subject => 'xyzzy' });
790             is( $results->count(), 1, 'No duplicate row created' );
791
792             my $obj10_3 = $results->first();
793             isa_ok( $obj10_3, $class10 );
794             is( $obj10_3->loader_test11()->id(), $obj11->id(),
795                 'Circular rel leads back to same row' );
796         }
797
798         SKIP: {
799             skip 'This vendor cannot do inline relationship definitions', 9
800                 if $self->{no_inline_rels};
801
802             my $moniker12 = $monikers->{loader_test12};
803             my $class12   = $classes->{loader_test12};
804             my $rsobj12   = $conn->resultset($moniker12);
805
806             my $moniker13 = $monikers->{loader_test13};
807             my $class13   = $classes->{loader_test13};
808             my $rsobj13   = $conn->resultset($moniker13);
809
810             isa_ok( $rsobj12, "DBIx::Class::ResultSet" ); 
811             isa_ok( $rsobj13, "DBIx::Class::ResultSet" );
812
813             ok($class13->column_info('id')->{is_foreign_key}, 'Foreign key detected');
814             ok($class13->column_info('loader_test12')->{is_foreign_key}, 'Foreign key detected');
815             ok($class13->column_info('dat')->{is_foreign_key}, 'Foreign key detected');
816
817             my $obj13 = $rsobj13->find(1);
818             isa_ok( $obj13->id, $class12 );
819             isa_ok( $obj13->loader_test12, $class12);
820             isa_ok( $obj13->dat, $class12);
821
822             my $obj12 = $rsobj12->find(1);
823             isa_ok( $obj12->loader_test13, $class13 );
824         }
825
826         SKIP: {
827             skip 'This vendor cannot do out-of-line implicit rel defs', 4
828                 if $self->{no_implicit_rels};
829             my $moniker14 = $monikers->{loader_test14};
830             my $class14   = $classes->{loader_test14};
831             my $rsobj14   = $conn->resultset($moniker14);
832
833             my $moniker15 = $monikers->{loader_test15};
834             my $class15   = $classes->{loader_test15};
835             my $rsobj15   = $conn->resultset($moniker15);
836
837             isa_ok( $rsobj14, "DBIx::Class::ResultSet" ); 
838             isa_ok( $rsobj15, "DBIx::Class::ResultSet" );
839
840             ok($class15->column_info('loader_test14')->{is_foreign_key}, 'Foreign key detected');
841
842             my $obj15 = $rsobj15->find(1);
843             isa_ok( $obj15->loader_test14, $class14 );
844         }
845     }
846
847     # test custom_column_info and datetime_timezone/datetime_locale
848     {
849         my $class35 = $classes->{loader_test35};
850         my $class36 = $classes->{loader_test36};
851
852         ok($class35->column_info('an_int')->{is_numeric}, 'custom_column_info');
853
854         is($class36->column_info('a_date')->{locale},'de_DE','datetime_locale');
855         is($class36->column_info('a_date')->{timezone},'Europe/Berlin','datetime_timezone');
856
857         ok($class36->column_info('b_char_as_data')->{inflate_datetime},'custom_column_info');
858         is($class36->column_info('b_char_as_data')->{locale},'de_DE','datetime_locale');
859         is($class36->column_info('b_char_as_data')->{timezone},'Europe/Berlin','datetime_timezone');
860
861         ok($class36->column_info('c_char_as_data')->{inflate_date},'custom_column_info');
862         is($class36->column_info('c_char_as_data')->{locale},'de_DE','datetime_locale');
863         is($class36->column_info('c_char_as_data')->{timezone},'Europe/Berlin','datetime_timezone');
864     }
865
866     # rescan and norewrite test
867     {
868         my @statements_rescan = (
869             qq{
870                 CREATE TABLE loader_test30 (
871                     id INTEGER NOT NULL PRIMARY KEY,
872                     loader_test2 INTEGER NOT NULL,
873                     FOREIGN KEY (loader_test2) REFERENCES loader_test2 (id)
874                 ) $self->{innodb}
875             },
876             q{ INSERT INTO loader_test30 (id,loader_test2) VALUES(123, 1) },
877             q{ INSERT INTO loader_test30 (id,loader_test2) VALUES(321, 2) },
878         );
879
880         # get md5
881         my $digest  = Digest::MD5->new;
882
883         my $find_cb = sub {
884             return if -d;
885             return if $_ eq 'LoaderTest30.pm';
886
887             open my $fh, '<', $_ or die "Could not open $_ for reading: $!";
888             binmode $fh;
889             $digest->addfile($fh);
890         };
891
892         find $find_cb, $DUMP_DIR;
893
894         my $before_digest = $digest->digest;
895
896         $conn->storage->disconnect; # needed for Firebird and Informix
897         my $dbh = $self->dbconnect(1);
898
899         {
900             # Silence annoying but harmless postgres "NOTICE:  CREATE TABLE..."
901             local $SIG{__WARN__} = sub {
902                 my $msg = shift;
903                 warn $msg unless $msg =~ m{^NOTICE:\s+CREATE TABLE};
904             };
905
906             $dbh->do($_) for @statements_rescan;
907         }
908
909         $dbh->disconnect;
910
911         sleep 1;
912
913         my @new = do {
914             # kill the 'Dumping manual schema' warnings
915             local $SIG{__WARN__} = sub {};
916             $conn->rescan;
917         };
918         is_deeply(\@new, [ qw/LoaderTest30/ ], "Rescan");
919
920         $digest = Digest::MD5->new;
921         find $find_cb, $DUMP_DIR;
922         my $after_digest = $digest->digest;
923
924         is $before_digest, $after_digest,
925             'dumped files are not rewritten when there is no modification';
926
927         my $rsobj30   = $conn->resultset('LoaderTest30');
928         isa_ok($rsobj30, 'DBIx::Class::ResultSet');
929
930         SKIP: {
931             skip 'no rels', 2 if $self->{skip_rels};
932
933             my $obj30 = $rsobj30->find(123);
934             isa_ok( $obj30->loader_test2, $class2);
935
936             ok($rsobj30->result_source->column_info('loader_test2')->{is_foreign_key},
937                'Foreign key detected');
938         }
939
940         $conn->storage->disconnect; # for Firebird
941         $conn->storage->dbh->do("DROP TABLE loader_test30");
942
943         @new = do {
944             local $SIG{__WARN__} = sub {};
945             $conn->rescan;
946         };
947         is_deeply(\@new, [], 'no new tables on rescan');
948
949         throws_ok { $conn->resultset('LoaderTest30') }
950             qr/Can't find source/,
951             'source unregistered for dropped table after rescan';
952     }
953
954     $self->test_data_types($conn);
955
956     # run extra tests
957     $self->{extra}{run}->($conn, $monikers, $classes) if $self->{extra}{run};
958
959     $self->drop_tables unless $ENV{SCHEMA_LOADER_TESTS_NOCLEANUP};
960
961     $conn->storage->disconnect;
962 }
963
964 sub test_data_types {
965     my ($self, $conn) = @_;
966
967     if ($self->{data_type_tests}{test_count}) {
968         my $data_type_tests = $self->{data_type_tests};
969         my $columns = $data_type_tests->{columns};
970
971         my $rsrc = $conn->resultset($data_type_tests->{table_moniker})->result_source;
972
973         while (my ($col_name, $expected_info) = each %$columns) {
974             my %info = %{ $rsrc->column_info($col_name) };
975             delete @info{qw/is_nullable timezone locale sequence/};
976
977             my $text_col_def = do {
978                 my $dd = Dumper;
979                 $dd->Indent(0);
980                 $dd->Values([\%info]);
981                 $dd->Dump;
982             };
983
984             my $text_expected_info = do {
985                 my $dd = Dumper;
986                 $dd->Indent(0);
987                 $dd->Values([$expected_info]);
988                 $dd->Dump;
989             };
990
991             is_deeply \%info, $expected_info,
992                 "test column $col_name has definition: $text_col_def expecting: $text_expected_info";
993         }
994     }
995 }
996
997 sub monikers_and_classes {
998     my ($self, $schema_class) = @_;
999     my ($monikers, $classes);
1000
1001     foreach my $source_name ($schema_class->sources) {
1002         my $table_name = $schema_class->source($source_name)->from;
1003
1004         $table_name = $$table_name if ref $table_name;
1005
1006         $monikers->{$table_name} = $source_name;
1007         $classes->{$table_name} = $schema_class . q{::} . $source_name;
1008
1009         # some DBs (Firebird) uppercase everything
1010         $monikers->{lc $table_name} = $source_name;
1011         $classes->{lc $table_name} = $schema_class . q{::} . $source_name;
1012     }
1013
1014     return ($monikers, $classes);
1015 }
1016
1017 sub check_no_duplicate_unique_constraints {
1018     my ($class) = @_;
1019
1020     # unique_constraints() automatically includes the PK, if any
1021     my %uc_cols;
1022     ++$uc_cols{ join ", ", @$_ }
1023         for values %{ { $class->unique_constraints } };
1024     my $dup_uc = grep { $_ > 1 } values %uc_cols;
1025
1026     is($dup_uc, 0, "duplicate unique constraints ($class)")
1027         or diag "uc_cols: @{[ %uc_cols ]}";
1028 }
1029
1030 sub dbconnect {
1031     my ($self, $complain) = @_;
1032
1033     require DBIx::Class::Storage::DBI;
1034     my $storage = DBIx::Class::Storage::DBI->new;
1035
1036     $complain = defined $complain ? $complain : 1;
1037
1038     $storage->connect_info([
1039         @{ $self }{qw/dsn user password/},
1040         {
1041             unsafe => 1,
1042             RaiseError => $complain,
1043             ShowErrorStatement => $complain,
1044             PrintError => 0,
1045             %{ $self->{connect_info_opts} || {} },
1046         },
1047     ]);
1048
1049     my $dbh = eval { $storage->dbh };
1050     die "Failed to connect to database: $@" if !$dbh;
1051
1052     $self->{storage} = $storage; # storage DESTROY disconnects
1053
1054     return $dbh;
1055 }
1056
1057 sub create {
1058     my $self = shift;
1059
1060     $self->{_created} = 1;
1061
1062     my $make_auto_inc = $self->{auto_inc_cb} || sub {};
1063     @statements = (
1064         qq{
1065             CREATE TABLE loader_test1s (
1066                 id $self->{auto_inc_pk},
1067                 dat VARCHAR(32) NOT NULL UNIQUE
1068             ) $self->{innodb}
1069         },
1070         $make_auto_inc->(qw/loader_test1s id/),
1071
1072         q{ INSERT INTO loader_test1s (dat) VALUES('foo') },
1073         q{ INSERT INTO loader_test1s (dat) VALUES('bar') }, 
1074         q{ INSERT INTO loader_test1s (dat) VALUES('baz') }, 
1075
1076         # also test method collision
1077         qq{ 
1078             CREATE TABLE loader_test2 (
1079                 id $self->{auto_inc_pk},
1080                 dat VARCHAR(32) NOT NULL,
1081                 dat2 VARCHAR(32) NOT NULL,
1082                 set_primary_key INTEGER $self->{null},
1083                 dbix_class_testcomponent INTEGER $self->{null},
1084                 UNIQUE (dat2, dat)
1085             ) $self->{innodb}
1086         },
1087         $make_auto_inc->(qw/loader_test2 id/),
1088
1089         q{ INSERT INTO loader_test2 (dat, dat2) VALUES('aaa', 'zzz') }, 
1090         q{ INSERT INTO loader_test2 (dat, dat2) VALUES('bbb', 'yyy') }, 
1091         q{ INSERT INTO loader_test2 (dat, dat2) VALUES('ccc', 'xxx') }, 
1092         q{ INSERT INTO loader_test2 (dat, dat2) VALUES('ddd', 'www') }, 
1093
1094         qq{
1095             CREATE TABLE LOADER_test23 (
1096                 ID INTEGER NOT NULL PRIMARY KEY,
1097                 DAT VARCHAR(32) NOT NULL UNIQUE
1098             ) $self->{innodb}
1099         },
1100
1101         qq{
1102             CREATE TABLE LoAdEr_test24 (
1103                 iD INTEGER NOT NULL PRIMARY KEY,
1104                 DaT VARCHAR(32) NOT NULL UNIQUE
1105             ) $self->{innodb}
1106         },
1107
1108         qq{
1109             CREATE TABLE loader_test35 (
1110                 id INTEGER NOT NULL PRIMARY KEY,
1111                 a_varchar VARCHAR(100) DEFAULT 'foo',
1112                 an_int INTEGER DEFAULT 42,
1113                 a_double DOUBLE PRECISION DEFAULT 10.555,
1114                 a_function $self->{default_function_def}
1115             ) $self->{innodb}
1116         },
1117
1118         qq{
1119             CREATE TABLE loader_test36 (
1120                 id INTEGER NOT NULL PRIMARY KEY,
1121                 a_date $self->{date_datatype},
1122                 b_char_as_data VARCHAR(100),
1123                 c_char_as_data VARCHAR(100)
1124             ) $self->{innodb}
1125         },
1126     );
1127
1128     @statements_reltests = (
1129         qq{
1130             CREATE TABLE loader_test3 (
1131                 id INTEGER NOT NULL PRIMARY KEY,
1132                 dat VARCHAR(32)
1133             ) $self->{innodb}
1134         },
1135
1136         q{ INSERT INTO loader_test3 (id,dat) VALUES(1,'aaa') }, 
1137         q{ INSERT INTO loader_test3 (id,dat) VALUES(2,'bbb') }, 
1138         q{ INSERT INTO loader_test3 (id,dat) VALUES(3,'ccc') }, 
1139         q{ INSERT INTO loader_test3 (id,dat) VALUES(4,'ddd') }, 
1140
1141         qq{
1142             CREATE TABLE loader_test4 (
1143                 id INTEGER NOT NULL PRIMARY KEY,
1144                 fkid INTEGER NOT NULL,
1145                 dat VARCHAR(32),
1146                 FOREIGN KEY( fkid ) REFERENCES loader_test3 (id)
1147             ) $self->{innodb}
1148         },
1149
1150         q{ INSERT INTO loader_test4 (id,fkid,dat) VALUES(123,1,'aaa') },
1151         q{ INSERT INTO loader_test4 (id,fkid,dat) VALUES(124,2,'bbb') }, 
1152         q{ INSERT INTO loader_test4 (id,fkid,dat) VALUES(125,3,'ccc') },
1153         q{ INSERT INTO loader_test4 (id,fkid,dat) VALUES(126,4,'ddd') },
1154
1155         qq{
1156             CREATE TABLE loader_test5 (
1157                 id1 INTEGER NOT NULL,
1158                 iD2 INTEGER NOT NULL,
1159                 dat VARCHAR(8),
1160                 from_id INTEGER $self->{null},
1161                 to_id INTEGER $self->{null},
1162                 PRIMARY KEY (id1,iD2),
1163                 FOREIGN KEY (from_id) REFERENCES loader_test4 (id),
1164                 FOREIGN KEY (to_id) REFERENCES loader_test4 (id)
1165             ) $self->{innodb}
1166         },
1167
1168         q{ INSERT INTO loader_test5 (id1,iD2,dat) VALUES (1,1,'aaa') },
1169
1170         qq{
1171             CREATE TABLE loader_test6 (
1172                 id INTEGER NOT NULL PRIMARY KEY,
1173                 Id2 INTEGER,
1174                 loader_test2_id INTEGER,
1175                 dat VARCHAR(8),
1176                 FOREIGN KEY (loader_test2_id)  REFERENCES loader_test2 (id),
1177                 FOREIGN KEY(id,Id2) REFERENCES loader_test5 (id1,iD2)
1178             ) $self->{innodb}
1179         },
1180
1181         (q{ INSERT INTO loader_test6 (id, Id2,loader_test2_id,dat) } .
1182          q{ VALUES (1, 1,1,'aaa') }),
1183
1184         qq{
1185             CREATE TABLE loader_test7 (
1186                 id INTEGER NOT NULL PRIMARY KEY,
1187                 id2 VARCHAR(8) NOT NULL UNIQUE,
1188                 dat VARCHAR(8)
1189             ) $self->{innodb}
1190         },
1191
1192         q{ INSERT INTO loader_test7 (id,id2,dat) VALUES (1,'aaa','bbb') },
1193
1194         qq{
1195             CREATE TABLE loader_test8 (
1196                 id INTEGER NOT NULL PRIMARY KEY,
1197                 loader_test7 VARCHAR(8) NOT NULL,
1198                 dat VARCHAR(8),
1199                 FOREIGN KEY (loader_test7) REFERENCES loader_test7 (id2)
1200             ) $self->{innodb}
1201         },
1202
1203         (q{ INSERT INTO loader_test8 (id,loader_test7,dat) } .
1204          q{ VALUES (1,'aaa','bbb') }),
1205
1206         qq{
1207             CREATE TABLE loader_test9 (
1208                 loader_test9 VARCHAR(8) NOT NULL
1209             ) $self->{innodb}
1210         },
1211
1212         qq{
1213             CREATE TABLE loader_test16 (
1214                 id INTEGER NOT NULL PRIMARY KEY,
1215                 dat  VARCHAR(8)
1216             ) $self->{innodb}
1217         },
1218
1219         qq{ INSERT INTO loader_test16 (id,dat) VALUES (2,'x16') },
1220         qq{ INSERT INTO loader_test16 (id,dat) VALUES (4,'y16') },
1221         qq{ INSERT INTO loader_test16 (id,dat) VALUES (6,'z16') },
1222
1223         qq{
1224             CREATE TABLE loader_test17 (
1225                 id INTEGER NOT NULL PRIMARY KEY,
1226                 loader16_one INTEGER,
1227                 loader16_two INTEGER,
1228                 FOREIGN KEY (loader16_one) REFERENCES loader_test16 (id),
1229                 FOREIGN KEY (loader16_two) REFERENCES loader_test16 (id)
1230             ) $self->{innodb}
1231         },
1232
1233         qq{ INSERT INTO loader_test17 (id, loader16_one, loader16_two) VALUES (3, 2, 4) },
1234         qq{ INSERT INTO loader_test17 (id, loader16_one, loader16_two) VALUES (33, 4, 6) },
1235
1236         qq{
1237             CREATE TABLE loader_test18 (
1238                 id INTEGER NOT NULL PRIMARY KEY,
1239                 dat  VARCHAR(8)
1240             ) $self->{innodb}
1241         },
1242
1243         qq{ INSERT INTO loader_test18 (id,dat) VALUES (1,'x18') },
1244         qq{ INSERT INTO loader_test18 (id,dat) VALUES (2,'y18') },
1245         qq{ INSERT INTO loader_test18 (id,dat) VALUES (3,'z18') },
1246
1247         qq{
1248             CREATE TABLE loader_test19 (
1249                 id INTEGER NOT NULL PRIMARY KEY,
1250                 dat  VARCHAR(8)
1251             ) $self->{innodb}
1252         },
1253
1254         qq{ INSERT INTO loader_test19 (id,dat) VALUES (4,'x19') },
1255         qq{ INSERT INTO loader_test19 (id,dat) VALUES (5,'y19') },
1256         qq{ INSERT INTO loader_test19 (id,dat) VALUES (6,'z19') },
1257
1258         qq{
1259             CREATE TABLE loader_test20 (
1260                 parent INTEGER NOT NULL,
1261                 child INTEGER NOT NULL,
1262                 PRIMARY KEY (parent, child),
1263                 FOREIGN KEY (parent) REFERENCES loader_test18 (id),
1264                 FOREIGN KEY (child) REFERENCES loader_test19 (id)
1265             ) $self->{innodb}
1266         },
1267
1268         q{ INSERT INTO loader_test20 (parent, child) VALUES (1,4) },
1269         q{ INSERT INTO loader_test20 (parent, child) VALUES (2,5) },
1270         q{ INSERT INTO loader_test20 (parent, child) VALUES (3,6) },
1271
1272         qq{
1273             CREATE TABLE loader_test21 (
1274                 id INTEGER NOT NULL PRIMARY KEY,
1275                 dat  VARCHAR(8)
1276             ) $self->{innodb}
1277         },
1278
1279         q{ INSERT INTO loader_test21 (id,dat) VALUES (7,'a21')},
1280         q{ INSERT INTO loader_test21 (id,dat) VALUES (11,'b21')},
1281         q{ INSERT INTO loader_test21 (id,dat) VALUES (13,'c21')},
1282         q{ INSERT INTO loader_test21 (id,dat) VALUES (17,'d21')},
1283
1284         qq{
1285             CREATE TABLE loader_test22 (
1286                 parent INTEGER NOT NULL,
1287                 child INTEGER NOT NULL,
1288                 PRIMARY KEY (parent, child),
1289                 FOREIGN KEY (parent) REFERENCES loader_test21 (id),
1290                 FOREIGN KEY (child) REFERENCES loader_test21 (id)
1291             ) $self->{innodb}
1292         },
1293
1294         q{ INSERT INTO loader_test22 (parent, child) VALUES (7,11)},
1295         q{ INSERT INTO loader_test22 (parent, child) VALUES (11,13)},
1296         q{ INSERT INTO loader_test22 (parent, child) VALUES (13,17)},
1297
1298         qq{
1299             CREATE TABLE loader_test25 (
1300                 id1 INTEGER NOT NULL,
1301                 id2 INTEGER NOT NULL,
1302                 dat VARCHAR(8),
1303                 PRIMARY KEY (id1,id2)
1304             ) $self->{innodb}
1305         },
1306
1307         q{ INSERT INTO loader_test25 (id1,id2,dat) VALUES (33,5,'x25') },
1308         q{ INSERT INTO loader_test25 (id1,id2,dat) VALUES (33,7,'y25') },
1309         q{ INSERT INTO loader_test25 (id1,id2,dat) VALUES (3,42,'z25') },
1310
1311         qq{
1312             CREATE TABLE loader_test26 (
1313                id INTEGER NOT NULL PRIMARY KEY,
1314                rel1 INTEGER NOT NULL,
1315                rel2 INTEGER NOT NULL,
1316                FOREIGN KEY (id, rel1) REFERENCES loader_test25 (id1, id2),
1317                FOREIGN KEY (id, rel2) REFERENCES loader_test25 (id1, id2)
1318             ) $self->{innodb}
1319         },
1320
1321         q{ INSERT INTO loader_test26 (id,rel1,rel2) VALUES (33,5,7) },
1322         q{ INSERT INTO loader_test26 (id,rel1,rel2) VALUES (3,42,42) },
1323
1324         qq{
1325             CREATE TABLE loader_test27 (
1326                 id INTEGER NOT NULL PRIMARY KEY
1327             ) $self->{innodb}
1328         },
1329
1330         q{ INSERT INTO loader_test27 (id) VALUES (1) },
1331         q{ INSERT INTO loader_test27 (id) VALUES (2) },
1332
1333         qq{
1334             CREATE TABLE loader_test28 (
1335                 id INTEGER NOT NULL PRIMARY KEY,
1336                 FOREIGN KEY (id) REFERENCES loader_test27 (id)
1337             ) $self->{innodb}
1338         },
1339
1340         q{ INSERT INTO loader_test28 (id) VALUES (1) },
1341
1342         qq{
1343             CREATE TABLE loader_test29 (
1344                 id INTEGER NOT NULL PRIMARY KEY,
1345                 fk INTEGER NOT NULL UNIQUE,
1346                 FOREIGN KEY (fk) REFERENCES loader_test27 (id)
1347             ) $self->{innodb}
1348         },
1349
1350         q{ INSERT INTO loader_test29 (id,fk) VALUES (1,1) },
1351
1352         qq{
1353           CREATE TABLE loader_test31 (
1354             id INTEGER NOT NULL PRIMARY KEY
1355           ) $self->{innodb}
1356         },
1357         q{ INSERT INTO loader_test31 (id) VALUES (1) },
1358
1359         qq{
1360           CREATE TABLE loader_test32 (
1361             id INTEGER NOT NULL PRIMARY KEY,
1362             rel1 INTEGER NOT NULL,
1363             rel2 INTEGER $self->{null},
1364             FOREIGN KEY (rel1) REFERENCES loader_test31(id),
1365             FOREIGN KEY (rel2) REFERENCES loader_test31(id)
1366           ) $self->{innodb}
1367         },
1368         q{ INSERT INTO loader_test32 (id,rel1) VALUES (1,1) },
1369
1370         qq{
1371           CREATE TABLE loader_test33 (
1372             id1 INTEGER NOT NULL,
1373             id2 INTEGER NOT NULL,
1374             PRIMARY KEY (id1,id2)
1375           ) $self->{innodb}
1376         },
1377         q{ INSERT INTO loader_test33 (id1,id2) VALUES (1,2) },
1378
1379         qq{
1380           CREATE TABLE loader_test34 (
1381             id INTEGER NOT NULL PRIMARY KEY,
1382             rel1 INTEGER NOT NULL,
1383             rel2 INTEGER $self->{null},
1384             FOREIGN KEY (id,rel1) REFERENCES loader_test33(id1,id2),
1385             FOREIGN KEY (id,rel2) REFERENCES loader_test33(id1,id2)
1386           ) $self->{innodb}
1387         },
1388         q{ INSERT INTO loader_test34 (id,rel1) VALUES (1,2) },
1389     );
1390
1391     @statements_advanced = (
1392         qq{
1393             CREATE TABLE loader_test10 (
1394                 id10 $self->{auto_inc_pk},
1395                 subject VARCHAR(8),
1396                 loader_test11 INTEGER $self->{null}
1397             ) $self->{innodb}
1398         },
1399         $make_auto_inc->(qw/loader_test10 id10/),
1400
1401         qq{
1402             CREATE TABLE loader_test11 (
1403                 id11 $self->{auto_inc_pk},
1404                 a_message VARCHAR(8) DEFAULT 'foo',
1405                 loader_test10 INTEGER $self->{null},
1406                 FOREIGN KEY (loader_test10) REFERENCES loader_test10 (id10)
1407             ) $self->{innodb}
1408         },
1409         $make_auto_inc->(qw/loader_test11 id11/),
1410
1411         (lc($self->{vendor}) ne 'informix' ?
1412             (q{ ALTER TABLE loader_test10 ADD CONSTRAINT loader_test11_fk } .
1413              q{ FOREIGN KEY (loader_test11) } .
1414              q{ REFERENCES loader_test11 (id11) })
1415         :
1416             (q{ ALTER TABLE loader_test10 ADD CONSTRAINT } .
1417              q{ FOREIGN KEY (loader_test11) } .
1418              q{ REFERENCES loader_test11 (id11) } .
1419              q{ CONSTRAINT loader_test11_fk })
1420         ),
1421     );
1422
1423     @statements_advanced_sqlite = (
1424         qq{
1425             CREATE TABLE loader_test10 (
1426                 id10 $self->{auto_inc_pk},
1427                 subject VARCHAR(8)
1428             ) $self->{innodb}
1429         },
1430         $make_auto_inc->(qw/loader_test10 id10/),
1431
1432         qq{
1433             CREATE TABLE loader_test11 (
1434                 id11 $self->{auto_inc_pk},
1435                 a_message VARCHAR(8) DEFAULT 'foo',
1436                 loader_test10 INTEGER $self->{null},
1437                 FOREIGN KEY (loader_test10) REFERENCES loader_test10 (id10)
1438             ) $self->{innodb}
1439         },
1440         $make_auto_inc->(qw/loader_test11 id11/),
1441
1442         (q{ ALTER TABLE loader_test10 ADD COLUMN } .
1443          q{ loader_test11 INTEGER REFERENCES loader_test11 (id11) }),
1444     );
1445
1446     @statements_inline_rels = (
1447         qq{
1448             CREATE TABLE loader_test12 (
1449                 id INTEGER NOT NULL PRIMARY KEY,
1450                 id2 VARCHAR(8) NOT NULL UNIQUE,
1451                 dat VARCHAR(8) NOT NULL UNIQUE
1452             ) $self->{innodb}
1453         },
1454
1455         q{ INSERT INTO loader_test12 (id,id2,dat) VALUES (1,'aaa','bbb') },
1456
1457         qq{
1458             CREATE TABLE loader_test13 (
1459                 id INTEGER NOT NULL PRIMARY KEY REFERENCES loader_test12,
1460                 loader_test12 VARCHAR(8) NOT NULL REFERENCES loader_test12 (id2),
1461                 dat VARCHAR(8) REFERENCES loader_test12 (dat)
1462             ) $self->{innodb}
1463         },
1464
1465         (q{ INSERT INTO loader_test13 (id,loader_test12,dat) } .
1466          q{ VALUES (1,'aaa','bbb') }),
1467     );
1468
1469
1470     @statements_implicit_rels = (
1471         qq{
1472             CREATE TABLE loader_test14 (
1473                 id INTEGER NOT NULL PRIMARY KEY,
1474                 dat VARCHAR(8)
1475             ) $self->{innodb}
1476         },
1477  
1478         q{ INSERT INTO loader_test14 (id,dat) VALUES (123,'aaa') },
1479
1480         qq{
1481             CREATE TABLE loader_test15 (
1482                 id INTEGER NOT NULL PRIMARY KEY,
1483                 loader_test14 INTEGER NOT NULL,
1484                 FOREIGN KEY (loader_test14) REFERENCES loader_test14
1485             ) $self->{innodb}
1486         },
1487
1488         q{ INSERT INTO loader_test15 (id,loader_test14) VALUES (1,123) },
1489     );
1490
1491     $self->drop_tables;
1492     $self->drop_tables; # twice for good measure
1493
1494     my $dbh = $self->dbconnect(1);
1495
1496     # Silence annoying but harmless postgres "NOTICE:  CREATE TABLE..."
1497     local $SIG{__WARN__} = sub {
1498         my $msg = shift;
1499         warn $msg unless $msg =~ m{^NOTICE:\s+CREATE TABLE};
1500     };
1501
1502     $dbh->do($_) for (@statements);
1503
1504     $dbh->do($self->{data_type_tests}{ddl}) if $self->{data_type_tests}{ddl};
1505
1506     unless($self->{skip_rels}) {
1507         # hack for now, since DB2 doesn't like inline comments, and we need
1508         # to test one for mysql, which works on everyone else...
1509         # this all needs to be refactored anyways.
1510         $dbh->do($_) for (@statements_reltests);
1511         if($self->{vendor} =~ /sqlite/i) {
1512             $dbh->do($_) for (@statements_advanced_sqlite);
1513         }
1514         else {
1515             $dbh->do($_) for (@statements_advanced);
1516         }
1517         unless($self->{no_inline_rels}) {
1518             $dbh->do($_) for (@statements_inline_rels);
1519         }
1520         unless($self->{no_implicit_rels}) {
1521             $dbh->do($_) for (@statements_implicit_rels);
1522         }
1523     }
1524
1525     $dbh->do($_) for @{ $self->{extra}->{create} || [] };
1526     $dbh->disconnect();
1527 }
1528
1529 sub drop_tables {
1530     my $self = shift;
1531
1532     my @tables = qw/
1533         loader_test1s
1534         loader_test2
1535         LOADER_test23
1536         LoAdEr_test24
1537         loader_test35
1538         loader_test36
1539     /;
1540     
1541     my @tables_auto_inc = (
1542         [ qw/loader_test1s id/ ],
1543         [ qw/loader_test2 id/ ],
1544     );
1545
1546     my @tables_reltests = qw/
1547         loader_test4
1548         loader_test3
1549         loader_test6
1550         loader_test5
1551         loader_test8
1552         loader_test7
1553         loader_test9
1554         loader_test17
1555         loader_test16
1556         loader_test20
1557         loader_test19
1558         loader_test18
1559         loader_test22
1560         loader_test21
1561         loader_test26
1562         loader_test25
1563         loader_test28
1564         loader_test29
1565         loader_test27
1566         loader_test32
1567         loader_test31
1568         loader_test34
1569         loader_test33
1570     /;
1571
1572     my @tables_advanced = qw/
1573         loader_test11
1574         loader_test10
1575     /;
1576     
1577     my @tables_advanced_auto_inc = (
1578         [ qw/loader_test10 id10/ ],
1579         [ qw/loader_test11 id11/ ],
1580     );
1581
1582     my @tables_inline_rels = qw/
1583         loader_test13
1584         loader_test12
1585     /;
1586
1587     my @tables_implicit_rels = qw/
1588         loader_test15
1589         loader_test14
1590     /;
1591
1592     my @tables_rescan = qw/ loader_test30 /;
1593
1594     my $drop_fk_mysql =
1595         q{ALTER TABLE loader_test10 DROP FOREIGN KEY loader_test11_fk};
1596
1597     my $drop_fk =
1598         q{ALTER TABLE loader_test10 DROP CONSTRAINT loader_test11_fk};
1599
1600     my $dbh = $self->dbconnect(0);
1601
1602     $dbh->do($_) for @{ $self->{extra}{pre_drop_ddl} || [] };
1603     $dbh->do("DROP TABLE $_") for @{ $self->{extra}{drop} || [] };
1604
1605     my $drop_auto_inc = $self->{auto_inc_drop_cb} || sub {};
1606
1607     unless($self->{skip_rels}) {
1608         $dbh->do("DROP TABLE $_") for (@tables_reltests);
1609         if($self->{vendor} =~ /mysql/i) {
1610             $dbh->do($drop_fk_mysql);
1611         }
1612         else {
1613             $dbh->do($drop_fk);
1614         }
1615         $dbh->do($_) for map { $drop_auto_inc->(@$_) } @tables_advanced_auto_inc;
1616         $dbh->do("DROP TABLE $_") for (@tables_advanced);
1617
1618         unless($self->{no_inline_rels}) {
1619             $dbh->do("DROP TABLE $_") for (@tables_inline_rels);
1620         }
1621         unless($self->{no_implicit_rels}) {
1622             $dbh->do("DROP TABLE $_") for (@tables_implicit_rels);
1623         }
1624     }
1625     $dbh->do($_) for map { $drop_auto_inc->(@$_) } @tables_auto_inc;
1626     $dbh->do("DROP TABLE $_") for (@tables, @tables_rescan);
1627
1628     if (my $data_type_table = $self->{data_type_tests}{table_name}) {
1629         $dbh->do("DROP TABLE $data_type_table");
1630     }
1631
1632     $dbh->disconnect;
1633
1634 # fixup for Firebird
1635     $dbh = $self->dbconnect(0);
1636     $dbh->do('DROP TABLE loader_test2');
1637     $dbh->disconnect;
1638 }
1639
1640 sub _custom_column_info {
1641     my ( $table_name, $column_name, $column_info ) = @_;
1642
1643     $table_name = lc ( $table_name );
1644     $column_name = lc ( $column_name );
1645
1646     if ( $table_name eq 'loader_test35' 
1647         and $column_name eq 'an_int' 
1648     ){
1649         return { is_numeric => 1 }
1650     }
1651     # Set inflate_datetime or  inflate_date to check 
1652     #   datetime_timezone and datetime_locale
1653     if ( $table_name eq 'loader_test36' ){
1654         return { inflate_datetime => 1 } if 
1655             ( $column_name eq 'b_char_as_data' );
1656         return { inflate_date => 1 } if 
1657             ( $column_name eq 'c_char_as_data' );
1658     }
1659
1660     return;
1661 }
1662
1663 sub setup_data_type_tests {
1664     my $self = shift;
1665
1666     return unless my $types = $self->{data_types};
1667
1668     my $tests = $self->{data_type_tests} = {};
1669     my $cols  = $tests->{columns}        = {};
1670
1671     $tests->{table_name}    = 'loader_test9999';
1672     $tests->{table_moniker} = 'LoaderTest9999';
1673
1674     my $ddl = "CREATE TABLE loader_test9999 (\n    id INTEGER NOT NULL PRIMARY KEY,\n";
1675
1676     my $test_count = 0;
1677
1678     my %seen_col_names;
1679
1680     while (my ($col_def, $expected_info) = each %$types) {
1681         (my $type_alias = $col_def) =~ s/\( ([^)]+) \)//xg;
1682
1683         my $size = $1;
1684         $size = '' unless defined $size;
1685         $size =~ s/\s+//g;
1686         my @size = split /,/, $size;
1687
1688         # some DBs don't like very long column names
1689         if ($self->{vendor} =~ /^(?:firebird|sqlanywhere|oracle)\z/i) {
1690             my ($col_def, $default) = $type_alias =~ /^(.*)(default.*)?\z/i;
1691
1692             $type_alias = substr $col_def, 0, 15;
1693
1694             $type_alias .= '_with_dflt' if $default;
1695         }
1696
1697         $type_alias =~ s/\s/_/g;
1698         $type_alias =~ s/\W//g;
1699
1700         my $col_name = 'col_' . $type_alias;
1701         
1702         if (@size) {
1703             my $size_name = join '_', apply { s/\W//g } @size;
1704
1705             $col_name .= "_sz_$size_name";
1706         }
1707
1708         # XXX would be better to check _loader->preserve_case
1709         $col_name = lc $col_name;
1710
1711         $col_name .= '_' . $seen_col_names{$col_name} if $seen_col_names{$col_name}++;
1712
1713         $ddl .= "    $col_name $col_def,\n";
1714
1715         $cols->{$col_name} = $expected_info;
1716
1717         $test_count++;
1718     }
1719
1720     $ddl =~ s/,\n\z/\n)/;
1721
1722     $tests->{ddl}        = $ddl;
1723     $tests->{test_count} = $test_count;
1724
1725     return $test_count;
1726 }
1727
1728 sub DESTROY {
1729     my $self = shift;
1730     unless ($ENV{SCHEMA_LOADER_TESTS_NOCLEANUP}) {
1731         $self->drop_tables if $self->{_created};
1732         rmtree $DUMP_DIR
1733     }
1734 }
1735
1736 1;
1737 # vim:et sts=4 sw=4 tw=0: