overrides for data_type tests to split into multiple tables
[dbsrgits/DBIx-Class-Schema-Loader.git] / t / lib / dbixcsl_common_tests.pm
1 package dbixcsl_common_tests;
2
3 use strict;
4 use warnings;
5
6 use Test::More;
7 use Test::Exception;
8 use DBIx::Class::Schema::Loader;
9 use Class::Unload;
10 use File::Path;
11 use DBI;
12 use Digest::MD5;
13 use File::Find 'find';
14 use Class::Unload ();
15 use Data::Dumper::Concise;
16 use List::MoreUtils 'apply';
17
18 my $DUMP_DIR = './t/_common_dump';
19 rmtree $DUMP_DIR;
20
21 sub new {
22     my $class = shift;
23
24     my $self;
25
26     if( ref($_[0]) eq 'HASH') {
27        my $args = shift;
28        $self = { (%$args) };
29     }
30     else {
31        $self = { @_ };
32     }
33
34     # Only MySQL uses this
35     $self->{innodb} ||= '';
36
37     # DB2 and Firebird don't support 'field type NULL'
38     $self->{null} = 'NULL' unless defined $self->{null};
39     
40     $self->{verbose} = $ENV{TEST_VERBOSE} || 0;
41
42     # Optional extra tables and tests
43     $self->{extra} ||= {};
44
45     $self->{date_datatype} ||= 'DATE';
46
47     # Not all DBS do SQL-standard CURRENT_TIMESTAMP
48     $self->{default_function} ||= "current_timestamp";
49     $self->{default_function_def} ||= "timestamp default $self->{default_function}";
50
51     $self = bless $self, $class;
52
53     $self->setup_data_type_tests;
54
55     return $self;
56 }
57
58 sub skip_tests {
59     my ($self, $why) = @_;
60
61     plan skip_all => $why;
62 }
63
64 sub _monikerize {
65     my $name = shift;
66     return 'LoaderTest2X' if $name =~ /^loader_test2$/i;
67     return undef;
68 }
69
70 sub run_tests {
71     my $self = shift;
72
73     my @connect_info;
74
75     if ($self->{dsn}) {
76         push @connect_info, [ @{$self}{qw/dsn user password connect_info_opts/ } ];
77     }
78     else {
79         foreach my $info (@{ $self->{connect_info} || [] }) {
80             push @connect_info, [ @{$info}{qw/dsn user password connect_info_opts/ } ];
81         }
82     }
83     
84     if ($ENV{SCHEMA_LOADER_TESTS_EXTRA_ONLY}) {
85         $self->run_only_extra_tests(\@connect_info);
86         return;
87     }
88
89     my $extra_count = $self->{extra}{count} || 0;
90
91     plan tests => @connect_info * (178 + $extra_count + ($self->{data_type_tests}{test_count} || 0));
92
93     foreach my $info_idx (0..$#connect_info) {
94         my $info = $connect_info[$info_idx];
95
96         @{$self}{qw/dsn user password connect_info_opts/} = @$info;
97
98         $self->create();
99
100         my $schema_class = $self->setup_schema($info);
101         $self->test_schema($schema_class);
102
103         rmtree $DUMP_DIR
104             unless $ENV{SCHEMA_LOADER_TESTS_NOCLEANUP} && $info_idx == $#connect_info;
105     }
106 }
107
108 sub run_only_extra_tests {
109     my ($self, $connect_info) = @_;
110
111     plan tests => @$connect_info * (4 + ($self->{extra}{count} || 0) + ($self->{data_type_tests}{test_count} || 0));
112
113     rmtree $DUMP_DIR;
114
115     foreach my $info_idx (0..$#$connect_info) {
116         my $info = $connect_info->[$info_idx];
117
118         @{$self}{qw/dsn user password connect_info_opts/} = @$info;
119
120         $self->drop_extra_tables_only;
121
122         my $dbh = $self->dbconnect(1);
123         {
124             # Silence annoying but harmless postgres "NOTICE:  CREATE TABLE..."
125             local $SIG{__WARN__} = sub {
126                 my $msg = shift;
127                 warn $msg unless $msg =~ m{^NOTICE:\s+CREATE TABLE};
128             };
129
130
131             $dbh->do($_) for @{ $self->{extra}{create} || [] };
132             $dbh->do($_) for @{ $self->{data_type_tests}{ddl} || []};
133         }
134         $self->{_created} = 1;
135
136         my $file_count = grep /CREATE (?:TABLE|VIEW)/i, @{ $self->{extra}{create} || [] };
137         $file_count++; # schema
138         $file_count++ if $self->{data_type_tests}{ddl};
139
140         my $schema_class = $self->setup_schema($info, $file_count);
141         my ($monikers, $classes) = $self->monikers_and_classes($schema_class);
142         my $conn = $schema_class->clone;
143
144         $self->test_data_types($conn);
145         $self->{extra}{run}->($conn, $monikers, $classes) if $self->{extra}{run};
146
147         if (not ($ENV{SCHEMA_LOADER_TESTS_NOCLEANUP} && $info_idx == $#$connect_info)) {
148             $self->drop_extra_tables_only;
149             rmtree $DUMP_DIR;
150         }
151     }
152 }
153
154 sub drop_extra_tables_only {
155     my $self = shift;
156
157     my $dbh = $self->dbconnect(0);
158     $dbh->do($_) for @{ $self->{extra}{pre_drop_ddl} || [] };
159     $dbh->do("DROP TABLE $_") for @{ $self->{extra}{drop} || [] };
160
161     foreach my $data_type_table (@{ $self->{data_type_tests}{table_names} || [] }) {
162         $dbh->do("DROP TABLE $data_type_table");
163     }
164 }
165
166 # defined in sub create
167 my (@statements, @statements_reltests, @statements_advanced,
168     @statements_advanced_sqlite, @statements_inline_rels,
169     @statements_implicit_rels);
170
171 sub setup_schema {
172     my ($self, $connect_info, $expected_count) = @_;
173
174     my $schema_class = 'DBIXCSL_Test::Schema';
175
176     my $debug = ($self->{verbose} > 1) ? 1 : 0;
177
178     my %loader_opts = (
179         constraint              =>
180             qr/^(?:\S+\.)?(?:(?:$self->{vendor}|extra)_)?loader_test[0-9]+(?!.*_)/i,
181         relationships           => 1,
182         additional_classes      => 'TestAdditional',
183         additional_base_classes => 'TestAdditionalBase',
184         left_base_classes       => [ qw/TestLeftBase/ ],
185         components              => [ qw/TestComponent/ ],
186         resultset_components    => [ qw/TestRSComponent/ ],
187         inflect_plural          => { loader_test4 => 'loader_test4zes' },
188         inflect_singular        => { fkid => 'fkid_singular' },
189         moniker_map             => \&_monikerize,
190         custom_column_info      => \&_custom_column_info,
191         debug                   => $debug,
192         use_namespaces          => 0,
193         dump_directory          => $DUMP_DIR,
194         datetime_timezone       => 'Europe/Berlin',
195         datetime_locale         => 'de_DE',
196         %{ $self->{loader_options} || {} },
197     );
198
199     $loader_opts{db_schema} = $self->{db_schema} if $self->{db_schema};
200
201     Class::Unload->unload($schema_class);
202
203     my $file_count;
204     {
205         my @loader_warnings;
206         local $SIG{__WARN__} = sub { push(@loader_warnings, $_[0]); };
207          eval qq{
208              package $schema_class;
209              use base qw/DBIx::Class::Schema::Loader/;
210      
211              __PACKAGE__->loader_options(\%loader_opts);
212              __PACKAGE__->connection(\@\$connect_info);
213          };
214  
215         ok(!$@, "Loader initialization") or diag $@;
216
217         find sub { return if -d; $file_count++ }, $DUMP_DIR;
218
219         my $standard_sources = not defined $expected_count;
220
221         if ($standard_sources) {
222             $expected_count = 36 + ($self->{data_type_tests}{test_count} ? 1 : 0);
223
224             $expected_count += grep /CREATE (?:TABLE|VIEW)/i,
225                 @{ $self->{extra}{create} || [] };
226      
227             $expected_count -= grep /CREATE TABLE/, @statements_inline_rels
228                 if $self->{skip_rels} || $self->{no_inline_rels};
229      
230             $expected_count -= grep /CREATE TABLE/, @statements_implicit_rels
231                 if $self->{skip_rels} || $self->{no_implicit_rels};
232      
233             $expected_count -= grep /CREATE TABLE/, ($self->{vendor} =~ /sqlite/ ? @statements_advanced_sqlite : @statements_advanced), @statements_reltests
234                 if $self->{skip_rels};
235         }
236  
237         is $file_count, $expected_count, 'correct number of files generated';
238  
239         my $warn_count = 2;
240         $warn_count++ if grep /ResultSetManager/, @loader_warnings;
241  
242         $warn_count++ for grep /^Bad table or view/, @loader_warnings;
243  
244         $warn_count++ for grep /renaming \S+ relation/, @loader_warnings;
245  
246         $warn_count++ for grep /\b(?!loader_test9)\w+ has no primary key/i, @loader_warnings;
247
248         if ($standard_sources) {
249             if($self->{skip_rels}) {
250                 SKIP: {
251                     is(scalar(@loader_warnings), $warn_count, "No loader warnings")
252                         or diag @loader_warnings;
253                     skip "No missing PK warnings without rels", 1;
254                 }
255             }
256             else {
257                 $warn_count++;
258                 is(scalar(@loader_warnings), $warn_count, "Expected loader warning")
259                     or diag @loader_warnings;
260                 is(grep(/loader_test9 has no primary key/i, @loader_warnings), 1,
261                      "Missing PK warning");
262             }
263         }
264         else {
265             SKIP: {
266                 is scalar(@loader_warnings), $warn_count, 'Correct number of warnings'
267                     or diag @loader_warnings;
268                 skip "not testing standard sources", 1;
269             }
270         }
271     }
272
273     exit if $file_count != $expected_count;
274    
275     return $schema_class;
276 }
277
278 sub test_schema {
279     my $self = shift;
280     my $schema_class = shift;
281
282     my $conn = $schema_class->clone;
283
284     ($self->{before_tests_run} || sub {})->($conn);
285
286     my ($monikers, $classes) = $self->monikers_and_classes($schema_class);
287
288     my $moniker1 = $monikers->{loader_test1s};
289     my $class1   = $classes->{loader_test1s};
290     my $rsobj1   = $conn->resultset($moniker1);
291     check_no_duplicate_unique_constraints($class1);
292
293     my $moniker2 = $monikers->{loader_test2};
294     my $class2   = $classes->{loader_test2};
295     my $rsobj2   = $conn->resultset($moniker2);
296     check_no_duplicate_unique_constraints($class2);
297
298     my $moniker23 = $monikers->{LOADER_test23} || $monikers->{loader_test23};
299     my $class23   = $classes->{LOADER_test23}  || $classes->{loader_test23};
300     my $rsobj23   = $conn->resultset($moniker1);
301
302     my $moniker24 = $monikers->{LoAdEr_test24} || $monikers->{loader_test24};
303     my $class24   = $classes->{LoAdEr_test24}  || $classes->{loader_test24};
304     my $rsobj24   = $conn->resultset($moniker2);
305
306     my $moniker35 = $monikers->{loader_test35};
307     my $class35   = $classes->{loader_test35};
308     my $rsobj35   = $conn->resultset($moniker35);
309
310     isa_ok( $rsobj1, "DBIx::Class::ResultSet" );
311     isa_ok( $rsobj2, "DBIx::Class::ResultSet" );
312     isa_ok( $rsobj23, "DBIx::Class::ResultSet" );
313     isa_ok( $rsobj24, "DBIx::Class::ResultSet" );
314     isa_ok( $rsobj35, "DBIx::Class::ResultSet" );
315
316     my @columns_lt2 = $class2->columns;
317     is_deeply( \@columns_lt2, [ qw/id dat dat2 set_primary_key dbix_class_testcomponent/ ], "Column Ordering" );
318
319     is $class2->column_info('set_primary_key')->{accessor}, undef,
320         'accessor for column name that conflicts with a result base class method removed';
321
322     is $class2->column_info('dbix_class_testcomponent')->{accessor}, undef,
323         'accessor for column name that conflicts with a component class method removed';
324
325     my %uniq1 = $class1->unique_constraints;
326     my $uniq1_test = 0;
327     foreach my $ucname (keys %uniq1) {
328         my $cols_arrayref = $uniq1{$ucname};
329         if(@$cols_arrayref == 1 && $cols_arrayref->[0] eq 'dat') {
330            $uniq1_test = 1;
331            last;
332         }
333     }
334     ok($uniq1_test, "Unique constraint");
335
336     is($moniker1, 'LoaderTest1', 'moniker singularisation');
337
338     my %uniq2 = $class2->unique_constraints;
339     my $uniq2_test = 0;
340     foreach my $ucname (keys %uniq2) {
341         my $cols_arrayref = $uniq2{$ucname};
342         if(@$cols_arrayref == 2
343            && $cols_arrayref->[0] eq 'dat2'
344            && $cols_arrayref->[1] eq 'dat') {
345             $uniq2_test = 2;
346             last;
347         }
348     }
349     ok($uniq2_test, "Multi-col unique constraint");
350
351     is($moniker2, 'LoaderTest2X', "moniker_map testing");
352
353     SKIP: {
354         can_ok( $class1, 'test_additional_base' )
355             or skip "Pre-requisite test failed", 1;
356         is( $class1->test_additional_base, "test_additional_base",
357             "Additional Base method" );
358     }
359
360     SKIP: {
361         can_ok( $class1, 'test_additional_base_override' )
362             or skip "Pre-requisite test failed", 1;
363         is( $class1->test_additional_base_override,
364             "test_left_base_override",
365             "Left Base overrides Additional Base method" );
366     }
367
368     SKIP: {
369         can_ok( $class1, 'test_additional_base_additional' )
370             or skip "Pre-requisite test failed", 1;
371         is( $class1->test_additional_base_additional, "test_additional",
372             "Additional Base can use Additional package method" );
373     }
374
375     SKIP: {
376         can_ok( $class1, 'dbix_class_testcomponent' )
377             or skip "Pre-requisite test failed", 1;
378         is( $class1->dbix_class_testcomponent,
379             'dbix_class_testcomponent works',
380             'Additional Component' );
381     }
382
383     SKIP: {
384         can_ok($rsobj1, 'dbix_class_testrscomponent')
385             or skip "Pre-requisite test failed", 1;
386         is( $rsobj1->dbix_class_testrscomponent,
387             'dbix_class_testrscomponent works',
388             'ResultSet component' );
389     }
390
391     SKIP: {
392         can_ok( $class1, 'loader_test1_classmeth' )
393             or skip "Pre-requisite test failed", 1;
394         is( $class1->loader_test1_classmeth, 'all is well', 'Class method' );
395     }
396
397     SKIP: {
398         can_ok( $rsobj1, 'loader_test1_rsmeth' )
399             or skip "Pre-requisite test failed";
400         is( $rsobj1->loader_test1_rsmeth, 'all is still well', 'Result set method' );
401     }
402     
403     ok( $class1->column_info('id')->{is_auto_increment}, 'is_auto_increment detection' );
404
405     my $obj    = $rsobj1->find(1);
406     is( $obj->id,  1, "Find got the right row" );
407     is( $obj->dat, "foo", "Column value" );
408     is( $rsobj2->count, 4, "Count" );
409     my $saved_id;
410     eval {
411         my $new_obj1 = $rsobj1->create({ dat => 'newthing' });
412         $saved_id = $new_obj1->id;
413     };
414     ok(!$@, "Inserting new record using a PK::Auto key didn't die") or diag $@;
415     ok($saved_id, "Got PK::Auto-generated id");
416
417     my $new_obj1 = $rsobj1->search({ dat => 'newthing' })->first;
418     ok($new_obj1, "Found newly inserted PK::Auto record");
419     is($new_obj1->id, $saved_id, "Correct PK::Auto-generated id");
420
421     my ($obj2) = $rsobj2->search({ dat => 'bbb' })->first;
422     is( $obj2->id, 2 );
423
424     is(
425         $class35->column_info('a_varchar')->{default_value}, 'foo',
426         'constant character default',
427     );
428
429     is(
430         $class35->column_info('an_int')->{default_value}, 42,
431         'constant integer default',
432     );
433
434     cmp_ok(
435         $class35->column_info('a_double')->{default_value}, '==', 10.555,
436         'constant numeric default',
437     );
438
439     my $function_default = $class35->column_info('a_function')->{default_value};
440
441     isa_ok( $function_default, 'SCALAR', 'default_value for function default' );
442     is_deeply(
443         $function_default, \$self->{default_function},
444         'default_value for function default is correct'
445     );
446
447     SKIP: {
448         skip $self->{skip_rels}, 116 if $self->{skip_rels};
449
450         my $moniker3 = $monikers->{loader_test3};
451         my $class3   = $classes->{loader_test3};
452         my $rsobj3   = $conn->resultset($moniker3);
453
454         my $moniker4 = $monikers->{loader_test4};
455         my $class4   = $classes->{loader_test4};
456         my $rsobj4   = $conn->resultset($moniker4);
457
458         my $moniker5 = $monikers->{loader_test5};
459         my $class5   = $classes->{loader_test5};
460         my $rsobj5   = $conn->resultset($moniker5);
461
462         my $moniker6 = $monikers->{loader_test6};
463         my $class6   = $classes->{loader_test6};
464         my $rsobj6   = $conn->resultset($moniker6);
465
466         my $moniker7 = $monikers->{loader_test7};
467         my $class7   = $classes->{loader_test7};
468         my $rsobj7   = $conn->resultset($moniker7);
469
470         my $moniker8 = $monikers->{loader_test8};
471         my $class8   = $classes->{loader_test8};
472         my $rsobj8   = $conn->resultset($moniker8);
473
474         my $moniker9 = $monikers->{loader_test9};
475         my $class9   = $classes->{loader_test9};
476         my $rsobj9   = $conn->resultset($moniker9);
477
478         my $moniker16 = $monikers->{loader_test16};
479         my $class16   = $classes->{loader_test16};
480         my $rsobj16   = $conn->resultset($moniker16);
481
482         my $moniker17 = $monikers->{loader_test17};
483         my $class17   = $classes->{loader_test17};
484         my $rsobj17   = $conn->resultset($moniker17);
485
486         my $moniker18 = $monikers->{loader_test18};
487         my $class18   = $classes->{loader_test18};
488         my $rsobj18   = $conn->resultset($moniker18);
489
490         my $moniker19 = $monikers->{loader_test19};
491         my $class19   = $classes->{loader_test19};
492         my $rsobj19   = $conn->resultset($moniker19);
493
494         my $moniker20 = $monikers->{loader_test20};
495         my $class20   = $classes->{loader_test20};
496         my $rsobj20   = $conn->resultset($moniker20);
497
498         my $moniker21 = $monikers->{loader_test21};
499         my $class21   = $classes->{loader_test21};
500         my $rsobj21   = $conn->resultset($moniker21);
501
502         my $moniker22 = $monikers->{loader_test22};
503         my $class22   = $classes->{loader_test22};
504         my $rsobj22   = $conn->resultset($moniker22);
505
506         my $moniker25 = $monikers->{loader_test25};
507         my $class25   = $classes->{loader_test25};
508         my $rsobj25   = $conn->resultset($moniker25);
509
510         my $moniker26 = $monikers->{loader_test26};
511         my $class26   = $classes->{loader_test26};
512         my $rsobj26   = $conn->resultset($moniker26);
513
514         my $moniker27 = $monikers->{loader_test27};
515         my $class27   = $classes->{loader_test27};
516         my $rsobj27   = $conn->resultset($moniker27);
517
518         my $moniker28 = $monikers->{loader_test28};
519         my $class28   = $classes->{loader_test28};
520         my $rsobj28   = $conn->resultset($moniker28);
521
522         my $moniker29 = $monikers->{loader_test29};
523         my $class29   = $classes->{loader_test29};
524         my $rsobj29   = $conn->resultset($moniker29);
525
526         my $moniker31 = $monikers->{loader_test31};
527         my $class31   = $classes->{loader_test31};
528         my $rsobj31   = $conn->resultset($moniker31);
529
530         my $moniker32 = $monikers->{loader_test32};
531         my $class32   = $classes->{loader_test32};
532         my $rsobj32   = $conn->resultset($moniker32);
533
534         my $moniker33 = $monikers->{loader_test33};
535         my $class33   = $classes->{loader_test33};
536         my $rsobj33   = $conn->resultset($moniker33);
537
538         my $moniker34 = $monikers->{loader_test34};
539         my $class34   = $classes->{loader_test34};
540         my $rsobj34   = $conn->resultset($moniker34);
541
542         my $moniker36 = $monikers->{loader_test36};
543         my $class36   = $classes->{loader_test36};
544         my $rsobj36   = $conn->resultset($moniker36);
545         
546         isa_ok( $rsobj3, "DBIx::Class::ResultSet" );
547         isa_ok( $rsobj4, "DBIx::Class::ResultSet" );
548         isa_ok( $rsobj5, "DBIx::Class::ResultSet" );
549         isa_ok( $rsobj6, "DBIx::Class::ResultSet" );
550         isa_ok( $rsobj7, "DBIx::Class::ResultSet" );
551         isa_ok( $rsobj8, "DBIx::Class::ResultSet" );
552         isa_ok( $rsobj9, "DBIx::Class::ResultSet" );
553         isa_ok( $rsobj16, "DBIx::Class::ResultSet" );
554         isa_ok( $rsobj17, "DBIx::Class::ResultSet" );
555         isa_ok( $rsobj18, "DBIx::Class::ResultSet" );
556         isa_ok( $rsobj19, "DBIx::Class::ResultSet" );
557         isa_ok( $rsobj20, "DBIx::Class::ResultSet" );
558         isa_ok( $rsobj21, "DBIx::Class::ResultSet" );
559         isa_ok( $rsobj22, "DBIx::Class::ResultSet" );
560         isa_ok( $rsobj25, "DBIx::Class::ResultSet" );
561         isa_ok( $rsobj26, "DBIx::Class::ResultSet" );
562         isa_ok( $rsobj27, "DBIx::Class::ResultSet" );
563         isa_ok( $rsobj28, "DBIx::Class::ResultSet" );
564         isa_ok( $rsobj29, "DBIx::Class::ResultSet" );
565         isa_ok( $rsobj31, "DBIx::Class::ResultSet" );
566         isa_ok( $rsobj32, "DBIx::Class::ResultSet" );
567         isa_ok( $rsobj33, "DBIx::Class::ResultSet" );
568         isa_ok( $rsobj34, "DBIx::Class::ResultSet" );
569         isa_ok( $rsobj36, "DBIx::Class::ResultSet" );
570
571         # basic rel test
572         my $obj4 = $rsobj4->find(123);
573         isa_ok( $obj4->fkid_singular, $class3);
574
575         ok($class4->column_info('fkid')->{is_foreign_key}, 'Foreign key detected');
576
577         my $obj3 = $rsobj3->find(1);
578         my $rs_rel4 = $obj3->search_related('loader_test4zes');
579         isa_ok( $rs_rel4->first, $class4);
580
581         # check rel naming with prepositions
582         ok ($rsobj4->result_source->has_relationship('loader_test5s_to'),
583             "rel with preposition 'to' pluralized correctly");
584
585         ok ($rsobj4->result_source->has_relationship('loader_test5s_from'),
586             "rel with preposition 'from' pluralized correctly");
587
588         # check default relationship attributes
589         is $rsobj3->result_source->relationship_info('loader_test4zes')->{attrs}{cascade_delete}, 0,
590             'cascade_delete => 0 on has_many by default';
591
592         is $rsobj3->result_source->relationship_info('loader_test4zes')->{attrs}{cascade_copy}, 0,
593             'cascade_copy => 0 on has_many by default';
594
595         ok ((not exists $rsobj3->result_source->relationship_info('loader_test4zes')->{attrs}{on_delete}),
596             'has_many does not have on_delete');
597
598         ok ((not exists $rsobj3->result_source->relationship_info('loader_test4zes')->{attrs}{on_update}),
599             'has_many does not have on_update');
600
601         ok ((not exists $rsobj3->result_source->relationship_info('loader_test4zes')->{attrs}{is_deferrable}),
602             'has_many does not have is_deferrable');
603
604         is $rsobj4->result_source->relationship_info('fkid_singular')->{attrs}{on_delete}, 'CASCADE',
605             "on_delete => 'CASCADE' on belongs_to by default";
606
607         is $rsobj4->result_source->relationship_info('fkid_singular')->{attrs}{on_update}, 'CASCADE',
608             "on_update => 'CASCADE' on belongs_to by default";
609
610         ok ((not exists $rsobj4->result_source->relationship_info('fkid_singular')->{attrs}{is_deferrable}),
611             "is_deferrable => 1 not on belongs_to by default");
612
613         ok ((not exists $rsobj4->result_source->relationship_info('fkid_singular')->{attrs}{cascade_delete}),
614             'belongs_to does not have cascade_delete');
615
616         ok ((not exists $rsobj4->result_source->relationship_info('fkid_singular')->{attrs}{cascade_copy}),
617             'belongs_to does not have cascade_copy');
618
619         is $rsobj27->result_source->relationship_info('loader_test28')->{attrs}{cascade_delete}, 0,
620             'cascade_delete => 0 on might_have by default';
621
622         is $rsobj27->result_source->relationship_info('loader_test28')->{attrs}{cascade_copy}, 0,
623             'cascade_copy => 0 on might_have by default';
624
625         ok ((not exists $rsobj27->result_source->relationship_info('loader_test28')->{attrs}{on_delete}),
626             'might_have does not have on_delete');
627
628         ok ((not exists $rsobj27->result_source->relationship_info('loader_test28')->{attrs}{on_update}),
629             'might_have does not have on_update');
630
631         ok ((not exists $rsobj27->result_source->relationship_info('loader_test28')->{attrs}{is_deferrable}),
632             'might_have does not have is_deferrable');
633
634         # find on multi-col pk
635         my $obj5 = 
636             eval { $rsobj5->find({id1 => 1, iD2 => 1}) } ||
637             eval { $rsobj5->find({id1 => 1, id2 => 1}) };
638         die $@ if $@;
639
640         is( (eval { $obj5->id2 } || eval { $obj5->i_d2 }), 1, "Find on multi-col PK" );
641
642         # mulit-col fk def
643         my $obj6 = $rsobj6->find(1);
644         isa_ok( $obj6->loader_test2, $class2);
645         isa_ok( $obj6->loader_test5, $class5);
646
647         ok($class6->column_info('loader_test2_id')->{is_foreign_key}, 'Foreign key detected');
648         ok($class6->column_info('id')->{is_foreign_key}, 'Foreign key detected');
649
650         my $id2_info = eval { $class6->column_info('id2') } ||
651                         $class6->column_info('Id2');
652         ok($id2_info->{is_foreign_key}, 'Foreign key detected');
653
654         # fk that references a non-pk key (UNIQUE)
655         my $obj8 = $rsobj8->find(1);
656         isa_ok( $obj8->loader_test7, $class7);
657
658         ok($class8->column_info('loader_test7')->{is_foreign_key}, 'Foreign key detected');
659
660         # test double-fk 17 ->-> 16
661         my $obj17 = $rsobj17->find(33);
662
663         my $rs_rel16_one = $obj17->loader16_one;
664         isa_ok($rs_rel16_one, $class16);
665         is($rs_rel16_one->dat, 'y16', "Multiple FKs to same table");
666
667         ok($class17->column_info('loader16_one')->{is_foreign_key}, 'Foreign key detected');
668
669         my $rs_rel16_two = $obj17->loader16_two;
670         isa_ok($rs_rel16_two, $class16);
671         is($rs_rel16_two->dat, 'z16', "Multiple FKs to same table");
672
673         ok($class17->column_info('loader16_two')->{is_foreign_key}, 'Foreign key detected');
674
675         my $obj16 = $rsobj16->find(2);
676         my $rs_rel17 = $obj16->search_related('loader_test17_loader16_ones');
677         isa_ok($rs_rel17->first, $class17);
678         is($rs_rel17->first->id, 3, "search_related with multiple FKs from same table");
679         
680         # XXX test m:m 18 <- 20 -> 19
681         ok($class20->column_info('parent')->{is_foreign_key}, 'Foreign key detected');
682         ok($class20->column_info('child')->{is_foreign_key}, 'Foreign key detected');
683         
684         # XXX test double-fk m:m 21 <- 22 -> 21
685         ok($class22->column_info('parent')->{is_foreign_key}, 'Foreign key detected');
686         ok($class22->column_info('child')->{is_foreign_key}, 'Foreign key detected');
687
688         # test double multi-col fk 26 -> 25
689         my $obj26 = $rsobj26->find(33);
690
691         my $rs_rel25_one = $obj26->loader_test25_id_rel1;
692         isa_ok($rs_rel25_one, $class25);
693         is($rs_rel25_one->dat, 'x25', "Multiple multi-col FKs to same table");
694
695         ok($class26->column_info('id')->{is_foreign_key}, 'Foreign key detected');
696         ok($class26->column_info('rel1')->{is_foreign_key}, 'Foreign key detected');
697         ok($class26->column_info('rel2')->{is_foreign_key}, 'Foreign key detected');
698
699         my $rs_rel25_two = $obj26->loader_test25_id_rel2;
700         isa_ok($rs_rel25_two, $class25);
701         is($rs_rel25_two->dat, 'y25', "Multiple multi-col FKs to same table");
702
703         my $obj25 = $rsobj25->find(3,42);
704         my $rs_rel26 = $obj25->search_related('loader_test26_id_rel1s');
705         isa_ok($rs_rel26->first, $class26);
706         is($rs_rel26->first->id, 3, "search_related with multiple multi-col FKs from same table");
707
708         # test one-to-one rels
709         my $obj27 = $rsobj27->find(1);
710         my $obj28 = $obj27->loader_test28;
711         isa_ok($obj28, $class28);
712         is($obj28->get_column('id'), 1, "One-to-one relationship with PRIMARY FK");
713
714         ok($class28->column_info('id')->{is_foreign_key}, 'Foreign key detected');
715
716         my $obj29 = $obj27->loader_test29;
717         isa_ok($obj29, $class29);
718         is($obj29->id, 1, "One-to-one relationship with UNIQUE FK");
719
720         ok($class29->column_info('fk')->{is_foreign_key}, 'Foreign key detected');
721
722         $obj27 = $rsobj27->find(2);
723         is($obj27->loader_test28, undef, "Undef for missing one-to-one row");
724         is($obj27->loader_test29, undef, "Undef for missing one-to-one row");
725
726         # test outer join for nullable referring columns:
727         is $class32->column_info('rel2')->{is_nullable}, 1,
728           'is_nullable detection';
729
730         ok($class32->column_info('rel1')->{is_foreign_key}, 'Foreign key detected');
731         ok($class32->column_info('rel2')->{is_foreign_key}, 'Foreign key detected');
732         
733         my $obj32 = $rsobj32->find(1,{prefetch=>[qw/rel1 rel2/]});
734         my $obj34 = $rsobj34->find(
735           1,{prefetch=>[qw/loader_test33_id_rel1 loader_test33_id_rel2/]}
736         );
737         isa_ok($obj32,$class32);
738         isa_ok($obj34,$class34);
739
740         ok($class34->column_info('id')->{is_foreign_key}, 'Foreign key detected');
741         ok($class34->column_info('rel1')->{is_foreign_key}, 'Foreign key detected');
742         ok($class34->column_info('rel2')->{is_foreign_key}, 'Foreign key detected');
743
744         my $rs_rel31_one = $obj32->rel1;
745         my $rs_rel31_two = $obj32->rel2;
746         isa_ok($rs_rel31_one, $class31);
747         is($rs_rel31_two, undef);
748
749         my $rs_rel33_one = $obj34->loader_test33_id_rel1;
750         my $rs_rel33_two = $obj34->loader_test33_id_rel2;
751
752         isa_ok($rs_rel33_one,$class33);
753         is($rs_rel33_two, undef);
754
755         # from Chisel's tests...
756         my $moniker10 = $monikers->{loader_test10};
757         my $class10   = $classes->{loader_test10};
758         my $rsobj10   = $conn->resultset($moniker10);
759
760         my $moniker11 = $monikers->{loader_test11};
761         my $class11   = $classes->{loader_test11};
762         my $rsobj11   = $conn->resultset($moniker11);
763
764         isa_ok( $rsobj10, "DBIx::Class::ResultSet" );
765         isa_ok( $rsobj11, "DBIx::Class::ResultSet" );
766
767         ok($class10->column_info('loader_test11')->{is_foreign_key}, 'Foreign key detected');
768         ok($class11->column_info('loader_test10')->{is_foreign_key}, 'Foreign key detected');
769
770         my $obj10 = $rsobj10->create({ subject => 'xyzzy' });
771
772         $obj10->update();
773         ok( defined $obj10, 'Create row' );
774
775         my $obj11 = $rsobj11->create({ loader_test10 => $obj10->id() });
776         $obj11->update();
777         ok( defined $obj11, 'Create related row' );
778
779         eval {
780             my $obj10_2 = $obj11->loader_test10;
781             $obj10_2->update({ loader_test11 => $obj11->id11 });
782         };
783         diag $@ if $@;
784         ok(!$@, "Setting up circular relationship");
785
786         SKIP: {
787             skip 'Previous eval block failed', 3 if $@;
788     
789             my $results = $rsobj10->search({ subject => 'xyzzy' });
790             is( $results->count(), 1, 'No duplicate row created' );
791
792             my $obj10_3 = $results->first();
793             isa_ok( $obj10_3, $class10 );
794             is( $obj10_3->loader_test11()->id(), $obj11->id(),
795                 'Circular rel leads back to same row' );
796         }
797
798         SKIP: {
799             skip 'This vendor cannot do inline relationship definitions', 9
800                 if $self->{no_inline_rels};
801
802             my $moniker12 = $monikers->{loader_test12};
803             my $class12   = $classes->{loader_test12};
804             my $rsobj12   = $conn->resultset($moniker12);
805
806             my $moniker13 = $monikers->{loader_test13};
807             my $class13   = $classes->{loader_test13};
808             my $rsobj13   = $conn->resultset($moniker13);
809
810             isa_ok( $rsobj12, "DBIx::Class::ResultSet" ); 
811             isa_ok( $rsobj13, "DBIx::Class::ResultSet" );
812
813             ok($class13->column_info('id')->{is_foreign_key}, 'Foreign key detected');
814             ok($class13->column_info('loader_test12')->{is_foreign_key}, 'Foreign key detected');
815             ok($class13->column_info('dat')->{is_foreign_key}, 'Foreign key detected');
816
817             my $obj13 = $rsobj13->find(1);
818             isa_ok( $obj13->id, $class12 );
819             isa_ok( $obj13->loader_test12, $class12);
820             isa_ok( $obj13->dat, $class12);
821
822             my $obj12 = $rsobj12->find(1);
823             isa_ok( $obj12->loader_test13, $class13 );
824         }
825
826         SKIP: {
827             skip 'This vendor cannot do out-of-line implicit rel defs', 4
828                 if $self->{no_implicit_rels};
829             my $moniker14 = $monikers->{loader_test14};
830             my $class14   = $classes->{loader_test14};
831             my $rsobj14   = $conn->resultset($moniker14);
832
833             my $moniker15 = $monikers->{loader_test15};
834             my $class15   = $classes->{loader_test15};
835             my $rsobj15   = $conn->resultset($moniker15);
836
837             isa_ok( $rsobj14, "DBIx::Class::ResultSet" ); 
838             isa_ok( $rsobj15, "DBIx::Class::ResultSet" );
839
840             ok($class15->column_info('loader_test14')->{is_foreign_key}, 'Foreign key detected');
841
842             my $obj15 = $rsobj15->find(1);
843             isa_ok( $obj15->loader_test14, $class14 );
844         }
845     }
846
847     # test custom_column_info and datetime_timezone/datetime_locale
848     {
849         my $class35 = $classes->{loader_test35};
850         my $class36 = $classes->{loader_test36};
851
852         ok($class35->column_info('an_int')->{is_numeric}, 'custom_column_info');
853
854         is($class36->column_info('a_date')->{locale},'de_DE','datetime_locale');
855         is($class36->column_info('a_date')->{timezone},'Europe/Berlin','datetime_timezone');
856
857         ok($class36->column_info('b_char_as_data')->{inflate_datetime},'custom_column_info');
858         is($class36->column_info('b_char_as_data')->{locale},'de_DE','datetime_locale');
859         is($class36->column_info('b_char_as_data')->{timezone},'Europe/Berlin','datetime_timezone');
860
861         ok($class36->column_info('c_char_as_data')->{inflate_date},'custom_column_info');
862         is($class36->column_info('c_char_as_data')->{locale},'de_DE','datetime_locale');
863         is($class36->column_info('c_char_as_data')->{timezone},'Europe/Berlin','datetime_timezone');
864     }
865
866     # rescan and norewrite test
867     {
868         my @statements_rescan = (
869             qq{
870                 CREATE TABLE loader_test30 (
871                     id INTEGER NOT NULL PRIMARY KEY,
872                     loader_test2 INTEGER NOT NULL,
873                     FOREIGN KEY (loader_test2) REFERENCES loader_test2 (id)
874                 ) $self->{innodb}
875             },
876             q{ INSERT INTO loader_test30 (id,loader_test2) VALUES(123, 1) },
877             q{ INSERT INTO loader_test30 (id,loader_test2) VALUES(321, 2) },
878         );
879
880         # get md5
881         my $digest  = Digest::MD5->new;
882
883         my $find_cb = sub {
884             return if -d;
885             return if $_ eq 'LoaderTest30.pm';
886
887             open my $fh, '<', $_ or die "Could not open $_ for reading: $!";
888             binmode $fh;
889             $digest->addfile($fh);
890         };
891
892         find $find_cb, $DUMP_DIR;
893
894         my $before_digest = $digest->digest;
895
896         $conn->storage->disconnect; # needed for Firebird and Informix
897         my $dbh = $self->dbconnect(1);
898
899         {
900             # Silence annoying but harmless postgres "NOTICE:  CREATE TABLE..."
901             local $SIG{__WARN__} = sub {
902                 my $msg = shift;
903                 warn $msg unless $msg =~ m{^NOTICE:\s+CREATE TABLE};
904             };
905
906             $dbh->do($_) for @statements_rescan;
907         }
908
909         $dbh->disconnect;
910
911         sleep 1;
912
913         my @new = do {
914             # kill the 'Dumping manual schema' warnings
915             local $SIG{__WARN__} = sub {};
916             $conn->rescan;
917         };
918         is_deeply(\@new, [ qw/LoaderTest30/ ], "Rescan");
919
920         $digest = Digest::MD5->new;
921         find $find_cb, $DUMP_DIR;
922         my $after_digest = $digest->digest;
923
924         is $before_digest, $after_digest,
925             'dumped files are not rewritten when there is no modification';
926
927         my $rsobj30   = $conn->resultset('LoaderTest30');
928         isa_ok($rsobj30, 'DBIx::Class::ResultSet');
929
930         SKIP: {
931             skip 'no rels', 2 if $self->{skip_rels};
932
933             my $obj30 = $rsobj30->find(123);
934             isa_ok( $obj30->loader_test2, $class2);
935
936             ok($rsobj30->result_source->column_info('loader_test2')->{is_foreign_key},
937                'Foreign key detected');
938         }
939
940         $conn->storage->disconnect; # for Firebird
941         $conn->storage->dbh->do("DROP TABLE loader_test30");
942
943         @new = do {
944             local $SIG{__WARN__} = sub {};
945             $conn->rescan;
946         };
947         is_deeply(\@new, [], 'no new tables on rescan');
948
949         throws_ok { $conn->resultset('LoaderTest30') }
950             qr/Can't find source/,
951             'source unregistered for dropped table after rescan';
952     }
953
954     $self->test_data_types($conn);
955
956     # run extra tests
957     $self->{extra}{run}->($conn, $monikers, $classes) if $self->{extra}{run};
958
959     $self->drop_tables unless $ENV{SCHEMA_LOADER_TESTS_NOCLEANUP};
960
961     $conn->storage->disconnect;
962 }
963
964 sub test_data_types {
965     my ($self, $conn) = @_;
966
967     if ($self->{data_type_tests}{test_count}) {
968         my $data_type_tests = $self->{data_type_tests};
969
970         foreach my $moniker (@{ $data_type_tests->{table_monikers} }) {
971             my $columns = $data_type_tests->{columns}{$moniker};
972
973             my $rsrc = $conn->resultset($moniker)->result_source;
974
975             while (my ($col_name, $expected_info) = each %$columns) {
976                 my %info = %{ $rsrc->column_info($col_name) };
977                 delete @info{qw/is_nullable timezone locale sequence/};
978
979                 my $text_col_def = do {
980                     my $dd = Dumper;
981                     $dd->Indent(0);
982                     $dd->Values([\%info]);
983                     $dd->Dump;
984                 };
985
986                 my $text_expected_info = do {
987                     my $dd = Dumper;
988                     $dd->Indent(0);
989                     $dd->Values([$expected_info]);
990                     $dd->Dump;
991                 };
992
993                 is_deeply \%info, $expected_info,
994                     "test column $col_name has definition: $text_col_def expecting: $text_expected_info";
995             }
996         }
997     }
998 }
999
1000 sub monikers_and_classes {
1001     my ($self, $schema_class) = @_;
1002     my ($monikers, $classes);
1003
1004     foreach my $source_name ($schema_class->sources) {
1005         my $table_name = $schema_class->source($source_name)->from;
1006
1007         $table_name = $$table_name if ref $table_name;
1008
1009         $monikers->{$table_name} = $source_name;
1010         $classes->{$table_name} = $schema_class . q{::} . $source_name;
1011
1012         # some DBs (Firebird) uppercase everything
1013         $monikers->{lc $table_name} = $source_name;
1014         $classes->{lc $table_name} = $schema_class . q{::} . $source_name;
1015     }
1016
1017     return ($monikers, $classes);
1018 }
1019
1020 sub check_no_duplicate_unique_constraints {
1021     my ($class) = @_;
1022
1023     # unique_constraints() automatically includes the PK, if any
1024     my %uc_cols;
1025     ++$uc_cols{ join ", ", @$_ }
1026         for values %{ { $class->unique_constraints } };
1027     my $dup_uc = grep { $_ > 1 } values %uc_cols;
1028
1029     is($dup_uc, 0, "duplicate unique constraints ($class)")
1030         or diag "uc_cols: @{[ %uc_cols ]}";
1031 }
1032
1033 sub dbconnect {
1034     my ($self, $complain) = @_;
1035
1036     require DBIx::Class::Storage::DBI;
1037     my $storage = DBIx::Class::Storage::DBI->new;
1038
1039     $complain = defined $complain ? $complain : 1;
1040
1041     $storage->connect_info([
1042         @{ $self }{qw/dsn user password/},
1043         {
1044             unsafe => 1,
1045             RaiseError => $complain,
1046             ShowErrorStatement => $complain,
1047             PrintError => 0,
1048             %{ $self->{connect_info_opts} || {} },
1049         },
1050     ]);
1051
1052     my $dbh = eval { $storage->dbh };
1053     die "Failed to connect to database: $@" if !$dbh;
1054
1055     $self->{storage} = $storage; # storage DESTROY disconnects
1056
1057     return $dbh;
1058 }
1059
1060 sub create {
1061     my $self = shift;
1062
1063     $self->{_created} = 1;
1064
1065     my $make_auto_inc = $self->{auto_inc_cb} || sub {};
1066     @statements = (
1067         qq{
1068             CREATE TABLE loader_test1s (
1069                 id $self->{auto_inc_pk},
1070                 dat VARCHAR(32) NOT NULL UNIQUE
1071             ) $self->{innodb}
1072         },
1073         $make_auto_inc->(qw/loader_test1s id/),
1074
1075         q{ INSERT INTO loader_test1s (dat) VALUES('foo') },
1076         q{ INSERT INTO loader_test1s (dat) VALUES('bar') }, 
1077         q{ INSERT INTO loader_test1s (dat) VALUES('baz') }, 
1078
1079         # also test method collision
1080         qq{ 
1081             CREATE TABLE loader_test2 (
1082                 id $self->{auto_inc_pk},
1083                 dat VARCHAR(32) NOT NULL,
1084                 dat2 VARCHAR(32) NOT NULL,
1085                 set_primary_key INTEGER $self->{null},
1086                 dbix_class_testcomponent INTEGER $self->{null},
1087                 UNIQUE (dat2, dat)
1088             ) $self->{innodb}
1089         },
1090         $make_auto_inc->(qw/loader_test2 id/),
1091
1092         q{ INSERT INTO loader_test2 (dat, dat2) VALUES('aaa', 'zzz') }, 
1093         q{ INSERT INTO loader_test2 (dat, dat2) VALUES('bbb', 'yyy') }, 
1094         q{ INSERT INTO loader_test2 (dat, dat2) VALUES('ccc', 'xxx') }, 
1095         q{ INSERT INTO loader_test2 (dat, dat2) VALUES('ddd', 'www') }, 
1096
1097         qq{
1098             CREATE TABLE LOADER_test23 (
1099                 ID INTEGER NOT NULL PRIMARY KEY,
1100                 DAT VARCHAR(32) NOT NULL UNIQUE
1101             ) $self->{innodb}
1102         },
1103
1104         qq{
1105             CREATE TABLE LoAdEr_test24 (
1106                 iD INTEGER NOT NULL PRIMARY KEY,
1107                 DaT VARCHAR(32) NOT NULL UNIQUE
1108             ) $self->{innodb}
1109         },
1110
1111         qq{
1112             CREATE TABLE loader_test35 (
1113                 id INTEGER NOT NULL PRIMARY KEY,
1114                 a_varchar VARCHAR(100) DEFAULT 'foo',
1115                 an_int INTEGER DEFAULT 42,
1116                 a_double DOUBLE PRECISION DEFAULT 10.555,
1117                 a_function $self->{default_function_def}
1118             ) $self->{innodb}
1119         },
1120
1121         qq{
1122             CREATE TABLE loader_test36 (
1123                 id INTEGER NOT NULL PRIMARY KEY,
1124                 a_date $self->{date_datatype},
1125                 b_char_as_data VARCHAR(100),
1126                 c_char_as_data VARCHAR(100)
1127             ) $self->{innodb}
1128         },
1129     );
1130
1131     @statements_reltests = (
1132         qq{
1133             CREATE TABLE loader_test3 (
1134                 id INTEGER NOT NULL PRIMARY KEY,
1135                 dat VARCHAR(32)
1136             ) $self->{innodb}
1137         },
1138
1139         q{ INSERT INTO loader_test3 (id,dat) VALUES(1,'aaa') }, 
1140         q{ INSERT INTO loader_test3 (id,dat) VALUES(2,'bbb') }, 
1141         q{ INSERT INTO loader_test3 (id,dat) VALUES(3,'ccc') }, 
1142         q{ INSERT INTO loader_test3 (id,dat) VALUES(4,'ddd') }, 
1143
1144         qq{
1145             CREATE TABLE loader_test4 (
1146                 id INTEGER NOT NULL PRIMARY KEY,
1147                 fkid INTEGER NOT NULL,
1148                 dat VARCHAR(32),
1149                 FOREIGN KEY( fkid ) REFERENCES loader_test3 (id)
1150             ) $self->{innodb}
1151         },
1152
1153         q{ INSERT INTO loader_test4 (id,fkid,dat) VALUES(123,1,'aaa') },
1154         q{ INSERT INTO loader_test4 (id,fkid,dat) VALUES(124,2,'bbb') }, 
1155         q{ INSERT INTO loader_test4 (id,fkid,dat) VALUES(125,3,'ccc') },
1156         q{ INSERT INTO loader_test4 (id,fkid,dat) VALUES(126,4,'ddd') },
1157
1158         qq{
1159             CREATE TABLE loader_test5 (
1160                 id1 INTEGER NOT NULL,
1161                 iD2 INTEGER NOT NULL,
1162                 dat VARCHAR(8),
1163                 from_id INTEGER $self->{null},
1164                 to_id INTEGER $self->{null},
1165                 PRIMARY KEY (id1,iD2),
1166                 FOREIGN KEY (from_id) REFERENCES loader_test4 (id),
1167                 FOREIGN KEY (to_id) REFERENCES loader_test4 (id)
1168             ) $self->{innodb}
1169         },
1170
1171         q{ INSERT INTO loader_test5 (id1,iD2,dat) VALUES (1,1,'aaa') },
1172
1173         qq{
1174             CREATE TABLE loader_test6 (
1175                 id INTEGER NOT NULL PRIMARY KEY,
1176                 Id2 INTEGER,
1177                 loader_test2_id INTEGER,
1178                 dat VARCHAR(8),
1179                 FOREIGN KEY (loader_test2_id)  REFERENCES loader_test2 (id),
1180                 FOREIGN KEY(id,Id2) REFERENCES loader_test5 (id1,iD2)
1181             ) $self->{innodb}
1182         },
1183
1184         (q{ INSERT INTO loader_test6 (id, Id2,loader_test2_id,dat) } .
1185          q{ VALUES (1, 1,1,'aaa') }),
1186
1187         qq{
1188             CREATE TABLE loader_test7 (
1189                 id INTEGER NOT NULL PRIMARY KEY,
1190                 id2 VARCHAR(8) NOT NULL UNIQUE,
1191                 dat VARCHAR(8)
1192             ) $self->{innodb}
1193         },
1194
1195         q{ INSERT INTO loader_test7 (id,id2,dat) VALUES (1,'aaa','bbb') },
1196
1197         qq{
1198             CREATE TABLE loader_test8 (
1199                 id INTEGER NOT NULL PRIMARY KEY,
1200                 loader_test7 VARCHAR(8) NOT NULL,
1201                 dat VARCHAR(8),
1202                 FOREIGN KEY (loader_test7) REFERENCES loader_test7 (id2)
1203             ) $self->{innodb}
1204         },
1205
1206         (q{ INSERT INTO loader_test8 (id,loader_test7,dat) } .
1207          q{ VALUES (1,'aaa','bbb') }),
1208
1209         qq{
1210             CREATE TABLE loader_test9 (
1211                 loader_test9 VARCHAR(8) NOT NULL
1212             ) $self->{innodb}
1213         },
1214
1215         qq{
1216             CREATE TABLE loader_test16 (
1217                 id INTEGER NOT NULL PRIMARY KEY,
1218                 dat  VARCHAR(8)
1219             ) $self->{innodb}
1220         },
1221
1222         qq{ INSERT INTO loader_test16 (id,dat) VALUES (2,'x16') },
1223         qq{ INSERT INTO loader_test16 (id,dat) VALUES (4,'y16') },
1224         qq{ INSERT INTO loader_test16 (id,dat) VALUES (6,'z16') },
1225
1226         qq{
1227             CREATE TABLE loader_test17 (
1228                 id INTEGER NOT NULL PRIMARY KEY,
1229                 loader16_one INTEGER,
1230                 loader16_two INTEGER,
1231                 FOREIGN KEY (loader16_one) REFERENCES loader_test16 (id),
1232                 FOREIGN KEY (loader16_two) REFERENCES loader_test16 (id)
1233             ) $self->{innodb}
1234         },
1235
1236         qq{ INSERT INTO loader_test17 (id, loader16_one, loader16_two) VALUES (3, 2, 4) },
1237         qq{ INSERT INTO loader_test17 (id, loader16_one, loader16_two) VALUES (33, 4, 6) },
1238
1239         qq{
1240             CREATE TABLE loader_test18 (
1241                 id INTEGER NOT NULL PRIMARY KEY,
1242                 dat  VARCHAR(8)
1243             ) $self->{innodb}
1244         },
1245
1246         qq{ INSERT INTO loader_test18 (id,dat) VALUES (1,'x18') },
1247         qq{ INSERT INTO loader_test18 (id,dat) VALUES (2,'y18') },
1248         qq{ INSERT INTO loader_test18 (id,dat) VALUES (3,'z18') },
1249
1250         qq{
1251             CREATE TABLE loader_test19 (
1252                 id INTEGER NOT NULL PRIMARY KEY,
1253                 dat  VARCHAR(8)
1254             ) $self->{innodb}
1255         },
1256
1257         qq{ INSERT INTO loader_test19 (id,dat) VALUES (4,'x19') },
1258         qq{ INSERT INTO loader_test19 (id,dat) VALUES (5,'y19') },
1259         qq{ INSERT INTO loader_test19 (id,dat) VALUES (6,'z19') },
1260
1261         qq{
1262             CREATE TABLE loader_test20 (
1263                 parent INTEGER NOT NULL,
1264                 child INTEGER NOT NULL,
1265                 PRIMARY KEY (parent, child),
1266                 FOREIGN KEY (parent) REFERENCES loader_test18 (id),
1267                 FOREIGN KEY (child) REFERENCES loader_test19 (id)
1268             ) $self->{innodb}
1269         },
1270
1271         q{ INSERT INTO loader_test20 (parent, child) VALUES (1,4) },
1272         q{ INSERT INTO loader_test20 (parent, child) VALUES (2,5) },
1273         q{ INSERT INTO loader_test20 (parent, child) VALUES (3,6) },
1274
1275         qq{
1276             CREATE TABLE loader_test21 (
1277                 id INTEGER NOT NULL PRIMARY KEY,
1278                 dat  VARCHAR(8)
1279             ) $self->{innodb}
1280         },
1281
1282         q{ INSERT INTO loader_test21 (id,dat) VALUES (7,'a21')},
1283         q{ INSERT INTO loader_test21 (id,dat) VALUES (11,'b21')},
1284         q{ INSERT INTO loader_test21 (id,dat) VALUES (13,'c21')},
1285         q{ INSERT INTO loader_test21 (id,dat) VALUES (17,'d21')},
1286
1287         qq{
1288             CREATE TABLE loader_test22 (
1289                 parent INTEGER NOT NULL,
1290                 child INTEGER NOT NULL,
1291                 PRIMARY KEY (parent, child),
1292                 FOREIGN KEY (parent) REFERENCES loader_test21 (id),
1293                 FOREIGN KEY (child) REFERENCES loader_test21 (id)
1294             ) $self->{innodb}
1295         },
1296
1297         q{ INSERT INTO loader_test22 (parent, child) VALUES (7,11)},
1298         q{ INSERT INTO loader_test22 (parent, child) VALUES (11,13)},
1299         q{ INSERT INTO loader_test22 (parent, child) VALUES (13,17)},
1300
1301         qq{
1302             CREATE TABLE loader_test25 (
1303                 id1 INTEGER NOT NULL,
1304                 id2 INTEGER NOT NULL,
1305                 dat VARCHAR(8),
1306                 PRIMARY KEY (id1,id2)
1307             ) $self->{innodb}
1308         },
1309
1310         q{ INSERT INTO loader_test25 (id1,id2,dat) VALUES (33,5,'x25') },
1311         q{ INSERT INTO loader_test25 (id1,id2,dat) VALUES (33,7,'y25') },
1312         q{ INSERT INTO loader_test25 (id1,id2,dat) VALUES (3,42,'z25') },
1313
1314         qq{
1315             CREATE TABLE loader_test26 (
1316                id INTEGER NOT NULL PRIMARY KEY,
1317                rel1 INTEGER NOT NULL,
1318                rel2 INTEGER NOT NULL,
1319                FOREIGN KEY (id, rel1) REFERENCES loader_test25 (id1, id2),
1320                FOREIGN KEY (id, rel2) REFERENCES loader_test25 (id1, id2)
1321             ) $self->{innodb}
1322         },
1323
1324         q{ INSERT INTO loader_test26 (id,rel1,rel2) VALUES (33,5,7) },
1325         q{ INSERT INTO loader_test26 (id,rel1,rel2) VALUES (3,42,42) },
1326
1327         qq{
1328             CREATE TABLE loader_test27 (
1329                 id INTEGER NOT NULL PRIMARY KEY
1330             ) $self->{innodb}
1331         },
1332
1333         q{ INSERT INTO loader_test27 (id) VALUES (1) },
1334         q{ INSERT INTO loader_test27 (id) VALUES (2) },
1335
1336         qq{
1337             CREATE TABLE loader_test28 (
1338                 id INTEGER NOT NULL PRIMARY KEY,
1339                 FOREIGN KEY (id) REFERENCES loader_test27 (id)
1340             ) $self->{innodb}
1341         },
1342
1343         q{ INSERT INTO loader_test28 (id) VALUES (1) },
1344
1345         qq{
1346             CREATE TABLE loader_test29 (
1347                 id INTEGER NOT NULL PRIMARY KEY,
1348                 fk INTEGER NOT NULL UNIQUE,
1349                 FOREIGN KEY (fk) REFERENCES loader_test27 (id)
1350             ) $self->{innodb}
1351         },
1352
1353         q{ INSERT INTO loader_test29 (id,fk) VALUES (1,1) },
1354
1355         qq{
1356           CREATE TABLE loader_test31 (
1357             id INTEGER NOT NULL PRIMARY KEY
1358           ) $self->{innodb}
1359         },
1360         q{ INSERT INTO loader_test31 (id) VALUES (1) },
1361
1362         qq{
1363           CREATE TABLE loader_test32 (
1364             id INTEGER NOT NULL PRIMARY KEY,
1365             rel1 INTEGER NOT NULL,
1366             rel2 INTEGER $self->{null},
1367             FOREIGN KEY (rel1) REFERENCES loader_test31(id),
1368             FOREIGN KEY (rel2) REFERENCES loader_test31(id)
1369           ) $self->{innodb}
1370         },
1371         q{ INSERT INTO loader_test32 (id,rel1) VALUES (1,1) },
1372
1373         qq{
1374           CREATE TABLE loader_test33 (
1375             id1 INTEGER NOT NULL,
1376             id2 INTEGER NOT NULL,
1377             PRIMARY KEY (id1,id2)
1378           ) $self->{innodb}
1379         },
1380         q{ INSERT INTO loader_test33 (id1,id2) VALUES (1,2) },
1381
1382         qq{
1383           CREATE TABLE loader_test34 (
1384             id INTEGER NOT NULL PRIMARY KEY,
1385             rel1 INTEGER NOT NULL,
1386             rel2 INTEGER $self->{null},
1387             FOREIGN KEY (id,rel1) REFERENCES loader_test33(id1,id2),
1388             FOREIGN KEY (id,rel2) REFERENCES loader_test33(id1,id2)
1389           ) $self->{innodb}
1390         },
1391         q{ INSERT INTO loader_test34 (id,rel1) VALUES (1,2) },
1392     );
1393
1394     @statements_advanced = (
1395         qq{
1396             CREATE TABLE loader_test10 (
1397                 id10 $self->{auto_inc_pk},
1398                 subject VARCHAR(8),
1399                 loader_test11 INTEGER $self->{null}
1400             ) $self->{innodb}
1401         },
1402         $make_auto_inc->(qw/loader_test10 id10/),
1403
1404         qq{
1405             CREATE TABLE loader_test11 (
1406                 id11 $self->{auto_inc_pk},
1407                 a_message VARCHAR(8) DEFAULT 'foo',
1408                 loader_test10 INTEGER $self->{null},
1409                 FOREIGN KEY (loader_test10) REFERENCES loader_test10 (id10)
1410             ) $self->{innodb}
1411         },
1412         $make_auto_inc->(qw/loader_test11 id11/),
1413
1414         (lc($self->{vendor}) ne 'informix' ?
1415             (q{ ALTER TABLE loader_test10 ADD CONSTRAINT loader_test11_fk } .
1416              q{ FOREIGN KEY (loader_test11) } .
1417              q{ REFERENCES loader_test11 (id11) })
1418         :
1419             (q{ ALTER TABLE loader_test10 ADD CONSTRAINT } .
1420              q{ FOREIGN KEY (loader_test11) } .
1421              q{ REFERENCES loader_test11 (id11) } .
1422              q{ CONSTRAINT loader_test11_fk })
1423         ),
1424     );
1425
1426     @statements_advanced_sqlite = (
1427         qq{
1428             CREATE TABLE loader_test10 (
1429                 id10 $self->{auto_inc_pk},
1430                 subject VARCHAR(8)
1431             ) $self->{innodb}
1432         },
1433         $make_auto_inc->(qw/loader_test10 id10/),
1434
1435         qq{
1436             CREATE TABLE loader_test11 (
1437                 id11 $self->{auto_inc_pk},
1438                 a_message VARCHAR(8) DEFAULT 'foo',
1439                 loader_test10 INTEGER $self->{null},
1440                 FOREIGN KEY (loader_test10) REFERENCES loader_test10 (id10)
1441             ) $self->{innodb}
1442         },
1443         $make_auto_inc->(qw/loader_test11 id11/),
1444
1445         (q{ ALTER TABLE loader_test10 ADD COLUMN } .
1446          q{ loader_test11 INTEGER REFERENCES loader_test11 (id11) }),
1447     );
1448
1449     @statements_inline_rels = (
1450         qq{
1451             CREATE TABLE loader_test12 (
1452                 id INTEGER NOT NULL PRIMARY KEY,
1453                 id2 VARCHAR(8) NOT NULL UNIQUE,
1454                 dat VARCHAR(8) NOT NULL UNIQUE
1455             ) $self->{innodb}
1456         },
1457
1458         q{ INSERT INTO loader_test12 (id,id2,dat) VALUES (1,'aaa','bbb') },
1459
1460         qq{
1461             CREATE TABLE loader_test13 (
1462                 id INTEGER NOT NULL PRIMARY KEY REFERENCES loader_test12,
1463                 loader_test12 VARCHAR(8) NOT NULL REFERENCES loader_test12 (id2),
1464                 dat VARCHAR(8) REFERENCES loader_test12 (dat)
1465             ) $self->{innodb}
1466         },
1467
1468         (q{ INSERT INTO loader_test13 (id,loader_test12,dat) } .
1469          q{ VALUES (1,'aaa','bbb') }),
1470     );
1471
1472
1473     @statements_implicit_rels = (
1474         qq{
1475             CREATE TABLE loader_test14 (
1476                 id INTEGER NOT NULL PRIMARY KEY,
1477                 dat VARCHAR(8)
1478             ) $self->{innodb}
1479         },
1480  
1481         q{ INSERT INTO loader_test14 (id,dat) VALUES (123,'aaa') },
1482
1483         qq{
1484             CREATE TABLE loader_test15 (
1485                 id INTEGER NOT NULL PRIMARY KEY,
1486                 loader_test14 INTEGER NOT NULL,
1487                 FOREIGN KEY (loader_test14) REFERENCES loader_test14
1488             ) $self->{innodb}
1489         },
1490
1491         q{ INSERT INTO loader_test15 (id,loader_test14) VALUES (1,123) },
1492     );
1493
1494     $self->drop_tables;
1495     $self->drop_tables; # twice for good measure
1496
1497     my $dbh = $self->dbconnect(1);
1498
1499     # Silence annoying but harmless postgres "NOTICE:  CREATE TABLE..."
1500     local $SIG{__WARN__} = sub {
1501         my $msg = shift;
1502         warn $msg unless $msg =~ m{^NOTICE:\s+CREATE TABLE};
1503     };
1504
1505     $dbh->do($_) foreach (@statements);
1506
1507     $dbh->do($_) foreach (@{ $self->{data_type_tests}{ddl} || {} });
1508
1509     unless($self->{skip_rels}) {
1510         # hack for now, since DB2 doesn't like inline comments, and we need
1511         # to test one for mysql, which works on everyone else...
1512         # this all needs to be refactored anyways.
1513         $dbh->do($_) for (@statements_reltests);
1514         if($self->{vendor} =~ /sqlite/i) {
1515             $dbh->do($_) for (@statements_advanced_sqlite);
1516         }
1517         else {
1518             $dbh->do($_) for (@statements_advanced);
1519         }
1520         unless($self->{no_inline_rels}) {
1521             $dbh->do($_) for (@statements_inline_rels);
1522         }
1523         unless($self->{no_implicit_rels}) {
1524             $dbh->do($_) for (@statements_implicit_rels);
1525         }
1526     }
1527
1528     $dbh->do($_) for @{ $self->{extra}->{create} || [] };
1529     $dbh->disconnect();
1530 }
1531
1532 sub drop_tables {
1533     my $self = shift;
1534
1535     my @tables = qw/
1536         loader_test1s
1537         loader_test2
1538         LOADER_test23
1539         LoAdEr_test24
1540         loader_test35
1541         loader_test36
1542     /;
1543     
1544     my @tables_auto_inc = (
1545         [ qw/loader_test1s id/ ],
1546         [ qw/loader_test2 id/ ],
1547     );
1548
1549     my @tables_reltests = qw/
1550         loader_test4
1551         loader_test3
1552         loader_test6
1553         loader_test5
1554         loader_test8
1555         loader_test7
1556         loader_test9
1557         loader_test17
1558         loader_test16
1559         loader_test20
1560         loader_test19
1561         loader_test18
1562         loader_test22
1563         loader_test21
1564         loader_test26
1565         loader_test25
1566         loader_test28
1567         loader_test29
1568         loader_test27
1569         loader_test32
1570         loader_test31
1571         loader_test34
1572         loader_test33
1573     /;
1574
1575     my @tables_advanced = qw/
1576         loader_test11
1577         loader_test10
1578     /;
1579     
1580     my @tables_advanced_auto_inc = (
1581         [ qw/loader_test10 id10/ ],
1582         [ qw/loader_test11 id11/ ],
1583     );
1584
1585     my @tables_inline_rels = qw/
1586         loader_test13
1587         loader_test12
1588     /;
1589
1590     my @tables_implicit_rels = qw/
1591         loader_test15
1592         loader_test14
1593     /;
1594
1595     my @tables_rescan = qw/ loader_test30 /;
1596
1597     my $drop_fk_mysql =
1598         q{ALTER TABLE loader_test10 DROP FOREIGN KEY loader_test11_fk};
1599
1600     my $drop_fk =
1601         q{ALTER TABLE loader_test10 DROP CONSTRAINT loader_test11_fk};
1602
1603     my $dbh = $self->dbconnect(0);
1604
1605     $dbh->do($_) for @{ $self->{extra}{pre_drop_ddl} || [] };
1606     $dbh->do("DROP TABLE $_") for @{ $self->{extra}{drop} || [] };
1607
1608     my $drop_auto_inc = $self->{auto_inc_drop_cb} || sub {};
1609
1610     unless($self->{skip_rels}) {
1611         $dbh->do("DROP TABLE $_") for (@tables_reltests);
1612         if($self->{vendor} =~ /mysql/i) {
1613             $dbh->do($drop_fk_mysql);
1614         }
1615         else {
1616             $dbh->do($drop_fk);
1617         }
1618         $dbh->do($_) for map { $drop_auto_inc->(@$_) } @tables_advanced_auto_inc;
1619         $dbh->do("DROP TABLE $_") for (@tables_advanced);
1620
1621         unless($self->{no_inline_rels}) {
1622             $dbh->do("DROP TABLE $_") for (@tables_inline_rels);
1623         }
1624         unless($self->{no_implicit_rels}) {
1625             $dbh->do("DROP TABLE $_") for (@tables_implicit_rels);
1626         }
1627     }
1628     $dbh->do($_) for map { $drop_auto_inc->(@$_) } @tables_auto_inc;
1629     $dbh->do("DROP TABLE $_") for (@tables, @tables_rescan);
1630
1631     foreach my $data_type_table (@{ $self->{data_type_tests}{table_names} || {} }) {
1632         $dbh->do("DROP TABLE $data_type_table");
1633     }
1634
1635     $dbh->disconnect;
1636
1637 # fixup for Firebird
1638     $dbh = $self->dbconnect(0);
1639     $dbh->do('DROP TABLE loader_test2');
1640     $dbh->disconnect;
1641 }
1642
1643 sub _custom_column_info {
1644     my ( $table_name, $column_name, $column_info ) = @_;
1645
1646     $table_name = lc ( $table_name );
1647     $column_name = lc ( $column_name );
1648
1649     if ( $table_name eq 'loader_test35' 
1650         and $column_name eq 'an_int' 
1651     ){
1652         return { is_numeric => 1 }
1653     }
1654     # Set inflate_datetime or  inflate_date to check 
1655     #   datetime_timezone and datetime_locale
1656     if ( $table_name eq 'loader_test36' ){
1657         return { inflate_datetime => 1 } if 
1658             ( $column_name eq 'b_char_as_data' );
1659         return { inflate_date => 1 } if 
1660             ( $column_name eq 'c_char_as_data' );
1661     }
1662
1663     return;
1664 }
1665
1666 my %DATA_TYPE_MULTI_TABLE_OVERRIDES = (
1667     oracle => qr/\blong\b/,
1668 );
1669
1670 sub setup_data_type_tests {
1671     my $self = shift;
1672
1673     return unless my $types = $self->{data_types};
1674
1675     my $tests = $self->{data_type_tests} = {};
1676
1677     # split types into tables based on overrides
1678     my @types = keys %$types;
1679     my @split_off_types   = grep  /$DATA_TYPE_MULTI_TABLE_OVERRIDES{lc($self->{vendor})}/i, @types;
1680     my @first_table_types = grep !/$DATA_TYPE_MULTI_TABLE_OVERRIDES{lc($self->{vendor})}/i, @types;
1681
1682     @types = +{ map +($_, $types->{$_}), @first_table_types },
1683         map +{ $_, $types->{$_} }, @split_off_types;
1684
1685     my $test_count = 0;
1686     my $table_num  = 10000;
1687
1688     foreach my $types (@types) {
1689         my $table_name    = "loader_test$table_num";
1690         push @{ $tests->{table_names} }, $table_name;
1691
1692         my $table_moniker = "LoaderTest$table_num";
1693         push @{ $tests->{table_monikers} }, $table_moniker;
1694
1695         $table_num++;
1696
1697         my $cols = $tests->{columns}{$table_moniker} = {};
1698
1699         my $ddl = "CREATE TABLE $table_name (\n    id INTEGER NOT NULL PRIMARY KEY,\n";
1700
1701         my %seen_col_names;
1702
1703         while (my ($col_def, $expected_info) = each %$types) {
1704             (my $type_alias = $col_def) =~ s/\( ([^)]+) \)//xg;
1705
1706             my $size = $1;
1707             $size = '' unless defined $size;
1708             $size =~ s/\s+//g;
1709             my @size = split /,/, $size;
1710
1711             # some DBs don't like very long column names
1712             if ($self->{vendor} =~ /^(?:firebird|sqlanywhere|oracle)\z/i) {
1713                 my ($col_def, $default) = $type_alias =~ /^(.*)(default.*)?\z/i;
1714
1715                 $type_alias = substr $col_def, 0, 15;
1716
1717                 $type_alias .= '_with_dflt' if $default;
1718             }
1719
1720             $type_alias =~ s/\s/_/g;
1721             $type_alias =~ s/\W//g;
1722
1723             my $col_name = 'col_' . $type_alias;
1724             
1725             if (@size) {
1726                 my $size_name = join '_', apply { s/\W//g } @size;
1727
1728                 $col_name .= "_sz_$size_name";
1729             }
1730
1731             # XXX would be better to check _loader->preserve_case
1732             $col_name = lc $col_name;
1733
1734             $col_name .= '_' . $seen_col_names{$col_name} if $seen_col_names{$col_name}++;
1735
1736             $ddl .= "    $col_name $col_def,\n";
1737
1738             $cols->{$col_name} = $expected_info;
1739
1740             $test_count++;
1741         }
1742
1743         $ddl =~ s/,\n\z/\n)/;
1744
1745         push @{ $tests->{ddl} }, $ddl;
1746     }
1747
1748     $tests->{test_count} = $test_count;
1749
1750     return $test_count;
1751 }
1752
1753 sub DESTROY {
1754     my $self = shift;
1755     unless ($ENV{SCHEMA_LOADER_TESTS_NOCLEANUP}) {
1756         $self->drop_tables if $self->{_created};
1757         rmtree $DUMP_DIR
1758     }
1759 }
1760
1761 1;
1762 # vim:et sts=4 sw=4 tw=0: