Move expensive test to xt/, add malloc-canary preventing false-negatives
[dbsrgits/DBIx-Class.git] / .travis.yml
1 # Some overall notes on how this works
2 #
3 # * We smoke using the system provided latest, and custom built "oddball perls"
4 # The reason for not having a blanket matrix is to conserve travis resources
5 # as a full DBIC depchain isn't cheap
6 #
7 # * Minimum perl officially supported by DBIC is 5.8.3. This *includes* the
8 # basic depchain. On failure either attempt to fix it or bring it to the
9 # attention of the maintainer. *DO NOT* disable 5.8 testing - it is here for
10 # a very good reason
11 #
12 # the entire run times out after 50 minutes, or after 5 minutes without
13 # console output
14
15 #
16 # Smoke all branches except for blocked* and wip/*
17 branches:
18   except:
19     - /^wip\//
20     - /^blocked/
21
22 notifications:
23   irc:
24     channels:
25       - "irc.perl.org#dbic-smoke"
26     template:
27       - "%{branch}#%{build_number} by %{author}: %{message} (%{build_url})"
28     on_success: change
29     on_failure: always
30     use_notice: true
31
32   email:
33     recipients:
34       - ribasushi@cpan.org
35     on_success: change
36     on_failure: always
37
38 addons:
39   apt:
40     packages:
41       - libapp-nopaste-perl
42       - net-tools
43
44 # This is probably a net-loss for setup etc - a bare 'C' will likely fare much better
45 language: perl
46
47 # Currently not trying osx: https://github.com/travis-ci/travis-ci/issues/2314
48 os: linux
49
50 # The defaults run under the more rapid container infra. The hardware is
51 # actually *much* slower, but the jobs start much faster, for more info see
52 # https://docs.travis-ci.com/user/ci-environment/#Virtualization-environments
53 # Combined with 'fast_finish' this will result in an "uh-oh" email as early
54 # as possible
55 dist: precise
56 sudo: false
57 env: CLEANTEST=true
58
59 perl:
60   - "5.8"
61   - "5.10"
62   - "5.22-extras"
63
64 matrix:
65   fast_finish: true
66
67   include:
68
69     # Same as the "master matrix" above, frozen under older dist/infrastructure
70     # In genereal it is strongly recommended to keep things on the older
71     # version indefinitely - there is little value in-depth smoking on
72     # more recent software stacks
73     - perl: "5.8"
74       sudo: required
75       dist: precise
76       env:
77         - CLEANTEST=false
78
79     - perl: "5.10"
80       sudo: required
81       dist: precise
82       env:
83         - CLEANTEST=false
84
85     - perl: "5.22-extras"
86       sudo: required
87       dist: precise
88       env:
89         - CLEANTEST=false
90
91     # CLEANTEST of minimum supported with non-tracing poisoning, single thread (hence the sudo)
92     - perl: "5.8.3_nt_mb"
93       sudo: required
94       dist: precise
95       env:
96         - VCPU_USE=1
97         - CLEANTEST=true
98         - POISON_ENV=true
99         - DBIC_TRACE_PROFILE=console_monochrome
100         - BREWVER=5.8.3
101         - BREWOPTS="-Dusemorebits"
102
103     # Full Test of minimum supported without threads with plain poisoned trace
104     - perl: "5.8.3_nt"
105       sudo: required
106       dist: precise
107       # run these under legacy - great simulation of low memory env
108       group: legacy
109       env:
110         - CLEANTEST=false
111         - POISON_ENV=true
112         - DBIC_TRACE=1
113         - BREWVER=5.8.3
114
115     # Full Test of minimum supported with threads with non-tracing poisoning
116     - perl: "5.8.5_thr"
117       sudo: required
118       dist: precise
119       # run these under legacy - great simulation of low memory env
120       group: legacy
121       env:
122         - CLEANTEST=false
123         - POISON_ENV=true
124         - DBIC_TRACE_PROFILE=console
125         - BREWVER=5.8.5
126         - BREWOPTS="-Duseithreads"
127
128     # CLEANTEST of solaris-like perl with non-tracing poisoning
129     - perl: "5.8.4_nt"
130       sudo: false
131       dist: precise
132       env:
133         - CLEANTEST=true
134         - POISON_ENV=true
135         - DBIC_TRACE_PROFILE=console
136         - BREWVER=5.8.4
137
138     # Full test: this particular perl is quite widespread, single thread
139     - perl: "5.8.8_thr"
140       sudo: required
141       dist: precise
142       group: legacy
143       env:
144         - VCPU_USE=1
145         - CLEANTEST=false
146         - BREWVER=5.8.8
147         - BREWOPTS="-Duseithreads"
148
149     # CLEANTEST: this is the perl suse ships, with env poisoning
150     - perl: "5.10.0_thr_dbg"
151       sudo: false
152       dist: precise
153       env:
154         - CLEANTEST=true
155         - POISON_ENV=true
156         - BREWVER=5.10.0
157         - BREWOPTS="-DDEBUGGING -Duseithreads"
158
159     # CLEANTEST: this one is in a number of debian-based LTS (test a sane CPAN.pm, single thread)
160     - perl: "5.14.2_thr_mb"
161       sudo: required
162       dist: precise
163       env:
164         - VCPU_USE=1
165         - CLEANTEST=true
166         - BREWVER=5.14.2
167         - BREWOPTS="-Duseithreads -Dusemorebits"
168
169     ###
170     # some permutations of tracing and envvar poisoning
171
172     - perl: "5.12.3_thr"
173       sudo: false
174       dist: precise
175       env:
176         - CLEANTEST=true
177         - POISON_ENV=true
178         - DBIC_TRACE=1
179         - DBIC_MULTICREATE_DEBUG=1
180         - DBIC_STORAGE_RETRY_DEBUG=1
181         - DBIC_TRACE_PROFILE=console
182         - BREWVER=5.12.3
183         - BREWOPTS="-Duseithreads"
184
185     - perl: "5.16.3_thr_mb"
186       sudo: required
187       dist: precise
188       env:
189         - CLEANTEST=false
190         - POISON_ENV=true
191         - DBIC_TRACE=1
192         - BREWVER=5.16.3
193         - BREWOPTS="-Duseithreads -Dusemorebits"
194
195     - perl: "5.18-extras"
196       sudo: required
197       # explicit new infra spec preparing for a future forced upgrade
198       dist: trusty
199       env:
200         - CLEANTEST=false
201         - POISON_ENV=true
202         - DBIC_TRACE=1
203         - DBIC_TRACE_PROFILE=console_monochrome
204         - DBICTEST_VIA_REPLICATED=0
205         - DBICTEST_VERSION_WARNS_INDISCRIMINATELY=1
206
207     ###
208     # Start of the allow_failures block
209
210     # threaded oldest possible with blead CPAN
211     - perl: "devcpan_5.8.1_thr_mb"
212       sudo: false
213       dist: precise
214       env:
215         - CLEANTEST=true
216         - DEVREL_DEPS=true
217         - BREWVER=5.8.1
218         - BREWOPTS="-Duseithreads -Dusemorebits"
219
220     # oldest possible with blead CPAN with poisoning and plain trace
221     - perl: "devcpan_5.8.1"
222       sudo: false
223       dist: precise
224       env:
225         - CLEANTEST=true
226         - DEVREL_DEPS=true
227         - POISON_ENV=true
228         - DBIC_TRACE=1
229         - DBICTEST_VERSION_WARNS_INDISCRIMINATELY=1
230         - BREWVER=5.8.1
231
232     # 5.8.3 with blead CPAN
233     - perl: "devcpan_5.8.3_mb"
234       sudo: required
235       # explicit new infra spec preparing for a future forced upgrade
236       dist: trusty
237       env:
238         - CLEANTEST=false
239         - DEVREL_DEPS=true
240         - BREWVER=5.8.3
241         - BREWOPTS="-Dusemorebits"
242
243     # 5.8.7 threaded with blead CPAN with non-tracing poisoning
244     - perl: "devcpan_5.8.7_thr"
245       sudo: false
246       dist: precise
247       env:
248         - CLEANTEST=true
249         - DEVREL_DEPS=true
250         - POISON_ENV=true
251         - BREWVER=5.8.7
252         - BREWOPTS="-Duseithreads"
253
254     # 5.8.8 threaded MB (exercises P5#72210)
255     - perl: "devcpan_5.8.8_thr_mb"
256       sudo: false
257       dist: precise
258       env:
259         - CLEANTEST=true
260         - DBICTEST_VERSION_WARNS_INDISCRIMINATELY=1
261         - DEVREL_DEPS=true
262         - BREWVER=5.8.8
263         - BREWOPTS="-Duseithreads -Dusemorebits"
264
265     # 5.10.0 threaded with blead CPAN
266     - perl: "devcpan_5.10.0_thr_mb"
267       sudo: false
268       dist: precise
269       env:
270         - CLEANTEST=true
271         - DEVREL_DEPS=true
272         - BREWVER=5.10.0
273         - BREWOPTS="-Duseithreads -Dusemorebits"
274
275     # 5.12.1 with blead CPAN
276     - perl: "devcpan_5.12.1_thr"
277       sudo: false
278       dist: precise
279       env:
280         - CLEANTEST=true
281         - DEVREL_DEPS=true
282         - BREWVER=5.12.1
283         - BREWOPTS="-Duseithreads"
284
285     # bleadperl with stock CPAN, full depchain test with non-tracing poisoning, single thread
286     - perl: "bleadperl"
287       sudo: required
288       dist: precise
289       env:
290         - VCPU_USE=1
291         - CLEANTEST=true
292         - POISON_ENV=true
293         - BREWVER=blead
294
295     # bleadperl with blead CPAN, single thread
296     - perl: "devcpan_bleadperl_thr_mb"
297       sudo: required
298       # explicitly do not specify dist - see what the default does
299       env:
300         - VCPU_USE=1
301         - CLEANTEST=false
302         - DEVREL_DEPS=true
303         - BREWVER=blead
304         - BREWOPTS="-Duseithreads -Dusemorebits"
305
306     # CLEANTEST of http://schplog.schmorp.de/2015-06-06-a-stable-perl.html with non-tracing poisoning
307     - perl: "schmorp_stableperl_thr_mb"
308       sudo: false
309       dist: precise
310       env:
311         - CLEANTEST=true
312         - POISON_ENV=true
313         - BREWVER=schmorp_stableperl
314         - BREWOPTS="-Duseithreads -Dusemorebits"
315
316   # which ones of the above can fail
317   allow_failures:
318
319     # these run with various dev snapshots - allowed to fail
320     - perl: devcpan_5.8.1_thr_mb
321     - perl: devcpan_5.8.1
322     - perl: devcpan_5.8.3_mb
323     - perl: devcpan_5.8.7_thr
324     - perl: devcpan_5.8.8_thr_mb
325     - perl: devcpan_5.10.0_thr_mb
326     - perl: devcpan_5.12.1_thr
327     - perl: bleadperl
328     - perl: devcpan_bleadperl_thr_mb
329     - perl: schmorp_stableperl_thr_mb
330
331
332 ###
333 ### For the following two phases -e is *set*
334 ###
335
336 before_install:
337   # common functions for all run phases below
338   #
339   # this is an exporter - sourcing it is crucial
340   # among other things it also sets -e
341   #
342   - source maint/travis-ci_scripts/common.bash
343
344   # Sets global envvars, downloads/configures debs based on CLEANTEST
345   # Sets extra DBICTEST_* envvars
346   #
347   # this is an exporter - sourcing it is crucial
348   #
349   - source maint/travis-ci_scripts/10_before_install.bash
350
351 install:
352   # Build and switch to a custom perl if requested
353   # Configure the perl env, preinstall some generic toolchain parts
354   # Possibly poison the environment
355   #
356   # this is an exporter - sourcing it is crucial
357   #
358   - source maint/travis-ci_scripts/20_install.bash
359
360 ###
361 ### From this point on -e is *unset*, rely on travis' error handling
362 ###
363   - set +e
364
365 before_script:
366   # Preinstall/install deps based on envvars/CLEANTEST
367   #
368   # need to invoke the after_failure script manually
369   # because 'after_failure' runs only after 'script' fails
370   #
371   - maint/getstatus maint/travis-ci_scripts/30_before_script.bash
372
373 script:
374   # Run actual tests
375   #
376   - maint/getstatus maint/travis-ci_scripts/40_script.bash
377
378 ###
379 ### Set -e back, work around https://github.com/travis-ci/travis-ci/issues/3533
380 ###
381   - set -e
382
383 after_success:
384   # Check if we can assemble a dist properly if not in CLEANTEST
385   #
386   - maint/getstatus maint/travis-ci_scripts/50_after_success.bash
387
388 after_failure:
389   # Final sysinfo printout on fail
390   #
391   - maint/getstatus maint/travis-ci_scripts/50_after_failure.bash
392
393 after_script:
394   # No tasks yet
395   #
396   #- maint/getstatus maint/travis-ci_scripts/60_after_script.bash