Make stemma data return consistent; refrain from assuming digraph in edit box. Fixes #28
[scpubgit/stemmaweb.git] / lib / stemmaweb / Controller / Root.pm
1 package stemmaweb::Controller::Root;
2 use Moose;
3 use namespace::autoclean;
4 use Text::Tradition::Analysis qw/ run_analysis /;
5 use TryCatch;
6 use XML::LibXML;
7 use XML::LibXML::XPathContext;
8
9
10 BEGIN { extends 'Catalyst::Controller' }
11
12 #
13 # Sets the actions in this controller to be registered with no prefix
14 # so they function identically to actions created in MyApp.pm
15 #
16 __PACKAGE__->config(namespace => '');
17
18 =head1 NAME
19
20 stemmaweb::Controller::Root - Root Controller for stemmaweb
21
22 =head1 DESCRIPTION
23
24 Serves up the main container pages.
25
26 =head1 URLs
27
28 =head2 index
29
30 The root page (/).  Serves the main container page, from which the various
31 components will be loaded.
32
33 =cut
34
35 sub index :Path :Args(0) {
36     my ( $self, $c ) = @_;
37
38         # Are we being asked to load a text immediately? If so 
39         if( $c->req->param('withtradition') ) {
40                 $c->stash->{'withtradition'} = $c->req->param('withtradition');
41         }
42     $c->stash->{template} = 'index.tt';
43 }
44
45 =head2 about
46
47 A general overview/documentation page for the site.
48
49 =cut
50
51 sub about :Local :Args(0) {
52         my( $self, $c ) = @_;
53         $c->stash->{template} = 'about.tt';
54 }
55
56 =head2 help/*
57
58 A dispatcher for documentation of various aspects of the application.
59
60 =cut
61
62 sub help :Local :Args(1) {
63         my( $self, $c, $topic ) = @_;
64         $c->stash->{template} = "$topic.tt";
65 }
66
67 =head1 Elements of index page
68
69 =head2 directory
70
71  GET /directory
72
73 Serves a snippet of HTML that lists the available texts.  This returns texts belonging to the logged-in user if any, otherwise it returns all public texts.
74
75 =cut
76
77 sub directory :Local :Args(0) {
78         my( $self, $c ) = @_;
79     my $m = $c->model('Directory');
80     # Is someone logged in?
81     my %usertexts;
82     if( $c->user_exists ) {
83         my $user = $c->user->get_object;
84         my @list = $m->traditionlist( $user );
85         map { $usertexts{$_->{id}} = 1 } @list;
86                 $c->stash->{usertexts} = \@list;
87                 $c->stash->{is_admin} = 1 if $user->is_admin;
88         }
89         # List public (i.e. readonly) texts separately from any user (i.e.
90         # full access) texts that exist. Admin users therefore have nothing
91         # in this list.
92         my @plist = grep { !$usertexts{$_->{id}} } $m->traditionlist('public');
93         $c->stash->{publictexts} = \@plist;
94         $c->stash->{template} = 'directory.tt';
95 }
96
97 =head1 AJAX methods for traditions and their properties
98
99 =head2 newtradition
100
101  POST /newtradition,
102         { name: <name>,
103           language: <language>,
104           public: <is_public>,
105           file: <fileupload> }
106  
107 Creates a new tradition belonging to the logged-in user, with the given name
108 and the collation given in the uploaded file. The file type is indicated via
109 the filename extension (.csv, .txt, .xls, .xlsx, .xml). Returns the ID and 
110 name of the new tradition.
111  
112 =cut
113
114 sub newtradition :Local :Args(0) {
115         my( $self, $c ) = @_;
116         return _json_error( $c, 403, 'Cannot save a tradition without being logged in' )
117                 unless $c->user_exists;
118
119         my $user = $c->user->get_object;
120         # Grab the file upload, check its name/extension, and call the
121         # appropriate parser(s).
122         my $upload = $c->request->upload('file');
123         my $name = $c->request->param('name') || 'Uploaded tradition';
124         my $lang = $c->request->param( 'language' ) || 'Default';
125         my $public = $c->request->param( 'public' ) ? 1 : undef;
126         my( $ext ) = $upload->filename =~ /\.(\w+)$/;
127         my %newopts = (
128                 'name' => $name,
129                 'language' => $lang,
130                 'public' => $public,
131                 'file' => $upload->tempname
132                 );
133
134         my $tradition;
135         my $errmsg;
136         if( $ext eq 'xml' ) {
137                 my $type;
138                 # Parse the XML to see which flavor it is.
139                 my $parser = XML::LibXML->new();
140                 my $doc;
141                 try {
142                         $doc = $parser->parse_file( $newopts{'file'} );
143                 } catch( $err ) {
144                         $errmsg = "XML file parsing error: $err";
145                 }
146                 if( $doc ) {
147                         if( $doc->documentElement->nodeName eq 'GraphML' ) {
148                                 $type = 'CollateX';
149                         } elsif( $doc->documentElement->nodeName ne 'TEI' ) {
150                                 $errmsg = 'Unrecognized XML type ' . $doc->documentElement->nodeName;
151                         } else {
152                                 my $xpc = XML::LibXML::XPathContext->new( $doc->documentElement );
153                                 my $venc = $xpc->findvalue( '/TEI/teiHeader/encodingDesc/variantEncoding/attribute::method' );
154                                 if( $venc && $venc eq 'double-end-point' ) {
155                                         $type = 'CTE';
156                                 } else {
157                                         $type = 'TEI';
158                                 }
159                         }
160                 }
161                 # Try the relevant XML parsing option.
162                 if( $type ) {
163                         delete $newopts{'file'};
164                         $newopts{'xmlobj'} = $doc;
165                         try {
166                                 $tradition = Text::Tradition->new( %newopts, 'input' => $type );
167                         } catch ( Text::Tradition::Error $e ) {
168                                 $errmsg = $e->message;
169                         } catch ( $e ) {
170                                 $errmsg = "Unexpected parsing error: $e";
171                         }
172                 }
173         } elsif( $ext =~ /^(txt|csv|xls(x)?)$/ ) {
174                 # If it's Excel we need to pass excel => $ext;
175                 # otherwise we need to pass sep_char => [record separator].
176                 if( $ext =~ /xls/ ) {
177                         $newopts{'excel'} = $ext;
178                 } else {
179                         $newopts{'sep_char'} = $ext eq 'txt' ? "\t" : ',';
180                 }
181                 try {
182                         $tradition = Text::Tradition->new( 
183                                 %newopts,
184                                 'input' => 'Tabular',
185                                 );
186                 } catch ( Text::Tradition::Error $e ) {
187                         $errmsg = $e->message;
188                 } catch ( $e ) {
189                         $errmsg = "Unexpected parsing error: $e";
190                 }
191         } else {
192                 # Error unless we have a recognized filename extension
193                 return _json_error( $c, 403, "Unrecognized file type extension $ext" );
194         }
195         
196         # Save the tradition if we have it, and return its data or else the
197         # error that occurred trying to make it.
198         if( $errmsg ) {
199                 return _json_error( $c, 500, "Error parsing tradition .$ext file: $errmsg" );
200         } elsif( !$tradition ) {
201                 return _json_error( $c, 500, "No error caught but tradition not created" );
202         }
203
204         my $m = $c->model('Directory');
205         $user->add_tradition( $tradition );
206         my $id = $c->model('Directory')->store( $tradition );
207         $c->model('Directory')->store( $user );
208         $c->stash->{'result'} = { 'id' => $id, 'name' => $tradition->name };
209         $c->forward('View::JSON');
210 }
211
212 =head2 textinfo
213
214  GET /textinfo/$textid
215  POST /textinfo/$textid, 
216         { name: $new_name, 
217           language: $new_language,
218           public: $is_public, 
219           owner: $new_userid } # only admin users can update the owner
220  
221 Returns information about a particular text.
222
223 =cut
224
225 sub textinfo :Local :Args(1) {
226         my( $self, $c, $textid ) = @_;
227         my $tradition = $c->model('Directory')->tradition( $textid );
228         ## Have to keep users in the same scope as tradition
229         my $newuser;
230         my $olduser;
231         unless( $tradition ) {
232                 return _json_error( $c, 404, "No tradition with ID $textid" );
233         }       
234         my $ok = _check_permission( $c, $tradition );
235         return unless $ok;
236         if( $c->req->method eq 'POST' ) {
237                 return _json_error( $c, 403, 
238                         'You do not have permission to update this tradition' ) 
239                         unless $ok eq 'full';
240                 my $params = $c->request->parameters;
241                 # Handle changes to owner-accessible parameters
242                 my $m = $c->model('Directory');
243                 my $changed;
244                 # Handle name param - easy
245                 if( exists $params->{name} ) {
246                         my $newname = delete $params->{name};
247                         unless( $tradition->name eq $newname ) {
248                                 try {
249                                         $tradition->name( $newname );
250                                         $changed = 1;
251                                 } catch {
252                                         return _json_error( $c, 500, "Error setting name to $newname" );
253                                 }
254                         }
255                 }
256                 # Handle language param, making Default => null
257                 my $langval = delete $params->{language} || 'Default';
258                 
259                 unless( $tradition->language eq $langval || !$tradition->can('language') ) {
260                         try {
261                                 $tradition->language( $langval );
262                                 $changed = 1;
263                         } catch {
264                                 return _json_error( $c, 500, "Error setting language to $langval" );
265                         }
266                 }
267
268                 # Handle our boolean
269                 my $ispublic = $tradition->public;
270                 if( delete $params->{'public'} ) {  # if it's any true value...
271                         $tradition->public( 1 );
272                         $changed = 1 unless $ispublic;
273                 } else {  # the checkbox was unchecked, ergo it should not be public
274                         $tradition->public( 0 );
275                         $changed = 1 if $ispublic;
276                 }
277                 
278                 # Handle ownership change
279                 if( exists $params->{'owner'} ) {
280                         # Only admins can update user / owner
281                         my $newownerid = delete $params->{'owner'};
282                         if( $tradition->has_user && !$tradition->user ) {
283                                 $tradition->clear_user;
284                         }
285                         unless( !$newownerid || 
286                                 ( $tradition->has_user && $tradition->user->email eq $newownerid ) ) {
287                                 unless( $c->user->get_object->is_admin ) {
288                                         return _json_error( $c, 403, 
289                                                 "Only admin users can change tradition ownership" );
290                                 }
291                                 $newuser = $m->find_user({ email => $newownerid });
292                                 unless( $newuser ) {
293                                         return _json_error( $c, 500, "No such user " . $newownerid );
294                                 }
295                                 if( $tradition->has_user ) {
296                                         $olduser = $tradition->user;
297                                         $olduser->remove_tradition( $tradition );
298                                 }
299                                 $newuser->add_tradition( $tradition );
300                                 $changed = 1;
301                         }
302                 }
303                 # TODO check for rogue parameters
304                 if( scalar keys %$params ) {
305                         my $rogueparams = join( ', ', keys %$params );
306                         return _json_error( $c, 403, "Request parameters $rogueparams not recognized" );
307                 }
308                 # If we safely got to the end, then write to the database.
309                 $m->save( $tradition ) if $changed;
310                 $m->save( $newuser ) if $newuser;               
311         }
312
313         # Now return the current textinfo, whether GET or successful POST.
314         my $textinfo = {
315                 textid => $textid,
316                 name => $tradition->name,
317                 #language => $tradition->language,
318                 public => $tradition->public || 0,
319                 owner => $tradition->user ? $tradition->user->email : undef,
320                 witnesses => [ map { $_->sigil } $tradition->witnesses ],
321         };
322         if( $tradition->can('language') ) {
323                 $textinfo->{'language'} = $tradition->language;
324         }
325         my @stemmasvg = map { { name => $_->identifier, svg => $_->as_svg() } } 
326                 $tradition->stemmata;
327         map { $_ =~ s/\n/ /mg } @stemmasvg;
328         $textinfo->{stemmata} = \@stemmasvg;
329         $c->stash->{'result'} = $textinfo;
330         $c->forward('View::JSON');
331 }
332
333 =head2 variantgraph
334
335  GET /variantgraph/$textid
336  
337 Returns the variant graph for the text specified at $textid, in SVG form.
338
339 =cut
340
341 sub variantgraph :Local :Args(1) {
342         my( $self, $c, $textid ) = @_;
343         my $tradition = $c->model('Directory')->tradition( $textid );
344         unless( $tradition ) {
345                 return _json_error( $c, 404, "No tradition with ID $textid" );
346         }       
347         my $ok = _check_permission( $c, $tradition );
348         return unless $ok;
349
350         my $collation = $tradition->collation;
351         $c->stash->{'result'} = $collation->as_svg;
352         $c->forward('View::SVG');
353 }
354         
355 =head2 stemma
356
357  GET /stemma/$textid/$stemmaseq
358  POST /stemma/$textid/$stemmaseq, { 'dot' => $dot_string }
359
360 Returns an SVG representation of the given stemma hypothesis for the text.  
361 If the URL is called with POST, the stemma at $stemmaseq will be altered
362 to reflect the definition in $dot_string. If $stemmaseq is 'n', a new
363 stemma will be added.
364
365 =cut
366
367 sub stemma :Local :Args(2) {
368         my( $self, $c, $textid, $stemmaid ) = @_;
369         my $m = $c->model('Directory');
370         my $tradition = $m->tradition( $textid );
371         unless( $tradition ) {
372                 return _json_error( $c, 404, "No tradition with ID $textid" );
373         }       
374         my $ok = _check_permission( $c, $tradition );
375         return unless $ok;
376
377         $c->stash->{'result'} = '';
378         my $stemma;
379         if( $c->req->method eq 'POST' ) {
380                 if( $ok eq 'full' ) {
381                         my $dot = $c->request->body_params->{'dot'};
382                         # Graph::Reader::Dot does not handle bare unicode. We get around this
383                         # by wrapping all words in double quotes, as long as they aren't already
384                         # wrapped, and as long as they aren't the initial '(di)?graph .*'.
385                         # Horrible HACK.
386                         my @dlines = split( "\n", $dot );
387                         my $wdot = '';
388                         foreach( @dlines ) {
389                                 unless( /^(di)?graph/ ) { # Skip the first line
390                                         s/(?<!")\b(\w+)\b(?!")/"$1"/g;
391                                 }
392                                 $wdot .= "$_\n";
393                         }
394                         # $dot =~ s/(?<!")\b(?!(?:digraph|stemma)\b)(\w+)\b(?!")/"$1"/g;
395                         $dot = $wdot;
396                         print STDERR "$dot\n";
397                         try {
398                                 if( $stemmaid eq 'n' ) {
399                                         # We are adding a new stemma.
400                                         $stemmaid = $tradition->stemma_count;
401                                         $stemma = $tradition->add_stemma( 'dot' => $dot );
402                                 } elsif( $stemmaid !~ /^\d+$/ ) {
403                                         return _json_error( $c, 403, "Invalid stemma ID specification $stemmaid" );
404                                 } elsif( $stemmaid < $tradition->stemma_count ) {
405                                         # We are updating an existing stemma.
406                                         $stemma = $tradition->stemma( $stemmaid );
407                                         $stemma->alter_graph( $dot );
408                                 } else {
409                                         # Unrecognized stemma ID
410                                         return _json_error( $c, 404, "No stemma at index $stemmaid, cannot update" );
411                                 }
412                         } catch ( Text::Tradition::Error $e ) {
413                                 return _json_error( $c, 500, $e->message );
414                         }
415                         $m->store( $tradition );
416                 } else {
417                         # No permissions to update the stemma
418                         return _json_error( $c, 403, 
419                                 'You do not have permission to update stemmata for this tradition' );
420                 }
421         }
422         
423         # For a GET or a successful POST request, return the SVG representation
424         # of the stemma in question, if any.
425         if( !$stemma && $tradition->stemma_count > $stemmaid ) {
426                 $stemma = $tradition->stemma( $stemmaid );
427         }
428         my $stemma_xml = $stemma ? $stemma->as_svg() : '';
429         # What was requested, XML or JSON?
430         my $return_view = 'SVG';
431         if( my $accept_header = $c->req->header('Accept') ) {
432                 $c->log->debug( "Received Accept header: $accept_header" );
433                 foreach my $type ( split( /,\s*/, $accept_header ) ) {
434                         # If we were first asked for XML, return SVG
435                         last if $type =~ /^(application|text)\/xml$/;
436                         # If we were first asked for JSON, return JSON
437                         if( $type eq 'application/json' ) {
438                                 $return_view = 'JSON';
439                                 last;
440                         }
441                 }
442         }
443         if( $return_view eq 'SVG' ) {
444                 $c->stash->{'result'} = $stemma_xml;
445                 $c->forward('View::SVG');
446         } else { # JSON
447                 $stemma_xml =~ s/\n/ /mg;
448                 $c->stash->{'result'} = { 
449                         'stemmaid' => $stemmaid, 
450                         'name' => $stemma->identifier,
451                         'svg' => $stemma_xml };
452                 $c->forward('View::JSON');
453         }
454 }
455
456 =head2 stemmadot
457
458  GET /stemmadot/$textid/$stemmaseq
459  
460 Returns the 'dot' format representation of the current stemma hypothesis.
461
462 =cut
463
464 sub stemmadot :Local :Args(2) {
465         my( $self, $c, $textid, $stemmaid ) = @_;
466         my $m = $c->model('Directory');
467         my $tradition = $m->tradition( $textid );
468         unless( $tradition ) {
469                 return _json_error( $c, 404, "No tradition with ID $textid" );
470         }       
471         my $ok = _check_permission( $c, $tradition );
472         return unless $ok;
473         my $stemma = $tradition->stemma( $stemmaid );
474         unless( $stemma ) {
475                 return _json_error( $c, 404, "Tradition $textid has no stemma ID $stemmaid" );
476         }
477         # Get the dot and transmute its line breaks to literal '|n'
478         $c->stash->{'result'} = { 'dot' =>  $stemma->editable( { linesep => '|n' } ) };
479         $c->forward('View::JSON');
480 }
481
482 =head2 download
483
484  GET /download/$textid
485  
486 Returns the full XML definition of the tradition and its stemmata, if any.
487  
488 =cut
489
490 sub download :Local :Args(1) {
491         my( $self, $c, $textid ) = @_;
492         my $tradition = $c->model('Directory')->tradition( $textid );
493         unless( $tradition ) {
494                 return _json_error( $c, 404, "No tradition with ID $textid" );
495         }
496         my $ok = _check_permission( $c, $tradition );
497         return unless $ok;
498         try {
499                 $c->stash->{'result'} = $tradition->collation->as_graphml();
500         } catch( Text::Tradition::Error $e ) {
501                 return _json_error( $c, 500, $e->message );
502         }
503         $c->forward('View::GraphML');
504 }
505
506 ####################
507 ### Helper functions
508 ####################
509
510 # Helper to check what permission, if any, the active user has for
511 # the given tradition
512 sub _check_permission {
513         my( $c, $tradition ) = @_;
514     my $user = $c->user_exists ? $c->user->get_object : undef;
515     if( $user ) {
516         return 'full' if ( $user->is_admin || 
517                 ( $tradition->has_user && $tradition->user->id eq $user->id ) );
518     }
519         # Text doesn't belong to us, so maybe it's public?
520         return 'readonly' if $tradition->public;
521
522         # ...nope. Forbidden!
523         return _json_error( $c, 403, 'You do not have permission to view this tradition.' );
524 }
525
526 # Helper to throw a JSON exception
527 sub _json_error {
528         my( $c, $code, $errmsg ) = @_;
529         $c->response->status( $code );
530         $c->stash->{'result'} = { 'error' => $errmsg };
531         $c->forward('View::JSON');
532         return 0;
533 }
534
535 =head2 default
536
537 Standard 404 error page
538
539 =cut
540
541 sub default :Path {
542     my ( $self, $c ) = @_;
543     $c->response->body( 'Page not found' );
544     $c->response->status(404);
545 }
546
547 =head2 end
548
549 Attempt to render a view, if needed.
550
551 =cut
552
553 sub end : ActionClass('RenderView') {}
554
555 =head1 AUTHOR
556
557 Tara L Andrews
558
559 =head1 LICENSE
560
561 This library is free software. You can redistribute it and/or modify
562 it under the same terms as Perl itself.
563
564 =cut
565
566 __PACKAGE__->meta->make_immutable;
567
568 1;