lib/App/SCS/PageSet.pm

   1 package App::SCS::PageSet;
   2
   3 use Text::MultiMarkdown 'markdown';
   4 use HTML::Zoom;
   5 use Sub::Quote;
   6 use Syntax::Keyword::Gather;
   7 use App::SCS::Page;
   8 use IO::All;
   9 use Try::Tiny;
  10 use List::Util qw(reduce max);
  11 use Module::Runtime qw(use_module);
  12 use JSON::MaybeXS;
  13 use Moo;
  14 use Hash::Merge qw(merge);
  15 use Data::Pond qw(pond_read_datum pond_write_datum);
  16 use JSONY;
  17
  18 with 'App::SCS::Role::PageChildren';
  19
  20 {
  21   my $j = JSON->new;
  22   sub _json { $j }
  23 }
  24
  25 has top_dir => (is => 'ro', lazy => 1, builder => 'base_dir');
  26 has base_dir => (is => 'ro', required => 1);
  27 has plugin_config => (is => 'ro', required => 1);
  28 has max_depth => (is => 'ro', default => quote_sub q{ 0 });
  29 has min_depth => (is => 'ro', default => quote_sub q{ 1 });
  30
  31 has rel_path => (is => 'lazy');
  32
  33 sub _build_rel_path {
  34   my ($self) = @_;
  35   io->dir('/')
  36     ->catdir(File::Spec->abs2rel($self->base_dir->name, $self->top_dir->name))
  37 }
  38
  39 sub _page_set { $_[0] }
  40 sub _page_set_class { ref($_[0]) }
  41 sub _top_dir { shift->top_dir }
  42 sub _my_path { shift->base_dir }
  43
  44 sub get {
  45   my ($self, $spec) = @_;
  46   $spec->{path} or die "path is required to get";
  47   my ($dir, $file) = $spec->{path} =~ m{^(?:(.*)/)?([^/]+)$};
  48   my $type;
  49   my @poss = io->dir($self->base_dir)->${\sub {
  50     my $io = shift;
  51     defined($dir) ? $io->catdir($dir) : $io
  52   }}->filter(sub {
  53         $_->filename =~ /^\Q${file}\E${\$self->_types_re}$/ and $type = $1
  54       })
  55     ->${\sub { -e "$_[0]" ? $_[0]->all_files : () }};
  56   die "multiple files found for ${\$spec->{path}}:\n".join "\n", @poss
  57     if @poss > 1;
  58   return undef unless @poss;
  59   $self->_inflate(
  60     $type, $self->rel_path->catdir($spec->{path}), $poss[0]
  61   );
  62 }
  63
  64 sub _get_config_files {
  65   my ($self, $path) = @_;
  66
  67   my @files = ();
  68   my @dirs = io->dir($path)->splitdir;
  69
  70
  71   shift @dirs;
  72   pop @dirs;
  73   my $buildpath = io('');
  74
  75   foreach my $dir (@dirs) {
  76     $buildpath = $buildpath->catdir("/$dir");
  77     #/home/.../share/pages/blog.conf etc
  78
  79     my $file = $self->_top_dir->catfile("$buildpath.conf");
  80
  81     if (!$file->exists || !$file->file || $file->empty) {
  82         next;
  83     }
  84
  85     push @files, $file;
  86   }
  87
  88   return \@files;
  89 }
  90
  91 sub _inflate {
  92   my ($self, $type, $path, $io) = @_;
  93   (my $cache_name = $io->name) =~ s/\/([^\/]+)$/\/.htcache.$1.json/;
  94   my $cache = io($cache_name);
  95   my $config_files = $self->_get_config_files($path);
  96   my $maxstat = 0;
  97
  98   if (scalar @$config_files) {
  99     my $maxfile = reduce { $a->mtime > $b->mtime ? $a : $b } @$config_files;
 100     $maxstat = $maxfile->mtime;
 101   }
 102
 103   if (-f $cache_name) {
 104     if ($cache->mtime >= max($io->mtime, $maxstat)) {
 105       return try {
 106         $self->_new_page($path, $self->_json->decode($cache->all));
 107       } catch {
 108         die "Error inflating ${path} from cache: $_\n";
 109       }
 110     }
 111   }
 112   my $raw = $io->all;
 113   try {
 114     my $extracted = $self->${\"_extract_from_${type}"}($raw);
 115     my $jsony = JSONY->new;
 116     my $config = reduce { merge($a, $jsony->load($b->all)) } {}, @$config_files;
 117
 118     $extracted->{plugins} = pond_read_datum('[' . $extracted->{plugins} . ']');
 119     my $setup = merge($extracted, $config);
 120
 121     try {
 122         my $tmp_cache = io($cache_name . ".tmp");
 123         $tmp_cache->print($self->_json->encode($setup));
 124         $tmp_cache->rename($cache_name);
 125     };
 126
 127     $self->_new_page($path, $setup);
 128   } catch {
 129     die "Error inflating ${path} as ${type}: $_\n";
 130   }
 131 }
 132
 133 sub map {
 134   my ($self, $mapper) = @_;
 135   [ map $mapper->($_), $self->flatten ]
 136 }
 137
 138 sub _depth_under_base {
 139   my ($self, $path) = @_;
 140   File::Spec->splitdir(File::Spec->abs2rel($path, $self->base_dir->name))
 141 }
 142
 143 sub flatten {
 144   my ($self) = @_;
 145   my $slash = io->dir('/');
 146   map {
 147     my ($path, $type) = $_->name =~ /^(.*)${\$self->_types_re}$/;
 148     $self->_inflate(
 149       $type,
 150       $slash->catdir(File::Spec->abs2rel($path, $self->top_dir->name)),
 151       $_
 152     );
 153   } $self->_all_files;
 154 }
 155
 156 sub all_paths {
 157   my ($self) = @_;
 158   my $slash = io->dir('/');
 159   map {
 160     my ($path, $type) = $_->name =~ /^(.*)${\$self->_types_re}$/;
 161     $slash->catdir(File::Spec->abs2rel($path, $self->top_dir->name))->name,
 162   } $self->_all_files;
 163 }
 164
 165 sub _all_files {
 166   my ($self) = @_;
 167   return unless (my $base = $self->base_dir)->exists;
 168   my %seen;
 169   my $min = $self->min_depth;
 170   map {
 171     $_->filter(sub { $_->filename =~ /${\$self->_types_re}$/ })
 172       ->all_files($self->max_depth - ($min-1))
 173   } map
 174       $min > 1
 175         ? do {
 176             # can't use ->all_dirs($min-1) since we only want the final level
 177             my @x = ($_); @x = map $_->all_dirs, @x for 1..$min-1; @x
 178           }
 179         : $_,
 180       $base;
 181 }
 182
 183 sub latest {
 184   my ($self, $max) = @_;
 185   use_module('App::SCS::LatestPageSet')->new(
 186     parent => $self,
 187     max_entries => $max,
 188   );
 189 }
 190
 191 sub _new_page {
 192   use_module('App::SCS::Page')->new(
 193     path => $_[1], page_set => $_[0], %{$_[2]}
 194   );
 195 }
 196
 197 sub _types_re { qw/\.(html|md)/ }
 198
 199 sub _extract_from_html {
 200   my ($self, $html) = @_;
 201   my %meta;
 202   HTML::Zoom->from_html($html)
 203     ->select('title')->collect_content({ into => \my @title })
 204     ->${\sub {
 205         my $z = shift;
 206         return reduce {
 207           $a->collect("meta[name=${b}]", { into => ($meta{$b}=[]) })
 208         } $z, qw(subtitle description keywords created plugins)
 209       }}
 210     ->run;
 211   +{
 212     title => $title[0]->{raw}||'',
 213     (map +($_ => $meta{$_}[0]->{attrs}{content}||''), keys %meta),
 214     html => $html,
 215   }
 216 }
 217
 218 sub _extract_from_md {
 219   my ($self, $md) = @_;
 220   $self->_extract_from_html(markdown($md, { document_format => 'complete' }));
 221 }
 222
 223 1;