1 7d6d378a 2022-08-24 op #!/usr/bin/env perl
  2 1bcb9899 2022-08-29 op #
  3 1bcb9899 2022-08-29 op # mexp was written by Omar Polo <op@openbsd.org> and is placed in the
  4 1bcb9899 2022-08-29 op # public domain.  The author hereby disclaims copyright to this source
  5 1bcb9899 2022-08-29 op # code.
  6 7d6d378a 2022-08-24 op 
  7 7d6d378a 2022-08-24 op use open ":std", ":encoding(UTF-8)";
  8 7d6d378a 2022-08-24 op use utf8;
  9 7d6d378a 2022-08-24 op use strict;
 10 7d6d378a 2022-08-24 op use warnings;
 11 7d6d378a 2022-08-24 op use v5.32;
 12 7d6d378a 2022-08-24 op 
 13 1edd511a 2023-04-01 op use List::Util qw(max min);
 14 1edd511a 2023-04-01 op 
 15 054f3fd4 2022-08-25 op use OpenBSD::Pledge;
 16 054f3fd4 2022-08-25 op use OpenBSD::Unveil;
 17 054f3fd4 2022-08-25 op 
 18 04eab9af 2022-08-25 op use lib ".";
 19 f0fb0f08 2022-08-30 op use GotMArc qw(parse san urlencode initpage endpage thread_header);
 20 04eab9af 2022-08-25 op 
 21 7d6d378a 2022-08-24 op my $outdir = $ENV{'OUTDIR'};
 22 7d6d378a 2022-08-24 op die 'Set $OUTDIR' unless defined $outdir;
 23 7d6d378a 2022-08-24 op 
 24 054f3fd4 2022-08-25 op unveil("/usr/local/bin/mshow", "rx") or die "unveil mshow: $!";
 25 054f3fd4 2022-08-25 op unveil($outdir, "rwc") or die "unveil $outdir: $!";
 26 d3d07147 2022-08-30 op 
 27 66e1cf97 2022-08-27 op unveil(".", "r") or die "unveil .: $!";
 28 054f3fd4 2022-08-25 op 
 29 53bed501 2023-03-29 op pledge("stdio rpath wpath cpath proc exec") or die "pledge: $!";
 30 66e1cf97 2022-08-27 op 
 31 f3481d06 2022-09-13 op sub export_part {
 32 f3481d06 2022-09-13 op 	my ($fh, $n, $fname) = @_;
 33 f3481d06 2022-09-13 op 
 34 f3481d06 2022-09-13 op 	my $pid = fork;
 35 f3481d06 2022-09-13 op 	die "fork: $!" unless defined $pid;
 36 f3481d06 2022-09-13 op 	if ($pid == 0) {
 37 f3481d06 2022-09-13 op 		open \*STDOUT, '>&', $fh
 38 f3481d06 2022-09-13 op 		    or die "can't redirect stdout: $!";
 39 f3481d06 2022-09-13 op 		exec 'mshow', '-F', '-O', $fname, $n
 40 f3481d06 2022-09-13 op 		    or die "can't exec mshow: $!";
 41 f3481d06 2022-09-13 op 	}
 42 f3481d06 2022-09-13 op 
 43 f3481d06 2022-09-13 op 	waitpid $pid, 0;
 44 f3481d06 2022-09-13 op 	die "mshow exited with $? ($n, $fname)" if $?;
 45 f3481d06 2022-09-13 op }
 46 f3481d06 2022-09-13 op 
 47 6240f9b8 2022-09-13 op # like libutil' fmt_scaled
 48 6240f9b8 2022-09-13 op sub humanize {
 49 6240f9b8 2022-09-13 op 	my $number = shift;
 50 6240f9b8 2022-09-13 op 	my @units = qw(             G          M     K  B);
 51 6240f9b8 2022-09-13 op 	my @scale =   (1024*1024*1024, 1024*1024, 1024, 1);
 52 6240f9b8 2022-09-13 op 
 53 6240f9b8 2022-09-13 op 	for (my $i = 0; $i < @scale; $i++) {
 54 6240f9b8 2022-09-13 op 		if ($scale[$i] < $number) {
 55 6240f9b8 2022-09-13 op 			my $r = $number / $scale[$i];
 56 6240f9b8 2022-09-13 op 			return sprintf "%.0f%s", $r, $units[$i];
 57 6240f9b8 2022-09-13 op 		}
 58 6240f9b8 2022-09-13 op 	}
 59 6240f9b8 2022-09-13 op }
 60 6240f9b8 2022-09-13 op 
 61 1edd511a 2023-04-01 op sub thrnav {
 62 1edd511a 2023-04-01 op 	my ($fh, $p, $n, $mid, $tid) = @_;
 63 1edd511a 2023-04-01 op 	my @prev = @{$p};
 64 1edd511a 2023-04-01 op 	my @next = @{$n};
 65 7d6d378a 2022-08-24 op 
 66 1edd511a 2023-04-01 op 	return if !@prev && !@next;
 67 1edd511a 2023-04-01 op 	print $fh "<nav>";
 68 7d6d378a 2022-08-24 op 
 69 1edd511a 2023-04-01 op 	if (@prev) {
 70 1edd511a 2023-04-01 op 		my $mail = $prev[-1];
 71 1edd511a 2023-04-01 op 		my $encmid = $mail->{mid};
 72 1edd511a 2023-04-01 op 		say $fh "<a href='/mail/$encmid.html'>Previous</a>";
 73 1edd511a 2023-04-01 op 	} else {
 74 1edd511a 2023-04-01 op 		say $fh "<span>Previous</span>";
 75 1edd511a 2023-04-01 op 	}
 76 1edd511a 2023-04-01 op 
 77 1edd511a 2023-04-01 op 	if (defined($mid) && defined($tid)) {
 78 1edd511a 2023-04-01 op 		my $encmid = urlencode $mid;
 79 1edd511a 2023-04-01 op 		my $enctid = urlencode $tid;
 80 1edd511a 2023-04-01 op 		say $fh "<a href='/text/$encmid.txt'>Raw body</a>";
 81 1edd511a 2023-04-01 op 		say $fh "<a href='/thread/$enctid.html#$encmid'>Thread</a>";
 82 1edd511a 2023-04-01 op 	}
 83 1edd511a 2023-04-01 op 
 84 1edd511a 2023-04-01 op 	if (@next) {
 85 1edd511a 2023-04-01 op 		my $mail = $next[0];
 86 1edd511a 2023-04-01 op 		my $encmid = $mail->{mid};
 87 1edd511a 2023-04-01 op 		say $fh "<a href='/mail/$encmid.html'>Next</a>";
 88 1edd511a 2023-04-01 op 	} else {
 89 1edd511a 2023-04-01 op 		say $fh "<span>Next</span>";
 90 1edd511a 2023-04-01 op 	}
 91 1edd511a 2023-04-01 op 
 92 1edd511a 2023-04-01 op 	print $fh "</nav>";
 93 1edd511a 2023-04-01 op }
 94 1edd511a 2023-04-01 op 
 95 1edd511a 2023-04-01 op sub export_one {
 96 1edd511a 2023-04-01 op 	my ($mail, $prev, $next) = @_;
 97 bbdbef1a 2023-04-01 op 	my $dest = "$outdir/mail/$mail->{mid}.html";
 98 c971fcee 2022-08-25 op 
 99 7d6d378a 2022-08-24 op 	open(my $fh, '>', "$dest") or die "can't open $dest: $!";
100 7d6d378a 2022-08-24 op 
101 bbdbef1a 2023-04-01 op 	initpage $fh, $mail->{subj};
102 7d6d378a 2022-08-24 op 
103 bbdbef1a 2023-04-01 op 	open(my $mshow, "-|", "mshow", "-nNA", "text/plain", $mail->{fname})
104 7d6d378a 2022-08-24 op 	    or die "can't exec mshow: $!";
105 7d6d378a 2022-08-24 op 
106 bbdbef1a 2023-04-01 op 	open(my $text, '>', "$outdir/text/$mail->{mid}.txt")
107 bbdbef1a 2023-04-01 op 	    or die "can't open $outdir/text/$mail->{mid}.txt: $!";
108 84989e10 2022-08-24 op 
109 9d8482ab 2022-08-27 op 	my @hdrs;
110 7d6d378a 2022-08-24 op 	while (<$mshow>) {
111 7d6d378a 2022-08-24 op 		last if /^$/;
112 7d6d378a 2022-08-24 op 
113 7d6d378a 2022-08-24 op 		# drop the (1 day ago) string
114 6e04f5f4 2022-08-27 op 		s/ \(.*\)// if /^Date:/;
115 6797be46 2022-08-27 op 		print $text $_;
116 9d8482ab 2022-08-27 op 		push @hdrs, san($_);
117 7d6d378a 2022-08-24 op 	}
118 6797be46 2022-08-27 op 	say $text "";
119 7d6d378a 2022-08-24 op 
120 1edd511a 2023-04-01 op 	thread_header $fh, $mail->{tid}, $mail->{mid}, \@hdrs;
121 1edd511a 2023-04-01 op 	thrnav $fh, $prev, $next;
122 9d8482ab 2022-08-27 op 
123 7d6d378a 2022-08-24 op 	print $fh "<pre>";
124 5b01d758 2022-08-25 op 	while (<$mshow>) {
125 5b01d758 2022-08-25 op 		print $text $_;
126 5b01d758 2022-08-25 op 		print $fh san($_);
127 5b01d758 2022-08-25 op 	}
128 7d6d378a 2022-08-24 op 	print $fh "</pre>";
129 7d6d378a 2022-08-24 op 
130 f1ceade9 2022-08-24 op 	# generate the listing for the exported parts
131 bbdbef1a 2023-04-01 op 	open(my $parts, '-|', 'mshow', '-t', $mail->{fname})
132 f3481d06 2022-09-13 op 	    or die "can't exec mshow: $!";
133 f3481d06 2022-09-13 op 
134 53bed501 2023-03-29 op 	my $partno = 0;
135 f3481d06 2022-09-13 op 	while (<$parts>) {
136 f3481d06 2022-09-13 op 		my ($n, $mime, $size, $name) =
137 f3481d06 2022-09-13 op 		    m/(\d+): ([^ ]+) size=(\d+) name="(.*)"/ or next;
138 f3481d06 2022-09-13 op 
139 f3481d06 2022-09-13 op 		next if $mime =~ m(application/application/pgp-signature);
140 f3481d06 2022-09-13 op 		next if $mime =~ m(audio/*);
141 f3481d06 2022-09-13 op 		next if $mime =~ m(video/*);
142 f3481d06 2022-09-13 op 
143 f3481d06 2022-09-13 op 		my $ext = "bin";
144 f3481d06 2022-09-13 op 		if ($mime =~ m(image/*)) {
145 f3481d06 2022-09-13 op 			if ($mime eq "image/gif") {
146 f3481d06 2022-09-13 op 				$ext = "gif";
147 f3481d06 2022-09-13 op 			} elsif ($mime eq "image/jpeg") {
148 f3481d06 2022-09-13 op 				$ext = "jpg";
149 f3481d06 2022-09-13 op 			} elsif ($mime eq "image/png") {
150 f3481d06 2022-09-13 op 				$ext = "png";
151 f3481d06 2022-09-13 op 			} else {
152 f3481d06 2022-09-13 op 				# skip other image types for now.
153 f3481d06 2022-09-13 op 				next;
154 f3481d06 2022-09-13 op 			}
155 f3481d06 2022-09-13 op 		}
156 f3481d06 2022-09-13 op 
157 f3481d06 2022-09-13 op 		# text/* is bundled in the body by mshow(1).
158 f3481d06 2022-09-13 op 
159 53bed501 2023-03-29 op 		say $fh "<ul class='parts'>" if $partno == 0;
160 53bed501 2023-03-29 op 		$partno++;
161 f3481d06 2022-09-13 op 
162 bbdbef1a 2023-04-01 op 		my $path = "$outdir/parts/$mail->{mid}.$partno.$ext";
163 53bed501 2023-03-29 op 		open my $p, '>', $path
164 bbdbef1a 2023-04-01 op 		    or die "can't open $mail->{fname}: $!";
165 bbdbef1a 2023-04-01 op 		export_part($p, $n, $mail->{fname});
166 f3481d06 2022-09-13 op 		close($p);
167 f3481d06 2022-09-13 op 
168 f3481d06 2022-09-13 op 		$path =~ s,^.*/parts/,/parts/,;
169 f3481d06 2022-09-13 op 
170 53bed501 2023-03-29 op 		my $url = san($path);
171 6240f9b8 2022-09-13 op 		my $hs = humanize $size;
172 6240f9b8 2022-09-13 op 		say $fh "<li><a href='$url'>$name ($hs)</a></li>";
173 f1ceade9 2022-08-24 op 	}
174 53bed501 2023-03-29 op 	say $fh "</ul>" if $partno > 0;
175 f1ceade9 2022-08-24 op 
176 1edd511a 2023-04-01 op 	thrnav $fh, $prev, $next, $mail->{mid}, $mail->{tid};
177 f0fb0f08 2022-08-30 op 
178 04eab9af 2022-08-25 op 	endpage $fh;
179 7d6d378a 2022-08-24 op 
180 84989e10 2022-08-24 op 	close($text);
181 7d6d378a 2022-08-24 op 	close($mshow);
182 f3481d06 2022-09-13 op 	close($parts);
183 7d6d378a 2022-08-24 op 	close($fh);
184 f1ceade9 2022-08-24 op 
185 66e1cf97 2022-08-27 op 	unlink $parts;
186 66e1cf97 2022-08-27 op }
187 1edd511a 2023-04-01 op 
188 1edd511a 2023-04-01 op sub export {
189 1edd511a 2023-04-01 op 	my @thread = @_;
190 1edd511a 2023-04-01 op 
191 1edd511a 2023-04-01 op 	for (my $i = 0; $i < @thread; $i++) {
192 1edd511a 2023-04-01 op 		my (@prev, @next);
193 1edd511a 2023-04-01 op 		@prev = @thread[max($i-3, 0)..$i-1] if $i > 0;
194 1edd511a 2023-04-01 op 		@next = @thread[$i+1..min($i+3, @thread - 1)]
195 1edd511a 2023-04-01 op 		    if $i + 1 < @thread;
196 1edd511a 2023-04-01 op 		export_one $thread[$i], \@prev, \@next;
197 1edd511a 2023-04-01 op 	}
198 1edd511a 2023-04-01 op }
199 1edd511a 2023-04-01 op 
200 1edd511a 2023-04-01 op my $tid;
201 1edd511a 2023-04-01 op my @thread;
202 1edd511a 2023-04-01 op while (<>) {
203 1edd511a 2023-04-01 op 	my $mail = parse $_;
204 1edd511a 2023-04-01 op 
205 1edd511a 2023-04-01 op 	if ($mail->{level} == 0 && @thread) {
206 1edd511a 2023-04-01 op 		export @thread;
207 1edd511a 2023-04-01 op 		@thread = ();
208 1edd511a 2023-04-01 op 	}
209 1edd511a 2023-04-01 op 
210 1edd511a 2023-04-01 op 	$tid = $mail->{mid} if $mail->{level} == 0;
211 1edd511a 2023-04-01 op 	die "unknown tid" unless defined $tid;
212 1edd511a 2023-04-01 op 	$mail->{tid} = $tid;
213 1edd511a 2023-04-01 op 
214 1edd511a 2023-04-01 op 	# export_one $mail, $tid
215 1edd511a 2023-04-01 op 	push @thread, $mail;
216 1edd511a 2023-04-01 op }
217 1edd511a 2023-04-01 op 
218 1edd511a 2023-04-01 op export @thread if @thread;