cgi/bugreport.cgi

   1 #!/usr/bin/perl -wT
   2
   3 package debbugs;
   4
   5 use strict;
   6 use POSIX qw(strftime tzset);
   7 use MIME::Parser;
   8 use MIME::Decoder;
   9 use IO::Scalar;
  10 use IO::Lines;
  11 use IO::File;
  12
  13 #require '/usr/lib/debbugs/errorlib';
  14 require './common.pl';
  15
  16 require '/etc/debbugs/config';
  17 require '/etc/debbugs/text';
  18
  19 use vars(qw($gEmailDomain $gHTMLTail $gSpoolDir $gWebDomain));
  20
  21 # for read_log_records
  22 use Debbugs::Log;
  23 use Debbugs::MIME qw(convert_to_utf8 decode_rfc1522);
  24
  25 use Scalar::Util qw(looks_like_number);
  26
  27 my %param = readparse();
  28
  29 my $tail_html;
  30
  31 my $ref = $param{'bug'} || quitcgi("No bug number");
  32 $ref =~ /(\d+)/ or quitcgi("Invalid bug number");
  33 $ref = $1;
  34 my $short = "#$ref";
  35 my $msg = $param{'msg'} || "";
  36 my $att = $param{'att'};
  37 my $boring = ($param{'boring'} || 'no') eq 'yes';
  38 my $terse = ($param{'terse'} || 'no') eq 'yes';
  39 my $reverse = ($param{'reverse'} || 'no') eq 'yes';
  40 my $mbox = ($param{'mbox'} || 'no') eq 'yes';
  41 my $mime = ($param{'mime'} || 'yes') eq 'yes';
  42
  43 my $trim_headers = ($param{trim} || ($msg?'no':'yes')) eq 'yes';
  44
  45 # Not used by this script directly, but fetch these so that pkgurl() and
  46 # friends can propagate them correctly.
  47 my $archive = ($param{'archive'} || 'no') eq 'yes';
  48 my $repeatmerged = ($param{'repeatmerged'} || 'yes') eq 'yes';
  49 set_option('archive', $archive);
  50 set_option('repeatmerged', $repeatmerged);
  51
  52 my $buglog = buglog($ref);
  53
  54 if ($ENV{REQUEST_METHOD} eq 'HEAD' and not defined($att) and not $mbox) {
  55     print "Content-Type: text/html; charset=utf-8\n";
  56     my @stat = stat $buglog;
  57     if (@stat) {
  58         my $mtime = strftime '%a, %d %b %Y %T GMT', gmtime($stat[9]);
  59         print "Last-Modified: $mtime\n";
  60     }
  61     print "\n";
  62     exit 0;
  63 }
  64
  65 sub display_entity ($$$$\$\@);
  66 sub display_entity ($$$$\$\@) {
  67     my $entity = shift;
  68     my $ref = shift;
  69     my $top = shift;
  70     my $xmessage = shift;
  71     my $this = shift;
  72     my $attachments = shift;
  73
  74     my $head = $entity->head;
  75     my $disposition = $head->mime_attr('content-disposition');
  76     $disposition = 'inline' if not defined $disposition or $disposition eq '';
  77     my $type = $entity->effective_type;
  78     my $filename = $entity->head->recommended_filename;
  79     $filename = '' unless defined $filename;
  80     $filename = decode_rfc1522($filename);
  81
  82     if ($top) {
  83          my $header = $entity->head;
  84          if ($trim_headers and not $terse) {
  85               my @headers;
  86               foreach (qw(From To Subject Date)) {
  87                    my $head_field = $head->get($_);
  88                    next unless defined $head_field and $head_field ne '';
  89                    push @headers, qq($_: ) . htmlsanit(decode_rfc1522($head_field));
  90               }
  91               $$this .= join(qq(), @headers) unless $terse;
  92               $$this .= qq(\n);
  93          }
  94          elsif (not $terse) {
  95               $$this .= htmlsanit(decode_rfc1522($entity->head->stringify));
  96               $$this .= qq(\n);
  97          }
  98     }
  99
 100     unless (($top and $type =~ m[^text(?:/plain)?(?:;|$)]) or
 101             ($type =~ m[^multipart/])) {
 102         push @$attachments, $entity;
 103         my @dlargs = ($ref, "msg=$xmessage", "att=$#$attachments");
 104         push @dlargs, "filename=$filename" if $filename ne '';
 105         my $printname = $filename;
 106         $printname = 'Message part ' . ($#$attachments + 1) if $filename eq '';
 107         $$this .= '[<a href="' . dlurl(@dlargs) . qq{">$printname</a> } .
 108                   "($type, $disposition)]\n\n";
 109
 110         if ($msg and defined($att) and $att eq $#$attachments) {
 111             my $head = $entity->head;
 112             chomp(my $type = $entity->effective_type);
 113             my $body = $entity->stringify_body;
 114             print "Content-Type: $type\n";
 115             if ($filename ne '') {
 116                 my $qf = $filename;
 117                 $qf =~ s/"/\\"/g;
 118                 $qf =~ s[.*/][];
 119                 print qq{Content-Disposition: attachment; filename="$qf"\n};
 120             }
 121             print "\n";
 122             my $decoder = new MIME::Decoder($head->mime_encoding);
 123             $decoder->decode(new IO::Scalar(\$body), \*STDOUT);
 124             exit(0);
 125         }
 126     }
 127
 128     return if not $top and $disposition eq 'attachment' and not defined($att);
 129     return unless ($type =~ m[^text/?] and
 130                    $type !~ m[^text/(?:html|enriched)(?:;|$)]) or
 131                   $type =~ m[^application/pgp(?:;|$)] or
 132                   $entity->parts;
 133
 134     if ($entity->is_multipart) {
 135         my @parts = $entity->parts;
 136         foreach my $part (@parts) {
 137             display_entity($part, $ref, 0, $xmessage,
 138                            $$this, @$attachments);
 139             $$this .= "\n";
 140         }
 141     } elsif ($entity->parts) {
 142         # We must be dealing with a nested message.
 143         $$this .= "<blockquote>\n";
 144         my @parts = $entity->parts;
 145         foreach my $part (@parts) {
 146             display_entity($part, $ref, 1, $xmessage,
 147                            $$this, @$attachments);
 148             $$this .= "\n";
 149         }
 150         $$this .= "</blockquote>\n";
 151     } else {
 152          if (not $terse) {
 153               my $content_type = $entity->head->get('Content-Type:');
 154               my ($charset) = $content_type =~ m/charset\s*=\s*\"?([\w-]+)\"?/i;
 155               my $body = $entity->bodyhandle->as_string;
 156               $body = convert_to_utf8($body,$charset) if defined $charset;
 157               $$this .= htmlsanit($body);
 158          }
 159     }
 160 }
 161
 162 my %maintainer = %{getmaintainers()};
 163 my %pkgsrc = %{getpkgsrc()};
 164
 165 my $indexentry;
 166 my $descriptivehead;
 167 my $showseverity;
 168
 169 my $tpack;
 170 my $tmain;
 171
 172 $ENV{"TZ"} = 'UTC';
 173 tzset();
 174
 175 my $dtime = strftime "%a, %e %b %Y %T UTC", localtime;
 176 $tail_html = $debbugs::gHTMLTail;
 177 $tail_html =~ s/SUBSTITUTE_DTIME/$dtime/;
 178
 179 my %status = %{getbugstatus($ref)};
 180 unless (%status) {
 181     print <<EOF;
 182 Content-Type: text/html; charset=utf-8
 183
 184 <!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">
 185 <html>
 186 <head><title>$debbugs::gProject $debbugs::gBug report logs - $short</title></head>
 187 <body>
 188 <h1>$debbugs::gProject $debbugs::gBug report logs - $short</h1>
 189 <p>There is no record of $debbugs::gBug $short.
 190 Try the <a href="http://$gWebDomain/">search page</a> instead.</p>
 191 $tail_html</body></html>
 192 EOF
 193     exit 0;
 194 }
 195
 196 $|=1;
 197
 198 $tpack = lc $status{'package'};
 199 my @tpacks = splitpackages($tpack);
 200
 201 if  ($status{severity} eq 'normal') {
 202         $showseverity = '';
 203 #} elsif (isstrongseverity($status{severity})) {
 204 #       $showseverity = "<strong>Severity: $status{severity}</strong>;\n";
 205 } else {
 206         $showseverity = "Severity: <em>$status{severity}</em>;\n";
 207 }
 208
 209 $indexentry .= "<p>$showseverity";
 210 $indexentry .= htmlpackagelinks($status{package}, 0) . ";\n";
 211
 212 $indexentry .= htmladdresslinks("Reported by: ", \&submitterurl,
 213                                 $status{originator}) . ";\n";
 214
 215 $indexentry .= "Owned by: " . htmlsanit($status{owner}) . ";\n"
 216               if length $status{owner};
 217
 218 my $dummy = strftime "%a, %e %b %Y %T UTC", localtime($status{date});
 219 $indexentry .= "Date: ".$dummy.";\n<br>";
 220
 221 my @descstates;
 222
 223 push @descstates, "Tags: <strong>"
 224                 . htmlsanit(join(", ", sort(split(/\s+/, $status{tags}))))
 225                 . "</strong>"
 226                         if length($status{tags});
 227
 228 my @merged= split(/ /,$status{mergedwith});
 229 if (@merged) {
 230         my $descmerged = 'merged with ';
 231         my $mseparator = '';
 232         for my $m (@merged) {
 233                 $descmerged .= $mseparator."<a href=\"" . bugurl($m) . "\">#$m</a>";
 234                 $mseparator= ",\n";
 235         }
 236         push @descstates, $descmerged;
 237 }
 238
 239 if (@{$status{found_versions}}) {
 240     my $foundtext = 'Found in ';
 241     $foundtext .= (@{$status{found_versions}} == 1) ? 'version ' : 'versions ';
 242     $foundtext .= join ', ', map htmlsanit($_), @{$status{found_versions}};
 243     push @descstates, $foundtext;
 244 }
 245
 246 if (@{$status{fixed_versions}}) {
 247     my $fixedtext = '<strong>Fixed</strong> in ';
 248     $fixedtext .= (@{$status{fixed_versions}} == 1) ? 'version ' : 'versions ';
 249     $fixedtext .= join ', ', map htmlsanit($_), @{$status{fixed_versions}};
 250     if (length($status{done})) {
 251         $fixedtext .= ' by ' . htmlsanit(decode_rfc1522($status{done}));
 252     }
 253     push @descstates, $fixedtext;
 254 } elsif (length($status{done})) {
 255         push @descstates, "<strong>Done:</strong> ".htmlsanit(decode_rfc1522($status{done}));
 256 } elsif (length($status{forwarded})) {
 257         push @descstates, "<strong>Forwarded</strong> to ".maybelink($status{forwarded});
 258 }
 259
 260 $indexentry .= join(";\n", @descstates) . ";\n<br>" if @descstates;
 261
 262 $descriptivehead = $indexentry;
 263 foreach my $pkg (@tpacks) {
 264     my $tmaint = defined($maintainer{$pkg}) ? $maintainer{$pkg} : '(unknown)';
 265     my $tsrc = defined($pkgsrc{$pkg}) ? $pkgsrc{$pkg} : '(unknown)';
 266
 267     $descriptivehead .=
 268             htmlmaintlinks(sub { $_[0] == 1 ? "Maintainer for $pkg is\n"
 269                                             : "Maintainers for $pkg are\n" },
 270                            $tmaint);
 271     $descriptivehead .= ";\nSource for $pkg is\n".
 272             '<a href="'.srcurl($tsrc)."\">$tsrc</a>" if ($tsrc ne "(unknown)");
 273     $descriptivehead .= ".\n<br>";
 274 }
 275
 276 my $buglogfh;
 277 if ($buglog =~ m/\.gz$/) {
 278     my $oldpath = $ENV{'PATH'};
 279     $ENV{'PATH'} = '/bin:/usr/bin';
 280     $buglogfh = new IO::File "zcat $buglog |" or &quitcgi("open log for $ref: $!");
 281     $ENV{'PATH'} = $oldpath;
 282 } else {
 283     $buglogfh = new IO::File "<$buglog" or &quitcgi("open log for $ref: $!");
 284 }
 285 if ($buglog !~ m#^\Q$gSpoolDir/db#) {
 286     $descriptivehead .= "\n<p>Bug is <strong>archived</strong>. No further changes may be made.</p>";
 287 }
 288
 289
 290 my @records = read_log_records($buglogfh);
 291 undef $buglogfh;
 292
 293 =head2 handle_email_message
 294
 295      handle_email_message($record->{text},
 296                           ref        => $bug_number,
 297                           msg_number => $msg_number,
 298                          );
 299
 300 Returns a decoded e-mail message and displays entities/attachments as
 301 appropriate.
 302
 303
 304 =cut
 305
 306 sub handle_email_message{
 307      my ($email,%options) = @_;
 308
 309      my $output = '';
 310      my $parser = new MIME::Parser;
 311      $parser->tmp_to_core(1);
 312      $parser->output_to_core(1);
 313      # $parser->output_under("/tmp");
 314      my $entity = $parser->parse_data( $email);
 315      # TODO: make local subdir, clean it ourselves
 316      # the following does NOT delete the msg dirs in /tmp
 317      END { if ( $entity ) { $entity->purge; } if ( $parser ) { $parser->filer->purge; } }
 318      my @attachments = ();
 319      display_entity($entity, $options{ref}, 1, $options{msg_number}, $output, @attachments);
 320      return $output;
 321
 322 }
 323
 324 =head2 handle_record
 325
 326      push @log, handle_record($record,$ref,$msg_num);
 327
 328 Deals with a record in a bug log as returned by
 329 L<Debbugs::Log::read_log_records>; returns the log information that
 330 should be output to the browser.
 331
 332 =cut
 333
 334 sub handle_record{
 335      my ($record,$bug_number,$msg_number,$seen_msg_ids) = @_;
 336
 337      my $output = '';
 338      local $_ = $record->{type};
 339      if (/html/) {
 340           $output .= decode_rfc1522($record->{text});
 341           $output .= '<a href="' . bugurl($ref, 'msg='.($msg_number+1)) . '">Full text</a> and <a href="' .
 342                bugurl($ref, 'msg='.($msg_number+1)) . '&mbox=yes">rfc822 format</a> available.</em>';
 343      }
 344      elsif (/recips/) {
 345           my ($msg_id) = $record->{text} =~ /^Message-Id:\s+<(.+)>/im;
 346           if (defined $msg_id and exists $$seen_msg_ids{$msg_id}) {
 347                return ();
 348           }
 349           elsif (defined $msg_id) {
 350                $$seen_msg_ids{$msg_id} = 1;
 351           }
 352           $output .= 'View this message in <a href="' . bugurl($ref, "msg=$msg_number") . '&mbox=yes">rfc822 format</a></em>';
 353           $output .= '<pre class="message">' .
 354                handle_email_message($record->{text},
 355                                     ref        => $bug_number,
 356                                     msg_number => $msg_number,
 357                                    ) . '</pre>';
 358      }
 359      elsif (/autocheck/) {
 360           # Do nothing
 361      }
 362      elsif (/incoming-recv/) {
 363           my ($msg_id) = $record->{text} =~ /^Message-Id:\s+<(.+)>/im;
 364           if (defined $msg_id and exists $$seen_msg_ids{$msg_id}) {
 365                return ();
 366           }
 367           elsif (defined $msg_id) {
 368                $$seen_msg_ids{$msg_id} = 1;
 369           }
 370           # Incomming Mail Message
 371           my ($received,$hostname) = $record->{text} =~ m/Received: \(at (\S+)\) by (\S+)\;/;
 372           $output .= qq|<h2><a name="msg$msg_number">Message received at |.
 373                htmlsanit("$received\@$hostname") . q| (<a href="| . bugurl($ref, "msg=$msg_number") . '">full text</a>'.q|, <a href="| . bugurl($ref, "msg=$msg_number") . '&mbox=yes">mbox</a>)'.":</a></h2>\n";
 374           $output .= '<pre class="message">' .
 375                handle_email_message($record->{text},
 376                                     ref        => $bug_number,
 377                                     msg_number => $msg_number,
 378                                    ) . '</pre>';
 379      }
 380      else {
 381           die "Unknown record type $_";
 382      }
 383      return $output;
 384 }
 385
 386 my $log='';
 387 my $msg_num = 0;
 388 my $skip_next = 0;
 389 if (looks_like_number($msg) and ($msg-1) <= $#records) {
 390      @records = ($records[$msg-1]);
 391      $msg_num = $msg - 1;
 392 }
 393 my @log;
 394 if ( $mbox ) {
 395      if (@records > 1) {
 396           print qq(Content-Disposition: attachment; filename="bug_${ref}.mbox"\n);
 397           print "Content-Type: text/plain\n\n";
 398      }
 399      else {
 400           print qq(Content-Disposition: attachment; filename="bug_${ref}_message_${msg_num}.mbox"\n);
 401           print "Content-Type: message/rfc822\n\n";
 402      }
 403      for my $record (@records) {
 404           next if $record->{type} !~ /^(?:recips|incoming-recv)$/;
 405           next if not $boring and $record->{type} eq 'recips';
 406           my @lines = split( "\n", $record->{text}, -1 );
 407           if ( $lines[ 1 ] =~ m/^From / ) {
 408                my $tmp = $lines[ 0 ];
 409                $lines[ 0 ] = $lines[ 1 ];
 410                $lines[ 1 ] = $tmp;
 411           }
 412           if ( !( $lines[ 0 ] =~ m/^From / ) ) {
 413                my $date = strftime "%a %b %d %T %Y", localtime;
 414                unshift @lines, "From unknown $date";
 415           }
 416           map { s/^(>*From )/>$1/ } @lines[ 1 .. $#lines ];
 417           print join( "\n", @lines ) . "\n";
 418      }
 419      exit 0;
 420 }
 421
 422 else {
 423      my %seen_msg_ids;
 424      for my $record (@records) {
 425           $msg_num++;
 426           if ($skip_next) {
 427                $skip_next = 0;
 428                next;
 429           }
 430           $skip_next = 1 if $record->{type} eq 'html' and not $boring;
 431           push @log, handle_record($record,$ref,$msg_num,\%seen_msg_ids);
 432      }
 433 }
 434
 435 @log = reverse @log if $reverse;
 436 $log = join('<hr>',@log);
 437
 438
 439 print "Content-Type: text/html; charset=utf-8\n\n";
 440
 441 my $title = htmlsanit($status{subject});
 442
 443 print "<!DOCTYPE HTML PUBLIC \"-//W3C//DTD HTML 4.01 Transitional//EN\">\n";
 444 print "<HTML><HEAD>\n" .
 445     "<TITLE>$debbugs::gProject $debbugs::gBug report logs - $short - $title</TITLE>\n" .
 446 #    "<link rel=\"stylesheet\" href=\"$debbugs::gWebHostBugDir/bugs.css\" type=\"text/css\">" .
 447     "</HEAD>\n" .
 448     '<BODY>' .
 449     "\n";
 450 print "<H1>" . "$debbugs::gProject $debbugs::gBug report logs - <A HREF=\"mailto:$ref\@$gEmailDomain\">$short</A>" .
 451       "<BR>" . $title . "</H1>\n";
 452
 453 print "$descriptivehead\n";
 454 printf "<p>View this report as an <a href=\"%s\">mbox folder</a>.</p>\n", mboxurl($ref);
 455 print "<HR>";
 456 print "$log";
 457 print $tail_html;
 458
 459 print "</BODY></HTML>\n";
 460
 461 exit 0;