cgi/common.pl

   1 #!/usr/bin/perl -w
   2
   3 use DB_File;
   4 use Fcntl qw/O_RDONLY/;
   5 use Mail::Address;
   6 use MLDBM qw/DB_File/;
   7 use POSIX qw/ceil/;
   8
   9 $config_path = '/etc/debbugs';
  10 $lib_path = '/usr/lib/debbugs';
  11 require "$lib_path/errorlib";
  12
  13 use Debbugs::Versions;
  14
  15 $MLDBM::RemoveTaint = 1;
  16
  17 my $common_archive = 0;
  18 my $common_repeatmerged = 1;
  19 my %common_include = ();
  20 my %common_exclude = ();
  21 my $common_raw_sort = 0;
  22 my $common_bug_reverse = 0;
  23
  24 my %common_reverse = (
  25     'pending' => 0,
  26     'severity' => 0,
  27 );
  28 my %common = (
  29     'show_list_header' => 1,
  30     'show_list_footer' => 1,
  31 );
  32
  33 sub exact_field_match {
  34     my ($field, $values, $status) = @_;
  35     my @values = @$values;
  36     my @ret = grep {$_ eq $status->{$field} } @values;
  37     $#ret != -1;
  38 }
  39 sub contains_field_match {
  40     my ($field, $values, $status) = @_;
  41     foreach my $data (@$values) {
  42         return 1 if (index($status->{$field}, $data) > -1);
  43     }
  44     return 0;
  45 }
  46
  47 sub detect_user_agent {
  48     my $userAgent = $ENV{HTTP_USER_AGENT};
  49     return { 'name' => 'links' } if ( $userAgent =~ m,^ELinks,);
  50     return { 'name' => 'lynx' } if ( $userAgent =~ m,^Lynx,);
  51     return { 'name' => 'wget' } if ( $userAgent =~ m,^Wget,);
  52     return { 'name' => 'gecko' } if ( $userAgent =~ m,^Mozilla.* Gecko/,);
  53     return { 'name' => 'ie' } if ( $userAgent =~ m,^.*MSIE.*,);
  54     return { 'name' => 'unknown' };
  55 }
  56 my %field_match = (
  57     'subject' => \&contains_field_match,
  58     'tags' => sub {
  59         my ($field, $values, $status) = @_;
  60         my %values = map {$_=>1} @$values;
  61         foreach my $t (split /\s+/, $status->{$field}) {
  62             return 1 if (defined $values{$t});
  63         }
  64         return 0;
  65     },
  66     'severity' => \&exact_field_match,
  67     'pending' => \&exact_field_match,
  68     'originator' => \%contains_field_match,
  69     'forwarded' => \%contains_field_match,
  70     'owner' => \%contains_field_match,
  71 );
  72 my @common_grouping = ( 'severity', 'pending' );
  73 my %common_grouping_order = (
  74     'pending' => [ qw( pending forwarded pending-fixed fixed done absent ) ],
  75     'severity' => \@debbugs::gSeverityList,
  76 );
  77 my %common_grouping_display = (
  78     'pending' => 'Status',
  79     'severity' => 'Severity',
  80 );
  81 my %common_headers = (
  82     'pending' => {
  83         "pending"       => "outstanding",
  84         "pending-fixed" => "pending upload",
  85         "fixed"         => "fixed in NMU",
  86         "done"          => "resolved",
  87         "forwarded"     => "forwarded to upstream software authors",
  88         "absent"        => "not applicable to this version",
  89     },
  90     'severity' => \%debbugs::gSeverityDisplay,
  91 );
  92
  93 my $common_version;
  94 my $common_dist;
  95 my $common_arch;
  96
  97 my $debug = 0;
  98
  99 sub array_option($) {
 100     my ($val) = @_;
 101     my @vals;
 102     @vals = ( $val ) if (ref($val) eq "" && $val );
 103     @vals = ( $$val ) if (ref($val) eq "SCALAR" && $$val );
 104     @vals = @{$val} if (ref($val) eq "ARRAY" );
 105     return @vals;
 106 }
 107
 108 sub filter_include_exclude($\%) {
 109     my ($val, $filter_map) = @_;
 110     my @vals = array_option($val);
 111     my @data = map {
 112         if (/^([^:]*):(.*)$/) { if ($1 eq 'subj') { ['subject', $2]; } else { [$1, $2] } } else { ['tags', $_] }
 113     } split /[\s,]+/, join ',', @vals;
 114     foreach my $data (@data) {
 115         &quitcgi("Invalid filter key: '$data->[0]'") if (!exists($field_match{$data->[0]}));
 116         push @{$filter_map->{$data->[0]}}, $data->[1];
 117     }
 118 }
 119
 120 sub filter_option($$\%) {
 121     my ($key, $val, $filter_map) = @_;
 122     my @vals = array_option($val);
 123     foreach $val (@vals) {
 124         push @{$filter_map->{$key}}, $val;
 125     }
 126 }
 127
 128 sub set_option {
 129     my ($opt, $val) = @_;
 130     if ($opt =~ m/^show_list_(foot|head)er$/) { $common{$opt} = $val; }
 131     if ($opt eq "archive") { $common_archive = $val; }
 132     if ($opt eq "repeatmerged") { $common_repeatmerged = $val; }
 133     if ($opt eq "exclude") {
 134         filter_include_exclude($val, %common_exclude);
 135     }
 136     if ($opt eq "include") {
 137         filter_include_exclude($val, %common_include);
 138     }
 139     if ($opt eq "raw") { $common_raw_sort = $val; }
 140     if ($opt eq "bug-rev") { $common_bug_reverse = $val; }
 141     if ($opt eq "pend-rev") { $common_reverse{pending} = $val; }
 142     if ($opt eq "sev-rev") { $common_reverse{severity} = $val; }
 143     if ($opt eq "pend-exc") {
 144         filter_option('pending', $val, %common_exclude);
 145     }
 146     if ($opt eq "pend-inc") {
 147         filter_option('pending', $val, %common_include);
 148     }
 149     if ($opt eq "sev-exc") {
 150         filter_option('severity', $val, %common_exclude);
 151     }
 152     if ($opt eq "sev-inc") {
 153         filter_option('severity', $val, %common_include);
 154     }
 155     if ($opt eq "version") { $common_version = $val; }
 156     if ($opt eq "dist") { $common_dist = $val; }
 157     if ($opt eq "arch") { $common_arch = $val; }
 158 }
 159
 160 sub readparse {
 161     my ($in, $key, $val, %ret);
 162     if (defined $ENV{"QUERY_STRING"} && $ENV{"QUERY_STRING"} ne "") {
 163         $in=$ENV{QUERY_STRING};
 164     } elsif(defined $ENV{"REQUEST_METHOD"}
 165         && $ENV{"REQUEST_METHOD"} eq "POST")
 166     {
 167         read(STDIN,$in,$ENV{CONTENT_LENGTH});
 168     } else {
 169         return;
 170     }
 171     foreach (split(/[&;]/,$in)) {
 172         s/\+/ /g;
 173         ($key, $val) = split(/=/,$_,2);
 174         $key=~s/%(..)/pack("c",hex($1))/ge;
 175         $val=~s/%(..)/pack("c",hex($1))/ge;
 176         if ( exists $ret{$key} ) {
 177             if ( !exists $ret{"&$key"} ) {
 178                 $ret{"&$key"} = [ $ret{$key} ];
 179             }
 180             push @{$ret{"&$key"}},$val;
 181         }
 182         $ret{$key}=$val;
 183     }
 184 $debug = 1 if (defined $ret{"debug"} && $ret{"debug"} eq "aj");
 185     return %ret;
 186 }
 187
 188 sub quitcgi {
 189     my $msg = shift;
 190     print "Content-Type: text/html\n\n";
 191     print "<HTML><HEAD><TITLE>Error</TITLE></HEAD><BODY>\n";
 192     print "An error occurred. Dammit.\n";
 193     print "Error was: $msg.\n";
 194     print "</BODY></HTML>\n";
 195     exit 0;
 196 }
 197
 198 #sub abort {
 199 #    my $msg = shift;
 200 #    my $Archive = $common_archive ? "archive" : "";
 201 #    print header . start_html("Sorry");
 202 #    print "Sorry bug #$msg doesn't seem to be in the $Archive database.\n";
 203 #    print end_html;
 204 #    exit 0;
 205 #}
 206
 207 # Split a package string from the status file into a list of package names.
 208 sub splitpackages {
 209     my $pkgs = shift;
 210     return unless defined $pkgs;
 211     return map lc, split /[ \t?,()]+/, $pkgs;
 212 }
 213
 214 my %_parsedaddrs;
 215 sub getparsedaddrs {
 216     my $addr = shift;
 217     return () unless defined $addr;
 218     return @{$_parsedaddrs{$addr}} if exists $_parsedaddrs{$addr};
 219     @{$_parsedaddrs{$addr}} = Mail::Address->parse($addr);
 220     return @{$_parsedaddrs{$addr}};
 221 }
 222
 223 # Generate a comma-separated list of HTML links to each package given in
 224 # $pkgs. $pkgs may be empty, in which case an empty string is returned, or
 225 # it may be a comma-separated list of package names.
 226 sub htmlpackagelinks {
 227     my $pkgs = shift;
 228     return unless defined $pkgs and $pkgs ne '';
 229     my $strong = shift;
 230     my @pkglist = splitpackages($pkgs);
 231
 232     my $openstrong  = $strong ? '<strong>' : '';
 233     my $closestrong = $strong ? '</strong>' : '';
 234
 235     return 'Package' . (@pkglist > 1 ? 's' : '') . ': ' .
 236            join(', ',
 237                 map {
 238                     '<a href="' . pkgurl($_) . '">' .
 239                     $openstrong . htmlsanit($_) . $closestrong . '</a>'
 240                 } @pkglist
 241            ) . ";\n";
 242 }
 243
 244 # Generate a comma-separated list of HTML links to each maintainer given in
 245 # $maints, which should be a comma-separated list of RFC822 addresses.
 246 sub htmlmaintlinks {
 247     my ($prefixfunc, $maints) = @_;
 248     if (defined $maints and $maints ne '') {
 249         my @maintaddrs = getparsedaddrs($maints);
 250         my $prefix = (ref $prefixfunc) ? $prefixfunc->(scalar @maintaddrs)
 251                                        : $prefixfunc;
 252         return $prefix .
 253                join ', ', map { sprintf '<a href="%s">%s</a>',
 254                                         mainturl($_->address),
 255                                         htmlsanit($_->format) || '(unknown)'
 256                               } @maintaddrs;
 257     } else {
 258         my $prefix = (ref $prefixfunc) ? $prefixfunc->(1) : $prefixfunc;
 259         return sprintf '%s<a href="%s">(unknown)</a>', $prefix, mainturl('');
 260     }
 261 }
 262
 263 sub htmlindexentry {
 264     my $ref = shift;
 265     my %status = %{getbugstatus($ref)};
 266     return htmlindexentrystatus(%status) if (%status);
 267     return "";
 268 }
 269
 270 sub htmlindexentrystatus {
 271     my $s = shift;
 272     my %status = %{$s};
 273
 274     my $result = "";
 275
 276     if  ($status{severity} eq 'normal') {
 277         $showseverity = '';
 278     } elsif (isstrongseverity($status{severity})) {
 279         $showseverity = "<strong>Severity: $status{severity}</strong>;\n";
 280     } else {
 281         $showseverity = "Severity: <em>$status{severity}</em>;\n";
 282     }
 283
 284     $result .= htmlpackagelinks($status{"package"}, 1);
 285     $result .= $showseverity;
 286     $result .= "Reported by: <a href=\"" . submitterurl($status{originator})
 287                . "\">" . htmlsanit($status{originator}) . "</a>";
 288     $result .= ";\nOwned by: " . htmlsanit($status{owner})
 289                if length $status{owner};
 290     $result .= ";\nTags: <strong>"
 291                  . htmlsanit(join(", ", sort(split(/\s+/, $status{tags}))))
 292                  . "</strong>"
 293                        if (length($status{tags}));
 294
 295     my @merged= split(/ /,$status{mergedwith});
 296     my $mseparator= ";\nmerged with ";
 297     for my $m (@merged) {
 298         $result .= $mseparator."<A href=\"" . bugurl($m) . "\">#$m</A>";
 299         $mseparator= ", ";
 300     }
 301
 302     if (@{$status{found_versions}}) {
 303         $result .= ";\nfound in ";
 304         $result .= (@{$status{found_versions}} == 1) ? 'version '
 305                                                      : 'versions ';
 306         $result .= join ', ', map htmlsanit($_), @{$status{found_versions}};
 307     }
 308
 309     if (@{$status{fixed_versions}}) {
 310         $result .= ";\n<strong>fixed</strong> in ";
 311         $result .= (@{$status{fixed_versions}} == 1) ? 'version '
 312                                                      : 'versions ';
 313         $result .= join ', ', map htmlsanit($_), @{$status{fixed_versions}};
 314         if (length($status{done})) {
 315             $result .= ' by ' . htmlsanit($status{done});
 316         }
 317     } elsif (length($status{done})) {
 318         $result .= ";\n<strong>Done:</strong> " . htmlsanit($status{done});
 319         $days = ceil($debbugs::gRemoveAge - -M buglog($status{id}));
 320         if ($days >= 0) {
 321             $result .= ";\n<strong>Will be archived:</strong>" . ( $days == 0 ? " today" : $days == 1 ? " in $days day" : " in $days days" );
 322         } else {
 323             $result .= ";\n<strong>Archived</strong>";
 324         }
 325     }
 326
 327     unless (length($status{done})) {
 328         if (length($status{forwarded})) {
 329             $result .= ";\n<strong>Forwarded</strong> to "
 330                        . maybelink($status{forwarded});
 331         }
 332         my $daysold = int((time - $status{date}) / 86400);   # seconds to days
 333         if ($daysold >= 7) {
 334             my $font = "";
 335             my $efont = "";
 336             $font = "em" if ($daysold > 30);
 337             $font = "strong" if ($daysold > 60);
 338             $efont = "</$font>" if ($font);
 339             $font = "<$font>" if ($font);
 340
 341             my $yearsold = int($daysold / 365);
 342             $daysold -= $yearsold * 365;
 343
 344             $result .= ";\n $font";
 345             my @age;
 346             push @age, "1 year" if ($yearsold == 1);
 347             push @age, "$yearsold years" if ($yearsold > 1);
 348             push @age, "1 day" if ($daysold == 1);
 349             push @age, "$daysold days" if ($daysold > 1);
 350             $result .= join(" and ", @age);
 351             $result .= " old$efont";
 352         }
 353     }
 354
 355     $result .= ".";
 356
 357     return $result;
 358 }
 359
 360 sub urlargs {
 361     my $args = '';
 362     $args .= "&archive=yes" if $common_archive;
 363     $args .= "&repeatmerged=no" unless $common_repeatmerged;
 364     $args .= "&version=$common_version" if defined $common_version;
 365     $args .= "&dist=$common_dist" if defined $common_dist;
 366     $args .= "&arch=$common_arch" if defined $common_arch;
 367     return $args;
 368 }
 369
 370 sub submitterurl {
 371     my $ref = shift || "";
 372     my $params = "submitter=" . emailfromrfc822($ref);
 373     $params .= urlargs();
 374     return urlsanit("pkgreport.cgi" . "?" . $params);
 375 }
 376
 377 sub mainturl {
 378     my $ref = shift || "";
 379     my $params = "maint=" . emailfromrfc822($ref);
 380     $params .= urlargs();
 381     return urlsanit("pkgreport.cgi" . "?" . $params);
 382 }
 383
 384 sub pkgurl {
 385     my $ref = shift;
 386     my $params = "pkg=$ref";
 387     $params .= urlargs();
 388     return urlsanit("pkgreport.cgi" . "?" . "$params");
 389 }
 390
 391 sub srcurl {
 392     my $ref = shift;
 393     my $params = "src=$ref";
 394     $params .= urlargs();
 395     return urlsanit("pkgreport.cgi" . "?" . "$params");
 396 }
 397
 398 sub tagurl {
 399     my $ref = shift;
 400     my $params = "tag=$ref";
 401     $params .= urlargs();
 402     return urlsanit("pkgreport.cgi" . "?" . "$params");
 403 }
 404
 405 sub urlsanit {
 406     my $url = shift;
 407     $url =~ s/%/%25/g;
 408     $url =~ s/\+/%2b/g;
 409     my %saniarray = ('<','lt', '>','gt', '&','amp', '"','quot');
 410     $url =~ s/([<>&"])/\&$saniarray{$1};/g;
 411     return $url;
 412 }
 413
 414 sub htmlsanit {
 415     my %saniarray = ('<','lt', '>','gt', '&','amp', '"','quot');
 416     my $in = shift || "";
 417     $in =~ s/([<>&"])/\&$saniarray{$1};/g;
 418     return $in;
 419 }
 420
 421 sub maybelink {
 422     my $in = shift;
 423     if ($in =~ /^[a-zA-Z0-9+.-]+:/) { # RFC 1738 scheme
 424         return qq{<a href="$in">} . htmlsanit($in) . '</a>';
 425     } else {
 426         return htmlsanit($in);
 427     }
 428 }
 429
 430 sub bugurl {
 431     my $ref = shift;
 432     my $params = "bug=$ref";
 433     foreach my $val (@_) {
 434         $params .= "\&msg=$1" if ($val =~ /^msg=([0-9]+)/);
 435         $params .= "\&archive=yes" if (!$common_archive && $val =~ /^archive.*$/);
 436     }
 437     $params .= "&archive=yes" if ($common_archive);
 438     $params .= "&repeatmerged=no" unless ($common_repeatmerged);
 439
 440     return urlsanit("bugreport.cgi" . "?" . "$params");
 441 }
 442
 443 sub dlurl {
 444     my $ref = shift;
 445     my $params = "bug=$ref";
 446     my $filename = '';
 447     foreach my $val (@_) {
 448         $params .= "\&$1=$2" if ($val =~ /^(msg|att)=([0-9]+)/);
 449         $filename = $1 if ($val =~ /^filename=(.*)$/);
 450     }
 451     $params .= "&archive=yes" if ($common_archive);
 452     my $pathinfo = '';
 453     $pathinfo = "/$filename" if $filename ne '';
 454
 455     return urlsanit("bugreport.cgi$pathinfo?$params");
 456 }
 457
 458 sub mboxurl {
 459     my $ref = shift;
 460     return urlsanit("bugreport.cgi" . "?" . "bug=$ref&mbox=yes");
 461 }
 462
 463 sub allbugs {
 464     return @{getbugs(sub { 1 })};
 465 }
 466
 467 sub bugmatches(\%\%) {
 468     my ($hash, $status) = @_;
 469     foreach my $key( keys( %$hash ) ) {
 470         my $value = $hash->{$key};
 471         my $sub = $field_match{$key};
 472         return 1 if ($sub->($key, $value, $status));
 473     }
 474     return 0;
 475 }
 476 sub bugfilter($%) {
 477     my ($bug, %status) = @_;
 478     our (%seenmerged);
 479     if (%common_include) {
 480         return 1 if (!bugmatches(%common_include, %status));
 481     }
 482     if (%common_exclude) {
 483         return 1 if (bugmatches(%common_exclude, %status));
 484     }
 485     my @merged = sort {$a<=>$b} $bug, split(/ /, $status{mergedwith});
 486     return 1 unless ($common_repeatmerged || !$seenmerged{$merged[0]});
 487     $seenmerged{$merged[0]} = 1;
 488     return 0;
 489 }
 490
 491 sub htmlizebugs {
 492     $b = $_[0];
 493     my @bugs = @$b;
 494     my $anydone = 0;
 495
 496     my @status = ();
 497     my %count;
 498     my ($header, $footer);
 499
 500     if (@bugs == 0) {
 501         return "<HR><H2>No reports found!</H2></HR>\n";
 502     }
 503
 504     if ( $common_bug_reverse ) {
 505         @bugs = sort {$b<=>$a} @bugs;
 506     } else {
 507         @bugs = sort {$a<=>$b} @bugs;
 508     }
 509     my %seenmerged;
 510     foreach my $bug (@bugs) {
 511         my %status = %{getbugstatus($bug)};
 512         next unless %status;
 513         next if bugfilter($bug, %status);
 514
 515         my $html = sprintf "<li><a href=\"%s\">#%d: %s</a>\n<br>",
 516             bugurl($bug), $bug, htmlsanit($status{subject});
 517         $html .= htmlindexentrystatus(\%status) . "\n";
 518         my $key = join( '_', map( {$status{$_}} @common_grouping ) );
 519         $section{$key} .= $html;
 520         $count{"_$key"}++;
 521         foreach my $grouping ( @common_grouping ) {
 522             $count{"${grouping}_$status{$grouping}"}++;
 523         }
 524         $anydone = 1 if $status{pending} eq 'done';
 525         push @status, [ $bug, \%status, $html ];
 526     }
 527
 528     my $result = "";
 529     if ($common_raw_sort) {
 530         $result .= "<UL>\n" . join("", map( { $_->[ 2 ] } @status ) ) . "</UL>\n";
 531     } else {
 532         my (@order, @headers);
 533         for( my $i = 0; $i < @common_grouping; $i++ ) {
 534             my $grouping_name = $common_grouping[ $i ];
 535             my @items = @{ $common_grouping_order{ $grouping_name } };
 536             @items = reverse( @items ) if ( $common_reverse{ $grouping_name } );
 537             my @neworder = ();
 538             my @newheaders = ();
 539             if ( @order ) {
 540                 foreach my $grouping ( @items ) {
 541                     push @neworder, map( { "${_}_$grouping" } @order );
 542                     push @newheaders, map( { "$_ - $common_headers{$grouping_name}{$grouping}" } @headers );
 543                 }
 544                 @order = @neworder;
 545                 @headers = @newheaders;
 546             } else {
 547                 push @order, @items;
 548                 push @headers, map( { $common_headers{$common_grouping[$i]}{$_} } @items );
 549             }
 550         }
 551         $header .= "<ul>\n";
 552         for ( my $i = 0; $i < @order; $i++ ) {
 553             my $order = $order[ $i ];
 554             next unless defined $section{$order};
 555             my $count = $count{"_$order"};
 556             my $bugs = $count == 1 ? "bug" : "bugs";
 557             $header .= "<li><a href=\"#$order\">$headers[$i]</a> ($count $bugs)</li>\n";
 558         }
 559         $header .= "</ul>\n";
 560         for ( my $i = 0; $i < @order; $i++ ) {
 561             my $order = $order[ $i ];
 562             next unless defined $section{$order};
 563             if ($common{show_list_header}) {
 564                 my $count = $count{"_$order"};
 565                 my $bugs = $count == 1 ? "bug" : "bugs";
 566                 $result .= "<HR><H2><a name=\"$order\"></a>$headers[$i] ($count $bugs)</H2>\n";
 567             } else {
 568                 $result .= "<HR><H2>$headers[$i]</H2>\n";
 569             }
 570             $result .= "<UL>\n";
 571             $result .= $section{$order};
 572             $result .= "</UL>\n";
 573         }
 574         $footer .= "<ul>\n";
 575         foreach my $grouping ( @common_grouping ) {
 576             my $local_result = '';
 577             foreach my $key ( @{$common_grouping_order{ $grouping }} ) {
 578                 my $count = $count{"${grouping}_$key"};
 579                 next if !$count;
 580                 $local_result .= "<li>$count $common_headers{$grouping}{$key}</li>\n";
 581             }
 582             if ( $local_result ) {
 583                 $footer .= "<li>$common_grouping_display{$grouping}<ul>\n$local_result</ul></li>\n";
 584             }
 585         }
 586         $footer .= "</ul>\n";
 587     }
 588
 589     $result = $header . $result if ( $common{show_list_header} );
 590     $result .= $debbugs::gHTMLExpireNote if $gRemoveAge and $anydone;
 591     $result .= "<hr>" . $footer if ( $common{show_list_footer} );
 592     return $result;
 593 }
 594
 595 sub countbugs {
 596     my $bugfunc = shift;
 597     if ($common_archive) {
 598         open I, "<$debbugs::gSpoolDir/index.archive"
 599             or &quitcgi("$debbugs::gSpoolDir/index.archive: $!");
 600     } else {
 601         open I, "<$debbugs::gSpoolDir/index.db"
 602             or &quitcgi("$debbugs::gSpoolDir/index.db: $!");
 603     }
 604
 605     my %count = ();
 606     while(<I>)
 607     {
 608         if (m/^(\S+)\s+(\d+)\s+(\d+)\s+(\S+)\s+\[\s*([^]]*)\s*\]\s+(\w+)\s+(.*)$/) {
 609             my @x = $bugfunc->(pkg => $1, bug => $2, status => $4,
 610                                submitter => $5, severity => $6, tags => $7);
 611             local $_;
 612             $count{$_}++ foreach @x;
 613         }
 614     }
 615     close I;
 616     return %count;
 617 }
 618
 619 sub getbugs {
 620     my $bugfunc = shift;
 621     my $opt = shift;
 622
 623     my @result = ();
 624
 625     if (!$common_archive && defined $opt &&
 626         -e "$debbugs::gSpoolDir/by-$opt.idx")
 627     {
 628         my %lookup;
 629 print STDERR "optimized\n" if ($debug);
 630         tie %lookup, DB_File => "$debbugs::gSpoolDir/by-$opt.idx", O_RDONLY
 631             or die "$0: can't open $debbugs::gSpoolDir/by-$opt.idx ($!)\n";
 632         while ($key = shift) {
 633             my $bugs = $lookup{$key};
 634             if (defined $bugs) {
 635                 push @result, (unpack 'N*', $bugs);
 636             }
 637         }
 638         untie %lookup;
 639 print STDERR "done optimized\n" if ($debug);
 640     } else {
 641         if ( $common_archive ) {
 642             open I, "<$debbugs::gSpoolDir/index.archive"
 643                 or &quitcgi("$debbugs::gSpoolDir/index.archive: $!");
 644         } else {
 645             open I, "<$debbugs::gSpoolDir/index.db"
 646                 or &quitcgi("$debbugs::gSpoolDir/index.db: $!");
 647         }
 648         while(<I>) {
 649             if (m/^(\S+)\s+(\d+)\s+(\d+)\s+(\S+)\s+\[\s*([^]]*)\s*\]\s+(\w+)\s+(.*)$/) {
 650                 if ($bugfunc->(pkg => $1, bug => $2, status => $4,
 651                             submitter => $5, severity => $6, tags => $7))
 652                 {
 653                     push (@result, $2);
 654                 }
 655             }
 656         }
 657         close I;
 658     }
 659     @result = sort {$a <=> $b} @result;
 660     return \@result;
 661 }
 662
 663 sub emailfromrfc822 {
 664     my $email = shift;
 665     $email =~ s/\s*\(.*\)\s*//;
 666     $email = $1 if ($email =~ m/<(.*)>/);
 667     return $email;
 668 }
 669
 670 sub maintencoded {
 671     my $input = shift;
 672     my $encoded = '';
 673
 674     while ($input =~ m/\W/) {
 675         $encoded.=$`.sprintf("-%02x_",unpack("C",$&));
 676         $input= $';
 677     }
 678
 679     $encoded.= $input;
 680     $encoded =~ s/-2e_/\./g;
 681     $encoded =~ s/^([^,]+)-20_-3c_(.*)-40_(.*)-3e_/$1,$2,$3,/;
 682     $encoded =~ s/^(.*)-40_(.*)-20_-28_([^,]+)-29_$/,$1,$2,$3/;
 683     $encoded =~ s/-20_/_/g;
 684     $encoded =~ s/-([^_]+)_-/-$1/g;
 685     return $encoded;
 686 }
 687
 688 my $_maintainer;
 689 sub getmaintainers {
 690     return $_maintainer if $_maintainer;
 691     my %maintainer;
 692
 693     open(MM,"$gMaintainerFile") or &quitcgi("open $gMaintainerFile: $!");
 694     while(<MM>) {
 695         next unless m/^(\S+)\s+(\S.*\S)\s*$/;
 696         ($a,$b)=($1,$2);
 697         $a =~ y/A-Z/a-z/;
 698         $maintainer{$a}= $b;
 699     }
 700     close(MM);
 701     if (defined $gMaintainerFileOverride) {
 702         open(MM,"$gMaintainerFileOverride") or &quitcgi("open $gMaintainerFileOverride: $!");
 703         while(<MM>) {
 704             next unless m/^(\S+)\s+(\S.*\S)\s*$/;
 705             ($a,$b)=($1,$2);
 706             $a =~ y/A-Z/a-z/;
 707             $maintainer{$a}= $b;
 708         }
 709         close(MM);
 710     }
 711     $_maintainer = \%maintainer;
 712     return $_maintainer;
 713 }
 714
 715 my $_pkgsrc;
 716 my $_pkgcomponent;
 717 sub getpkgsrc {
 718     return $_pkgsrc if $_pkgsrc;
 719     return {} unless defined $gPackageSource;
 720     my %pkgsrc;
 721     my %pkgcomponent;
 722
 723     open(MM,"$gPackageSource") or &quitcgi("open $gPackageSource: $!");
 724     while(<MM>) {
 725         next unless m/^(\S+)\s+(\S+)\s+(\S.*\S)\s*$/;
 726         ($a,$b,$c)=($1,$2,$3);
 727         $a =~ y/A-Z/a-z/;
 728         $pkgsrc{$a}= $c;
 729         $pkgcomponent{$a}= $b;
 730     }
 731     close(MM);
 732     $_pkgsrc = \%pkgsrc;
 733     $_pkgcomponent = \%pkgcomponent;
 734     return $_pkgsrc;
 735 }
 736
 737 sub getpkgcomponent {
 738     return $_pkgcomponent if $_pkgcomponent;
 739     getpkgsrc();
 740     return $_pkgcomponent;
 741 }
 742
 743 my $_pseudodesc;
 744 sub getpseudodesc {
 745     return $_pseudodesc if $_pseudodesc;
 746     my %pseudodesc;
 747
 748     open(PSEUDO, "< $gPseudoDescFile") or &quitcgi("open $gPseudoDescFile: $!");
 749     while(<PSEUDO>) {
 750         next unless m/^(\S+)\s+(\S.*\S)\s*$/;
 751         $pseudodesc{lc $1} = $2;
 752     }
 753     close(PSEUDO);
 754     $_pseudodesc = \%pseudodesc;
 755     return $_pseudodesc;
 756 }
 757
 758 sub getbugstatus {
 759     my $bugnum = shift;
 760
 761     my %status;
 762
 763     my $location = getbuglocation( $bugnum, 'summary' );
 764     return {} if ( !$location );
 765     %status = %{ readbug( $bugnum, $location ) };
 766     $status{ id } = $bugnum;
 767
 768     $status{found_versions} = [];
 769     $status{fixed_versions} = [];
 770     if (defined $gVersionBugsDir and
 771             (defined $common_version or defined $common_dist)) {
 772         my $bughash = get_hashname($bugnum);
 773         if (open BUGVER, "< $gVersionBugsDir/$bughash/$bugnum.versions") {
 774             local $_;
 775             while (<BUGVER>) {
 776                 if (/^Found-in: (.*)/i) {
 777                     $status{found_versions} = [split ' ', $1];
 778                 } elsif (/^Fixed-in: (.*)/i) {
 779                     $status{fixed_versions} = [split ' ', $1];
 780                 }
 781             }
 782             close BUGVER;
 783         }
 784     }
 785
 786     $status{tags} = $status{keywords};
 787     my %tags = map { $_ => 1 } split ' ', $status{tags};
 788
 789     $status{"package"} =~ s/\s*$//;
 790     $status{"package"} = 'unknown' if ($status{"package"} eq '');
 791     $status{"severity"} = 'normal' if ($status{"severity"} eq '');
 792
 793     $status{"pending"} = 'pending';
 794     $status{"pending"} = 'forwarded'        if (length($status{"forwarded"}));
 795     $status{"pending"} = 'pending-fixed'    if ($tags{pending});
 796     $status{"pending"} = 'fixed'            if ($tags{fixed});
 797
 798     my $version;
 799     if (defined $common_version) {
 800         $version = $common_version;
 801     } elsif (defined $common_dist) {
 802         $version = getversion($status{package}, $common_dist, $common_arch);
 803     }
 804
 805     if (defined $version) {
 806         my $buggy = buggyversion($bugnum, $version, \%status);
 807         if ($buggy eq 'absent') {
 808             $status{"pending"} = 'absent';
 809         } elsif ($buggy eq 'fixed') {
 810             $status{"pending"} = 'done';
 811         }
 812     }
 813
 814     if (length($status{done}) and
 815             (not defined $version or not @{$status{fixed_versions}})) {
 816         $status{"pending"} = 'done';
 817     }
 818
 819     return \%status;
 820 }
 821
 822 sub getsrcpkgs {
 823     my $src = shift;
 824     return () if !$src;
 825     my %pkgsrc = %{getpkgsrc()};
 826     my @pkgs;
 827     foreach ( keys %pkgsrc ) {
 828         push @pkgs, $_ if $pkgsrc{$_} eq $src;
 829     }
 830     return @pkgs;
 831 }
 832
 833 sub buglog {
 834     my $bugnum = shift;
 835     my $location = getbuglocation($bugnum, 'log');
 836     return undef unless defined $location;
 837     return getbugcomponent($bugnum, 'log', $location);
 838 }
 839
 840 my %_versionobj;
 841 sub buggyversion {
 842     my ($bug, $ver, $status) = @_;
 843     return '' unless defined $gVersionPackagesDir;
 844     my $src = getpkgsrc()->{$status->{package}};
 845     $src = $status->{package} unless defined $src;
 846
 847     my $tree;
 848     if (exists $_versionobj{$src}) {
 849         $tree = $_versionobj{$src};
 850     } else {
 851         $tree = Debbugs::Versions->new(\&DpkgVer::vercmp);
 852         if (open VERFILE, "< $gVersionPackagesDir/$src") {
 853             $tree->load(\*VERFILE);
 854             close VERFILE;
 855         }
 856         $_versionobj{$src} = $tree;
 857     }
 858
 859     return $tree->buggy($ver, $status->{found_versions},
 860                         $status->{fixed_versions});
 861 }
 862
 863 my %_versions;
 864 sub getversion {
 865     my ($pkg, $dist, $arch) = @_;
 866     return undef unless defined $gVersionIndex;
 867     $dist = 'unstable' unless defined $dist;
 868     $arch = 'i386' unless defined $arch;
 869
 870     unless (tied %_versions) {
 871         tie %_versions, 'MLDBM', $gVersionIndex, O_RDONLY
 872             or die "can't open versions index: $!";
 873     }
 874
 875     return $_versions{$pkg}{$dist}{$arch};
 876 }
 877
 878 1;