cgi/common.pl

   1 #!/usr/bin/perl -w
   2
   3 use DB_File;
   4 use Fcntl qw/O_RDONLY/;
   5 use Mail::Address;
   6 use MLDBM qw/DB_File/;
   7 use POSIX qw/ceil/;
   8
   9 $config_path = '/etc/debbugs';
  10 $lib_path = '/usr/lib/debbugs';
  11 require "$lib_path/errorlib";
  12
  13 use Debbugs::Versions;
  14
  15 $MLDBM::RemoveTaint = 1;
  16
  17 my $common_archive = 0;
  18 my $common_repeatmerged = 1;
  19 my %common_include = ();
  20 my %common_exclude = ();
  21 my $common_raw_sort = 0;
  22 my $common_bug_reverse = 0;
  23
  24 my %common_reverse = (
  25     'pending' => 0,
  26     'severity' => 0,
  27 );
  28 my %common = (
  29     'show_list_header' => 1,
  30     'show_list_footer' => 1,
  31 );
  32
  33 sub exact_field_match {
  34     my ($field, $values, $status) = @_;
  35     my @values = @$values;
  36     my @ret = grep {$_ eq $status->{$field} } @values;
  37     $#ret != -1;
  38 }
  39 sub contains_field_match {
  40     my ($field, $values, $status) = @_;
  41     foreach my $data (@$values) {
  42         return 1 if (index($status->{$field}, $data) > -1);
  43     }
  44     return 0;
  45 }
  46
  47 sub detect_user_agent {
  48     my $userAgent = $ENV{HTTP_USER_AGENT};
  49     return { 'name' => 'links' } if ( $userAgent =~ m,^ELinks,);
  50     return { 'name' => 'lynx' } if ( $userAgent =~ m,^Lynx,);
  51     return { 'name' => 'wget' } if ( $userAgent =~ m,^Wget,);
  52     return { 'name' => 'gecko' } if ( $userAgent =~ m,^Mozilla.* Gecko/,);
  53     return { 'name' => 'ie' } if ( $userAgent =~ m,^.*MSIE.*,);
  54     return { 'name' => 'unknown' };
  55 }
  56 my %field_match = (
  57     'subject' => \&contains_field_match,
  58     'tags' => sub {
  59         my ($field, $values, $status) = @_;
  60         my %values = map {$_=>1} @$values;
  61         foreach my $t (split /\s+/, $status->{$field}) {
  62             return 1 if (defined $values{$t});
  63         }
  64         return 0;
  65     },
  66     'severity' => \&exact_field_match,
  67     'pending' => \&exact_field_match,
  68     'originator' => \%contains_field_match,
  69     'forwarded' => \%contains_field_match,
  70     'owner' => \%contains_field_match,
  71 );
  72 my @common_grouping = ( 'severity', 'pending' );
  73 my %common_grouping_order = (
  74     'pending' => [ qw( pending forwarded pending-fixed fixed done absent ) ],
  75     'severity' => \@debbugs::gSeverityList,
  76 );
  77 my %common_grouping_display = (
  78     'pending' => 'Status',
  79     'severity' => 'Severity',
  80 );
  81 my %common_headers = (
  82     'pending' => {
  83         "pending"       => "outstanding",
  84         "pending-fixed" => "pending upload",
  85         "fixed"         => "fixed in NMU",
  86         "done"          => "resolved",
  87         "forwarded"     => "forwarded to upstream software authors",
  88         "absent"        => "not applicable to this version",
  89     },
  90     'severity' => \%debbugs::gSeverityDisplay,
  91 );
  92
  93 my $common_version;
  94 my $common_dist;
  95 my $common_arch;
  96
  97 my $debug = 0;
  98
  99 sub array_option($) {
 100     my ($val) = @_;
 101     my @vals;
 102     @vals = ( $val ) if (ref($val) eq "" && $val );
 103     @vals = ( $$val ) if (ref($val) eq "SCALAR" && $$val );
 104     @vals = @{$val} if (ref($val) eq "ARRAY" );
 105     return @vals;
 106 }
 107
 108 sub filter_include_exclude($\%) {
 109     my ($val, $filter_map) = @_;
 110     my @vals = array_option($val);
 111     my @data = map {
 112         if (/^([^:]*):(.*)$/) { if ($1 eq 'subj') { ['subject', $2]; } else { [$1, $2] } } else { ['tags', $_] }
 113     } split /[\s,]+/, join ',', @vals;
 114     foreach my $data (@data) {
 115         &quitcgi("Invalid filter key: '$data->[0]'") if (!exists($field_match{$data->[0]}));
 116         push @{$filter_map->{$data->[0]}}, $data->[1];
 117     }
 118 }
 119
 120 sub filter_option($$\%) {
 121     my ($key, $val, $filter_map) = @_;
 122     my @vals = array_option($val);
 123     foreach $val (@vals) {
 124         push @{$filter_map->{$key}}, $val;
 125     }
 126 }
 127
 128 sub set_option {
 129     my ($opt, $val) = @_;
 130     if ($opt =~ m/^show_list_(foot|head)er$/) { $common{$opt} = $val; }
 131     if ($opt eq "archive") { $common_archive = $val; }
 132     if ($opt eq "repeatmerged") { $common_repeatmerged = $val; }
 133     if ($opt eq "exclude") {
 134         filter_include_exclude($val, %common_exclude);
 135     }
 136     if ($opt eq "include") {
 137         filter_include_exclude($val, %common_include);
 138     }
 139     if ($opt eq "raw") { $common_raw_sort = $val; }
 140     if ($opt eq "bug-rev") { $common_bug_reverse = $val; }
 141     if ($opt eq "pend-rev") { $common_reverse{pending} = $val; }
 142     if ($opt eq "sev-rev") { $common_reverse{severity} = $val; }
 143     if ($opt eq "pend-exc") {
 144         filter_option('pending', $val, %common_exclude);
 145     }
 146     if ($opt eq "pend-inc") {
 147         filter_option('pending', $val, %common_include);
 148     }
 149     if ($opt eq "sev-exc") {
 150         filter_option('severity', $val, %common_exclude);
 151     }
 152     if ($opt eq "sev-inc") {
 153         filter_option('severity', $val, %common_include);
 154     }
 155     if ($opt eq "version") { $common_version = $val; }
 156     if ($opt eq "dist") { $common_dist = $val; }
 157     if ($opt eq "arch") { $common_arch = $val; }
 158 }
 159
 160 sub readparse {
 161     my ($in, $key, $val, %ret);
 162     if (defined $ENV{"QUERY_STRING"} && $ENV{"QUERY_STRING"} ne "") {
 163         $in=$ENV{QUERY_STRING};
 164     } elsif(defined $ENV{"REQUEST_METHOD"}
 165         && $ENV{"REQUEST_METHOD"} eq "POST")
 166     {
 167         read(STDIN,$in,$ENV{CONTENT_LENGTH});
 168     } else {
 169         return;
 170     }
 171     foreach (split(/[&;]/,$in)) {
 172         s/\+/ /g;
 173         ($key, $val) = split(/=/,$_,2);
 174         $key=~s/%(..)/pack("c",hex($1))/ge;
 175         $val=~s/%(..)/pack("c",hex($1))/ge;
 176         if ( exists $ret{$key} ) {
 177             if ( !exists $ret{"&$key"} ) {
 178                 $ret{"&$key"} = [ $ret{$key} ];
 179             }
 180             push @{$ret{"&$key"}},$val;
 181         }
 182         $ret{$key}=$val;
 183     }
 184 $debug = 1 if (defined $ret{"debug"} && $ret{"debug"} eq "aj");
 185     return %ret;
 186 }
 187
 188 sub quitcgi {
 189     my $msg = shift;
 190     print "Content-Type: text/html\n\n";
 191     print "<HTML><HEAD><TITLE>Error</TITLE></HEAD><BODY>\n";
 192     print "An error occurred. Dammit.\n";
 193     print "Error was: $msg.\n";
 194     print "</BODY></HTML>\n";
 195     exit 0;
 196 }
 197
 198 #sub abort {
 199 #    my $msg = shift;
 200 #    my $Archive = $common_archive ? "archive" : "";
 201 #    print header . start_html("Sorry");
 202 #    print "Sorry bug #$msg doesn't seem to be in the $Archive database.\n";
 203 #    print end_html;
 204 #    exit 0;
 205 #}
 206
 207 # Split a package string from the status file into a list of package names.
 208 sub splitpackages {
 209     my $pkgs = shift;
 210     return unless defined $pkgs;
 211     return map lc, split /[ \t?,()]+/, $pkgs;
 212 }
 213
 214 my %_parsedaddrs;
 215 sub getparsedaddrs {
 216     my $addr = shift;
 217     return () unless defined $addr;
 218     return @{$_parsedaddrs{$addr}} if exists $_parsedaddrs{$addr};
 219     @{$_parsedaddrs{$addr}} = Mail::Address->parse($addr);
 220     return @{$_parsedaddrs{$addr}};
 221 }
 222
 223 # Generate a comma-separated list of HTML links to each package given in
 224 # $pkgs. $pkgs may be empty, in which case an empty string is returned, or
 225 # it may be a comma-separated list of package names.
 226 sub htmlpackagelinks {
 227     my $pkgs = shift;
 228     return unless defined $pkgs and $pkgs ne '';
 229     my $strong = shift;
 230     my @pkglist = splitpackages($pkgs);
 231
 232     my $openstrong  = $strong ? '<strong>' : '';
 233     my $closestrong = $strong ? '</strong>' : '';
 234
 235     return 'Package' . (@pkglist > 1 ? 's' : '') . ': ' .
 236            join(', ',
 237                 map {
 238                     '<a href="' . pkgurl($_) . '">' .
 239                     $openstrong . htmlsanit($_) . $closestrong . '</a>'
 240                 } @pkglist
 241            ) . ";\n";
 242 }
 243
 244 # Generate a comma-separated list of HTML links to each maintainer given in
 245 # $maints, which should be a comma-separated list of RFC822 addresses.
 246 sub htmlmaintlinks {
 247     my ($prefixfunc, $maints) = @_;
 248     if (defined $maints and $maints ne '') {
 249         my @maintaddrs = getparsedaddrs($maints);
 250         my $prefix = (ref $prefixfunc) ? $prefixfunc->(scalar @maintaddrs)
 251                                        : $prefixfunc;
 252         return $prefix .
 253                join ', ', map { sprintf '<a href="%s">%s</a>',
 254                                         mainturl($_->address),
 255                                         htmlsanit($_->format) || '(unknown)'
 256                               } @maintaddrs;
 257     } else {
 258         my $prefix = (ref $prefixfunc) ? $prefixfunc->(1) : $prefixfunc;
 259         return sprintf '%s<a href="%s">(unknown)</a>', $prefix, mainturl('');
 260     }
 261 }
 262
 263 sub htmlindexentry {
 264     my $ref = shift;
 265     my %status = %{getbugstatus($ref)};
 266     return htmlindexentrystatus(%status) if (%status);
 267     return "";
 268 }
 269
 270 sub htmlindexentrystatus {
 271     my $s = shift;
 272     my %status = %{$s};
 273
 274     my $result = "";
 275
 276     if  ($status{severity} eq 'normal') {
 277         $showseverity = '';
 278     } elsif (isstrongseverity($status{severity})) {
 279         $showseverity = "<strong>Severity: $status{severity}</strong>;\n";
 280     } else {
 281         $showseverity = "Severity: <em>$status{severity}</em>;\n";
 282     }
 283
 284     $result .= htmlpackagelinks($status{"package"}, 1);
 285     $result .= $showseverity;
 286     $result .= "Reported by: <a href=\"" . submitterurl($status{originator})
 287                . "\">" . htmlsanit($status{originator}) . "</a>";
 288     $result .= ";\nOwned by: " . htmlsanit($status{owner})
 289                if length $status{owner};
 290     $result .= ";\nTags: <strong>"
 291                  . htmlsanit(join(", ", sort(split(/\s+/, $status{tags}))))
 292                  . "</strong>"
 293                        if (length($status{tags}));
 294
 295     my @merged= split(/ /,$status{mergedwith});
 296     my $mseparator= ";\nmerged with ";
 297     for my $m (@merged) {
 298         $result .= $mseparator."<A href=\"" . bugurl($m) . "\">#$m</A>";
 299         $mseparator= ", ";
 300     }
 301
 302     if (@{$status{found_versions}}) {
 303         $result .= ";\nfound in ";
 304         $result .= (@{$status{found_versions}} == 1) ? 'version '
 305                                                      : 'versions ';
 306         $result .= join ', ', map htmlsanit($_), @{$status{found_versions}};
 307     }
 308
 309     if (@{$status{fixed_versions}}) {
 310         $result .= ";\n<strong>fixed</strong> in ";
 311         $result .= (@{$status{fixed_versions}} == 1) ? 'version '
 312                                                      : 'versions ';
 313         $result .= join ', ', map htmlsanit($_), @{$status{fixed_versions}};
 314         if (length($status{done})) {
 315             $result .= ' by ' . htmlsanit($status{done});
 316         }
 317     } elsif (length($status{done})) {
 318         $result .= ";\n<strong>Done:</strong> " . htmlsanit($status{done});
 319         $days = ceil($debbugs::gRemoveAge - -M buglog($status{id}));
 320         $result .= ";\n<strong>Will Be Archived:</strong>" . ( $days == 0 ? " today" : $days == 1 ? " in $days day" : " in $days days" );
 321     }
 322
 323     unless (length($status{done})) {
 324         if (length($status{forwarded})) {
 325             $result .= ";\n<strong>Forwarded</strong> to "
 326                        . maybelink($status{forwarded});
 327         }
 328         my $daysold = int((time - $status{date}) / 86400);   # seconds to days
 329         if ($daysold >= 7) {
 330             my $font = "";
 331             my $efont = "";
 332             $font = "em" if ($daysold > 30);
 333             $font = "strong" if ($daysold > 60);
 334             $efont = "</$font>" if ($font);
 335             $font = "<$font>" if ($font);
 336
 337             my $yearsold = int($daysold / 365);
 338             $daysold -= $yearsold * 365;
 339
 340             $result .= ";\n $font";
 341             my @age;
 342             push @age, "1 year" if ($yearsold == 1);
 343             push @age, "$yearsold years" if ($yearsold > 1);
 344             push @age, "1 day" if ($daysold == 1);
 345             push @age, "$daysold days" if ($daysold > 1);
 346             $result .= join(" and ", @age);
 347             $result .= " old$efont";
 348         }
 349     }
 350
 351     $result .= ".";
 352
 353     return $result;
 354 }
 355
 356 sub urlargs {
 357     my $args = '';
 358     $args .= "&archive=yes" if $common_archive;
 359     $args .= "&repeatmerged=no" unless $common_repeatmerged;
 360     $args .= "&version=$common_version" if defined $common_version;
 361     $args .= "&dist=$common_dist" if defined $common_dist;
 362     $args .= "&arch=$common_arch" if defined $common_arch;
 363     return $args;
 364 }
 365
 366 sub submitterurl {
 367     my $ref = shift || "";
 368     my $params = "submitter=" . emailfromrfc822($ref);
 369     $params .= urlargs();
 370     return urlsanit("pkgreport.cgi" . "?" . $params);
 371 }
 372
 373 sub mainturl {
 374     my $ref = shift || "";
 375     my $params = "maint=" . emailfromrfc822($ref);
 376     $params .= urlargs();
 377     return urlsanit("pkgreport.cgi" . "?" . $params);
 378 }
 379
 380 sub pkgurl {
 381     my $ref = shift;
 382     my $params = "pkg=$ref";
 383     $params .= urlargs();
 384     return urlsanit("pkgreport.cgi" . "?" . "$params");
 385 }
 386
 387 sub srcurl {
 388     my $ref = shift;
 389     my $params = "src=$ref";
 390     $params .= urlargs();
 391     return urlsanit("pkgreport.cgi" . "?" . "$params");
 392 }
 393
 394 sub tagurl {
 395     my $ref = shift;
 396     my $params = "tag=$ref";
 397     $params .= urlargs();
 398     return urlsanit("pkgreport.cgi" . "?" . "$params");
 399 }
 400
 401 sub urlsanit {
 402     my $url = shift;
 403     $url =~ s/%/%25/g;
 404     $url =~ s/\+/%2b/g;
 405     my %saniarray = ('<','lt', '>','gt', '&','amp', '"','quot');
 406     $url =~ s/([<>&"])/\&$saniarray{$1};/g;
 407     return $url;
 408 }
 409
 410 sub htmlsanit {
 411     my %saniarray = ('<','lt', '>','gt', '&','amp', '"','quot');
 412     my $in = shift || "";
 413     $in =~ s/([<>&"])/\&$saniarray{$1};/g;
 414     return $in;
 415 }
 416
 417 sub maybelink {
 418     my $in = shift;
 419     if ($in =~ /^[a-zA-Z0-9+.-]+:/) { # RFC 1738 scheme
 420         return qq{<a href="$in">} . htmlsanit($in) . '</a>';
 421     } else {
 422         return htmlsanit($in);
 423     }
 424 }
 425
 426 sub bugurl {
 427     my $ref = shift;
 428     my $params = "bug=$ref";
 429     foreach my $val (@_) {
 430         $params .= "\&msg=$1" if ($val =~ /^msg=([0-9]+)/);
 431         $params .= "\&archive=yes" if (!$common_archive && $val =~ /^archive.*$/);
 432     }
 433     $params .= "&archive=yes" if ($common_archive);
 434     $params .= "&repeatmerged=no" unless ($common_repeatmerged);
 435
 436     return urlsanit("bugreport.cgi" . "?" . "$params");
 437 }
 438
 439 sub dlurl {
 440     my $ref = shift;
 441     my $params = "bug=$ref";
 442     my $filename = '';
 443     foreach my $val (@_) {
 444         $params .= "\&$1=$2" if ($val =~ /^(msg|att)=([0-9]+)/);
 445         $filename = $1 if ($val =~ /^filename=(.*)$/);
 446     }
 447     $params .= "&archive=yes" if ($common_archive);
 448     my $pathinfo = '';
 449     $pathinfo = "/$filename" if $filename ne '';
 450
 451     return urlsanit("bugreport.cgi$pathinfo?$params");
 452 }
 453
 454 sub mboxurl {
 455     my $ref = shift;
 456     return urlsanit("bugreport.cgi" . "?" . "bug=$ref&mbox=yes");
 457 }
 458
 459 sub allbugs {
 460     return @{getbugs(sub { 1 })};
 461 }
 462
 463 sub bugmatches(\%\%) {
 464     my ($hash, $status) = @_;
 465     foreach my $key( keys( %$hash ) ) {
 466         my $value = $hash->{$key};
 467         my $sub = $field_match{$key};
 468         return 1 if ($sub->($key, $value, $status));
 469     }
 470     return 0;
 471 }
 472 sub bugfilter($%) {
 473     my ($bug, %status) = @_;
 474     local (%seenmerged);
 475     if (%common_include) {
 476         return 1 if (!bugmatches(%common_include, %status));
 477     }
 478     if (%common_exclude) {
 479         return 1 if (bugmatches(%common_exclude, %status));
 480     }
 481     my @merged = sort {$a<=>$b} $bug, split(/ /, $status{mergedwith});
 482     return 1 unless ($common_repeatmerged || !$seenmerged{$merged[0]});
 483     $seenmerged{$merged[0]} = 1;
 484     return 0;
 485 }
 486
 487 sub htmlizebugs {
 488     $b = $_[0];
 489     my @bugs = @$b;
 490     my $anydone = 0;
 491
 492     my @status = ();
 493     my %count;
 494     my ($header, $footer);
 495
 496     if (@bugs == 0) {
 497         return "<HR><H2>No reports found!</H2></HR>\n";
 498     }
 499
 500     if ( $common_bug_reverse ) {
 501         @bugs = sort {$b<=>$a} @bugs;
 502     } else {
 503         @bugs = sort {$a<=>$b} @bugs;
 504     }
 505     my %seenmerged;
 506     foreach my $bug (@bugs) {
 507         my %status = %{getbugstatus($bug)};
 508         next unless %status;
 509         next if bugfilter($bug, %status);
 510
 511         my $html = sprintf "<li><a href=\"%s\">#%d: %s</a>\n<br>",
 512             bugurl($bug), $bug, htmlsanit($status{subject});
 513         $html .= htmlindexentrystatus(\%status) . "\n";
 514         my $key = join( '_', map( {$status{$_}} @common_grouping ) );
 515         $section{$key} .= $html;
 516         $count{"_$key"}++;
 517         foreach my $grouping ( @common_grouping ) {
 518             $count{"${grouping}_$status{$grouping}"}++;
 519         }
 520         $anydone = 1 if $status{pending} eq 'done';
 521         push @status, [ $bug, \%status, $html ];
 522     }
 523
 524     my $result = "";
 525     if ($common_raw_sort) {
 526         $result .= "<UL>\n" . join("", map( { $_->[ 2 ] } @status ) ) . "</UL>\n";
 527     } else {
 528         my (@order, @headers);
 529         for( my $i = 0; $i < @common_grouping; $i++ ) {
 530             my $grouping_name = $common_grouping[ $i ];
 531             my @items = @{ $common_grouping_order{ $grouping_name } };
 532             @items = reverse( @items ) if ( $common_reverse{ $grouping_name } );
 533             my @neworder = ();
 534             my @newheaders = ();
 535             if ( @order ) {
 536                 foreach my $grouping ( @items ) {
 537                     push @neworder, map( { "${_}_$grouping" } @order );
 538                     push @newheaders, map( { "$_ - $common_headers{$grouping_name}{$grouping}" } @headers );
 539                 }
 540                 @order = @neworder;
 541                 @headers = @newheaders;
 542             } else {
 543                 push @order, @items;
 544                 push @headers, map( { $common_headers{$common_grouping[$i]}{$_} } @items );
 545             }
 546         }
 547         $header .= "<ul>\n";
 548         for ( my $i = 0; $i < @order; $i++ ) {
 549             my $order = $order[ $i ];
 550             next unless defined $section{$order};
 551             my $count = $count{"_$order"};
 552             my $bugs = $count == 1 ? "bug" : "bugs";
 553             $header .= "<li><a href=\"#$order\">$headers[$i]</a> ($count $bugs)</li>\n";
 554         }
 555         $header .= "</ul>\n";
 556         for ( my $i = 0; $i < @order; $i++ ) {
 557             my $order = $order[ $i ];
 558             next unless defined $section{$order};
 559             my $count = $count{"_$order"};
 560             my $bugs = $count == 1 ? "bug" : "bugs";
 561             $result .= "<HR><H2><a name=\"$order\"></a>$headers[$i] ($count $bugs)</H2>\n";
 562             $result .= "<UL>\n";
 563             $result .= $section{$order};
 564             $result .= "</UL>\n";
 565         }
 566         $footer .= "<ul>\n";
 567         foreach my $grouping ( @common_grouping ) {
 568             my $local_result = '';
 569             foreach my $key ( @{$common_grouping_order{ $grouping }} ) {
 570                 my $count = $count{"${grouping}_$key"};
 571                 next if !$count;
 572                 $local_result .= "<li>$count $common_headers{$grouping}{$key}</li>\n";
 573             }
 574             if ( $local_result ) {
 575                 $footer .= "<li>$common_grouping_display{$grouping}<ul>\n$local_result</ul></li>\n";
 576             }
 577         }
 578         $footer .= "</ul>\n";
 579     }
 580
 581     $result = $header . $result if ( $common{show_list_header} );
 582     $result .= $debbugs::gHTMLExpireNote if $gRemoveAge and $anydone;
 583     $result .= $footer if ( $common{show_list_footer} );
 584     return $result;
 585 }
 586
 587 sub countbugs {
 588     my $bugfunc = shift;
 589     if ($common_archive) {
 590         open I, "<$debbugs::gSpoolDir/index.archive"
 591             or &quitcgi("$debbugs::gSpoolDir/index.archive: $!");
 592     } else {
 593         open I, "<$debbugs::gSpoolDir/index.db"
 594             or &quitcgi("$debbugs::gSpoolDir/index.db: $!");
 595     }
 596
 597     my %count = ();
 598     while(<I>)
 599     {
 600         if (m/^(\S+)\s+(\d+)\s+(\d+)\s+(\S+)\s+\[\s*([^]]*)\s*\]\s+(\w+)\s+(.*)$/) {
 601             my @x = $bugfunc->(pkg => $1, bug => $2, status => $4,
 602                                submitter => $5, severity => $6, tags => $7);
 603             local $_;
 604             $count{$_}++ foreach @x;
 605         }
 606     }
 607     close I;
 608     return %count;
 609 }
 610
 611 sub getbugs {
 612     my $bugfunc = shift;
 613     my $opt = shift;
 614
 615     my @result = ();
 616
 617     if (!$common_archive && defined $opt &&
 618         -e "$debbugs::gSpoolDir/by-$opt.idx")
 619     {
 620         my %lookup;
 621 print STDERR "optimized\n" if ($debug);
 622         tie %lookup, DB_File => "$debbugs::gSpoolDir/by-$opt.idx", O_RDONLY
 623             or die "$0: can't open $debbugs::gSpoolDir/by-$opt.idx ($!)\n";
 624         while ($key = shift) {
 625             my $bugs = $lookup{$key};
 626             if (defined $bugs) {
 627                 push @result, (unpack 'N*', $bugs);
 628             }
 629         }
 630         untie %lookup;
 631 print STDERR "done optimized\n" if ($debug);
 632     } else {
 633         if ( $common_archive ) {
 634             open I, "<$debbugs::gSpoolDir/index.archive"
 635                 or &quitcgi("$debbugs::gSpoolDir/index.archive: $!");
 636         } else {
 637             open I, "<$debbugs::gSpoolDir/index.db"
 638                 or &quitcgi("$debbugs::gSpoolDir/index.db: $!");
 639         }
 640         while(<I>) {
 641             if (m/^(\S+)\s+(\d+)\s+(\d+)\s+(\S+)\s+\[\s*([^]]*)\s*\]\s+(\w+)\s+(.*)$/) {
 642                 if ($bugfunc->(pkg => $1, bug => $2, status => $4,
 643                             submitter => $5, severity => $6, tags => $7))
 644                 {
 645                     push (@result, $2);
 646                 }
 647             }
 648         }
 649         close I;
 650     }
 651     @result = sort {$a <=> $b} @result;
 652     return \@result;
 653 }
 654
 655 sub emailfromrfc822 {
 656     my $email = shift;
 657     $email =~ s/\s*\(.*\)\s*//;
 658     $email = $1 if ($email =~ m/<(.*)>/);
 659     return $email;
 660 }
 661
 662 sub maintencoded {
 663     my $input = shift;
 664     my $encoded = '';
 665
 666     while ($input =~ m/\W/) {
 667         $encoded.=$`.sprintf("-%02x_",unpack("C",$&));
 668         $input= $';
 669     }
 670
 671     $encoded.= $input;
 672     $encoded =~ s/-2e_/\./g;
 673     $encoded =~ s/^([^,]+)-20_-3c_(.*)-40_(.*)-3e_/$1,$2,$3,/;
 674     $encoded =~ s/^(.*)-40_(.*)-20_-28_([^,]+)-29_$/,$1,$2,$3/;
 675     $encoded =~ s/-20_/_/g;
 676     $encoded =~ s/-([^_]+)_-/-$1/g;
 677     return $encoded;
 678 }
 679
 680 my $_maintainer;
 681 sub getmaintainers {
 682     return $_maintainer if $_maintainer;
 683     my %maintainer;
 684
 685     open(MM,"$gMaintainerFile") or &quitcgi("open $gMaintainerFile: $!");
 686     while(<MM>) {
 687         next unless m/^(\S+)\s+(\S.*\S)\s*$/;
 688         ($a,$b)=($1,$2);
 689         $a =~ y/A-Z/a-z/;
 690         $maintainer{$a}= $b;
 691     }
 692     close(MM);
 693     if (defined $gMaintainerFileOverride) {
 694         open(MM,"$gMaintainerFileOverride") or &quitcgi("open $gMaintainerFileOverride: $!");
 695         while(<MM>) {
 696             next unless m/^(\S+)\s+(\S.*\S)\s*$/;
 697             ($a,$b)=($1,$2);
 698             $a =~ y/A-Z/a-z/;
 699             $maintainer{$a}= $b;
 700         }
 701         close(MM);
 702     }
 703     $_maintainer = \%maintainer;
 704     return $_maintainer;
 705 }
 706
 707 my $_pkgsrc;
 708 my $_pkgcomponent;
 709 sub getpkgsrc {
 710     return $_pkgsrc if $_pkgsrc;
 711     return {} unless defined $gPackageSource;
 712     my %pkgsrc;
 713     my %pkgcomponent;
 714
 715     open(MM,"$gPackageSource") or &quitcgi("open $gPackageSource: $!");
 716     while(<MM>) {
 717         next unless m/^(\S+)\s+(\S+)\s+(\S.*\S)\s*$/;
 718         ($a,$b,$c)=($1,$2,$3);
 719         $a =~ y/A-Z/a-z/;
 720         $pkgsrc{$a}= $c;
 721         $pkgcomponent{$a}= $b;
 722     }
 723     close(MM);
 724     $_pkgsrc = \%pkgsrc;
 725     $_pkgcomponent = \%pkgcomponent;
 726     return $_pkgsrc;
 727 }
 728
 729 sub getpkgcomponent {
 730     return $_pkgcomponent if $_pkgcomponent;
 731     getpkgsrc();
 732     return $_pkgcomponent;
 733 }
 734
 735 my $_pseudodesc;
 736 sub getpseudodesc {
 737     return $_pseudodesc if $_pseudodesc;
 738     my %pseudodesc;
 739
 740     open(PSEUDO, "< $gPseudoDescFile") or &quitcgi("open $gPseudoDescFile: $!");
 741     while(<PSEUDO>) {
 742         next unless m/^(\S+)\s+(\S.*\S)\s*$/;
 743         $pseudodesc{lc $1} = $2;
 744     }
 745     close(PSEUDO);
 746     $_pseudodesc = \%pseudodesc;
 747     return $_pseudodesc;
 748 }
 749
 750 sub getbugstatus {
 751     my $bugnum = shift;
 752
 753     my %status;
 754
 755     my $location = getbuglocation( $bugnum, 'summary' );
 756     return {} if ( !$location );
 757     %status = %{ readbug( $bugnum, $location ) };
 758     $status{ id } = $bugnum;
 759
 760     $status{found_versions} = [];
 761     $status{fixed_versions} = [];
 762     if (defined $gVersionBugsDir and
 763             (defined $common_version or defined $common_dist)) {
 764         my $bughash = get_hashname($bugnum);
 765         if (open BUGVER, "< $gVersionBugsDir/$bughash/$bugnum.versions") {
 766             local $_;
 767             while (<BUGVER>) {
 768                 if (/^Found-in: (.*)/i) {
 769                     $status{found_versions} = [split ' ', $1];
 770                 } elsif (/^Fixed-in: (.*)/i) {
 771                     $status{fixed_versions} = [split ' ', $1];
 772                 }
 773             }
 774             close BUGVER;
 775         }
 776     }
 777
 778     $status{tags} = $status{keywords};
 779     my %tags = map { $_ => 1 } split ' ', $status{tags};
 780
 781     $status{"package"} =~ s/\s*$//;
 782     $status{"package"} = 'unknown' if ($status{"package"} eq '');
 783     $status{"severity"} = 'normal' if ($status{"severity"} eq '');
 784
 785     $status{"pending"} = 'pending';
 786     $status{"pending"} = 'forwarded'        if (length($status{"forwarded"}));
 787     $status{"pending"} = 'pending-fixed'    if ($tags{pending});
 788     $status{"pending"} = 'fixed'            if ($tags{fixed});
 789
 790     my $version;
 791     if (defined $common_version) {
 792         $version = $common_version;
 793     } elsif (defined $common_dist) {
 794         $version = getversion($status{package}, $common_dist, $common_arch);
 795     }
 796
 797     if (defined $version) {
 798         my $buggy = buggyversion($bugnum, $version, \%status);
 799         if ($buggy eq 'absent') {
 800             $status{"pending"} = 'absent';
 801         } elsif ($buggy eq 'fixed') {
 802             $status{"pending"} = 'done';
 803         }
 804     }
 805
 806     if (length($status{done}) and
 807             (not defined $version or not @{$status{fixed_versions}})) {
 808         $status{"pending"} = 'done';
 809     }
 810
 811     return \%status;
 812 }
 813
 814 sub getsrcpkgs {
 815     my $src = shift;
 816     return () if !$src;
 817     my %pkgsrc = %{getpkgsrc()};
 818     my @pkgs;
 819     foreach ( keys %pkgsrc ) {
 820         push @pkgs, $_ if $pkgsrc{$_} eq $src;
 821     }
 822     return @pkgs;
 823 }
 824
 825 sub buglog {
 826     my $bugnum = shift;
 827     my $location = getbuglocation($bugnum, 'log');
 828     return undef unless defined $location;
 829     return getbugcomponent($bugnum, 'log', $location);
 830 }
 831
 832 my %_versionobj;
 833 sub buggyversion {
 834     my ($bug, $ver, $status) = @_;
 835     return '' unless defined $gVersionPackagesDir;
 836     my $src = getpkgsrc()->{$status->{package}};
 837     $src = $status->{package} unless defined $src;
 838
 839     my $tree;
 840     if (exists $_versionobj{$src}) {
 841         $tree = $_versionobj{$src};
 842     } else {
 843         $tree = Debbugs::Versions->new(\&DpkgVer::vercmp);
 844         if (open VERFILE, "< $gVersionPackagesDir/$src") {
 845             $tree->load(\*VERFILE);
 846             close VERFILE;
 847         }
 848         $_versionobj{$src} = $tree;
 849     }
 850
 851     return $tree->buggy($ver, $status->{found_versions},
 852                         $status->{fixed_versions});
 853 }
 854
 855 my %_versions;
 856 sub getversion {
 857     my ($pkg, $dist, $arch) = @_;
 858     return undef unless defined $gVersionIndex;
 859     $dist = 'unstable' unless defined $dist;
 860     $arch = 'i386' unless defined $arch;
 861
 862     unless (tied %_versions) {
 863         tie %_versions, 'MLDBM', $gVersionIndex, O_RDONLY
 864             or die "can't open versions index: $!";
 865     }
 866
 867     return $_versions{$pkg}{$dist}{$arch};
 868 }
 869
 870 1;