]> git.donarmstrong.com Git - debbugs.git/blobdiff - cgi/common.pl
[project @ 2002-12-08 13:50:29 by cjwatson]
[debbugs.git] / cgi / common.pl
index 9d88de2f41e5d5b619da80e90a701c03587ebab8..d45b9debc80d45801771551e6dc5bfe72867c4ae 100644 (file)
@@ -1,9 +1,23 @@
 #!/usr/bin/perl -w
 
+use DB_File;
+use Fcntl qw/O_RDONLY/;
+
 my $common_archive = 0;
 my $common_repeatmerged = 1;
 my %common_include = ();
 my %common_exclude = ();
+my $common_raw_sort = 0;
+my $common_bug_reverse = 0;
+my $common_pending_reverse = 0;
+my $common_severity_reverse = 0;
+
+my @common_pending_include = ();
+my @common_pending_exclude = ();
+my @common_severity_include = ();
+my @common_severity_exclude = ();
+
+my $debug = 0;
 
 sub set_option {
     my ($opt, $val) = @_;
@@ -11,6 +25,66 @@ sub set_option {
     if ($opt eq "repeatmerged") { $common_repeatmerged = $val; }
     if ($opt eq "exclude") { %common_exclude = %{$val}; }
     if ($opt eq "include") { %common_include = %{$val}; }
+    if ($opt eq "raw") { $common_raw_sort = $val; }
+    if ($opt eq "bug-rev") { $common_bug_reverse = $val; }
+    if ($opt eq "pend-rev") { $common_pending_reverse = $val; }
+    if ($opt eq "sev-rev") { $common_severity_reverse = $val; }
+    if ($opt eq "pend-exc") {
+       my @vals;
+       @vals = ( $val ) if (ref($val) eq "" && $val );
+       @vals = ( $$val ) if (ref($val) eq "SCALAR" && $$val );
+       @vals = @{$val} if (ref($val) eq "ARRAY" );
+       @common_pending_exclude = @vals if (@vals);
+    }
+    if ($opt eq "pend-inc") {
+       my @vals;
+       @vals = ( $val, ) if (ref($val) eq "" && $val );
+       @vals = ( $$val, ) if (ref($val) eq "SCALAR" && $$val );
+       @vals = @{$val} if (ref($val) eq "ARRAY" );
+       @common_pending_include = @vals if (@vals);
+    }
+    if ($opt eq "sev-exc") {
+       my @vals;
+       @vals = ( $val ) if (ref($val) eq "" && $val );
+       @vals = ( $$val ) if (ref($val) eq "SCALAR" && $$val );
+       @vals = @{$val} if (ref($val) eq "ARRAY" );
+       @common_severity_exclude = @vals if (@vals);
+    }
+    if ($opt eq "sev-inc") {
+       my @vals;
+       @vals = ( $val ) if (ref($val) eq "" && $val );
+       @vals = ( $$val ) if (ref($val) eq "SCALAR" && $$val );
+       @vals = @{$val} if (ref($val) eq "ARRAY" );
+       @common_severity_include = @vals if (@vals);
+    }
+}
+
+sub readparse {
+    my ($in, $key, $val, %ret);
+    if (defined $ENV{"QUERY_STRING"} && $ENV{"QUERY_STRING"} ne "") {
+        $in=$ENV{QUERY_STRING};
+    } elsif(defined $ENV{"REQUEST_METHOD"}
+        && $ENV{"REQUEST_METHOD"} eq "POST")
+    {
+        read(STDIN,$in,$ENV{CONTENT_LENGTH});
+    } else {
+        return;
+    }
+    foreach (split(/[&;]/,$in)) {
+        s/\+/ /g;
+        ($key, $val) = split(/=/,$_,2);
+        $key=~s/%(..)/pack("c",hex($1))/ge;
+        $val=~s/%(..)/pack("c",hex($1))/ge;
+       if ( exists $ret{$key} ) {
+           if ( !exists $ret{"&$key"} ) {
+               $ret{"&$key"} = [ $ret{$key} ];
+           }
+           push @{$ret{"&$key"}},$val;
+       }
+        $ret{$key}=$val;
+    }
+$debug = 1 if (defined $ret{"debug"} && $ret{"debug"} eq "aj");
+    return %ret;
 }
 
 sub quit {
@@ -34,7 +108,7 @@ sub quit {
 
 sub htmlindexentry {
     my $ref = shift;
-    my %status = getbugstatus($ref);
+    my %status = %{getbugstatus($ref)};
     return htmlindexentrystatus(%status) if (%status);
     return "";
 }
@@ -57,7 +131,8 @@ sub htmlindexentrystatus {
                . "<strong>" . htmlsanit($status{"package"}) . "</strong></a>;\n"
                if (length($status{"package"}));
     $result .= $showseverity;
-    $result .= "Reported by: " . htmlsanit($status{originator});
+    $result .= "Reported by: <a href=\"" . submitterurl($status{originator})
+               . "\">" . htmlsanit($status{originator}) . "</a>";
     $result .= ";\nTags: <strong>" 
                 . htmlsanit(join(", ", sort(split(/\s+/, $status{tags}))))
                 . "</strong>"
@@ -89,11 +164,13 @@ sub htmlindexentrystatus {
             $daysold = $daysold - $yearsold * 364;
 
             $result .= ";\n $font";
-            $result .= "1 year and " if ($yearsold == 1);
-            $result .= "$yearsold years and " if ($yearsold > 1);
-            $result .= "1 day old" if ($daysold == 1);
-            $result .= "$daysold days old" if ($daysold != 1);
-            $result .= "$efont";
+            my @age;
+            push @age, "1 year" if ($yearsold == 1);
+            push @age, "$yearsold years" if ($yearsold > 1);
+            push @age, "1 day" if ($daysold == 1);
+            push @age, "$daysold days" if ($daysold > 1);
+            $result .= join(" and ", @age);
+            $result .= " old$efont";
         }
     }
 
@@ -102,33 +179,53 @@ sub htmlindexentrystatus {
     return $result;
 }
 
+sub submitterurl {
+    my $ref = shift || "";
+    my $params = "submitter=" . emailfromrfc822($ref);
+    $params .= "&archive=yes" if ($common_archive);
+    $params .= "&repeatmerged=no" unless ($common_repeatmerged);
+    return urlsanit($debbugs::gCGIDomain . "pkgreport.cgi" . "?" . $params);
+}
+
 sub mainturl {
-    my $ref = shift;
-    my $params = "maintenc=" . maintencoded($ref);
+    my $ref = shift || "";
+    my $params = "maint=" . emailfromrfc822($ref);
     $params .= "&archive=yes" if ($common_archive);
-    $params .= "&repeatmerged=yes" if ($common_repeatmerged);
-    return $debbugs::gCGIDomain . "pkgreport.cgi" . "?" . $params;
+    $params .= "&repeatmerged=no" unless ($common_repeatmerged);
+    return urlsanit($debbugs::gCGIDomain . "pkgreport.cgi" . "?" . $params);
 }
 
 sub pkgurl {
     my $ref = shift;
     my $params = "pkg=$ref";
     $params .= "&archive=yes" if ($common_archive);
-    $params .= "&repeatmerged=yes" if ($common_repeatmerged);
+    $params .= "&repeatmerged=no" unless ($common_repeatmerged);
     
-    return $debbugs::gCGIDomain . "pkgreport.cgi" . "?" . "$params";
+    return urlsanit($debbugs::gCGIDomain . "pkgreport.cgi" . "?" . "$params");
+}
+
+sub srcurl {
+    my $ref = shift;
+    my $params = "src=$ref";
+    $params .= "&archive=yes" if ($common_archive);
+    $params .= "&repeatmerged=no" unless ($common_repeatmerged);
+    return urlsanit($debbugs::gCGIDomain . "pkgreport.cgi" . "?" . "$params");
+}
+
+sub urlsanit {
+    my $url = shift;
+    $url =~ s/%/%25/g;
+    $url =~ s/\+/%2b/g;
+    my %saniarray = ('<','lt', '>','gt', '&','amp', '"','quot');
+    $url =~ s/([<>&"])/\&$saniarray{$1};/g;
+    return $url;
 }
 
 sub htmlsanit {
     my %saniarray = ('<','lt', '>','gt', '&','amp', '"','quot');
-    my $in = shift;
-    my $out;
-    while ($in =~ m/[<>&"]/) {
-        $out .= $`. '&'. $saniarray{$&}. ';';
-        $in = $';
-    }
-    $out .= $in;
-    return $out;
+    my $in = shift || "";
+    $in =~ s/([<>&"])/\&$saniarray{$1};/g;
+    return $in;
 }
 
 sub bugurl {
@@ -139,14 +236,27 @@ sub bugurl {
        $params .= "\&archive=yes" if (!$common_archive && $val =~ /^archive.*$/);
     }
     $params .= "&archive=yes" if ($common_archive);
-    $params .= "&repeatmerged=yes" if ($common_repeatmerged);
+    $params .= "&repeatmerged=no" unless ($common_repeatmerged);
 
-    return $debbugs::gCGIDomain . "bugreport.cgi" . "?" . "$params";
+    return urlsanit($debbugs::gCGIDomain . "bugreport.cgi" . "?" . "$params");
 }
 
-sub packageurl {
+sub dlurl {
     my $ref = shift;
-    return $debbugs::gCGIDomain . "package.cgi" . "?" . "package=$ref";
+    my $params = "bug=$ref";
+    my $filename = '';
+    foreach my $val (@_) {
+       $params .= "\&$1=$2" if ($val =~ /^(msg|att)=([0-9]+)/);
+       $filename = $1 if ($val =~ /^filename=(.*)$/);
+    }
+    $params .= "&archive=yes" if ($common_archive);
+
+    return urlsanit($debbugs::gCGIDomain . "bugreport.cgi/$filename?$params");
+}
+
+sub mboxurl {
+    my $ref = shift;
+    return urlsanit($debbugs::gCGIDomain . "bugreport.cgi" . "?" . "bug=$ref&mbox=yes");
 }
 
 sub allbugs {
@@ -162,11 +272,15 @@ sub allbugs {
 }
 
 sub htmlizebugs {
-    my @bugs = @_;
+    $b = $_[0];
+    my @bugs = @$b;
+    my @rawsort;
 
     my %section = ();
 
     my %displayshowpending = ("pending", "outstanding",
+                             "pending-fixed", "pending upload",
+                             "fixed", "fixed in NMU",
                               "done", "resolved",
                               "forwarded", "forwarded to upstream software authors");
 
@@ -174,8 +288,13 @@ sub htmlizebugs {
         return "<HR><H2>No reports found!</H2></HR>\n";
     }
 
-    foreach my $bug (sort {$a<=>$b} @bugs) {
-       my %status = getbugstatus($bug);
+    if ( $common_bug_reverse ) {
+       @bugs = sort {$b<=>$a} @bugs;
+    } else {
+       @bugs = sort {$a<=>$b} @bugs;
+    }
+    foreach my $bug (@bugs) {
+       my %status = %{getbugstatus($bug)};
         next unless %status;
        my @merged = sort {$a<=>$b} ($bug, split(/ /, $status{mergedwith}));
        next unless ($common_repeatmerged || $bug == $merged[0]);
@@ -184,31 +303,60 @@ sub htmlizebugs {
            foreach my $t (split /\s+/, $status{tags}) {
                $okay = 1, last if (defined $common_include{$t});
            }
+           if (defined $common_include{subj}) {
+                if (index($status{subject}, $common_include{subj}) > -1) {
+                    $okay = 1;
+                }
+            }
            next unless ($okay);
         }
        if (%common_exclude) {
            my $okay = 1;
            foreach my $t (split /\s+/, $status{tags}) {
-               $okay = 0, last if (defined $comon_exclude{$t});
+               $okay = 0, last if (defined $common_exclude{$t});
            }
+           if (defined $common_exclude{subj}) {
+                if (index($status{subject}, $common_exclude{subj}) > -1) {
+                    $okay = 0;
+                }
+            }
            next unless ($okay);
        }
-           
-       $section{$status{pending} . "_" . $status{severity}} .=
-           sprintf "<li><a href=\"%s\">#%d: %s</a>\n<br>",
-               bugurl($bug), $bug, htmlsanit($status{subject});
-       $section{$status{pending} . "_" . $status{severity}} .=
-           htmlindexentrystatus(\%status) . "\n";
+       next if @common_pending_include and
+            not grep { $_ eq $status{pending} } @common_pending_include;
+       next if @common_severity_include and
+            not grep { $_ eq $status{severity} } @common_severity_include;
+       next if grep { $_ eq $status{pending} } @common_pending_exclude;
+       next if grep { $_ eq $status{severity} } @common_severity_exclude;
+
+       my $html = sprintf "<li><a href=\"%s\">#%d: %s</a>\n<br>",
+           bugurl($bug), $bug, htmlsanit($status{subject});
+       $html .= htmlindexentrystatus(\%status) . "\n";
+       $section{$status{pending} . "_" . $status{severity}} .= $html;
+       push @rawsort, $html if $common_raw_sort;
     }
 
     my $result = "";
     my $anydone = 0;
-    foreach my $pending (qw(pending forwarded done)) {
-        foreach my $severity(@debbugs::gSeverityList) {
+    if ($common_raw_sort) {
+       $result .= "<UL>\n" . join("", @rawsort ) . "</UL>\n";
+    } else {
+       my @pendingList = qw(pending forwarded pending-fixed fixed done);
+       @pendingList = reverse @pendingList if $common_pending_reverse;
+#print STDERR join(",",@pendingList)."\n";
+#print STDERR join(",",@common_pending_include).":$#common_pending_include\n";
+    foreach my $pending (@pendingList) {
+       my @severityList = @debbugs::gSeverityList;
+       @severityList = reverse @severityList if $common_severity_reverse;
+#print STDERR join(",",@severityList)."\n";
+
+#        foreach my $severity(@debbugs::gSeverityList) {
+        foreach my $severity(@severityList) {
             $severity = $debbugs::gDefaultSeverity if ($severity eq '');
             next unless defined $section{${pending} . "_" . ${severity}};
             $result .= "<HR><H2>$debbugs::gSeverityDisplay{$severity} - $displayshowpending{$pending}</H2>\n";
-            $result .= "(A list of <a href=\"http://www.debian.org/Bugs/db/si/$pending$severity\">all such bugs</a> is available).\n";
+            #$result .= "(A list of <a href=\"http://${debbugs::gWebDomain}/db/si/$pending$severity\">all such bugs</a> is available).\n";
+           $result .= "(A list of all such bugs used to be available).\n";
             $result .= "<UL>\n";
            $result .= $section{$pending . "_" . $severity}; 
            $result .= "</UL>\n";
@@ -216,90 +364,81 @@ sub htmlizebugs {
          }
     }
 
+    }
     $result .= $debbugs::gHTMLExpireNote if ($anydone);
     return $result;
 }
 
-sub submitterbugs {
-    my $submitter = shift;
-    my $chk = sub {
-        my %d = @_;
-        ($subemail = $d{"submitter"}) =~ s/\s*\(.*\)\s*//;
-        if ($subemail =~ m/<(.*)>/) { $subemail = $1 }
-        return $subemail eq $submitter;
-    };
-    return getbugs($chk);
-}
-
-sub severitybugs {
-    my $status = shift;
-    my $severity = shift;
-    my $chk = sub {
-       my %d = @_; 
-       return ($d{"severity"} eq $severity) && ($d{"status"} eq $status); 
-    };
-    return getbugs($chk);
-}
-
-sub maintbugs {
-    my $maint = shift;
-    my %maintainers = getmaintainers();
-    my $chk = sub {
-        my %d = @_;
-        ($maintemail = $maintainers{$d{"pkg"}} || "") =~ s/\s*\(.*\)\s*//;
-        if ($maintemail =~ m/<(.*)>/) { $maintemail = $1 }
-        return $maintemail eq $maint;
-    };
-    return getbugs($chk);
-}
-
-sub maintencbugs {
-    my $maint = shift;
-    my %maintainers = getmaintainers();
-    return getbugs(sub {my %d=@_; return maintencoded($maintainers{$d{"pkg"}} || "") eq $maint});
-}
-
-sub pkgbugs {
-    my $inpkg = shift;
-    return getbugs( sub { my %d = @_; return $inpkg eq $d{"pkg"} });
-}
-
-sub getbugs {
+sub countbugs {
     my $bugfunc = shift;
-
-    if ( $common_archive ) {
+    if ($common_archive) {
         open I, "<$debbugs::gSpoolDir/index.archive" or &quit("bugindex: $!");
     } else {
         open I, "<$debbugs::gSpoolDir/index.db" or &quit("bugindex: $!");
     }
-    
-    my @result = ();
+
+    my %count = ();
     while(<I>) 
     {
         if (m/^(\S+)\s+(\d+)\s+(\d+)\s+(\S+)\s+\[\s*([^]]*)\s*\]\s+(\w+)\s+(.*)$/) {
-            if ($bugfunc->(pkg => $1, bug => $2, status => $4, submitter => $5,
-                          severity => $6, tags => $7))
-           {
-               push (@result, $2);
-               #last if (@result > 400);
-           }
+            my $x = $bugfunc->(pkg => $1, bug => $2, status => $4, 
+                               submitter => $5, severity => $6, tags => $7);
+           $count{$x}++;
        }
     }
     close I;
-    return sort {$a <=> $b} @result;
+    return %count;
 }
 
-sub pkgbugsindex {
-    my %descstr = ();
-    if ( $common_archive ) {
-        open I, "<$debbugs::gSpoolDir/index.archive" or &quit("bugindex: $!");
+sub getbugs {
+    my $bugfunc = shift;
+    my $opt = shift;
+
+    my @result = ();
+
+    if (!$common_archive && defined $opt && 
+        -e "$debbugs::gSpoolDir/by-$opt.idx") 
+    {
+        my %lookup;
+print STDERR "optimized\n" if ($debug);
+        tie %lookup, DB_File => "$debbugs::gSpoolDir/by-$opt.idx", O_RDONLY
+            or die "$0: can't open $debbugs::gSpoolDir/by-$opt.idx ($!)\n";
+       while ($key = shift) {
+            my $bugs = $lookup{$key};
+            if (defined $bugs) {
+                push @result, (unpack 'N*', $bugs);
+            }
+        }
+       untie %lookup;
+print STDERR "done optimized\n" if ($debug);
     } else {
-        open I, "<$debbugs::gSpoolDir/index.db" or &quit("bugindex: $!");
-    }
-    while(<I>) { 
-        $descstr{ $1 } = 1 if (m/^(\S+)/);
+        if ( $common_archive ) {
+            open I, "<$debbugs::gSpoolDir/index.archive" 
+                or &quit("bugindex: $!");
+        } else {
+            open I, "<$debbugs::gSpoolDir/index.db" 
+                or &quit("bugindex: $!");
+        }
+        while(<I>) {
+            if (m/^(\S+)\s+(\d+)\s+(\d+)\s+(\S+)\s+\[\s*([^]]*)\s*\]\s+(\w+)\s+(.*)$/) {
+                if ($bugfunc->(pkg => $1, bug => $2, status => $4,
+                           submitter => $5, severity => $6, tags => $7)) 
+               {
+                   push (@result, $2);
+               }
+           }
+        }
+        close I;
     }
-    return %descstr;
+    @result = sort {$a <=> $b} @result;
+    return \@result;
+}
+
+sub emailfromrfc822 {
+    my $email = shift;
+    $email =~ s/\s*\(.*\)\s*//;
+    $email = $1 if ($email =~ m/<(.*)>/);
+    return $email;
 }
 
 sub maintencoded {
@@ -320,7 +459,9 @@ sub maintencoded {
     return $encoded;
 }
 
+my $_maintainer;
 sub getmaintainers {
+    return $_maintainer if $_maintainer;
     my %maintainer;
 
     open(MM,"$gMaintainerFile") or &quit("open $gMaintainerFile: $!");
@@ -331,19 +472,77 @@ sub getmaintainers {
        $maintainer{$a}= $b;
     }
     close(MM);
+    open(MM,"$gMaintainerFileOverride") or &quit("open $gMaintainerFileOverride: $!");
+    while(<MM>) {
+       next unless m/^(\S+)\s+(\S.*\S)\s*$/;
+       ($a,$b)=($1,$2);
+       $a =~ y/A-Z/a-z/;
+       $maintainer{$a}= $b;
+    }
+    close(MM);
+    $_maintainer = \%maintainer;
+    return $_maintainer;
+}
 
-    return %maintainer;
+my $_pkgsrc;
+my $_pkgcomponent;
+sub getpkgsrc {
+    return $_pkgsrc if $_pkgsrc;
+    my %pkgsrc;
+    my %pkgcomponent;
+
+    open(MM,"$gPackageSource") or &quit("open $gPackageSource: $!");
+    while(<MM>) {
+       next unless m/^(\S+)\s+(\S+)\s+(\S.*\S)\s*$/;
+       ($a,$b,$c)=($1,$2,$3);
+       $a =~ y/A-Z/a-z/;
+       $pkgsrc{$a}= $c;
+       $pkgcomponent{$a}= $b;
+    }
+    close(MM);
+    $_pkgsrc = \%pkgsrc;
+    $_pkgcomponent = \%pkgcomponent;
+    return $_pkgsrc;
 }
 
+sub getpkgcomponent {
+    return $_pkgcomponent if $_pkgcomponent;
+    getpkgsrc();
+    return $_pkgcomponent;
+}
+
+my $_pseudodesc;
+sub getpseudodesc {
+    return $_pseudodesc if $_pseudodesc;
+    my %pseudodesc;
+
+    open(PSEUDO, "< $gPseudoDescFile") or &quit("open $gPseudoDescFile: $!");
+    while(<PSEUDO>) {
+       next unless m/^(\S+)\s+(\S.*\S)\s*$/;
+       $pseudodesc{lc $1} = $2;
+    }
+    close(PSEUDO);
+    $_pseudodesc = \%pseudodesc;
+    return $_pseudodesc;
+}
+
+sub getbugdir {
+    my ( $bugnum, $ext ) = @_;
+    my $archdir = sprintf "%02d", $bugnum % 100;
+    foreach ( ( "$gSpoolDir/db-h/$archdir", "$gSpoolDir/db", "$gSpoolDir/archive/$archdir", "/debian/home/joeyh/tmp/infomagic-95/$archdir" ) ) {
+       return $_ if ( -r "$_/$bugnum.$ext" );
+    }
+    return undef;
+}
+    
 sub getbugstatus {
     my $bugnum = shift;
 
     my %status;
 
-    unless (open(S,"$gSpoolDir/db/$bugnum.status")) {
-        my $archdir = sprintf "%02d", $bugnum % 100;
-       open(S,"$gSpoolDir/archive/$archdir/$bugnum.status" ) or return ();
-    }
+    my $dir = getbugdir( $bugnum, "status" );
+    return {} if ( !$dir );
+    open S, "< $dir/$bugnum.status";
     my @lines = qw(originator date subject msgid package tags done
                        forwarded mergedwith severity);
     while(<S>) {
@@ -358,24 +557,31 @@ sub getbugstatus {
     $status{"severity"} = 'normal' if ($status{"severity"} eq '');
 
     $status{"pending"} = 'pending';
-    $status{"pending"} = 'forwarded' if (length($status{"forwarded"}));
-    $status{"pending"} = 'done'      if (length($status{"done"}));
+    $status{"pending"} = 'forwarded'       if (length($status{"forwarded"}));
+    $status{"pending"} = 'pending-fixed'    if ($status{"tags"} =~ /\bpending\b/);
+    $status{"pending"} = 'fixed'           if ($status{"tags"} =~ /\bfixed\b/);
+    $status{"pending"} = 'done'                    if (length($status{"done"}));
 
-    return %status;
+    return \%status;
 }
 
+sub getsrcpkgs {
+    my $src = shift;
+    return () if !$src;
+    my %pkgsrc = %{getpkgsrc()};
+    my @pkgs;
+    foreach ( keys %pkgsrc ) {
+       push @pkgs, $_ if $pkgsrc{$_} eq $src;
+    }
+    return @pkgs;
+}
+   
 sub buglog {
     my $bugnum = shift;
-    my $res;
-
-    $res = "$gSpoolDir/db/$bugnum.log"; 
-    return $res if ( -e $res );
 
-    my $archdir = sprintf "%02d", $bugnum % 100;
-    $res = "$gSpoolDir/archive/$archdir/$bugnum.log";
-    return $res if ( -e $res );
-
-    return "";
+    my $dir = getbugdir( $bugnum, "log" );
+    return "" if ( !$dir );
+    return "$dir/$bugnum.log";
 }
 
-1
+1;