scripts/service.in

   1 #!/usr/bin/perl
   2 # $Id: service.in,v 1.118 2005/10/19 01:22:14 don Exp $
   3 #
   4 # Usage: service <code>.nn
   5 # Temps:  incoming/P<code>.nn
   6
   7 use File::Copy;
   8 use MIME::Parser;
   9 use Debbugs::MIME qw(decode_rfc1522 encode_rfc1522);
  10 use Debbugs::Mail qw(send_mail_message);
  11 use Debbugs::User;
  12 use HTML::Entities qw(encode_entities);
  13 use Debbugs::Versions::Dpkg;
  14
  15 use Debbugs::Config qw(:globals :config);
  16 use Debbugs::CGI qw(html_escape);
  17 use Debbugs::Control qw(:archive :log);
  18 use Debbugs::Log qw(:misc);
  19
  20 $lib_path = $gLibPath;
  21 require "$lib_path/errorlib";
  22 $ENV{'PATH'} = $lib_path.':'.$ENV{'PATH'};
  23
  24 chdir("$gSpoolDir") || die "chdir spool: $!\n";
  25
  26 # open(DEBUG,">&4");
  27 open DEBUG, ">/dev/null";
  28 $debug = 0;
  29 umask(002);
  30
  31 $_=shift;
  32 m/^[RC]\.\d+$/ || &quit("bad argument");
  33 $control= m/C/;
  34 $nn= $_;
  35 if (!rename("incoming/G$nn","incoming/P$nn")) {
  36     $_=$!.'';  m/no such file or directory/i && exit 0;
  37     &quit("renaming to lock: $!");
  38 }
  39
  40 open(M,"incoming/P$nn");
  41 @log=<M>;
  42 @msg=@log;
  43 close(M);
  44
  45 chomp @msg;
  46
  47 print "###\n",join("##\n",@msg),"\n###\n" if $debug;
  48
  49 my $parser = new MIME::Parser;
  50 mkdir "$gSpoolDir/mime.tmp", 0777;
  51 $parser->output_under("$gSpoolDir/mime.tmp");
  52 my $entity = eval { $parser->parse_data(join('',@log)) };
  53
  54 # header and decoded body respectively
  55 my (@headerlines, @bodylines);
  56 # Bug numbers to send e-mail to, hash so that we don't send to the
  57 # same bug twice.
  58 my (%bug_affected);
  59
  60 if ($entity and $entity->head->tags) {
  61     @headerlines = @{$entity->head->header};
  62     chomp @headerlines;
  63
  64     my $entity_body = getmailbody($entity);
  65     @bodylines = $entity_body ? $entity_body->as_lines() : ();
  66     chomp @bodylines;
  67 } else {
  68     # Legacy pre-MIME code, kept around in case MIME::Parser fails.
  69     my $i;
  70     for ($i = 0; $i <= $#msg; $i++) {
  71         $_ = $msg[$i];
  72         last unless length($_);
  73         while ($msg[$i+1] =~ m/^\s/) {
  74             $i++;
  75             $_ .= "\n".$msg[$i];
  76         }
  77         push @headerlines, $_;
  78     }
  79
  80     @bodylines = @msg[$i..$#msg];
  81 }
  82
  83 for (@headerlines) {
  84     $_ = decode_rfc1522($_);
  85     s/\n\s/ /g;
  86     print ">$_<\n" if $debug;
  87     if (s/^(\S+):\s*//) {
  88         my $v = lc $1;
  89         print ">$v=$_<\n" if $debug;
  90         $header{$v} = $_;
  91     } else {
  92         print "!>$_<\n" if $debug;
  93     }
  94 }
  95
  96 # Strip off RFC2440-style PGP clearsigning.
  97 if (@bodylines and $bodylines[0] =~ /^-----BEGIN PGP SIGNED/) {
  98     shift @bodylines while @bodylines and length $bodylines[0];
  99     shift @bodylines while @bodylines and $bodylines[0] !~ /\S/;
 100     for my $findsig (0 .. $#bodylines) {
 101         if ($bodylines[$findsig] =~ /^-----BEGIN PGP SIGNATURE/) {
 102             $#bodylines = $findsig - 1;
 103             last;
 104         }
 105     }
 106     map { s/^- // } @bodylines;
 107 }
 108
 109 grep(s/\s+$//,@bodylines);
 110
 111 print "***\n",join("\n",@bodylines),"\n***\n" if $debug;
 112
 113 if (defined $header{'resent-from'} && !defined $header{'from'}) {
 114     $header{'from'} = $header{'resent-from'};
 115 }
 116
 117 defined($header{'from'}) || &quit("no From header");
 118
 119 delete $header{'reply-to'}
 120         if ( defined($header{'reply-to'}) && $header{'reply-to'} =~ m/^\s*$/ );
 121
 122 if ( defined($header{'reply-to'}) && $header{'reply-to'} ne "" ) {
 123     $replyto = $header{'reply-to'};
 124 } else {
 125     $replyto = $header{'from'};
 126 }
 127
 128 # This is an error counter which should be incremented every time there is an error.
 129 my $errors = 0;
 130 $controlrequestaddr= $control ? "control\@$gEmailDomain" : "request\@$gEmailDomain";
 131 $transcript='';
 132 &transcript("Processing commands for $controlrequestaddr:\n\n");
 133
 134 $dl= 0;
 135 $state= 'idle';
 136 $lowstate= 'idle';
 137 $mergelowstate= 'idle';
 138 $midix=0;
 139 $extras="";
 140
 141 my $user = $replyto;
 142 $user =~ s/,.*//;
 143 $user =~ s/^.*<(.*)>.*$/$1/;
 144 $user =~ s/[(].*[)]//;
 145 $user =~ s/^\s*(\S+)\s+.*$/$1/;
 146 $user = "" unless (Debbugs::User::is_valid_user($user));
 147 my $indicated_user = 0;
 148
 149 my $quickabort = 0;
 150
 151 my $fuckheads = "(" . join("|", @gExcludeFromControl) . ")";
 152 if (@gExcludeFromControl and $replyto =~ m/$fuckheads/) {
 153         &transcript("You have been specifically excluded from using the\ncontrol interface.\n\n");
 154         &transcript("Have a nice day\n\n.");
 155         $quickabort = 1;
 156 }
 157
 158 my %limit_pkgs = ();
 159 my %clonebugs = ();
 160 my @bcc = ();
 161
 162 sub addbcc {
 163     push @bcc, $_[0] unless grep { $_ eq $_[0] } @bcc;
 164 }
 165
 166 for ($procline=0; $procline<=$#bodylines; $procline++) {
 167     $state eq 'idle' || print "$state ?\n";
 168     $lowstate eq 'idle' || print "$lowstate ?\n";
 169     $mergelowstate eq 'idle' || print "$mergelowstate ?\n";
 170     if ($quickabort) {
 171          &transcript("Stopping processing here.\n\n");
 172          last;
 173     }
 174     $_= $bodylines[$procline]; s/\s+$//;
 175     next unless m/\S/;
 176     &transcript("> $_\n");
 177     next if m/^\s*\#/;
 178     $action= '';
 179     if (m/^stop\s*$/i || m/^quit\s*$/i || m/^--\s*$/ || m/^thank(?:s|\s*you)?\s*$/i || m/^kthxbye\s*$/i) {
 180         &transcript("Stopping processing here.\n\n");
 181         last;
 182     } elsif (m/^debug\s+(\d+)$/i && $1 >= 0 && $1 <= 1000) {
 183         $dl= $1+0;
 184         &transcript("Debug level $dl.\n\n");
 185     } elsif (m/^(send|get)\s+\#?(\d{2,})$/i) {
 186         $ref= $2+0;
 187         &sendlynxdoc("bugreport.cgi?bug=$ref","logs for $gBug#$ref");
 188     } elsif (m/^send-detail\s+\#?(\d{2,})$/i) {
 189         $ref= $1+0;
 190         &sendlynxdoc("bugreport.cgi?bug=$ref&boring=yes",
 191                      "detailed logs for $gBug#$ref");
 192     } elsif (m/^index(\s+full)?$/i) {
 193         &transcript("This BTS function is currently disabled, sorry.\n\n");
 194         $errors++;
 195         $ok++; # well, it's not really ok, but it fixes #81224 :)
 196     } elsif (m/^index-summary\s+by-package$/i) {
 197         &transcript("This BTS function is currently disabled, sorry.\n\n");
 198         $errors++;
 199         $ok++; # well, it's not really ok, but it fixes #81224 :)
 200     } elsif (m/^index-summary(\s+by-number)?$/i) {
 201         &transcript("This BTS function is currently disabled, sorry.\n\n");
 202         $errors++;
 203         $ok++; # well, it's not really ok, but it fixes #81224 :)
 204     } elsif (m/^index(\s+|-)pack(age)?s?$/i) {
 205         &sendlynxdoc("pkgindex.cgi?indexon=pkg",'index of packages');
 206     } elsif (m/^index(\s+|-)maints?$/i) {
 207         &sendlynxdoc("pkgindex.cgi?indexon=maint",'index of maintainers');
 208     } elsif (m/^index(\s+|-)maint\s+(\S+)$/i) {
 209         $maint = $2;
 210         &sendlynxdoc("pkgreport.cgi?maint=" . urlsanit($maint),
 211                      "$gBug list for maintainer \`$maint'");
 212         $ok++;
 213     } elsif (m/^index(\s+|-)pack(age)?s?\s+(\S.*\S)$/i) {
 214         $package = $+;
 215         &sendlynxdoc("pkgreport.cgi?pkg=" . urlsanit($package),
 216                      "$gBug list for package $package");
 217         $ok++;
 218     } elsif (m/^send-unmatched(\s+this|\s+-?0)?$/i) {
 219         &transcript("This BTS function is currently disabled, sorry.\n\n");
 220         $errors++;
 221         $ok++; # well, it's not really ok, but it fixes #81224 :)
 222     } elsif (m/^send-unmatched\s+(last|-1)$/i) {
 223         &transcript("This BTS function is currently disabled, sorry.\n\n");
 224         $errors++;
 225         $ok++; # well, it's not really ok, but it fixes #81224 :)
 226     } elsif (m/^send-unmatched\s+(old|-2)$/i) {
 227         &transcript("This BTS function is currently disabled, sorry.\n\n");
 228         $errors++;
 229         $ok++; # well, it's not really ok, but it fixes #81224 :)
 230     } elsif (m/^getinfo\s+([\w-.]+)$/i) {
 231         # the following is basically a Debian-specific kludge, but who cares
 232         $req = $1;
 233         if ($req =~ /^maintainers$/i && -f "$gConfigDir/Maintainers") {
 234             &sendinfo("local", "$gConfigDir/Maintainers", "Maintainers file");
 235         } elsif ($req =~ /^override\.(\w+)\.([\w-.]+)$/i) {
 236             $req =~ s/.gz$//;
 237             &sendinfo("ftp.d.o", "$req", "override file for $2 part of $1 distribution");
 238         } elsif ($req =~ /^pseudo-packages\.(description|maintainers)$/i && -f "$gConfigDir/$req") {
 239             &sendinfo("local", "$gConfigDir/$req", "$req file");
 240         } else {
 241             &transcript("Info file $req does not exist.\n\n");
 242         }
 243     } elsif (m/^help/i) {
 244         &sendhelp;
 245         &transcript("\n");
 246         $ok++;
 247     } elsif (m/^refcard/i) {
 248         &sendtxthelp("bug-mailserver-refcard.txt","mail servers' reference card");
 249     } elsif (m/^subscribe/i) {
 250         &transcript(<<END);
 251 There is no $gProject $gBug mailing list.  If you wish to review bug reports
 252 please do so via http://$gWebDomain/ or ask this mail server
 253 to send them to you.
 254 soon: MAILINGLISTS_TEXT
 255 END
 256     } elsif (m/^unsubscribe/i) {
 257         &transcript(<<END);
 258 soon: UNSUBSCRIBE_TEXT
 259 soon: MAILINGLISTS_TEXT
 260 END
 261     } elsif (m/^user\s+(\S+)\s*$/i) {
 262         my $newuser = $1;
 263         if (Debbugs::User::is_valid_user($newuser)) {
 264             my $olduser = ($user ne "" ? " (was $user)" : "");
 265             &transcript("Setting user to $newuser$olduser.\n");
 266             $user = $newuser;
 267             $indicated_user = 1;
 268         } else {
 269             &transcript("Selected user id ($newuser) invalid, sorry\n");
 270             $errors++;
 271             $user = "";
 272             $indicated_user = 1;
 273         }
 274     } elsif (m/^usercategory\s+(\S+)(\s+\[hidden\])?\s*$/i) {
 275         $ok++;
 276         my $catname = $1;
 277         my $hidden = ($2 ne "");
 278
 279         my $prefix = "";
 280         my @cats;
 281         my $bad = 0;
 282         my $catsec = 0;
 283         if ($user eq "") {
 284             &transcript("No valid user selected\n");
 285             $errors++;
 286             next;
 287         }
 288         if (not $indicated_user and defined $user) {
 289              &transcript("User is $user");
 290              $indicated_user = 1;
 291         }
 292         while (++$procline <= $#bodylines) {
 293             unless ($bodylines[$procline] =~ m/^\s*([*+])\s*(\S.*)$/) {
 294                 $procline--;
 295                 last;
 296             }
 297             &transcript("> $bodylines[$procline]\n");
 298             next if $bad;
 299             my ($o, $txt) = ($1, $2);
 300             if ($#cats == -1 && $o eq "+") {
 301                 &transcript("User defined category specification must start with a category name. Skipping.\n\n");
 302                 $errors++;
 303                 $bad = 1;
 304                 next;
 305             }
 306             if ($o eq "+") {
 307                 unless (ref($cats[-1]) eq "HASH") {
 308                     $cats[-1] = { "nam" => $cats[-1],
 309                                   "pri" => [], "ttl" => [] };
 310                 }
 311                 $catsec++;
 312                 my ($desc, $ord, $op);
 313                 if ($txt =~ m/^(.*\S)\s*\[((\d+):\s*)?\]\s*$/) {
 314                     $desc = $1; $ord = $3; $op = "";
 315                 } elsif ($txt =~ m/^(.*\S)\s*\[((\d+):\s*)?(\S+)\]\s*$/) {
 316                     $desc = $1; $ord = $3; $op = $4;
 317                 } elsif ($txt =~ m/^([^[\s]+)\s*$/) {
 318                     $desc = ""; $op = $1;
 319                 } else {
 320                     &transcript("Unrecognised syntax for category section. Skipping.\n\n");
 321                     $errors++;
 322                     $bad = 1;
 323                     next;
 324                 }
 325                 $ord = 999 unless defined $ord;
 326
 327                 if ($op) {
 328                     push @{$cats[-1]->{"pri"}}, $prefix . $op;
 329                     push @{$cats[-1]->{"ttl"}}, $desc;
 330                     push @ords, "$ord $catsec";
 331                 } else {
 332                     @cats[-1]->{"def"} = $desc;
 333                     push @ords, "$ord DEF";
 334                     $catsec--;
 335                 }
 336                 @ords = sort { my ($a1, $a2, $b1, $b2) = split / /, "$a $b";
 337                                $a1 <=> $b1 || $a2 <=> $b2; } @ords;
 338                 $cats[-1]->{"ord"} = [map { m/^.* (\S+)/; $1 eq "DEF" ? $catsec + 1 : $1 } @ords];
 339             } elsif ($o eq "*") {
 340                 $catsec = 0;
 341                 my ($name);
 342                 if ($txt =~ m/^(.*\S)(\s*\[(\S+)\])\s*$/) {
 343                     $name = $1; $prefix = $3;
 344                 } else {
 345                     $name = $txt; $prefix = "";
 346                 }
 347                 push @cats, $name;
 348             }
 349         }
 350         # XXX: got @cats, now do something with it
 351         my $u = Debbugs::User::get_user($user);
 352         if (@cats) {
 353             &transcript("Added usercategory $catname.\n\n");
 354             $u->{"categories"}->{$catname} = [ @cats ];
 355             if (not $hidden) {
 356                  push @{$u->{visible_cats}},$catname;
 357             }
 358         } else {
 359             &transcript("Removed usercategory $catname.\n\n");
 360             delete $u->{"categories"}->{$catname};
 361             @{$u->{visible_cats}} = grep {$_ ne $catname} @{$u->{visible_cats}};
 362         }
 363         $u->write();
 364     } elsif (m/^usertags?\s+\#?(-?\d+)\s+(([=+-])\s*)?(\S.*)?$/i) {
 365         $ok++;
 366         $ref = $1; $addsubcode = $3 || "+"; $tags = $4;
 367         if ($ref =~ m/^-\d+$/ && defined $clonebugs{$ref}) {
 368              $ref = $clonebugs{$ref};
 369         }
 370         if ($user eq "") {
 371             &transcript("No valid user selected\n");
 372             $errors++;
 373             $indicated_user = 1;
 374         } elsif (&setbug) {
 375             if (not $indicated_user and defined $user) {
 376                  &transcript("User is $user");
 377                  $indicated_user = 1;
 378             }
 379             &nochangebug;
 380             my %ut;
 381             Debbugs::User::read_usertags(\%ut, $user);
 382             my @oldtags = (); my @newtags = (); my @badtags = ();
 383             my %chtags;
 384             for my $t (split /[,\s]+/, $tags) {
 385                 if ($t =~ m/^[a-zA-Z0-9.+\@-]+$/) {
 386                     $chtags{$t} = 1;
 387                 } else {
 388                     push @badtags, $t;
 389                 }
 390             }
 391             if (@badtags) {
 392                 &transcript("Ignoring illegal tag/s: ".join(', ', @badtags).".\nPlease use only alphanumerics, at, dot, plus and dash.\n");
 393                 $errors++;
 394             }
 395             for my $t (keys %chtags) {
 396                 $ut{$t} = [] unless defined $ut{$t};
 397             }
 398             for my $t (keys %ut) {
 399                 my %res = map { ($_, 1) } @{$ut{$t}};
 400                 push @oldtags, $t if defined $res{$ref};
 401                 my $addop = ($addsubcode eq "+" or $addsubcode eq "=");
 402                 my $del = (defined $chtags{$t} ? $addsubcode eq "-"
 403                                                : $addsubcode eq "=");
 404                 $res{$ref} = 1 if ($addop && defined $chtags{$t});
 405                 delete $res{$ref} if ($del);
 406                 push @newtags, $t if defined $res{$ref};
 407                 $ut{$t} = [ sort { $a <=> $b } (keys %res) ];
 408             }
 409             if (@oldtags == 0) {
 410                 &transcript("There were no usertags set.\n");
 411             } else {
 412                 &transcript("Usertags were: " . join(" ", @oldtags) . ".\n");
 413             }
 414             &transcript("Usertags are now: " . join(" ", @newtags) . ".\n");
 415             Debbugs::User::write_usertags(\%ut, $user);
 416         }
 417     } elsif (!$control) {
 418         &transcript(<<END);
 419 Unknown command or malformed arguments to command.
 420 (Use control\@$gEmailDomain to manipulate reports.)
 421
 422 END
 423         $errors++;
 424         if (++$unknowns >= 3) {
 425             &transcript("Too many unknown commands, stopping here.\n\n");
 426             last;
 427         }
 428 #### "developer only" ones start here
 429     } elsif (m/^close\s+\#?(-?\d+)(?:\s+(\d.*))?$/i) {
 430         $ok++;
 431         $ref= $1;
 432         $bug_affected{$ref}=1;
 433         $version= $2;
 434         if (&setbug) {
 435             &transcript("'close' is deprecated; see http://$gWebDomain/Developer$gHTMLSuffix#closing.\n");
 436             if (length($data->{done}) and not defined($version)) {
 437                 &transcript("$gBug is already closed, cannot re-close.\n\n");
 438                 &nochangebug;
 439             } else {
 440                 $action= "$gBug " .
 441                     (defined($version) ?
 442                         "marked as fixed in version $version" :
 443                         "closed") .
 444                     ", send any further explanations to $data->{originator}";
 445                 do {
 446                     &addmaintainers($data);
 447                                         if ( length( $gDoneList ) > 0 && length( $gListDomain ) >
 448                                         0 ) { &addccaddress("$gDoneList\@$gListDomain"); }
 449                     $data->{done}= $replyto;
 450                     my @keywords= split ' ', $data->{keywords};
 451                     if (grep $_ eq 'pending', @keywords) {
 452                         $extramessage= "Removed pending tag.\n";
 453                         $data->{keywords}= join ' ', grep $_ ne 'pending',
 454                                                 @keywords;
 455                     }
 456                     addfixedversions($data, $data->{package}, $version, 'binary');
 457
 458                     $message= <<END;
 459 From: $gMaintainerEmail ($gProject $gBug Tracking System)
 460 To: $data->{originator}
 461 Subject: $gBug#$ref acknowledged by developer
 462          ($header{'subject'})
 463 References: $header{'message-id'} $data->{msgid}
 464 In-Reply-To: $data->{msgid}
 465 Message-ID: <handler.$ref.$nn.notifdonectrl.$midix\@$gEmailDomain>
 466 Reply-To: $ref\@$gEmailDomain
 467 X-$gProject-PR-Message: they-closed-control $ref
 468
 469 This is an automatic notification regarding your $gBug report
 470 #$ref: $data->{subject},
 471 which was filed against the $data->{package} package.
 472
 473 It has been marked as closed by one of the developers, namely
 474 $replyto.
 475
 476 You should be hearing from them with a substantive response shortly,
 477 in case you haven't already. If not, please contact them directly.
 478
 479 $gMaintainer
 480 (administrator, $gProject $gBugs database)
 481
 482 END
 483                     &sendmailmessage($message,$data->{originator});
 484                 } while (&getnextbug);
 485             }
 486         }
 487     } elsif (m/^reassign\s+\#?(-?\d+)\s+(\S+)(?:\s+(\d.*))?$/i) {
 488         $ok++;
 489         $ref= $1; $newpackage= $2;
 490         $bug_affected{$ref}=1;
 491         $version= $3;
 492         $newpackage =~ y/A-Z/a-z/;
 493         if (&setbug) {
 494             if (length($data->{package})) {
 495                 $action= "$gBug reassigned from package \`$data->{package}'".
 496                          " to \`$newpackage'.";
 497             } else {
 498                 $action= "$gBug assigned to package \`$newpackage'.";
 499             }
 500             do {
 501                 &addmaintainers($data);
 502                 $data->{package}= $newpackage;
 503                 $data->{found_versions}= [];
 504                 $data->{fixed_versions}= [];
 505                 # TODO: what if $newpackage is a source package?
 506                 addfoundversions($data, $data->{package}, $version, 'binary');
 507                 &addmaintainers($data);
 508             } while (&getnextbug);
 509         }
 510     } elsif (m/^reopen\s+\#?(-?\d+)$/i ? ($noriginator='', 1) :
 511              m/^reopen\s+\#?(-?\d+)\s+\=$/i ? ($noriginator='', 1) :
 512              m/^reopen\s+\#?(-?\d+)\s+\!$/i ? ($noriginator=$replyto, 1) :
 513              m/^reopen\s+\#?(-?\d+)\s+(\S.*\S)$/i ? ($noriginator=$2, 1) : 0) {
 514         $ok++;
 515         $ref= $1;
 516         $bug_affected{$ref}=1;
 517         if (&setbug) {
 518             if (@{$data->{fixed_versions}}) {
 519                 &transcript("'reopen' may be inappropriate when a bug has been closed with a version;\nyou may need to use 'found' to remove fixed versions.\n");
 520             }
 521             if (!length($data->{done})) {
 522                 &transcript("$gBug is already open, cannot reopen.\n\n");
 523                 &nochangebug;
 524             } else {
 525                 $action=
 526                     $noriginator eq '' ? "$gBug reopened, originator not changed." :
 527                         "$gBug reopened, originator set to $noriginator.";
 528                 do {
 529                     &addmaintainers($data);
 530                     $data->{originator}= $noriginator eq '' ?  $data->{originator} : $noriginator;
 531                     $data->{fixed_versions}= [];
 532                     $data->{done}= '';
 533                 } while (&getnextbug);
 534             }
 535         }
 536     } elsif (m{^found\s+\#?(-?\d+)
 537                (?:\s+(?:$config{package_name_re}\/)?
 538                     ($config{package_version_re}))?$}ix) {
 539         $ok++;
 540         $ref= $1;
 541         $version= $2;
 542         if (&setbug) {
 543             if (!length($data->{done}) and not defined($version)) {
 544                 &transcript("$gBug is already open, cannot reopen.\n\n");
 545                 $errors++;
 546                 &nochangebug;
 547             } else {
 548                 $action=
 549                     defined($version) ?
 550                         "$gBug marked as found in version $version." :
 551                         "$gBug reopened.";
 552                 do {
 553                     &addmaintainers($data);
 554                     # The 'done' field gets a bit weird with version
 555                     # tracking, because a bug may be closed by multiple
 556                     # people in different branches. Until we have something
 557                     # more flexible, we set it every time a bug is fixed,
 558                     # and clear it when a bug is found in a version greater
 559                     # than any version in which the bug is fixed or when
 560                     # a bug is found and there is no fixed version
 561                     if (defined $version) {
 562                         my ($version_only) = $version =~ m{([^/]+)$};
 563                         addfoundversions($data, $data->{package}, $version, 'binary');
 564                         my @fixed_order = sort {Debbugs::Versions::Dpkg::vercmp($a,$b);}
 565                              map {s{.+/}{}; $_;} @{$data->{fixed_versions}};
 566                         if (not @fixed_order or (Debbugs::Versions::Dpkg::vercmp($version_only,$fixed_order[-1]) >= 0)) {
 567                              $data->{done} = '';
 568                         }
 569                     } else {
 570                         # Versionless found; assume old-style "not fixed at
 571                         # all".
 572                         $data->{fixed_versions} = [];
 573                         $data->{done} = '';
 574                     }
 575                 } while (&getnextbug);
 576             }
 577         }
 578     } elsif (m/^notfound\s+\#?(-?\d+)\s+(\d.*)$/i) {
 579         $ok++;
 580         $ref= $1;
 581         $version= $2;
 582         if (&setbug) {
 583             $action= "$gBug marked as not found in version $version.";
 584             if (length($data->{done})) {
 585                 $extramessage= "(By the way, this $gBug is currently marked as done.)\n";
 586             }
 587             do {
 588                 &addmaintainers($data);
 589                 removefoundversions($data, $data->{package}, $version, 'binary');
 590             } while (&getnextbug);
 591        }
 592    }
 593     elsif (m[^fixed\s+\#?(-?\d+)\s+
 594              ((?:$config{package_name_re}\/)?
 595                   $config{package_version_re})\s*$]ix) {
 596         $ok++;
 597         $ref= $1;
 598         $version= $2;
 599         if (&setbug) {
 600              $action=
 601                   defined($version) ?
 602                        "$gBug marked as fixed in version $version." :
 603                             "$gBug reopened.";
 604                 do {
 605                     &addmaintainers($data);
 606                     addfixedversions($data, $data->{package}, $version, 'binary');
 607                } while (&getnextbug);
 608         }
 609    }
 610     elsif (m[^notfixed\s+\#?(-?\d+)\s+
 611              ((?:$config{package_name_re}\/)?
 612                   $config{package_version_re})\s*$]ix) {
 613         $ok++;
 614         $ref= $1;
 615         $version= $2;
 616         if (&setbug) {
 617              $action=
 618                   defined($version) ?
 619                        "$gBug marked as not fixed in version $version." :
 620                             "$gBug reopened.";
 621                 do {
 622                     &addmaintainers($data);
 623                     removefixedversions($data, $data->{package}, $version, 'binary');
 624                } while (&getnextbug);
 625         }
 626    }
 627     elsif (m/^submitter\s+\#?(-?\d+)\s+\!$/i ? ($newsubmitter=$replyto, 1) :
 628              m/^submitter\s+\#?(-?\d+)\s+(\S.*\S)$/i ? ($newsubmitter=$2, 1) : 0) {
 629         $ok++;
 630         $ref= $1;
 631         $bug_affected{$ref}=1;
 632         if ($ref =~ m/^-\d+$/ && defined $clonebugs{$ref}) {
 633             $ref = $clonebugs{$ref};
 634         }
 635         if (&getbug) {
 636             if (&checkpkglimit) {
 637                 &foundbug;
 638                 &addmaintainers($data);
 639                 $oldsubmitter= $data->{originator};
 640                 $data->{originator}= $newsubmitter;
 641                 $action= "Changed $gBug submitter from $oldsubmitter to $newsubmitter.";
 642                 &savebug;
 643                 &transcript("$action\n");
 644                 if (length($data->{done})) {
 645                     &transcript("(By the way, that $gBug is currently marked as done.)\n");
 646                 }
 647                 &transcript("\n");
 648                 $message= <<END;
 649 From: $gMaintainerEmail ($gProject $gBug Tracking System)
 650 To: $oldsubmitter
 651 Subject: $gBug#$ref submitter address changed
 652          ($header{'subject'})
 653 References: $header{'message-id'} $data->{msgid}
 654 In-Reply-To: $data->{msgid}
 655 Message-ID: <handler.$ref.$nn.newsubmitter.$midix\@$gEmailDomain>
 656 Reply-To: $ref\@$gEmailDomain
 657 X-$gProject-PR-Message: submitter-changed $ref
 658
 659 The submitter address recorded for your $gBug report
 660 #$ref: $data->{subject}
 661 has been changed.
 662
 663 The old submitter address for this report was
 664 $oldsubmitter.
 665 The new submitter address is
 666 $newsubmitter.
 667
 668 This change was made by
 669 $replyto.
 670 If it was incorrect, please contact them directly.
 671
 672 $gMaintainer
 673 (administrator, $gProject $gBugs database)
 674
 675 END
 676                 &sendmailmessage($message,$oldsubmitter);
 677             } else {
 678                 &cancelbug;
 679             }
 680         } else {
 681             &notfoundbug;
 682         }
 683     } elsif (m/^forwarded\s+\#?(-?\d+)\s+(\S.*\S)$/i) {
 684         $ok++;
 685         $ref= $1; $whereto= $2;
 686         $bug_affected{$ref}=1;
 687         if (&setbug) {
 688             if (length($data->{forwarded})) {
 689     $action= "Forwarded-to-address changed from $data->{forwarded} to $whereto.";
 690             } else {
 691     $action= "Noted your statement that $gBug has been forwarded to $whereto.";
 692             }
 693             if (length($data->{done})) {
 694                 $extramessage= "(By the way, this $gBug is currently marked as done.)\n";
 695             }
 696             do {
 697                 &addmaintainers($data);
 698                 if (length($gForwardList)>0 && length($gListDomain)>0 ) {
 699                      &addccaddress("$gForwardList\@$gListDomain");
 700                 }
 701                 $data->{forwarded}= $whereto;
 702             } while (&getnextbug);
 703         }
 704     } elsif (m/^notforwarded\s+\#?(-?\d+)$/i) {
 705         $ok++;
 706         $ref= $1;
 707         $bug_affected{$ref}=1;
 708         if (&setbug) {
 709             if (!length($data->{forwarded})) {
 710                 &transcript("$gBug is not marked as having been forwarded.\n\n");
 711                 &nochangebug;
 712             } else {
 713     $action= "Removed annotation that $gBug had been forwarded to $data->{forwarded}.";
 714                 do {
 715                     &addmaintainers($data);
 716                     $data->{forwarded}= '';
 717                 } while (&getnextbug);
 718             }
 719         }
 720     } elsif (m/^severity\s+\#?(-?\d+)\s+([-0-9a-z]+)$/i ||
 721         m/^priority\s+\#?(-?\d+)\s+([-0-9a-z]+)$/i) {
 722         $ok++;
 723         $ref= $1;
 724         $bug_affected{$ref}=1;
 725         $newseverity= $2;
 726         if (!grep($_ eq $newseverity, @gSeverityList, "$gDefaultSeverity")) {
 727             &transcript("Severity level \`$newseverity' is not known.\n".
 728                         "Recognized are: $gShowSeverities.\n\n");
 729             $errors++;
 730         } elsif (exists $gObsoleteSeverities{$newseverity}) {
 731             &transcript("Severity level \`$newseverity' is obsolete. " .
 732                         "Use $gObsoleteSeverities{$newseverity} instead.\n\n");
 733                 $errors++;
 734         } elsif (&setbug) {
 735             $printseverity= $data->{severity};
 736             $printseverity= "$gDefaultSeverity" if $printseverity eq '';
 737             $action= "Severity set to \`$newseverity' from \`$printseverity'";
 738             do {
 739                 &addmaintainers($data);
 740                 if (defined $gStrongList and isstrongseverity($newseverity)) {
 741                     addbcc("$gStrongList\@$gListDomain");
 742                 }
 743                 $data->{severity}= $newseverity;
 744             } while (&getnextbug);
 745         }
 746     } elsif (m/^tags?\s+\#?(-?\d+)\s+(([=+-])\s*)?(\S.*)?$/i) {
 747         $ok++;
 748         $ref = $1; $addsubcode = $3; $tags = $4;
 749         $bug_affected{$ref}=1;
 750         $addsub = "add";
 751         if (defined $addsubcode) {
 752             $addsub = "sub" if ($addsubcode eq "-");
 753             $addsub = "add" if ($addsubcode eq "+");
 754             $addsub = "set" if ($addsubcode eq "=");
 755         }
 756         my @okaytags = ();
 757         my @badtags = ();
 758         foreach my $t (split /[\s,]+/, $tags) {
 759             if (!grep($_ eq $t, @gTags)) {
 760                 push @badtags, $t;
 761             } else {
 762                 push @okaytags, $t;
 763             }
 764         }
 765         if (@badtags) {
 766             &transcript("Unknown tag/s: ".join(', ', @badtags).".\n".
 767                         "Recognized are: ".join(' ', @gTags).".\n\n");
 768             $errors++;
 769         }
 770         if (&setbug) {
 771             if ($data->{keywords} eq '') {
 772                 &transcript("There were no tags set.\n");
 773             } else {
 774                 &transcript("Tags were: $data->{keywords}\n");
 775             }
 776             if ($addsub eq "set") {
 777                 $action= "Tags set to: " . join(", ", @okaytags);
 778             } elsif ($addsub eq "add") {
 779                 $action= "Tags added: " . join(", ", @okaytags);
 780             } elsif ($addsub eq "sub") {
 781                 $action= "Tags removed: " . join(", ", @okaytags);
 782             }
 783             do {
 784                 &addmaintainers($data);
 785                 $data->{keywords} = '' if ($addsub eq "set");
 786                 # Allow removing obsolete tags.
 787                 if ($addsub eq "sub") {
 788                     foreach my $t (@badtags) {
 789                         $data->{keywords} = join ' ', grep $_ ne $t,
 790                             split ' ', $data->{keywords};
 791                     }
 792                 }
 793                 # Now process all other additions and subtractions.
 794                 foreach my $t (@okaytags) {
 795                     $data->{keywords} = join ' ', grep $_ ne $t,
 796                         split ' ', $data->{keywords};
 797                     $data->{keywords} = "$t $data->{keywords}" unless($addsub eq "sub");
 798                 }
 799                 $data->{keywords} =~ s/\s*$//;
 800             } while (&getnextbug);
 801         }
 802     } elsif (m/^(un)?block\s+\#?(-?\d+)\s+(by|with)\s+\s*(\S.*)?$/i) {
 803         $ok++;
 804         my $bugnum = $2; my $blockers = $4;
 805         $addsub = "add";
 806         $addsub = "sub" if ($1 eq "un");
 807         if ($bugnum =~ m/^-\d+$/ && defined $clonebugs{$bugnum}) {
 808              $bugnum = $clonebugs{$bugnum};
 809         }
 810
 811         my @okayblockers;
 812         my @badblockers;
 813         foreach my $b (split /[\s,]+/, $blockers) {
 814             $b=~s/^\#//;
 815             if ($b=~/[0-9]+/) {
 816                 $ref=$b;
 817                 if ($ref =~ m/^-\d+$/ && defined $clonebugs{$ref}) {
 818                      $ref = $clonebugs{$ref};
 819                 }
 820                 if (&getbug) {
 821                     &foundbug;
 822                     push @okayblockers, $ref;
 823
 824                     # add to the list all bugs that are merged with $b,
 825                     # because all of their data must be kept in sync
 826                     @thisbugmergelist= split(/ /,$data->{mergedwith});
 827                     &cancelbug;
 828
 829                     foreach $ref (@thisbugmergelist) {
 830                         if (&getbug) {
 831                            push @okayblockers, $ref;
 832                            &cancelbug;
 833                         }
 834                     }
 835                 }
 836                 else {
 837                     &notfoundbug;
 838                     push @badblockers, $ref;
 839                 }
 840             }
 841             else {
 842                 push @badblockers, $b;
 843             }
 844         }
 845         if (@badblockers) {
 846             &transcript("Unknown blocking bug/s: ".join(', ', @badblockers).".\n");
 847             $errors++;
 848         }
 849
 850         $ref=$bugnum;
 851         if (&setbug) {
 852             if ($data->{blockedby} eq '') {
 853                 &transcript("Was not blocked by any bugs.\n");
 854             } else {
 855                 &transcript("Was blocked by: $data->{blockedby}\n");
 856             }
 857             if ($addsub eq "set") {
 858                 $action= "Blocking bugs of $bugnum set to: " . join(", ", @okayblockers);
 859             } elsif ($addsub eq "add") {
 860                 $action= "Blocking bugs of $bugnum added: " . join(", ", @okayblockers);
 861             } elsif ($addsub eq "sub") {
 862                 $action= "Blocking bugs of $bugnum removed: " . join(", ", @okayblockers);
 863             }
 864             my %removedblocks;
 865             my %addedblocks;
 866             do {
 867                 &addmaintainers($data);
 868                 my @oldblockerlist = split ' ', $data->{blockedby};
 869                 $data->{blockedby} = '' if ($addsub eq "set");
 870                 foreach my $b (@okayblockers) {
 871                         $data->{blockedby} = manipset($data->{blockedby}, $b,
 872                                 ($addsub ne "sub"));
 873                 }
 874
 875                 foreach my $b (@oldblockerlist) {
 876                         if (! grep { $_ eq $b } split ' ', $data->{blockedby}) {
 877                                 push @{$removedblocks{$b}}, $ref;
 878                         }
 879                 }
 880                 foreach my $b (split ' ', $data->{blockedby}) {
 881                         if (! grep { $_ eq $b } @oldblockerlist) {
 882                                 push @{$addedblocks{$b}}, $ref;
 883                         }
 884                 }
 885             } while (&getnextbug);
 886
 887             # Now that the blockedby data is updated, change blocks data
 888             # to match the changes.
 889             foreach $ref (keys %addedblocks) {
 890                 if (&getbug) {
 891                     foreach my $b (@{$addedblocks{$ref}}) {
 892                         $data->{blocks} = manipset($data->{blocks}, $b, 1);
 893                     }
 894                     &savebug;
 895                 }
 896             }
 897             foreach $ref (keys %removedblocks) {
 898                 if (&getbug) {
 899                     foreach my $b (@{$removedblocks{$ref}}) {
 900                         $data->{blocks} = manipset($data->{blocks}, $b, 0);
 901                     }
 902                     &savebug;
 903                 }
 904             }
 905         }
 906     } elsif (m/^retitle\s+\#?(-?\d+)\s+(\S.*\S)\s*$/i) {
 907         $ok++;
 908         $ref= $1; $newtitle= $2;
 909         $bug_affected{$ref}=1;
 910         if ($ref =~ m/^-\d+$/ && defined $clonebugs{$ref}) {
 911             $ref = $clonebugs{$ref};
 912         }
 913         if (&getbug) {
 914             if (&checkpkglimit) {
 915                 &foundbug;
 916                 &addmaintainers($data);
 917                 my $oldtitle = $data->{subject};
 918                 $data->{subject}= $newtitle;
 919                 $action= "Changed $gBug title to `$newtitle' from `$oldtitle'.";
 920                 &savebug;
 921                 &transcript("$action\n");
 922                 if (length($data->{done})) {
 923                     &transcript("(By the way, that $gBug is currently marked as done.)\n");
 924                 }
 925                 &transcript("\n");
 926             } else {
 927                 &cancelbug;
 928             }
 929         } else {
 930             &notfoundbug;
 931         }
 932     } elsif (m/^unmerge\s+\#?(-?\d+)$/i) {
 933         $ok++;
 934         $ref= $1;
 935         $bug_affected{$ref} = 1;
 936         if (&setbug) {
 937             if (!length($data->{mergedwith})) {
 938                 &transcript("$gBug is not marked as being merged with any others.\n\n");
 939                 &nochangebug;
 940             } else {
 941                 $mergelowstate eq 'locked' || die "$mergelowstate ?";
 942                 $action= "Disconnected #$ref from all other report(s).";
 943                 @newmergelist= split(/ /,$data->{mergedwith});
 944                 $discref= $ref;
 945                 @bug_affected{@newmergelist} = 1 x @newmergelist;
 946                 do {
 947                     &addmaintainers($data);
 948                     $data->{mergedwith}= ($ref == $discref) ? ''
 949                         : join(' ',grep($_ ne $ref,@newmergelist));
 950                 } while (&getnextbug);
 951             }
 952         }
 953     } elsif (m/^merge\s+#?(-?\d+(\s+#?-?\d+)+)\s*$/i) {
 954         $ok++;
 955         my @tomerge= sort { $a <=> $b } split(/\s+#?/,$1);
 956         my @newmergelist= ();
 957         my %tags = ();
 958         my %found = ();
 959         my %fixed = ();
 960         &getmerge;
 961         while (defined($ref= shift(@tomerge))) {
 962             &transcript("D| checking merge $ref\n") if $dl;
 963             $ref+= 0;
 964             if ($ref =~ m/^-\d+$/ && defined $clonebugs{$ref}) {
 965                 $ref = $clonebugs{$ref};
 966             }
 967             next if grep($_ == $ref,@newmergelist);
 968             if (!&getbug) { &notfoundbug; @newmergelist=(); last }
 969             if (!&checkpkglimit) { &cancelbug; @newmergelist=(); last; }
 970             &foundbug;
 971             &transcript("D| adding $ref ($data->{mergedwith})\n") if $dl;
 972             $mismatch= '';
 973             &checkmatch('package','m_package',$data->{package},@newmergelist);
 974             &checkmatch('forwarded addr','m_forwarded',$data->{forwarded},@newmergelist);
 975             $data->{severity} = '$gDefaultSeverity' if $data->{severity} eq '';
 976             &checkmatch('severity','m_severity',$data->{severity},@newmergelist);
 977             &checkmatch('blocks','m_blocks',$data->{blocks},@newmergelist);
 978             &checkmatch('blocked-by','m_blockedby',$data->{blockedby},@newmergelist);
 979             &checkmatch('done mark','m_done',length($data->{done}) ? 'done' : 'open',@newmergelist);
 980             &checkmatch('owner','m_owner',$data->{owner},@newmergelist);
 981             foreach my $t (split /\s+/, $data->{keywords}) { $tags{$t} = 1; }
 982             foreach my $f (@{$data->{found_versions}}) { $found{$f} = 1; }
 983             foreach my $f (@{$data->{fixed_versions}}) { $fixed{$f} = 1; }
 984             if (length($mismatch)) {
 985                 &transcript("Mismatch - only $gBugs in same state can be merged:\n".
 986                             $mismatch."\n");
 987                 $errors++;
 988                 &cancelbug; @newmergelist=(); last;
 989             }
 990             push(@newmergelist,$ref);
 991             push(@tomerge,split(/ /,$data->{mergedwith}));
 992             &cancelbug;
 993         }
 994         if (@newmergelist) {
 995             @newmergelist= sort { $a <=> $b } @newmergelist;
 996             $action= "Merged @newmergelist.";
 997             delete @fixed{keys %found};
 998             for $ref (@newmergelist) {
 999                 &getbug || die "huh ?  $gBug $ref disappeared during merge";
1000                 &addmaintainers($data);
1001                 @bug_affected{@newmergelist} = 1 x @newmergelist;
1002                 $data->{mergedwith}= join(' ',grep($_ != $ref,@newmergelist));
1003                 $data->{keywords}= join(' ', keys %tags);
1004                 $data->{found_versions}= [sort keys %found];
1005                 $data->{fixed_versions}= [sort keys %fixed];
1006                 &savebug;
1007             }
1008             &transcript("$action\n\n");
1009         }
1010         &endmerge;
1011     } elsif (m/^forcemerge\s+\#?(-?\d+(?:\s+\#?-?\d+)+)\s*$/i) {
1012         $ok++;
1013         my @temp = split /\s+\#?/,$1;
1014         my $master_bug = shift @temp;
1015         my $master_bug_data;
1016         my @tomerge = sort { $a <=> $b } @temp;
1017         unshift @tomerge,$master_bug;
1018         &transcript("D| force merging ".join(',',@tomerge)."\n") if $dl;
1019         my @newmergelist= ();
1020         my %tags = ();
1021         my %found = ();
1022         my %fixed = ();
1023         # Here we try to do the right thing.
1024         # First, if the bugs are in the same package, we merge all of the found, fixed, and tags.
1025         # If not, we discard the found and fixed.
1026         # Everything else we set to the values of the first bug.
1027         &getmerge;
1028         while (defined($ref= shift(@tomerge))) {
1029             &transcript("D| checking merge $ref\n") if $dl;
1030             $ref+= 0;
1031             if ($ref =~ m/^-\d+$/ && defined $clonebugs{$ref}) {
1032                 $ref = $clonebugs{$ref};
1033             }
1034             next if grep($_ == $ref,@newmergelist);
1035             if (!&getbug) { &notfoundbug; @newmergelist=(); last }
1036             if (!&checkpkglimit) { &cancelbug; @newmergelist=(); last; }
1037             &foundbug;
1038             &transcript("D| adding $ref ($data->{mergedwith})\n") if $dl;
1039             $master_bug_data = $data if not defined $master_bug_data;
1040             if ($data->{package} ne $master_bug_data->{package}) {
1041                 &transcript("Mismatch - only $gBugs in the same package can be forcibly merged:\n".
1042                             "$gBug $ref is not in the same package as $master_bug\n");
1043                 $errors++;
1044                 &cancelbug; @newmergelist=(); last;
1045             }
1046             for my $t (split /\s+/,$data->{keywords}) {
1047                  $tags{$t} = 1;
1048             }
1049             @found{@{$data->{found_versions}}} = (1) x @{$data->{found_versions}};
1050             @fixed{@{$data->{fixed_versions}}} = (1) x @{$data->{fixed_versions}};
1051             push(@newmergelist,$ref);
1052             push(@tomerge,split(/ /,$data->{mergedwith}));
1053             &cancelbug;
1054         }
1055         if (@newmergelist) {
1056             @newmergelist= sort { $a <=> $b } @newmergelist;
1057             $action= "Forcibly Merged @newmergelist.";
1058             delete @fixed{keys %found};
1059             for $ref (@newmergelist) {
1060                 &getbug || die "huh ?  $gBug $ref disappeared during merge";
1061                 &addmaintainers($data);
1062                 @bug_affected{@newmergelist} = 1 x @newmergelist;
1063                 $data->{mergedwith}= join(' ',grep($_ != $ref,@newmergelist));
1064                 $data->{keywords}= join(' ', keys %tags);
1065                 $data->{found_versions}= [sort keys %found];
1066                 $data->{fixed_versions}= [sort keys %fixed];
1067                 my @field_list = qw(forwarded package severity blocks blockedby owner done);
1068                 @{$data}{@field_list} = @{$master_bug_data}{@field_list};
1069                 &savebug;
1070             }
1071             &transcript("$action\n\n");
1072         }
1073         &endmerge;
1074     } elsif (m/^clone\s+#?(\d+)\s+((-\d+\s+)*-\d+)\s*$/i) {
1075         $ok++;
1076
1077         $origref = $1;
1078         @newclonedids = split /\s+/, $2;
1079         $newbugsneeded = scalar(@newclonedids);
1080
1081         $ref = $origref;
1082         $bug_affected{$ref} = 1;
1083         if (&setbug) {
1084             if (length($data->{mergedwith})) {
1085                 &transcript("$gBug is marked as being merged with others. Use an existing clone.\n\n");
1086                 $errors++;
1087                 &nochangebug;
1088             } else {
1089                 &filelock("nextnumber.lock");
1090                 open(N,"nextnumber") || &quit("nextnumber: read: $!");
1091                 $v=<N>; $v =~ s/\n$// || &quit("nextnumber bad format");
1092                 $firstref= $v+0;  $v += $newbugsneeded;
1093                 open(NN,">nextnumber"); print NN "$v\n"; close(NN);
1094                 &unfilelock;
1095
1096                 $lastref = $firstref + $newbugsneeded - 1;
1097
1098                 if ($newbugsneeded == 1) {
1099                     $action= "$gBug $origref cloned as bug $firstref.";
1100                 } else {
1101                     $action= "$gBug $origref cloned as bugs $firstref-$lastref.";
1102                 }
1103
1104                 my $blocks = $data->{blocks};
1105                 my $blockedby = $data->{blockedby};
1106
1107                 &getnextbug;
1108                 my $ohash = get_hashname($origref);
1109                 my $clone = $firstref;
1110                 @bug_affected{@newclonedids} = 1 x @newclonedids;
1111                 for $newclonedid (@newclonedids) {
1112                     $clonebugs{$newclonedid} = $clone;
1113
1114                     my $hash = get_hashname($clone);
1115                     copy("db-h/$ohash/$origref.log", "db-h/$hash/$clone.log");
1116                     copy("db-h/$ohash/$origref.status", "db-h/$hash/$clone.status");
1117                     copy("db-h/$ohash/$origref.summary", "db-h/$hash/$clone.summary");
1118                     copy("db-h/$ohash/$origref.report", "db-h/$hash/$clone.report");
1119                     &bughook('new', $clone, $data);
1120
1121                     # Update blocking info of bugs blocked by or blocking the
1122                     # cloned bug.
1123                     foreach $ref (split ' ', $blocks) {
1124                         &getbug;
1125                         $data->{blockedby} = manipset($data->{blockedby}, $clone, 1);
1126                         &savebug;
1127                     }
1128                     foreach $ref (split ' ', $blockedby) {
1129                         &getbug;
1130                         $data->{blocks} = manipset($data->{blocks}, $clone, 1);
1131                         &savebug;
1132                     }
1133
1134                     $clone++;
1135                 }
1136             }
1137         }
1138     } elsif (m/^package\:?\s+(\S.*\S)?\s*$/i) {
1139         $ok++;
1140         my @pkgs = split /\s+/, $1;
1141         if (scalar(@pkgs) > 0) {
1142                 %limit_pkgs = map { ($_, 1) } @pkgs;
1143                 &transcript("Ignoring bugs not assigned to: " .
1144                         join(" ", keys(%limit_pkgs)) . "\n\n");
1145         } else {
1146                 %limit_pkgs = ();
1147                 &transcript("Not ignoring any bugs.\n\n");
1148         }
1149     } elsif (m/^owner\s+\#?(-?\d+)\s+!$/i ? ($newowner = $replyto, 1) :
1150              m/^owner\s+\#?(-?\d+)\s+(\S.*\S)$/i ? ($newowner = $2, 1) : 0) {
1151         $ok++;
1152         $ref = $1;
1153         $bug_affected{$ref} = 1;
1154         if (&setbug) {
1155             if (length $data->{owner}) {
1156                 $action = "Owner changed from $data->{owner} to $newowner.";
1157             } else {
1158                 $action = "Owner recorded as $newowner.";
1159             }
1160             if (length $data->{done}) {
1161                 $extramessage = "(By the way, this $gBug is currently " .
1162                                 "marked as done.)\n";
1163             }
1164             do {
1165                 &addmaintainers($data);
1166                 $data->{owner} = $newowner;
1167             } while (&getnextbug);
1168         }
1169     } elsif (m/^noowner\s+\#?(-?\d+)$/i) {
1170         $ok++;
1171         $ref = $1;
1172         $bug_affected{$ref} = 1;
1173         if (&setbug) {
1174             if (length $data->{owner}) {
1175                 $action = "Removed annotation that $gBug was owned by " .
1176                           "$data->{owner}.";
1177                 do {
1178                     &addmaintainers($data);
1179                     $data->{owner} = '';
1180                 } while (&getnextbug);
1181             } else {
1182                 &transcript("$gBug is not marked as having an owner.\n\n");
1183                 &nochangebug;
1184             }
1185         }
1186     } elsif (m/^unarchive\s+#?(\d+)$/i) {
1187          $ok++;
1188          $ref = $1;
1189          $bug_affected{$ref} = 1;
1190          my $transcript;
1191          eval {
1192               bug_unarchive(bug        => $ref,
1193                             transcript => \$transcript,
1194                             affected_bugs => \%bug_affected,
1195                             requester => $header{from},
1196                             request_addr => $controlrequestaddr,
1197                             message => \@log,
1198                            );
1199          };
1200          if ($@) {
1201               $errors++;
1202          }
1203          transcript($transcript."\n");
1204     } elsif (m/^archive\s+#?(\d+)$/i) {
1205          $ok++;
1206          $ref = $1;
1207          $bug_affected{$ref} = 1;
1208          if (&setbug) {
1209               if (exists $data->{unarchived}) {
1210                    my $transcript;
1211                    nochangebug();
1212                    eval {
1213                         bug_archive(bug => $ref,
1214                                     transcript => \$transcript,
1215                                     ignore_time => 1,
1216                                     affected_bugs => \%bug_affected,
1217                                     requester => $header{from},
1218                                     request_addr => $controlrequestaddr,
1219                                     message => \@log,
1220                                    );
1221                    };
1222                    if ($@) {
1223                         $errors++;
1224                    }
1225                    transcript($transcript."\n");
1226               }
1227               else {
1228                    transcript("$gBug $ref has not been archived previously\n\n");
1229                    nochangebug();
1230                    $errors++;
1231               }
1232          }
1233     } else {
1234         &transcript("Unknown command or malformed arguments to command.\n\n");
1235         $errors++;
1236         if (++$unknowns >= 5) {
1237             &transcript("Too many unknown commands, stopping here.\n\n");
1238             last;
1239         }
1240     }
1241 }
1242 if ($procline>$#bodylines) {
1243     &transcript(">\nEnd of message, stopping processing here.\n\n");
1244 }
1245 if (!$ok && !quickabort) {
1246     $errors++;
1247     &transcript("No commands successfully parsed; sending the help text(s).\n");
1248     &sendhelp;
1249     &transcript("\n");
1250 }
1251
1252 &transcript("MC\n") if $dl>1;
1253 @maintccs= ();
1254 for $maint (keys %maintccreasons) {
1255 &transcript("MM|$maint|\n") if $dl>1;
1256     next if $maint eq $replyto;
1257     $reasonstring= '';
1258     $reasonsref= $maintccreasons{$maint};
1259 &transcript("MY|$maint|\n") if $dl>2;
1260     for $p (sort keys %$reasonsref) {
1261 &transcript("MP|$p|\n") if $dl>2;
1262         $reasonstring.= ', ' if length($reasonstring);
1263         $reasonstring.= $p.' ' if length($p);
1264         $reasonstring.= join(' ',map("#$_",sort keys %{$$reasonsref{$p}}));
1265     }
1266     if (length($reasonstring) > 40) {
1267         (substr $reasonstring, 37) = "...";
1268     }
1269     $reasonstring = "" if (!defined($reasonstring));
1270     push(@maintccs,"$maint ($reasonstring)");
1271     push(@maintccaddrs,"$maint");
1272 }
1273
1274 $maintccs = "";
1275 if (@maintccs) {
1276     &transcript("MC|@maintccs|\n") if $dl>2;
1277     $maintccs .= "Cc: " . join(",\n    ",@maintccs) . "\n";
1278 }
1279
1280 my %packagepr;
1281 for my $maint (keys %maintccreasons) {
1282      for my $package (keys %{$maintccreasons{$maint}}) {
1283           next unless length $package;
1284           $packagepr{$package} = 1;
1285      }
1286 }
1287 my $packagepr = '';
1288 $packagepr = "X-${gProject}-PR-Package: " . join(keys %packagepr) . "\n" if keys %packagepr;
1289
1290 # Add Bcc's to subscribed bugs
1291 push @bcc, map {"bugs=$_\@$gListDomain"} keys %bug_affected;
1292
1293 if (!defined $header{'subject'} || $header{'subject'} eq "") {
1294   $header{'subject'} = "your mail";
1295 }
1296
1297 # Error text here advertises how many errors there were
1298 my $error_text = $errors > 0 ? " (with $errors errors)":'';
1299
1300 $reply= <<END;
1301 From: $gMaintainerEmail ($gProject $gBug Tracking System)
1302 To: $replyto
1303 ${maintccs}Subject: Processed${error_text}: $header{'subject'}
1304 In-Reply-To: $header{'message-id'}
1305 References: $header{'message-id'}
1306 Message-ID: <handler.s.$nn.transcript\@$gEmailDomain>
1307 Precedence: bulk
1308 ${packagepr}X-$gProject-PR-Message: transcript
1309
1310 ${transcript}Please contact me if you need assistance.
1311
1312 $gMaintainer
1313 (administrator, $gProject $gBugs database)
1314 $extras
1315 END
1316
1317 $repliedshow= join(', ',$replyto,@maintccaddrs);
1318 # -1 is the service.in log
1319 &filelock("lock/-1");
1320 open(AP,">>db-h/-1.log") || &quit("open db-h/-1.log: $!");
1321 print(AP
1322       "\2\n$repliedshow\n\5\n$reply\n\3\n".
1323       "\6\n".
1324       "<strong>Request received</strong> from <code>".
1325       html_escape($header{'from'})."</code>\n".
1326       "to <code>".html_escape($controlrequestaddr)."</code>\n".
1327       "\3\n".
1328       "\7\n",escape_log(@log),"\n\3\n") || &quit("writing db-h/-1.log: $!");
1329 close(AP) || &quit("open db-h/-1.log: $!");
1330 &unfilelock;
1331 utime(time,time,"db-h");
1332
1333 &sendmailmessage($reply,exists $header{'x-debbugs-no-ack'}?():$replyto,@maintccaddrs,@bcc);
1334
1335 unlink("incoming/P$nn") || &quit("unlinking incoming/P$nn: $!");
1336
1337 sub sendmailmessage {
1338     local ($message,@recips) = @_;
1339     $message = "X-Loop: $gMaintainerEmail\n" . $message;
1340     send_mail_message(message    => $message,
1341                       recipients => \@recips,
1342                      );
1343     $midix++;
1344 }
1345
1346 sub sendhelp {
1347         &sendtxthelpraw("bug-log-mailserver.txt","instructions for request\@$gEmailDomain");
1348         &sendtxthelpraw("bug-maint-mailcontrol.txt","instructions for control\@$gEmailDomain")
1349             if $control;
1350 }
1351
1352 #sub unimplemented {
1353 #    &transcript("Sorry, command $_[0] not yet implemented.\n\n");
1354 #}
1355
1356 sub checkmatch {
1357     local ($string,$mvarname,$svarvalue,@newmergelist) = @_;
1358     local ($mvarvalue);
1359     if (@newmergelist) {
1360         eval "\$mvarvalue= \$$mvarname";
1361         &transcript("D| checkmatch \`$string' /$mvarname/$mvarvalue/$svarvalue/\n")
1362             if $dl;
1363         $mismatch .=
1364             "Values for \`$string' don't match:\n".
1365             " #$newmergelist[0] has \`$mvarvalue';\n".
1366             " #$ref has \`$svarvalue'\n"
1367             if $mvarvalue ne $svarvalue;
1368     } else {
1369         &transcript("D| setupmatch \`$string' /$mvarname/$svarvalue/\n")
1370             if $dl;
1371         eval "\$$mvarname= \$svarvalue";
1372     }
1373 }
1374
1375 sub checkpkglimit {
1376     if (keys %limit_pkgs and not defined $limit_pkgs{$data->{package}}) {
1377         &transcript("$gBug number $ref belongs to package $data->{package}, skipping.\n\n");
1378         $errors++;
1379         return 0;
1380     }
1381     return 1;
1382 }
1383
1384 sub manipset {
1385     my $list = shift;
1386     my $elt = shift;
1387     my $add = shift;
1388
1389     my %h = map { $_ => 1 } split ' ', $list;
1390     if ($add) {
1391         $h{$elt}=1;
1392     }
1393     else {
1394         delete $h{$elt};
1395     }
1396     return join ' ', sort keys %h;
1397 }
1398
1399 # High-level bug manipulation calls
1400 # Do announcements themselves
1401 #
1402 # Possible calling sequences:
1403 #    setbug (returns 0)
1404 #
1405 #    setbug (returns 1)
1406 #    &transcript(something)
1407 #    nochangebug
1408 #
1409 #    setbug (returns 1)
1410 #    $action= (something)
1411 #    do {
1412 #      (modify s_* variables)
1413 #    } while (getnextbug);
1414
1415 sub nochangebug {
1416     &dlen("nochangebug");
1417     $state eq 'single' || $state eq 'multiple' || die "$state ?";
1418     &cancelbug;
1419     &endmerge if $manybugs;
1420     $state= 'idle';
1421     &dlex("nochangebug");
1422 }
1423
1424 sub setbug {
1425     &dlen("setbug $ref");
1426     if ($ref =~ m/^-\d+/) {
1427         if (!defined $clonebugs{$ref}) {
1428             &notfoundbug;
1429             &dlex("setbug => noclone");
1430             return 0;
1431         }
1432         $ref = $clonebugs{$ref};
1433     }
1434     $state eq 'idle' || die "$state ?";
1435     if (!&getbug) {
1436         &notfoundbug;
1437         &dlex("setbug => 0s");
1438         return 0;
1439     }
1440
1441     if (!&checkpkglimit) {
1442         &cancelbug;
1443         return 0;
1444     }
1445
1446     @thisbugmergelist= split(/ /,$data->{mergedwith});
1447     if (!@thisbugmergelist) {
1448         &foundbug;
1449         $manybugs= 0;
1450         $state= 'single';
1451         $sref=$ref;
1452         &dlex("setbug => 1s");
1453         return 1;
1454     }
1455     &cancelbug;
1456     &getmerge;
1457     $manybugs= 1;
1458     if (!&getbug) {
1459         &notfoundbug;
1460         &endmerge;
1461         &dlex("setbug => 0mc");
1462         return 0;
1463     }
1464     &foundbug;
1465     $state= 'multiple'; $sref=$ref;
1466     &dlex("setbug => 1m");
1467     return 1;
1468 }
1469
1470 sub getnextbug {
1471     &dlen("getnextbug");
1472     $state eq 'single' || $state eq 'multiple' || die "$state ?";
1473     &savebug;
1474     if (!$manybugs || !@thisbugmergelist) {
1475         length($action) || die;
1476         &transcript("$action\n$extramessage\n");
1477         &endmerge if $manybugs;
1478         $state= 'idle';
1479         &dlex("getnextbug => 0");
1480         return 0;
1481     }
1482     $ref= shift(@thisbugmergelist);
1483     &getbug || die "bug $ref disappeared";
1484     &foundbug;
1485     &dlex("getnextbug => 1");
1486     return 1;
1487 }
1488
1489 # Low-level bug-manipulation calls
1490 # Do no announcements
1491 #
1492 #    getbug (returns 0)
1493 #
1494 #    getbug (returns 1)
1495 #    cancelbug
1496 #
1497 #    getmerge
1498 #    $action= (something)
1499 #    getbug (returns 1)
1500 #    savebug/cancelbug
1501 #    getbug (returns 1)
1502 #    savebug/cancelbug
1503 #    [getbug (returns 0)]
1504 #    &transcript("$action\n\n")
1505 #    endmerge
1506
1507 sub notfoundbug { &transcript("$gBug number $ref not found. (Is it archived?)\n\n"); }
1508 sub foundbug { &transcript("$gBug#$ref: $data->{subject}\n"); }
1509
1510 sub getmerge {
1511     &dlen("getmerge");
1512     $mergelowstate eq 'idle' || die "$mergelowstate ?";
1513     &filelock('lock/merge');
1514     $mergelowstate='locked';
1515     &dlex("getmerge");
1516 }
1517
1518 sub endmerge {
1519     &dlen("endmerge");
1520     $mergelowstate eq 'locked' || die "$mergelowstate ?";
1521     &unfilelock;
1522     $mergelowstate='idle';
1523     &dlex("endmerge");
1524 }
1525
1526 sub getbug {
1527     &dlen("getbug $ref");
1528     $lowstate eq 'idle' || die "$state ?";
1529     # Only use unmerged bugs here
1530     if (($data = &lockreadbug($ref,'db-h'))) {
1531         $sref= $ref;
1532         $lowstate= "open";
1533         &dlex("getbug => 1");
1534         $extramessage='';
1535         return 1;
1536     }
1537     $lowstate= 'idle';
1538     &dlex("getbug => 0");
1539     return 0;
1540 }
1541
1542 sub cancelbug {
1543     &dlen("cancelbug");
1544     $lowstate eq 'open' || die "$state ?";
1545     &unfilelock;
1546     $lowstate= 'idle';
1547     &dlex("cancelbug");
1548 }
1549
1550 sub savebug {
1551     &dlen("savebug $ref");
1552     $lowstate eq 'open' || die "$lowstate ?";
1553     length($action) || die;
1554     $ref == $sref || die "read $sref but saving $ref ?";
1555     append_action_to_log(bug => $ref,
1556                          action => $action,
1557                          requester => $header{from},
1558                          request_addr => $controlrequestaddr,
1559                          message => \@log,
1560                          get_lock => 0,
1561                         );
1562     unlockwritebug($ref, $data);
1563     $lowstate= "idle";
1564     &dlex("savebug");
1565 }
1566
1567 sub dlen {
1568     return if !$dl;
1569     &transcript("C> @_ ($state $lowstate $mergelowstate)\n");
1570 }
1571
1572 sub dlex {
1573     return if !$dl;
1574     &transcript("R> @_ ($state $lowstate $mergelowstate)\n");
1575 }
1576
1577 sub transcript {
1578     print $_[0] if $debug;
1579     $transcript.= $_[0];
1580 }
1581
1582 sub urlsanit {
1583     my $url = shift;
1584     $url =~ s/%/%25/g;
1585     $url =~ s/\+/%2b/g;
1586     my %saniarray = ('<','lt', '>','gt', '&','amp', '"','quot');
1587     $url =~ s/([<>&"])/\&$saniarray{$1};/g;
1588     return $url;
1589 }
1590
1591 sub sendlynxdoc {
1592     &sendlynxdocraw;
1593     &transcript("\n");
1594     $ok++;
1595 }
1596
1597 sub sendtxthelp {
1598     &sendtxthelpraw;
1599     &transcript("\n");
1600     $ok++;
1601 }
1602
1603 sub sendtxthelpraw {
1604     local ($relpath,$description) = @_;
1605     $doc='';
1606     open(D,"$gDocDir/$relpath") || &quit("open doc file $relpath: $!");
1607     while(<D>) { $doc.=$_; }
1608     close(D);
1609     &transcript("Sending $description in separate message.\n");
1610     &sendmailmessage(<<END.$doc,$replyto);
1611 From: $gMaintainerEmail ($gProject $gBug Tracking System)
1612 To: $replyto
1613 Subject: $gProject $gBug help: $description
1614 References: $header{'message-id'}
1615 In-Reply-To: $header{'message-id'}
1616 Message-ID: <handler.s.$nn.help.$midix\@$gEmailDomain>
1617 Precedence: bulk
1618 X-$gProject-PR-Message: doc-text $relpath
1619
1620 END
1621     $ok++;
1622 }
1623
1624 sub sendlynxdocraw {
1625     local ($relpath,$description) = @_;
1626     $doc='';
1627     open(L,"lynx -nolist -dump http://$gCGIDomain/\Q$relpath\E 2>&1 |") || &quit("fork for lynx: $!");
1628     while(<L>) { $doc.=$_; }
1629     $!=0; close(L);
1630     if ($? == 255 && $doc =~ m/^\n*lynx: Can\'t access start file/) {
1631         &transcript("Information ($description) is not available -\n".
1632                     "perhaps the $gBug does not exist or is not on the WWW yet.\n");
1633          $ok++;
1634     } elsif ($?) {
1635         &transcript("Error getting $description (code $? $!):\n$doc\n");
1636     } else {
1637         &transcript("Sending $description.\n");
1638         &sendmailmessage(<<END.$doc,$replyto);
1639 From: $gMaintainerEmail ($gProject $gBug Tracking System)
1640 To: $replyto
1641 Subject: $gProject $gBugs information: $description
1642 References: $header{'message-id'}
1643 In-Reply-To: $header{'message-id'}
1644 Message-ID: <handler.s.$nn.info.$midix\@$gEmailDomain>
1645 Precedence: bulk
1646 X-$gProject-PR-Message: doc-html $relpath
1647
1648 END
1649          $ok++;
1650     }
1651 }
1652
1653 sub addccaddress {
1654     my ($cca) = @_;
1655     $maintccreasons{$cca}{''}{$ref}= 1;
1656 }
1657
1658 sub addmaintainers {
1659     # Data structure is:
1660     #   maintainer email address &c -> assoc of packages -> assoc of bug#'s
1661     my $data = shift;
1662     my ($p, $addmaint);
1663     &ensuremaintainersloaded;
1664     $anymaintfound=0; $anymaintnotfound=0;
1665     for $p (split(m/[ \t?,():]+/, $data->{package})) {
1666         $p =~ y/A-Z/a-z/;
1667         $p =~ /([a-z0-9.+-]+)/;
1668         $p = $1;
1669         next unless defined $p;
1670         if (defined $gSubscriptionDomain) {
1671             if (defined($pkgsrc{$p})) {
1672                 addbcc("$pkgsrc{$p}\@$gSubscriptionDomain");
1673             } else {
1674                 addbcc("$p\@$gSubscriptionDomain");
1675             }
1676         }
1677         if (defined $data->{severity} and defined $gStrongList and
1678                 isstrongseverity($data->{severity})) {
1679             addbcc("$gStrongList\@$gListDomain");
1680         }
1681         if (defined($maintainerof{$p})) {
1682             $addmaint= $maintainerof{$p};
1683             &transcript("MR|$addmaint|$p|$ref|\n") if $dl>2;
1684             $maintccreasons{$addmaint}{$p}{$ref}= 1;
1685             print "maintainer add >$p|$addmaint<\n" if $debug;
1686         } else {
1687             print "maintainer none >$p<\n" if $debug;
1688             &transcript("Warning: Unknown package '$p'\n");
1689             &transcript("MR|unknown-package|$p|$ref|\n") if $dl>2;
1690             $maintccreasons{$gUnknownMaintainerEmail}{$p}{$ref}= 1;
1691         }
1692     }
1693
1694     if (length $data->{owner}) {
1695         $addmaint = $data->{owner};
1696         &transcript("MO|$addmaint|$data->{package}|$ref|\n") if $dl>2;
1697         $maintccreasons{$addmaint}{$data->{package}}{$ref} = 1;
1698         print "owner add >$data->{package}|$addmaint<\n" if $debug;
1699     }
1700 }
1701
1702 sub ensuremaintainersloaded {
1703     my ($a,$b);
1704     return if $maintainersloaded++;
1705     open(MAINT,"$gMaintainerFile") || die &quit("maintainers open: $!");
1706     while (<MAINT>) {
1707         m/^\n$/ && next;
1708         m/^\s*$/ && next;
1709         m/^(\S+)\s+(\S.*\S)\s*\n$/ || &quit("maintainers bogus \`$_'");
1710         $a= $1; $b= $2; $a =~ y/A-Z/a-z/;
1711         $maintainerof{$a}= $2;
1712     }
1713     close(MAINT);
1714     open(MAINT,"$gMaintainerFileOverride") || die &quit("maintainers.override open: $!");
1715     while (<MAINT>) {
1716         m/^\n$/ && next;
1717         m/^\s*$/ && next;
1718         m/^(\S+)\s+(\S.*\S)\s*\n$/ || &quit("maintainers.override bogus \`$_'");
1719         $a= $1; $b= $2; $a =~ y/A-Z/a-z/;
1720         $maintainerof{$a}= $2;
1721     }
1722
1723     open(SOURCES, "$gPackageSource") || &quit("pkgsrc open: $!");
1724     while (<SOURCES>) {
1725         next unless m/^(\S+)\s+\S+\s+(\S.*\S)\s*$/;
1726         my ($a, $b) = ($1, $2);
1727         $pkgsrc{lc($a)} = $b;
1728     }
1729     close(SOURCES);
1730 }
1731
1732 sub sendinfo {
1733     local ($wherefrom,$path,$description) = @_;
1734     if ($wherefrom eq "ftp.d.o") {
1735       $doc = `lynx -nolist -dump http://ftp.debian.org/debian/indices/$path.gz 2>&1 | gunzip -cf` or &quit("fork for lynx/gunzip: $!");
1736       $! = 0;
1737       if ($? == 255 && $doc =~ m/^\n*lynx: Can\'t access start file/) {
1738           &transcript("$description is not available.\n");
1739           $ok++; return;
1740       } elsif ($?) {
1741           &transcript("Error getting $description (code $? $!):\n$doc\n");
1742           return;
1743       }
1744     } elsif ($wherefrom eq "local") {
1745       open P, "$path";
1746       $doc = do { local $/; <P> };
1747       close P;
1748     } else {
1749       &transcript("internal errror: info files location unknown.\n");
1750       $ok++; return;
1751     }
1752     &transcript("Sending $description.\n");
1753     &sendmailmessage(<<END.$doc,$replyto);
1754 From: $gMaintainerEmail ($gProject $gBug Tracking System)
1755 To: $replyto
1756 Subject: $gProject $gBugs information: $description
1757 References: $header{'message-id'}
1758 In-Reply-To: $header{'message-id'}
1759 Message-ID: <handler.s.$nn.info.$midix\@$gEmailDomain>
1760 Precedence: bulk
1761 X-$gProject-PR-Message: getinfo
1762
1763 $description follows:
1764
1765 END
1766     $ok++;
1767     &transcript("\n");
1768 }