bin/debbugs-rebuild-index.db

   1 #! /usr/bin/perl
   2 # debbugs-rebuild-index.db is part of debbugs, and is released
   3 # under the terms of the GPL version 2, or any later version, at your
   4 # option. See the file README and COPYING for more information.
   5 # Copyright 2012 by Don Armstrong <don@donarmstrong.com>.
   6
   7
   8 use warnings;
   9 use strict;
  10
  11 use Getopt::Long qw(:config no_ignore_case);
  12 use Pod::Usage;
  13
  14 =head1 NAME
  15
  16 debbugs-rebuild-index.db -- rebuild Debbug's index.db
  17
  18 =head1 SYNOPSIS
  19
  20 debbugs-rebuild-index.db [options]
  21
  22  Options:
  23   --spool-dir debbugs spool directory
  24   --debug, -d debugging level (Default 0)
  25   --help, -h display this help
  26   --man, -m display manual
  27
  28 =head1 OPTIONS
  29
  30 =over
  31
  32 =item B<--spool-dir>
  33
  34 Debbugs spool directory; defaults to the value configured in the
  35 debbugs configuration file.
  36
  37 =item B<--debug, -d
  38
  39 Debug verbosity.
  40
  41 =item B<--help, -h>
  42
  43 Display brief useage information.
  44
  45 =item B<--man, -m>
  46
  47 Display this manual.
  48
  49 =back
  50
  51 =head1 EXAMPLES
  52
  53 Rebuild the index.db for db-h.
  54
  55  debbugs-rebuild-index.db;
  56
  57 Rebuild the index.db for archive
  58
  59  debbugs-rebuild-index.db archive;
  60
  61
  62 =cut
  63
  64
  65 use vars qw($DEBUG);
  66
  67 use Debbugs::Common qw(checkpid lockpid get_hashname getparsedaddrs getbugcomponent make_list);
  68 use Debbugs::Config qw(:config);
  69 use Debbugs::Status qw(read_bug split_status_fields);
  70 use Debbugs::Log;
  71 use Debbugs::DB;
  72 use Debbugs::DB::Load qw(load_bug handle_load_bug_queue);
  73 use DateTime;
  74 use File::stat;
  75
  76
  77 my %options = (debug           => 0,
  78                help            => 0,
  79                man             => 0,
  80                verbose         => 0,
  81                quiet           => 0,
  82                quick           => 0,
  83                service         => 'debbugs',
  84               );
  85
  86
  87 GetOptions(\%options,
  88            'quick|q',
  89            'service|s',
  90            'sysconfdir|c',
  91            'spool_dir|spool-dir=s',
  92            'debug|d+','help|h|?','man|m');
  93
  94 pod2usage() if $options{help};
  95 pod2usage({verbose=>2}) if $options{man};
  96
  97 $DEBUG = $options{debug};
  98
  99 my @USAGE_ERRORS;
 100 $options{verbose} = $options{verbose} - $options{quiet};
 101
 102 pod2usage(join("\n",@USAGE_ERRORS)) if @USAGE_ERRORS;
 103
 104 if (exists $options{spool_dir} and defined $options{spool_dir}) {
 105     $config{spool_dir} = $options{spool_dir};
 106 }
 107 chdir($config{spool_dir}) or die "chdir $config{spool_dir} failed: $!";
 108
 109 my $verbose = $options{debug};
 110
 111 my $initialdir = "db-h";
 112
 113 if (defined $ARGV[0] and $ARGV[0] eq "archive") {
 114     $initialdir = "archive";
 115 }
 116
 117 if (not lockpid($config{spool_dir}.'/lock/debbugs-rebuild-index.db')) {
 118      print STDERR "Another debbugs-rebuild-index.db is running; stopping\n";
 119      exit 1;
 120 }
 121
 122 my $time = 0;
 123 my $start_time = time;
 124
 125
 126 my @dirs = ($initialdir);
 127 my $cnt = 0;
 128 my %tags;
 129 my %queue;
 130 while (my $dir = shift @dirs) {
 131     printf "Doing dir %s ...\n", $dir if $verbose;
 132
 133     opendir(DIR, "$dir/.") or die "opendir $dir: $!";
 134     my @subdirs = readdir(DIR);
 135     closedir(DIR);
 136
 137     my @list = map { m/^(\d+)\.summary$/?($1):() } @subdirs;
 138     push @dirs, map { m/^(\d+)$/ && -d "$dir/$1"?("$dir/$1"):() } @subdirs;
 139
 140     for my $bug (@list) {
 141         print "Up to $cnt bugs...\n" if (++$cnt % 100 == 0 && $verbose);
 142         my $stat = stat(getbugcomponent($bug,'summary',$initialdir));
 143         if (not defined $stat) {
 144             print STDERR "Unable to stat $bug $!\n";
 145             next;
 146         }
 147         my $data = read_bug(bug => $bug,
 148                             location => $initialdir);
 149         # generate_index.db_line hasn't been written yet at all.
 150         my $line = generate_index.db_line($data);
 151         print {$index_db} $line;
 152     }
 153 }
 154
 155 __END__