src/IRC/Schedulers.pl

   1 #
   2 # ProcessExtra.pl: Extensions to Process.pl
   3 #          Author: dms
   4 #         Version: v0.5 (20010124)
   5 #         Created: 20000117
   6 #
   7
   8 if (&IsParam("useStrict")) { use strict; }
   9
  10 use POSIX qw(strftime);
  11 use vars qw(%sched);
  12
  13 sub setupSchedulers {
  14     &VERB("Starting schedulers...",2);
  15
  16     # ONCE OFF.
  17
  18     # REPETITIVE.
  19     # 1 for run straight away, 2 for on next-run.
  20     &uptimeLoop(1);
  21     &randomQuote(2);
  22     &randomFactoid(2);
  23     &randomFreshmeat(2);
  24     &logLoop(1);
  25     &chanlimitCheck(1);
  26     &netsplitCheck(1);  # mandatory
  27     &floodLoop(1);      # mandatory
  28     &seenFlush(2);
  29     &leakCheck(2);      # mandatory
  30     &ignoreCheck(1);    # mandatory
  31     &seenFlushOld(2);
  32     &ircCheck(2);       # mandatory
  33     &miscCheck(1);      # mandatory
  34     &miscCheck2(2);     # mandatory
  35     &shmFlush(1);       # mandatory
  36     &slashdotLoop(2);
  37     &freshmeatLoop(2);
  38     &kernelLoop(2);
  39     &wingateWriteFile(2);
  40     &factoidCheck(2);
  41     &newsFlush(1);
  42
  43 #    my $count = map { exists $sched{$_}{TIME} } keys %sched;
  44     my $count   = 0;
  45     foreach (keys %sched) {
  46 #       next unless (exists $sched{$_}{TIME});
  47         my $time = $sched{$_}{TIME};
  48         next unless (defined $time and $time > time());
  49
  50         $count++;
  51     }
  52
  53     &status("Schedulers: $count will be running.");
  54 ###    &scheduleList();
  55 }
  56
  57 sub ScheduleThis {
  58     my ($interval, $codename, @args) = @_;
  59     my $waittime = &getRandomInt($interval);
  60
  61     if (!defined $waittime) {
  62         &WARN("interval == waittime == UNDEF for $codename.");
  63         return;
  64     }
  65
  66     my $time = $sched{$codename}{TIME};
  67     if (defined $time and $time > time()) {
  68         &WARN("Sched for $codename already exists.");
  69         return;
  70     }
  71
  72 #    &VERB("Scheduling \&$codename() for ".&Time2String($waittime),3);
  73
  74     my $retval = $conn->schedule($waittime, \&$codename, @args);
  75     $sched{$codename}{LABEL}    = $retval;
  76     $sched{$codename}{TIME}     = time()+$waittime;
  77     $sched{$codename}{RUNNING}  = 1;
  78 }
  79
  80 ####
  81 #### LET THE FUN BEGIN.
  82 ####
  83
  84 sub randomQuote {
  85     my $interval = &getChanConfDefault("randomQuoteInterval", 60);
  86     if (@_) {
  87         &ScheduleThis($interval, "randomQuote");
  88         return if ($_[0] eq "2");       # defer.
  89     } else {
  90         delete $sched{"randomQuote"}{RUNNING};
  91     }
  92
  93     my $line = &getRandomLineFromFile($bot_misc_dir. "/blootbot.randtext");
  94     if (!defined $line) {
  95         &ERROR("random Quote: weird error?");
  96         return;
  97     }
  98
  99     foreach ( &ChanConfList("randomQuote") ) {
 100         next unless (&validChan($_));
 101
 102         &status("sending random Quote to $_.");
 103         &action($_, "Ponders: ".$line);
 104     }
 105     ### TODO: if there were no channels, don't reschedule until channel
 106     ###         configuration is modified.
 107 }
 108
 109 sub randomFactoid {
 110     my ($key,$val);
 111     my $error = 0;
 112
 113     my $interval = &getChanConfDefault("randomFactoidInterval", 60);
 114     if (@_) {
 115         &ScheduleThis($interval, "randomFactoid");
 116         return if ($_[0] eq "2");       # defer.
 117     } else {
 118         delete $sched{"randomFactoid"}{RUNNING};
 119     }
 120
 121     while (1) {
 122         ($key,$val) = &randKey("factoids","factoid_key,factoid_value");
 123 ###     $val =~ tr/^[A-Z]/[a-z]/;       # blah is Good => blah is good.
 124         last if (defined $val and $val !~ /^</);
 125
 126         $error++;
 127         if ($error == 5) {
 128             &ERROR("rF: tried 5 times but failed.");
 129             return;
 130         }
 131     }
 132
 133     foreach ( &ChanConfList("randomFactoid") ) {
 134         next unless (&validChan($_));
 135
 136         &status("sending random Factoid to $_.");
 137         &action($_, "Thinks: \037$key\037 is $val");
 138         ### FIXME: Use &getReply() on above to format factoid properly?
 139         $good++;
 140     }
 141 }
 142
 143 sub randomFreshmeat {
 144     my $interval = &getChanConfDefault("randomFresheatInterval", 60);
 145
 146     if (@_) {
 147         &ScheduleThis($interval, "randomFreshmeat");
 148         return if ($_[0] eq "2");       # defer.
 149     } else {
 150         delete $sched{"randomFreshmeat"}{RUNNING};
 151     }
 152
 153     my @chans = &ChanConfList("randomFreshmeat");
 154     return unless (scalar @chans);
 155
 156     &Forker("freshmeat", sub {
 157         my $retval = &Freshmeat::randPackage();
 158
 159         foreach (@chans) {
 160             next unless (&validChan($_));
 161
 162             &status("sending random Freshmeat to $_.");
 163             &say($_, $line);
 164         }
 165     } );
 166 }
 167
 168 sub logLoop {
 169     if (@_) {
 170         &ScheduleThis(60, "logLoop");
 171         return if ($_[0] eq "2");       # defer.
 172     } else {
 173         delete $sched{"logLoop"}{RUNNING};
 174     }
 175
 176     return unless (defined fileno LOG);
 177     return unless (&IsParam("logfile"));
 178     return unless (&IsParam("maxLogSize"));
 179
 180     ### check if current size is too large.
 181     if ( -s $file{log} > $param{'maxLogSize'}) {
 182         my $date = sprintf("%04d%02d%02d", (localtime)[5,4,3]);
 183         $file{log} = $param{'logfile'} ."-". $date;
 184         &status("cycling log file.");
 185
 186         if ( -e $file{log}) {
 187             my $i = 1;
 188             my $newlog;
 189             while () {
 190                 $newlog = $file{log}."-".$i;
 191                 last if (! -e $newlog);
 192                 $i++;
 193             }
 194             $file{log} = $newlog;
 195         }
 196
 197         &closeLog();
 198         CORE::system("/bin/mv '$param{'logfile'}' '$file{log}'");
 199         &compress($file{log});
 200         &openLog();
 201         &status("cycling log file.");
 202     }
 203
 204     ### check if all the logs exceed size.
 205     my $logdir = "$bot_base_dir/log/";
 206     if (opendir(LOGS, $logdir)) {
 207         my $tsize = 0;
 208         my (%age, %size);
 209
 210         while (defined($_ = readdir LOGS)) {
 211             my $logfile         = "$logdir/$_";
 212
 213             next unless ( -f $logfile);
 214             my $size            = -s $logfile;
 215             my $age             = (stat $logfile)[9];
 216
 217             $age{$age}          = $logfile;
 218             $size{$logfile}     = $size;
 219
 220             $tsize              += $size;
 221         }
 222         closedir LOGS;
 223
 224         my $delete      = 0;
 225         while ($tsize > $param{'maxLogSize'}) {
 226             &status("LOG: current size > max ($tsize > $param{'maxLogSize'})");
 227             my $oldest  = (sort {$a <=> $b} keys %age)[0];
 228             &status("LOG: unlinking $age{$oldest}.");
 229             unlink $age{$oldest};
 230             $tsize      -= $oldest;
 231             $delete++;
 232         }
 233
 234         ### TODO: add how many b,kb,mb removed?
 235         &status("LOG: removed $delete logs.") if ($delete);
 236     } else {
 237         &WARN("could not open dir $logdir");
 238     }
 239
 240 }
 241
 242 sub seenFlushOld {
 243     if (@_) {
 244         &ScheduleThis(1440, "seenFlushOld");
 245         return if ($_[0] eq "2");       # defer.
 246     } else {
 247         delete $sched{"seenFlushOld"}{RUNNING};
 248     }
 249
 250     # is this global-only?
 251     return unless (&IsChanConf("seen") > 0);
 252     return unless (&IsChanConf("seenFlushInterval") > 0);
 253
 254     # global setting. does not make sense for per-channel.
 255     my $max_time = &getChanConfDefault("seenMaxDays", 30) *60*60*24;
 256     my $delete   = 0;
 257
 258     if ($param{'DBType'} =~ /^pg|postgres|mysql/i) {
 259         my $query = "SELECT nick,time FROM seen GROUP BY nick HAVING UNIX_TIMESTAMP() - time > $max_time";
 260         my $sth = $dbh->prepare($query);
 261         $sth->execute;
 262
 263         while (my @row = $sth->fetchrow_array) {
 264             my ($nick,$time) = @row;
 265
 266             &dbDel("seen","nick",$nick);
 267             $delete++;
 268         }
 269         $sth->finish;
 270     } elsif ($param{'DBType'} =~ /^dbm/i) {
 271         my $time = time();
 272
 273         foreach (keys %seen) {
 274             my $delta_time = $time - &dbGet("seen", "NULL", $_, "time");
 275             next unless ($delta_time > $max_time);
 276
 277             &DEBUG("seenFlushOld: ".&Time2String($delta_time) );
 278             delete $seen{$_};
 279             $delete++;
 280         }
 281     } else {
 282         &FIXME("seenFlushOld: for PG/NO-DB.");
 283     }
 284     &VERB("SEEN deleted $delete seen entries.",2);
 285
 286 }
 287
 288 sub newsFlush {
 289     if (@_) {
 290         &ScheduleThis(1440, "newsFlush");
 291         return if ($_[0] eq "2");       # defer.
 292     } else {
 293         delete $sched{"newsFlush"}{RUNNING};
 294     }
 295
 296     return unless (&IsChanConf("news") > 0);
 297
 298     my $delete  = 0;
 299     my $oldest  = time();
 300     foreach $chan (keys %::news) {
 301         my $i           = 0;
 302         my $total       = scalar(keys %{ $::news{$chan} });
 303
 304         foreach $item (keys %{ $::news{$chan} }) {
 305             my $t = $::news{$chan}{$item}{Expire};
 306
 307             my $tadd    = $::news{$chan}{$item}{Time};
 308             $oldest     = $tadd if ($oldest > $tadd);
 309
 310             next if ($t == 0 or $t == -1);
 311             if ($t < 1000) {
 312                 &status("newsFlush: Fixed Expire time for $chan/$item, should not happen anyway.");
 313                 $::news{$chan}{$item}{Expire} = time() + $t*60*60*24;
 314                 next;
 315             }
 316
 317             my $delta = $t - time();
 318
 319             next unless (time() > $t);
 320
 321             # todo: show how old it was.
 322             delete $::news{$chan}{$item};
 323             &status("NEWS: deleted '$item'");
 324             $delete++;
 325             $i++;
 326         }
 327
 328         &status("NEWS {$chan}: deleted [$i/$total] news entries.");
 329     }
 330
 331     # todo: flush users aswell.
 332     my $duser   = 0;
 333     foreach $chan (keys %::newsuser) {
 334         foreach (keys %{ $::newsuser{$chan} }) {
 335             my $t = $::newsuser{$chan}{$_};
 336             if (!defined $t or ($t > 2 and $t < 1000)) {
 337                 &DEBUG("something wrong with newsuser{$chan}{$_} => $t");
 338                 next;
 339             }
 340
 341             next unless ($oldest > $t);
 342
 343             delete $::newsuser{$chan}{$_};
 344             $duser++;
 345         }
 346     }
 347
 348     if ($delete or $duser) {
 349         &DEBUG("newsF: Writing news.");
 350         &News::writeNews();
 351     }
 352
 353     &status("NEWS deleted: $delete news entries; $duser user cache.");
 354 }
 355
 356 sub chanlimitCheck {
 357     my $interval = &getChanConfDefault("chanlimitcheckInterval", 10);
 358
 359     if (@_) {
 360         &ScheduleThis($interval, "chanlimitCheck");
 361         return if ($_[0] eq "2");
 362     } else {
 363         delete $sched{"chanlimitCheck"}{RUNNING};
 364     }
 365
 366     foreach $chan ( &ChanConfList("chanlimitcheck") ) {
 367         next unless (&validChan($chan));
 368
 369         my $limitplus   = &getChanConfDefault("chanlimitcheckPlus", 5, $chan);
 370         my $newlimit    = scalar(keys %{ $channels{$chan}{''} }) + $limitplus;
 371         my $limit       = $channels{$chan}{'l'};
 372
 373         if (scalar keys %netsplitservers) {
 374             if (defined $limit) {
 375                 &DEBUG("chanlimit: removing it for $chan.");
 376                 &rawout("MODE $chan -l");
 377                 $cache{chanlimitChange}{$chan} = time();
 378             }
 379
 380             next;
 381         }
 382
 383         if (defined $limit and scalar keys %{ $channels{$chan}{''} } > $limit) {
 384             &FIXME("LIMIT: set too low!!! FIXME");
 385             ### run NAMES again and flush it.
 386         }
 387
 388         next unless (!defined $limit);
 389         if (defined $limit and $limit == $newlimit) {
 390             $cache{chanlimitChange}{$chan} = time();
 391             next;
 392         }
 393
 394         if (!exists $channels{$chan}{'o'}{$ident}) {
 395             &status("ChanLimit: dont have ops on $chan.") unless (exists $cache{warn}{chanlimit}{$chan});
 396             $cache{warn}{chanlimit}{$chan} = 1;
 397             &chanServCheck($chan);
 398             next;
 399         }
 400         delete $cache{warn}{chanlimit}{$chan};
 401
 402         if (!defined $limit) {
 403             &status("ChanLimit: setting for first time or from netsplit, for $chan");
 404         }
 405
 406         if (exists $cache{chanlimitChange}{$chan}) {
 407             my $delta = time() - $cache{chanlimitChange}{$chan};
 408             if ($delta < $interval*60) {
 409                 &DEBUG("not going to change chanlimit! ($delta<$interval*60)");
 410                 return;
 411             }
 412         }
 413
 414         &rawout("MODE $chan +l $newlimit");
 415         $cache{chanlimitChange}{$chan} = time();
 416     }
 417 }
 418
 419 sub netsplitCheck {
 420     my ($s1,$s2);
 421
 422     if (@_) {
 423         &ScheduleThis(30, "netsplitCheck");
 424         return if ($_[0] eq "2");
 425     } else {
 426         delete $sched{"netsplitCheck"}{RUNNING};
 427     }
 428
 429     foreach $s1 (keys %netsplitservers) {
 430         foreach $s2 (keys %{ $netsplitservers{$s1} }) {
 431             if (time() - $netsplitservers{$s1}{$s2} > 3600) {
 432                 &status("netsplit between $s1 and $s2 appears to be stale.");
 433                 delete $netsplitservers{$s1}{$s2};
 434             }
 435         }
 436     }
 437
 438     # %netsplit hash checker.
 439     my $count   = scalar keys %netsplit;
 440     foreach (keys %netsplit) {
 441         if (&IsNickInAnyChan($_)) {
 442             &DEBUG("netsplitC: $_ is in some chan; removing from netsplit list.");
 443             delete $netsplit{$_};
 444             next;
 445         }
 446         next unless (time() - $netsplit{$_} > 60*10);
 447
 448         &DEBUG("netsplitC: $_ didn't come back from netsplit; removing from netsplit list.");
 449         delete $netsplit{$_};
 450     }
 451
 452     &DEBUG("nsC: netsplitservers: ".scalar(keys %netsplitservers) );
 453     &DEBUG("nsC: netsplit: ".scalar(keys %netsplit) );
 454
 455     if ($count and !scalar keys %netsplit) {
 456         &DEBUG("nsC: netsplit is hopefully gone. reinstating chanlimit check.");
 457         &chanlimitCheck();
 458     }
 459 }
 460
 461 sub floodLoop {
 462     my $delete   = 0;
 463     my $who;
 464
 465     if (@_) {
 466         &ScheduleThis(60, "floodLoop"); # minutes.
 467         return if ($_[0] eq "2");
 468     } else {
 469         delete $sched{"floodLoop"}{RUNNING};
 470     }
 471
 472     my $time            = time();
 473     my $interval        = &getChanConfDefault("floodCycle",60);
 474
 475     foreach $who (keys %flood) {
 476         foreach (keys %{ $flood{$who} }) {
 477             if (!exists $flood{$who}{$_}) {
 478                 &WARN("flood{$who}{$_} undefined?");
 479                 next;
 480             }
 481
 482             if ($time - $flood{$who}{$_} > $interval) {
 483                 delete $flood{$who}{$_};
 484                 $delete++;
 485             }
 486         }
 487     }
 488     &VERB("floodLoop: deleted $delete items.",2);
 489 }
 490
 491 sub seenFlush {
 492     if (@_) {
 493         my $interval = &getChanConfDefault("seenFlushInterval", 60);
 494         &ScheduleThis($interval, "seenFlush");
 495         return if ($_[0] eq "2");
 496     } else {
 497         delete $sched{"seenFlush"}{RUNNING};
 498     }
 499
 500     my %stats;
 501     my $nick;
 502     my $flushed         = 0;
 503     $stats{'count_old'} = &countKeys("seen") || 0;
 504     $stats{'new'}       = 0;
 505     $stats{'old'}       = 0;
 506
 507     if ($param{'DBType'} =~ /^mysql|pg|postgres/i) {
 508         foreach $nick (keys %seencache) {
 509             if (0) {
 510             #BROKEN#
 511             my $retval = &dbReplace("seen", "nick", $nick, (
 512                         "nick" => $seencache{$nick}{'nick'},
 513                         "time" => $seencache{$nick}{'time'},
 514                         "host" => $seencache{$nick}{'host'},
 515                         "channel" => $seencache{$nick}{'chan'},
 516                         "message" => $seencache{$nick}{'msg'},
 517             ) );
 518             &DEBUG("retval => $retval.");
 519             delete $seencache{$nick};
 520             $flushed++;
 521
 522             next;
 523             }
 524             ### OLD CODE...
 525
 526             my $exists = &dbGet("seen","nick", $nick, "nick");
 527
 528             if (defined $exists and $exists) {
 529                 &dbUpdate("seen", "nick", $nick, (
 530                         "time" => $seencache{$nick}{'time'},
 531                         "host" => $seencache{$nick}{'host'},
 532                         "channel" => $seencache{$nick}{'chan'},
 533                         "message" => $seencache{$nick}{'msg'},
 534                 ) );
 535                 $stats{'old'}++;
 536             } else {
 537                 my $retval = &dbInsert("seen", $nick, (
 538                         "nick" => $seencache{$nick}{'nick'},
 539                         "time" => $seencache{$nick}{'time'},
 540                         "host" => $seencache{$nick}{'host'},
 541                         "channel" => $seencache{$nick}{'chan'},
 542                         "message" => $seencache{$nick}{'msg'},
 543                 ) );
 544                 $stats{'new'}++;
 545
 546                 ### TODO: put bad nick into a list and don't do it again!
 547                 &FIXME("Should never happen! (nick => $nick)") if !$retval;
 548             }
 549
 550             delete $seencache{$nick};
 551             $flushed++;
 552         }
 553
 554     } elsif ($param{'DBType'} =~ /^dbm/i) {
 555
 556         foreach $nick (keys %seencache) {
 557             my $retval = &dbInsert("seen", $nick, (
 558                 "nick" => $seencache{$nick}{'nick'},
 559                 "time" => $seencache{$nick}{'time'},
 560                 "host" => $seencache{$nick}{'host'},
 561                 "channel" => $seencache{$nick}{'chan'},
 562                 "message" => $seencache{$nick}{'msg'},
 563             ) );
 564
 565             ### TODO: put bad nick into a list and don't do it again!
 566             &FIXME("Should never happen! (nick => $nick)") if !$retval;
 567
 568             delete $seencache{$nick};
 569             $flushed++;
 570         }
 571     } else {
 572         &DEBUG("seenFlush: NO VALID FACTOID SUPPORT?");
 573     }
 574
 575     &status("Flushed $flushed seen entries.")           if ($flushed);
 576     &VERB(sprintf("  new seen: %03.01f%% (%d/%d)",
 577         $stats{'new'}*100/($stats{'count_old'} || 1),
 578         $stats{'new'}, ( $stats{'count_old'} || 1) ), 2) if ($stats{'new'});
 579     &VERB(sprintf("  now seen: %3.1f%% (%d/%d)",
 580         $stats{'old'}*100 / ( &countKeys("seen") || 1),
 581         $stats{'old'}, &countKeys("seen") ), 2)         if ($stats{'old'});
 582
 583     &WARN("scalar keys seenflush != 0!")        if (scalar keys %seenflush);
 584 }
 585
 586 sub leakCheck {
 587     my ($blah1,$blah2);
 588     my $count = 0;
 589
 590     if (@_) {
 591         &ScheduleThis(240, "leakCheck");
 592         return if ($_[0] eq "2");
 593     } else {
 594         delete $sched{"leakCheck"}{RUNNING};
 595     }
 596
 597     # flood. this is dealt with in floodLoop()
 598     foreach $blah1 (keys %flood) {
 599         foreach $blah2 (keys %{ $flood{$blah1} }) {
 600             $count += scalar(keys %{ $flood{$blah1}{$blah2} });
 601         }
 602     }
 603     &DEBUG("leak: hash flood has $count total keys.",2);
 604
 605     # floodjoin.
 606     $count = 0;
 607     foreach $blah1 (keys %floodjoin) {
 608         foreach $blah2 (keys %{ $floodjoin{$blah1} }) {
 609             $count += scalar(keys %{ $floodjoin{$blah1}{$blah2} });
 610         }
 611     }
 612     &DEBUG("leak: hash floodjoin has $count total keys.",2);
 613
 614     # floodwarn.
 615     $count = scalar(keys %floodwarn);
 616     &DEBUG("leak: hash floodwarn has $count total keys.",2);
 617
 618     my $chan;
 619     foreach $chan (grep /[A-Z]/, keys %channels) {
 620         &DEBUG("leak: chan => '$chan'.");
 621         my ($i,$j);
 622         foreach $i (keys %{ $channels{$chan} }) {
 623             foreach (keys %{ $channels{$chan}{$i} }) {
 624                 &DEBUG("leak:   \$channels{$chan}{$i}{$_} ...");
 625             }
 626         }
 627     }
 628
 629     # chanstats
 630     $count = scalar(keys %chanstats);
 631     &DEBUG("leak: hash chanstats has $count total keys.",2);
 632
 633     # nuh.
 634     my $delete  = 0;
 635     foreach (keys %nuh) {
 636         next if (&IsNickInAnyChan($_));
 637         next if (exists $dcc{CHAT}{$_});
 638
 639         delete $nuh{$_};
 640         $delete++;
 641     }
 642
 643     &status("leak: $delete nuh{} items deleted; now have ".
 644                                 scalar(keys %nuh) ) if ($delete);
 645 }
 646
 647 sub ignoreCheck {
 648     if (@_) {
 649         &ScheduleThis(60, "ignoreCheck");
 650         return if ($_[0] eq "2");       # defer.
 651     } else {
 652         delete $sched{"ignoreCheck"}{RUNNING};
 653     }
 654
 655     my $time    = time();
 656     my $count   = 0;
 657
 658     foreach (keys %ignore) {
 659         my $chan = $_;
 660
 661         foreach (keys %{ $ignore{$chan} }) {
 662             my @array = @{ $ignore{$chan}{$_} };
 663
 664             next unless ($array[0] and $time > $array[0]);
 665
 666             delete $ignore{$chan}{$_};
 667             &status("ignore: $_/$chan has expired.");
 668             $count++;
 669         }
 670     }
 671     &VERB("ignore: $count items deleted.",2);
 672 }
 673
 674 sub ircCheck {
 675     if (@_) {
 676         &ScheduleThis(60, "ircCheck");
 677         return if ($_[0] eq "2");       # defer.
 678     } else {
 679         delete $sched{"ircCheck"}{RUNNING};
 680     }
 681
 682     my @x       = &getJoinChans();
 683     my $iconf   = scalar( @x );
 684     my $inow    = scalar( keys %channels );
 685     if ($iconf > 2 and $inow * 2 <= $iconf) {
 686         &FIXME("ircCheck: current channels * 2 <= config channels. FIXME.");
 687         @joinchan       = @x;
 688         &joinNextChan();
 689     }
 690
 691     if (!$conn->connected or time() - $msgtime > 3600) {
 692         # todo: shouldn't we use cache{connect} somewhere?
 693         if (exists $cache{connect}) {
 694             &WARN("ircCheck: no msg for 3600 and disco'd! reconnecting!");
 695             $msgtime = time();  # just in case.
 696             &ircloop();
 697             delete $cache{connect};
 698         } else {
 699             &status("IRCTEST: possible lost in space; checking. ".
 700                 scalar(localtime) );
 701             &msg($ident, "TEST");
 702             $cache{connect} = time();
 703         }
 704     }
 705
 706     if ($ident !~ /^\Q$param{ircNick}\E$/) {
 707         # this does not work unfortunately.
 708         &WARN("ircCheck: ident($ident) != param{ircNick}($param{IrcNick}).");
 709
 710         # this check is misleading... perhaps we should do a notify.
 711         if (! &IsNickInAnyChan( $param{ircNick} ) ) {
 712             &DEBUG("$param{ircNick} not in use... changing!");
 713             &nick( $param{ircNick} );
 714         } else {
 715             &WARN("$param{ircNick} is still in use...");
 716         }
 717     }
 718
 719     if (grep /^\s*$/, keys %channels) {
 720         &WARN("ircCheck: we have a NULL chan in hash channels? removing!");
 721         if (exists $channels{''}) {
 722             &DEBUG("ircCheck: ok it existed!");
 723         } else {
 724             &DEBUG("ircCheck: this hsould never happen!");
 725         }
 726
 727         delete $channels{''};
 728     }
 729
 730     &DEBUG("ircstats...");
 731     &DEBUG("  pubsleep: $pubsleep");
 732     &DEBUG("  msgsleep: $msgsleep");
 733     &DEBUG("  notsleep: $notsleep");
 734
 735     ### USER FILE.
 736     if ($utime_userfile > $wtime_userfile and time() - $wtime_userfile > 3600) {
 737         &writeUserFile();
 738         $wtime_userfile = time();
 739     }
 740     ### CHAN FILE.
 741     if ($utime_chanfile > $wtime_chanfile and time() - $wtime_chanfile > 3600) {
 742         &writeChanFile();
 743         $wtime_chanfile = time();
 744     }
 745 }
 746
 747 sub miscCheck {
 748     if (@_) {
 749         &ScheduleThis(240, "miscCheck");
 750         return if ($_[0] eq "2");       # defer.
 751     } else {
 752         delete $sched{"miscCheck"}{RUNNING};
 753     }
 754
 755     # SHM check.
 756     my @ipcs;
 757     if ( -x "/usr/bin/ipcs") {
 758         @ipcs = `/usr/bin/ipcs`;
 759     } else {
 760         &WARN("ircCheck: no 'ipcs' binary.");
 761         return;
 762     }
 763
 764     # shmid stale remove.
 765     foreach (@ipcs) {
 766         chop;
 767
 768         # key, shmid, owner, perms, bytes, nattch
 769         next unless (/^(0x\d+) (\d+)\s+(\S+)\s+(\d+)\s+(\d+)\s+/);
 770
 771         my ($shmid, $size) = ($2,$5);
 772         next unless ($shmid != $shm and $size == 2000);
 773         my $z   = &shmRead($shmid);
 774         if ($z =~ /^(\d+): /) {
 775             my $time    = $1;
 776             next if (time() - $time < 60*60);
 777
 778         } else {
 779 #           &DEBUG("shm: $shmid is not ours or old blootbot => ($z)");
 780 #           next;
 781         }
 782
 783         &status("SHM: nuking shmid $shmid");
 784         CORE::system("/usr/bin/ipcrm shm $shmid >/dev/null");
 785     }
 786
 787     # make backup of important files.
 788     &mkBackup( $bot_misc_dir."/blootbot.chan", 60*60*24*3);
 789     &mkBackup( $bot_misc_dir."/blootbot.users", 60*60*24*3);
 790     &mkBackup( $bot_base_dir."/blootbot-news.txt", 60*60*24*1);
 791
 792     # flush cache{lobotomy}
 793     foreach (keys %{ $cache{lobotomy} }) {
 794         next unless (time() - $cache{lobotomy}{$_} > 60*60);
 795         delete $cache{lobotomy}{$_};
 796     }
 797
 798     ### check modules if they've been modified. might be evil.
 799     &reloadAllModules();
 800 }
 801
 802 sub miscCheck2 {
 803     if (@_) {
 804         &ScheduleThis(240, "miscCheck2");
 805         return if ($_[0] eq "2");       # defer.
 806     } else {
 807         delete $sched{"miscCheck2"}{RUNNING};
 808     }
 809
 810     &DEBUG("miscCheck2: Doing debian checking...");
 811
 812     # debian check.
 813     opendir(DEBIAN, "$bot_base_dir/debian");
 814     foreach ( grep /gz$/, readdir(DEBIAN) ) {
 815         my $exit = CORE::system("gzip -t $bot_base_dir/debian/$_");
 816         next unless ($exit);
 817
 818         &status("debian: unlinking file => $_");
 819         unlink "$bot_base_dir/debian/$_";
 820     }
 821     closedir DEBIAN;
 822
 823     # compress logs that should have been compressed.
 824     # todo: use strftime?
 825     my ($day,$month,$year) = (localtime(time()))[3,4,5];
 826     my $date = sprintf("%04d%02d%02d",$year+1900,$month+1,$day);
 827
 828     opendir(DIR,"$bot_base_dir/log");
 829     while (my $f = readdir(DIR)) {
 830         next unless ( -f "$bot_base_dir/log/$f");
 831         next if ($f =~ /gz|bz2/);
 832         next unless ($f =~ /(\d{8})/);
 833         next if ($date eq $1);
 834
 835         &compress("$bot_base_dir/log/$f");
 836     }
 837     closedir DIR;
 838 }
 839
 840 sub shmFlush {
 841     return if ($$ != $::bot_pid); # fork protection.
 842
 843     if (@_) {
 844         &ScheduleThis(5, "shmFlush");
 845         return if ($_[0] eq "2");
 846     } else {
 847         delete $sched{"shmFlush"}{RUNNING};
 848     }
 849
 850     my $time;
 851     my $shmmsg = &shmRead($shm);
 852     $shmmsg =~ s/\0//g;         # remove padded \0's.
 853     if ($shmmsg =~ s/^(\d+): //) {
 854         $time   = $1;
 855     }
 856
 857     foreach (split '\|\|', $shmmsg) {
 858         next if (/^$/);
 859         &VERB("shm: Processing '$_'.",2);
 860
 861         if (/^DCC SEND (\S+) (\S+)$/) {
 862             my ($nick,$file) = ($1,$2);
 863             if (exists $dcc{'SEND'}{$who}) {
 864                 &msg($nick, "DCC already active.");
 865             } else {
 866                 &DEBUG("shm: dcc sending $2 to $1.");
 867                 $conn->new_send($1,$2);
 868                 $dcc{'SEND'}{$who} = time();
 869             }
 870         } elsif (/^SET FORKPID (\S+) (\S+)/) {
 871             $forked{$1}{PID} = $2;
 872         } elsif (/^DELETE FORK (\S+)$/) {
 873             delete $forked{$1};
 874         } elsif (/^EVAL (.*)$/) {
 875             &DEBUG("evaling '$1'.");
 876             eval $1;
 877         } else {
 878             &DEBUG("shm: unknown msg. ($_)");
 879         }
 880     }
 881
 882     &shmWrite($shm,"") if ($shmmsg ne "");
 883 }
 884
 885 ### this is semi-scheduled
 886 sub getNickInUse {
 887     if ($ident eq $param{'ircNick'}) {
 888         &status("okay, got my nick back.");
 889         return;
 890     }
 891
 892     if (@_) {
 893         &ScheduleThis(30, "getNickInUse");
 894         return if ($_[0] eq "2");       # defer.
 895     } else {
 896         delete $sched{"getNickInUse"}{RUNNING};
 897     }
 898
 899     &nick( $param{'ircNick'} );
 900 }
 901
 902 sub uptimeLoop {
 903     return unless &IsChanConf("uptime");
 904
 905     if (@_) {
 906         &ScheduleThis(60, "uptimeLoop");
 907         return if ($_[0] eq "2");       # defer.
 908     } else {
 909         delete $sched{"uptimeLoop"}{RUNNING};
 910     }
 911
 912     &uptimeWriteFile();
 913 }
 914
 915 sub slashdotLoop {
 916
 917     if (@_) {
 918         &ScheduleThis(60, "slashdotLoop");
 919         return if ($_[0] eq "2");
 920     } else {
 921         delete $sched{"slashdotLoop"}{RUNNING};
 922     }
 923
 924     my @chans = &ChanConfList("slashdotAnnounce");
 925     return unless (scalar @chans);
 926
 927     &Forker("slashdot", sub {
 928         my $line = &Slashdot::slashdotAnnounce();
 929         return unless (defined $line);
 930
 931         foreach (@chans) {
 932             next unless (&::validChan($_));
 933
 934             &::status("sending slashdot update to $_.");
 935             &notice($_, "Slashdot: $line");
 936         }
 937     } );
 938 }
 939
 940 sub freshmeatLoop {
 941     if (@_) {
 942         &ScheduleThis(60, "freshmeatLoop");
 943         return if ($_[0] eq "2");
 944     } else {
 945         delete $sched{"freshmeatLoop"}{RUNNING};
 946     }
 947
 948     my @chans = &ChanConfList("freshmeatAnnounce");
 949     return unless (scalar @chans);
 950
 951     &Forker("freshmeat", sub {
 952         my $data = &Freshmeat::freshmeatAnnounce();
 953
 954         foreach (@chans) {
 955             next unless (&::validChan($_));
 956
 957             &::status("sending freshmeat update to $_.");
 958             &msg($_, $data);
 959         }
 960     } );
 961 }
 962
 963 sub kernelLoop {
 964     if (@_) {
 965         &ScheduleThis(240, "kernelLoop");
 966         return if ($_[0] eq "2");
 967     } else {
 968         delete $sched{"kernelLoop"}{RUNNING};
 969     }
 970
 971     my @chans = &ChanConfList("kernelAnnounce");
 972     return unless (scalar @chans);
 973
 974     &Forker("kernel", sub {
 975         my @data = &Kernel::kernelAnnounce();
 976
 977         foreach (@chans) {
 978             next unless (&::validChan($_));
 979
 980             &::status("sending kernel update to $_.");
 981             my $c = $_;
 982             foreach (@data) {
 983                 &notice($c, "Kernel: $_");
 984             }
 985         }
 986     } );
 987 }
 988
 989 sub wingateCheck {
 990     return unless &IsChanConf("wingate");
 991
 992     ### FILE CACHE OF OFFENDING WINGATES.
 993     foreach (grep /^$host$/, @wingateBad) {
 994         &status("Wingate: RUNNING ON $host BY $who");
 995         &ban("*!*\@$host", "") if &IsChanConf("wingateBan");
 996
 997         my $reason      = &getChanConf("wingateKick");
 998
 999         next unless ($reason);
1000         &kick($who, "", $reason)
1001     }
1002
1003     ### RUN CACHE OF TRIED WINGATES.
1004     if (grep /^$host$/, @wingateCache) {
1005         push(@wingateNow, $host);       # per run.
1006         push(@wingateCache, $host);     # cache per run.
1007     } else {
1008         &DEBUG("Already scanned $host. good.");
1009     }
1010
1011     my $interval = &getChanConfDefault("wingateInterval", 60); # seconds.
1012     return if (defined $forked{'wingate'});
1013     return if (time() - $wingaterun <= $interval);
1014     return unless (scalar(keys %wingateToDo));
1015
1016     $wingaterun = time();
1017
1018     &Forker("wingate", sub { &Wingate::Wingates(keys %wingateToDo); } );
1019     undef @wingateNow;
1020 }
1021
1022 ### TODO.
1023 sub wingateWriteFile {
1024     if (@_) {
1025         &ScheduleThis(60, "wingateWriteFile");
1026         return if ($_[0] eq "2");       # defer.
1027     } else {
1028         delete $sched{"wingateWriteFile"}{RUNNING};
1029     }
1030
1031     return unless (scalar @wingateCache);
1032
1033     my $file = "$bot_base_dir/$param{'ircUser'}.wingate";
1034     if ($bot_pid != $$) {
1035         &DEBUG("wingateWriteFile: Reorganising!");
1036
1037         open(IN, $file);
1038         while (<IN>) {
1039             chop;
1040             push(@wingateNow, $_);
1041         }
1042         close IN;
1043
1044         # very lame hack.
1045         my %hash = map { $_ => 1 } @wingateNow;
1046         @wingateNow = sort keys %hash;
1047     }
1048
1049     &DEBUG("wingateWF: writing...");
1050     open(OUT, ">$file");
1051     foreach (@wingateNow) {
1052         print OUT "$_\n";
1053     }
1054     close OUT;
1055 }
1056
1057 sub factoidCheck {
1058     if (@_) {
1059         &ScheduleThis(1440, "factoidCheck");
1060         return if ($_[0] eq "2");       # defer.
1061     } else {
1062         delete $sched{"factoidCheck"}{RUNNING};
1063     }
1064
1065     my @list    = &searchTable("factoids", "factoid_key", "factoid_key", " #DEL#");
1066     my $stale   = &getChanConfDefault("factoidDeleteDelay", 30) *60*60*24;
1067     my $time    = time();
1068
1069     foreach (@list) {
1070         my $age = &getFactInfo($_, "modified_time");
1071
1072         if (!defined $age or $age !~ /^\d+$/) {
1073             if (scalar @list > 50) {
1074                 if (!$cache{warnDel}) {
1075                     &WARN("list is over 50 (".scalar(@list)."... giving it a miss.");
1076                     $cache{warnDel} = 1;
1077                     last;
1078                 }
1079             }
1080
1081             &WARN("old cruft (no time): $_");
1082             &delFactoid($_);
1083             next;
1084         }
1085
1086         next unless ($time - $age > $stale);
1087
1088         my $fix = $_;
1089         $fix =~ s/ #DEL#$//g;
1090         &DEBUG("safedel: Removing $fix ($_) for good.");
1091
1092         &delFactoid($_);
1093     }
1094
1095 }
1096
1097 sub dccStatus {
1098     return unless (scalar keys %{ $dcc{CHAT} });
1099
1100     if (@_) {
1101         &ScheduleThis(10, "dccStatus");
1102         return if ($_[0] eq "2");       # defer.
1103     } else {
1104         delete $sched{"dccStatus"}{RUNNING};
1105     }
1106
1107     my $time = strftime("%H:%M", localtime(time()) );
1108
1109     my $c;
1110     foreach (keys %channels) {
1111         my $c           = $_;
1112         my $users       = keys %{ $channels{$c}{''} };
1113         my $chops       = keys %{ $channels{$c}{o}  };
1114         my $bans        = keys %{ $channels{$c}{b}  };
1115
1116         my $txt = "[$time] $c: $users members ($chops chops), $bans bans";
1117         foreach (keys %{ $dcc{'CHAT'} }) {
1118             next unless (exists $channels{$c}{''}{lc $_});
1119             $conn->privmsg($dcc{'CHAT'}{$_}, $txt);
1120         }
1121     }
1122 }
1123
1124 sub scheduleList {
1125     ###
1126     # custom:
1127     #   a - time == now.
1128     #   b - weird time.
1129     ###
1130
1131     &DEBUG("sched:");
1132     foreach (keys %{ $irc->{_queue} }) {
1133         my $q = $_;
1134
1135         my $sched;
1136         foreach (keys %sched) {
1137             next unless ($q eq $sched{$_});
1138             $sched = $_;
1139             last;
1140         }
1141
1142         my $time = $irc->{_queue}->{$q}->[0] - time();
1143
1144         if (defined $sched) {
1145             &DEBUG("   $sched($q): ".&Time2String($time) );
1146         } else {
1147             &DEBUG("   NULL($q): ".&Time2String($time) );
1148         }
1149     }
1150
1151     &DEBUG("end of sList.");
1152 }
1153
1154 sub getChanConfDefault {
1155     my($what, $default, $chan) = @_;
1156
1157     if (exists $param{$what}) {
1158         if (!exists $cache{config}{$what}) {
1159             &status("conf: backward-compat: found param{$what} ($param{$what}) instead.");
1160             $cache{config}{$what} = 1;
1161         }
1162
1163         return $param{$what};
1164     }
1165
1166     my $val = &getChanConf($what, $chan);
1167     if (defined $val) {
1168         return $val;
1169     }
1170
1171     $param{$what}       = $default;
1172     &status("conf: auto-setting param{$what} = $default");
1173     $cache{config}{$what} = 1;
1174
1175     return $default;
1176 }
1177
1178 sub mkBackup {
1179     my($file, $time)    = @_;
1180     my $backup          = 0;
1181
1182     if (! -f $file) {
1183         &WARN("mkB: file '$file' does not exist.");
1184         return;
1185     }
1186
1187     if ( -e "$file~" ) {
1188         $backup++ if ((stat $file)[9] - (stat "$file~")[9] > $time);
1189     } else {
1190         $backup++;
1191     }
1192     return unless ($backup);
1193
1194     my $delta = time() - (stat $file)[9];
1195     &DEBUG("mkb: delta => $delta");
1196
1197     my $age = &Time2String($delta);
1198
1199     ### TODO: do internal copying.
1200     &status("Backup: $file ($age)");
1201     CORE::system("/bin/cp $file $file~");
1202 }
1203
1204 1;