Annotation of db/prgsrc/updatedb.pl, revision 1.44

1.1       boris       1: #!/usr/local/bin/perl 
                      2: 
                      3: =head1 NAME
                      4: 
                      5: updatedb.pl - a script for creation of new database. 
                      6: 
                      7: =head1 SYNOPSIS
                      8: 
1.25      roma7       9: updatedb.pl B<[-i]> I<file1> I<file2>....
1.1       boris      10: 
                     11: 
                     12: =head1 DESCRIPTION
                     13: 
                     14: Updates information in the B<chgk> databse. Uses file
                     15: 
1.25      roma7      16: =head1 OPTIONS
                     17: 
                     18: =item B<-i> 
                     19: 
                     20: Ask about ParentId. 
                     21: 
1.1       boris      22: 
                     23: =head1 BUGS
                     24: 
                     25: The database, user and password are hardcoded. 
                     26: 
                     27: =head1 AUTHOR
                     28: 
                     29: Dmitry Rubinstein
                     30: 
1.44    ! roma7      31: =head1 $Id: updatedb.pl,v 1.43 2008-11-14 11:23:03 roma7 Exp $
1.1       boris      32: 
                     33: =cut
                     34: 
1.25      roma7      35: use vars qw($opt_i);
                     36: 
                     37: use Getopt::Std;
1.34      roma7      38: my $unsortedname="../dump/unsorted";
1.25      roma7      39: getopts('i');
1.29      roma7      40: #open STDERR, ">errors";
1.25      roma7      41: my $Interactive=$opt_i || 0;
1.31      boris      42: my $DUMPDIR = $ENV{DUMPDIR} || "../dump";
1.25      roma7      43: 
1.1       boris      44: my (%RevMonths) = 
1.5       boris      45:     ('Jan', '1', 'Feb', '2', 'Mar', '3', 'Apr', '4', 'May', '5', 'Jun', '6',
                     46:      'Jul', '7', 'Aug', '8', 'Sep', '9', 'Oct', '10', 'Nov', '11',
                     47:      'Dec', '12', 
                     48:      'JAN', '1', 'FEB', '2', 'MAR', '3', 'APR', '4', 'MAY', '5', 'JUN', '6',
                     49:      'JUL', '7', 'AUG', '8', 'SEP', '9', 'OCT', '10', 'NOV', '11',
                     50:      'DEC', '12', 
1.13      boris      51:      'Янв', '1', 'Фев', '2', 'Мар', '3', 'Апр', '4', 'Май', '5',
                     52:      'Июн', '6', 'Июл', '7', 'Авг', '8', 'Сен', '9', 
                     53:      'Окт', '10', 'Ноя', '11', 'Дек', '12');
1.1       boris      54: my ($sth);
                     55: 
1.13      boris      56: 
1.3       boris      57: 
1.4       boris      58: 
1.3       boris      59: 
1.1       boris      60: use DBI;
                     61: use strict;
1.44    ! roma7      62: use Data::Dumper;
1.28      roma7      63: my $isunsorted=0;
1.1       boris      64: sub UpdateParents {
1.36      roma7      65:     my ($dbh, $ParentId, $all_qnum,$CreatedAt) = @_;
1.5       boris      66:     if ($ParentId) {
1.36      roma7      67:        my ($sth1) = $dbh->prepare("SELECT QuestionsNum, ParentId, CreatedAt
1.5       boris      68: FROM Tournaments WHERE Id = $ParentId");
                     69:        $sth1->execute;
1.36      roma7      70:        my ($q, $p,$c) = ($sth1->fetchrow)[0, 1, 2];
                     71:        $c=$CreatedAt if $CreatedAt && ($CreatedAt gt $c);
                     72:        my $qc=$dbh->quote($c);
1.5       boris      73:        $dbh->do("UPDATE Tournaments SET 
1.36      roma7      74:                   QuestionsNum=$q + $all_qnum, CreatedAt=$qc
1.5       boris      75:                   WHERE Id = $ParentId");
1.36      roma7      76:        &UpdateParents($dbh, $p, $all_qnum,$c);
1.5       boris      77:     }
1.1       boris      78: }
                     79: 
1.44    ! roma7      80: sub parseDate {
        !            81:   my $value = shift;
        !            82:   my ($from, $to) = split /\s+\-+\s+/, $value;
        !            83:   $from =~ s/^(.*)-(.*)-(.*)$/$3-$2-$1/;
        !            84:   my($month) = $RevMonths{$2} || '01';
        !            85:   $from =~ s/-(.*)-/-$month-/;
        !            86:   $from =~ s/-00*$/-01/;
        !            87:   if ($to) {
        !            88:     $to =~ s/^(.*)-(.*)-(.*)$/$3-$2-$1/;
        !            89:     $month = $RevMonths{$2} || '01';    
        !            90:     $to =~ s/-(.*)-/-$month-/;
        !            91:     $to =~ s/-00*$/-01/;
        !            92:   }
        !            93:   print Dumper($from, $to);
        !            94:   return ($from, $to);
        !            95:   
        !            96: }
1.36      roma7      97: 
1.1       boris      98: sub getField {
1.5       boris      99:     my($desc, $dbh) = @_;
                    100:     my($key);
                    101:     my($value) = ('');
                    102:     while (<$desc>) {
1.44    ! roma7     103:        s/[
        !           104: ]//g;
1.5       boris     105:        if ($key && /^\s*$/) {
                    106:            chomp $value;
1.24      roma7     107:             $value =~ s/\s+$//;
1.5       boris     108:            chomp $key;
                    109:            if ($key eq 'Дата') {
1.44    ! roma7     110:              my ($from, $to) = parseDate($value);
        !           111:              $value = {'PlayedAt'=>$from, 'PlayedAt2'=>$to};
1.5       boris     112:            }
1.35      roma7     113:            if ($key eq 'Автор') {$value=~s/\.$//;}
1.5       boris     114:            return ($key, $value);
                    115:        }
                    116:        next if (/^\s*$/);
                    117:        
1.16      boris     118:        if (!$key && /^(.*?)[:\.]\s*(.*)$/s) {
1.5       boris     119:            $key = $1;
1.16      boris     120:            $value=$2;
1.5       boris     121:            next;
1.1       boris     122:        }
1.5       boris     123:        if ($key) {
                    124:            $value .= $_;
                    125:            next;
1.1       boris     126:        }
1.5       boris     127:     }
                    128:     if ($key && $value) {
1.23      roma7     129:         $value=~s/\s+$//;
1.44    ! roma7     130:              return ($key, $value);
1.5       boris     131:     }
                    132:     return (0, 0);
1.1       boris     133: }
                    134: 
                    135: sub SelectGroup {
1.7       boris     136:     my ($dbh, $source, $TourName) = @_;
                    137:     my ($sth, $ParentId, $i, @arr);
1.25      roma7     138: 
                    139:     if ($Interactive) {    
                    140:        $sth = $dbh->prepare("SELECT Id, Title FROM
1.1       boris     141:                Tournaments WHERE Type = 'Г'");
1.25      roma7     142:        $sth->execute;
                    143:        print "Выберите группу для турнира:\n$TourName, файл $source\n\n";
                    144:        while (@arr=$sth->fetchrow) {
                    145:                print "[$arr[0]] $arr[1]\n";
                    146:        }
                    147:        $ParentId = <STDIN>;
                    148:        chomp $ParentId;
                    149:        if (!$ParentId) {
                    150:                print "Пропускаем файл $source\n";
                    151:                print STDERR "Файл $source отвергнут оператором\n";
                    152:                return (0,0);
                    153:        } else {
                    154:                print "Вы выбрали турнир: $ParentId\n";
                    155:                $sth = $dbh->prepare("INSERT INTO Tournaments
                    156:                              (Title, Type, ParentId, FileName) 
                    157:                               VALUES ($TourName, 'Ч', $ParentId, 
                    158:                                        $source)");
                    159:                $sth->execute;
                    160:                my $TournamentId = $sth->{mysql_insertid};
                    161:                return ($TournamentId,$ParentId);
                    162:        }
1.7       boris     163:     } else {
1.25      roma7     164: # Теперь, если файла нет в дереве турниров, никаких вопросов не 
                    165: # задаётся, а вместо этого он добавляется в группу 9999
1.30      roma7     166:                $ParentId = 9999;
1.32      roma7     167:                my $tempsource=$source;
                    168:                my $temptname=$TourName;
1.33      roma7     169:                 $tempsource=~s/^\'(.*)\'$/$1/;
                    170:                 $temptname=~s/^\'(.*)\'$/$1/;
                    171:                print UNSORTED "$tempsource".((12 -length($source))x' ')."\t$temptname\n";
1.27      roma7     172:                $isunsorted=1;
1.25      roma7     173:                $sth = $dbh->prepare("INSERT INTO Tournaments
1.43      roma7     174:                              (Title, Type, ParentId, FileName,CreatedAt) 
1.44    ! roma7     175:                               VALUES (".$dbh->quote($TourName).", 'Ч', $ParentId, 
1.43      roma7     176:                                        $source,NOW())");
1.25      roma7     177:                 $sth->execute;
                    178:                my $TournamentId = $sth->{mysql_insertid};
                    179:                return ($TournamentId,$ParentId);
                    180:        }
1.7       boris     181:                
                    182:     
1.1       boris     183: }
                    184: 
                    185: sub UpdateTournament {
1.5       boris     186:     my ($dbh, $TournamentId, $field, $value) = @_;
1.44    ! roma7     187:     if (ref $value eq 'HASH') {
        !           188:            # It means that $value contains information about several fields
        !           189:            foreach my $k(keys %$value) {
        !           190:              if ($value->{$k}) {
        !           191:           &UpdateTournament($dbh, $TournamentId, $k, $value->{$k});
        !           192:         }
        !           193:       }
        !           194:     } else {    
        !           195:       my $v = $dbh->quote($value);
        !           196:       $dbh->do("UPDATE Tournaments SET $field=$v WHERE Id=$TournamentId")
        !           197:            or die $dbh->errstr;
        !           198:     }
1.1       boris     199: }
                    200: 
                    201: sub UpdateQuestion {
1.5       boris     202:     my ($dbh, $QuestionId, $field, $value) = @_;
1.40      boris     203:     
1.44    ! roma7     204:     if (($field eq 'Type') && ($value eq "Д")) {
        !           205:          $value = "ЧД";
1.40      boris     206:     }
1.44    ! roma7     207:     my $v = $dbh->quote($value);
        !           208:     $dbh->do("UPDATE Questions SET $field=$v
1.1       boris     209:                WHERE QuestionId=$QuestionId")
1.5       boris     210:        or die $dbh->errstr;
1.1       boris     211: }
                    212: 
1.7       boris     213: sub CheckFile {
1.10      boris     214:     my ($dbh, $source, $title) = @_;
1.7       boris     215:     my $sth = $dbh->prepare("SELECT Id,ParentId,QuestionsNum FROM Tournaments
1.44    ! roma7     216:                              WHERE FileName=? AND Type='Ч'");
        !           217:     $sth->execute($source) or die $dbh->errstr;
1.7       boris     218:     my @arr = $sth->fetchrow;
                    219:     if (! scalar @arr) {
                    220:        return SelectGroup($dbh,$source,$title);
                    221:     }
                    222:     my($Id,$ParentId,$QuestionsNum)=@arr;
1.10      boris     223:     if($QuestionsNum) {        
1.7       boris     224:        print "Файл $source с данными $title уже существует. ",
                    225:        "Заменить?[y/N]\n";
                    226:        my $answer = <STDIN>;
                    227:        if ($answer !~ /^[yY]/) {
                    228:            return (0,0);
                    229:        } else {
1.10      boris     230:            DeleteTournament($dbh,$Id,$ParentId,$QuestionsNum,0);
1.7       boris     231:        }
                    232:     } 
                    233:     return($Id,$ParentId);     
                    234: }
                    235: 
                    236: 
                    237: sub DeleteTournament {
1.10      boris     238:     my ($dbh,$Id,$ParentId,$QuestionsNum,$DeleteMyself) = @_;
                    239:     if ($QuestionsNum) {
                    240:        UpdateParents($dbh,$ParentId,-$QuestionsNum);
                    241:     }
1.7       boris     242:     my (@Tours) = &GetTours($dbh, $Id);
                    243:     foreach my $Tour (@Tours) {
1.12      boris     244:        DeleteTournament($dbh,$Tour,$Id,0,1);
1.7       boris     245:     }
                    246:     my $sth = $dbh->prepare("DELETE FROM Questions
                    247:                              WHERE ParentId=$Id");
                    248:     $sth->execute or die $dbh->errstr;
                    249:     if($DeleteMyself) {
                    250:        $sth = $dbh->prepare("DELETE FROM Tournaments
                    251:                              WHERE Id=$Id");
1.9       boris     252:        $sth->execute or die $dbh->errstr;
1.7       boris     253:     }
                    254: }
1.8       boris     255: 
                    256: sub GetTours {
                    257:        my ($dbh, $ParentId) = @_;
                    258:        my (@arr, @Tours);
                    259: 
                    260:        my ($sth) = $dbh->prepare("SELECT Id FROM Tournaments
                    261:                WHERE ParentId=$ParentId ORDER BY Id");
                    262: 
                    263:        $sth->execute;
                    264: 
                    265:        while (@arr = $sth->fetchrow) {
                    266:                push @Tours, $arr[0];
                    267:        }
                    268: 
                    269:        return @Tours;
                    270: }
                    271: 
1.13      boris     272: sub CreateTour {
1.44    ! roma7     273:     my ($dbh,$title,$ParentId,$TourNum,$rh_defaults)=@_;   
1.13      boris     274:     my $sth = $dbh->prepare("INSERT INTO Tournaments
1.43      roma7     275:                             (Title, Type, ParentId, Number,CreatedAt) 
1.44    ! roma7     276:                             VALUES (?, 'Т', $ParentId, $TourNum,NOW())");
        !           277:     $sth->execute($title);
1.13      boris     278:     my $TourId = $sth->{mysql_insertid};
                    279:     while (my ($key,$value)=each %$rh_defaults) {
1.44    ! roma7     280:            &UpdateTournament($dbh, $TourId, $key, $value);
1.13      boris     281:     }
                    282:     return $TourId;
                    283: }
                    284:                
1.8       boris     285: 
1.1       boris     286: MAIN: 
                    287: {
1.5       boris     288:     my($key, $value, $addition);
1.13      boris     289:     #
                    290:     # Inherited fields for a Tour or Tournament
                    291:     #
                    292:     my %TourFields = ('Копирайт' => 'Copyright',
                    293:                      'Инфо' => 'Info', 'URL' => 'URL',
                    294:                      'Ссылка' => 'URL', 'Редактор' => 'Editors',
                    295:                      'Обработан'=> 'EnteredBy',
1.44    ! roma7     296:                      'Дата'=>'PlayedAt', 'PlayedAt2'=>'PlayedAt2');
1.13      boris     297:     #
                    298:     # Inherited fields for a Question
                    299:     #
                    300:     my %QuestionFields = ('Тип'=> 'Type', 'Вид'=> 'Type', 
1.15      boris     301:                          'Автор' => 'Authors', 'Рейтинг'=>'Rating', 
1.21      boris     302:                          'Источник' => 'Sources',
                    303:                          'Тема' => 'Topic');
1.13      boris     304:                          
                    305:                      
1.5       boris     306:     my($source);
                    307:     
                    308:     my($dbh) = DBI->connect("DBI:mysql:chgk", "piataev", "")
                    309:        or die "Can't connect to DB chgk\n";
1.42      roma7     310: if ($dbh->get_info( 18 )=~/^(5|(4.1))/)  {$dbh->do("SET NAMES 'koi8r'");}
1.25      roma7     311:     my @sources;       
1.34      roma7     312:     open UNSORTED, ">$unsortedname";
1.5       boris     313:     while ($source = shift) {
1.25      roma7     314:        push @sources,glob($source);
                    315:     }
                    316:     foreach $source(@sources) {
1.17      boris     317:        my $TourNum=0;
1.5       boris     318:        my($PlayedAt) = '';
                    319:        my($QuestionId, $TourId, $TournamentId, $ParentId) = (0, 0, 0, 0);
1.14      boris     320:        my($tournum, $qnum, $all_qnum) = (0, 0, 0);
1.5       boris     321:        my (@d) = (localtime((stat($source))[9]))[5,4,3];
                    322:        $d[1]++;
1.36      roma7     323:        $d[1]=sprintf("%02d",$d[1]);
                    324:        $d[2]=sprintf("%02d",$d[2]);
1.5       boris     325:        $d[0]+=1900;
1.36      roma7     326:        my $UnquotedCreated=join('-', @d);
1.44    ! roma7     327:        my ($CreatedAt) = $UnquotedCreated;
1.6       boris     328: 
1.5       boris     329:        open INFD, $source 
                    330:            or die "Can't open input file: $!\n";
                    331:        
                    332:        $source =~ s/^.*\/([^\/]*)$/$1/;
1.36      roma7     333:        my $unquotedsource=$source;
                    334:        $unquotedsource=~s/\.txt\s*$//;
1.6       boris     335:        print STDERR "Файл: $source, дата: $CreatedAt ";
1.13      boris     336:        my %TourDefaults=('CreatedAt'=>$CreatedAt);
                    337:        my %QuestionDefaults=();
1.44    ! roma7     338:        my %QuestionGlobalDefaults=('Type'=>'Ч');
1.5       boris     339:        while (($key, $value) = getField(\*INFD, $dbh)) {
1.44    ! roma7     340:          
        !           341:     last if (!$key);
1.5       boris     342:            
1.44    ! roma7     343:     if ($key =~ /Мета/) {
        !           344:                  next;   # This is obsolete
        !           345:     }
        !           346:     if ($key =~ /Чемпионат/ || $key =~ /Пакет/) {              
        !           347:                  ($TournamentId, $ParentId) = CheckFile($dbh,$source,$value);
        !           348:                  if (!$TournamentId)  {
1.7       boris     349:                    last;
1.44    ! roma7     350:                  }     
        !           351: 
        !           352:                  $sth = $dbh->prepare("UPDATE Tournaments SET
        !           353:                                     Title=?, Type='Ч', 
        !           354:                                      ParentId=?, 
        !           355:                                      FileName=?, 
        !           356:                                      CreatedAt=?
1.7       boris     357:                                      WHERE
1.44    ! roma7     358:                                      Id=?");
        !           359:                  $sth->execute($value,$ParentId,$source,$CreatedAt,$TournamentId);
        !           360:                  next;
        !           361:     }
        !           362:     if ($key =~ /Тур/) {      
        !           363:                  if ($TourId) {
1.36      roma7     364:                        $dbh->do("UPDATE Tournaments SET QuestionsNum=$qnum
1.5       boris     365:                              WHERE Id=$TourId");
1.44    ! roma7     366:                  }
        !           367:                  $qnum = 0;
        !           368:                  $TourNum++;
        !           369:                  $TourDefaults{'FileName'}= "$unquotedsource.$TourNum";
        !           370:                                                
        !           371: 
        !           372:                  $TourId=CreateTour($dbh,$value,$TournamentId,$TourNum,
1.17      boris     373:                                   \%TourDefaults);
1.44    ! roma7     374:                  %QuestionDefaults=%QuestionGlobalDefaults;
        !           375:                  $QuestionId=0;
        !           376:                  next; 
        !           377:     }
        !           378:     if ($key =~ /Вопрос/) {
        !           379:                  if (!$TourId) {
1.11      boris     380:                    $qnum = 0;
1.44    ! roma7     381:                    $TourNum++;     
1.19      boris     382:                    $TourId=CreateTour($dbh,'1',$TournamentId,$TourNum,
1.13      boris     383:                                       \%TourDefaults);
1.44    ! roma7     384:         %QuestionDefaults=%QuestionGlobalDefaults;
        !           385:                }
        !           386:                my $query = "INSERT INTO Questions 
1.14      boris     387:                             (ParentId, Number) 
                    388:                             VALUES ($TourId, $qnum+1)";
1.44    ! roma7     389:                $sth = $dbh->prepare($query);
        !           390:                $sth->execute or print $query;;
        !           391:                $QuestionId = $sth->{mysql_insertid};
        !           392:                &UpdateQuestion($dbh, $QuestionId, "Question", $value);
        !           393:                while (my ($key,$value)=each %QuestionDefaults) {
1.13      boris     394:                    &UpdateQuestion($dbh, $QuestionId, $key, $value);
1.44    ! roma7     395:                }               
        !           396:                $qnum++;
        !           397:                $all_qnum++;
        !           398:                next;
        !           399:     }
        !           400:     if ($key =~ /Ответ/) {
        !           401:       &UpdateQuestion($dbh, $QuestionId, "Answer", $value);
        !           402:                  next;
        !           403:     }
        !           404: 
        !           405:     if ($key =~ /Зач[её]т/) {
        !           406:                  &UpdateQuestion($dbh, $QuestionId, "PassCriteria", $value);
        !           407:                  next;
        !           408:     }
        !           409: 
        !           410:     if ($key =~ /Комментари/) {
        !           411:                &UpdateQuestion($dbh, $QuestionId, "Comments", $value);
        !           412:                next;
        !           413:     }
        !           414:    
        !           415:     my @Fields = grep { $key =~ /$_/ } keys %QuestionFields;
        !           416: 
        !           417:     if (scalar @Fields) {
        !           418:                  my $word = shift @Fields;
        !           419:                  my $field = $QuestionFields{$word};
        !           420:                  if ($QuestionId) {
        !           421:           &UpdateQuestion($dbh, $QuestionId, $field, $value);
        !           422:                  } elsif ($TourId) {
1.13      boris     423:                    $QuestionDefaults{$field}=$value;
1.44    ! roma7     424:                  } else {
1.13      boris     425:                    $QuestionGlobalDefaults{$field}=$value;
1.44    ! roma7     426:                  }
        !           427:                  next;
        !           428:     }
1.6       boris     429: 
1.44    ! roma7     430:     @Fields = grep { $key =~ /$_/ } keys %TourFields;
1.6       boris     431: 
1.44    ! roma7     432:     if (scalar @Fields) {
        !           433:                my $word = shift @Fields;
        !           434:                my $field = $TourFields{$word};
        !           435:                my $updateId;
        !           436:                if ($QuestionId) {
1.13      boris     437:                    print STDERR "ОШИБКА: $key $value недопустимы после",
                    438:                    " начала вопросов\n";
1.44    ! roma7     439:                } else {
        !           440:                  if ($TourId) {
        !           441:                    $updateId = $TourId;
        !           442:         } else {
        !           443:           $updateId = $TournamentId;
        !           444:           $TourDefaults{$field}=$value;
        !           445:         }
        !           446:         &UpdateTournament($dbh, $updateId, $field, $value);
        !           447:                }
        !           448:                next;
        !           449:     }
1.13      boris     450: 
1.6       boris     451:            
                    452:            #
                    453:            # If we are here, something got wrong!
                    454:            #
                    455:            print STDERR "\nЯ НЕ ПОНИМАЮ: $key, $value!\n";
                    456:            
1.5       boris     457:        }
                    458:        $dbh->do("UPDATE Tournaments SET QuestionsNum=$qnum
1.1       boris     459:                        WHERE Id=$TourId");
1.5       boris     460:        $dbh->do("UPDATE Tournaments SET QuestionsNum=$all_qnum
1.1       boris     461:                        WHERE Id=$TournamentId");
1.36      roma7     462:        &UpdateParents($dbh, $ParentId, $all_qnum,$UnquotedCreated);            
1.6       boris     463:        print STDERR "Всего вопросов: $all_qnum \n";
1.5       boris     464:     }
1.27      roma7     465:     close UNSORTED;
1.34      roma7     466:     unlink $unsortedname unless $isunsorted;
1.5       boris     467:     $dbh->disconnect;
1.1       boris     468: }

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>