/[BackupPC]/trunk/lib/BackupPC/SearchLib.pm
This is repository of my old source code which isn't updated any more. Go to git.rot13.org for current projects!
ViewVC logotype

Diff of /trunk/lib/BackupPC/SearchLib.pm

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 86 by dpavlin, Sun Aug 28 12:35:59 2005 UTC revision 121 by iklaric, Thu Sep 15 13:54:29 2005 UTC
# Line 62  sub dates_from_form($) { Line 62  sub dates_from_form($) {
62          sub mk_epoch_date($$) {          sub mk_epoch_date($$) {
63                  my ($name,$suffix) = @_;                  my ($name,$suffix) = @_;
64    
65                  my $yyyy = $param->{ $name . '_year_' . $suffix} || return;                  my $yyyy = $param->{ $name . '_year_' . $suffix} || return undef;
66                  my $mm .= $param->{ $name . '_month_' . $suffix} ||                  my $mm .= $param->{ $name . '_month_' . $suffix} ||
67                          ( $suffix eq 'from' ? 1 : 12);                          ( $suffix eq 'from' ? 1 : 12);
68                  my $dd .= $param->{ $name . '_day_' . $suffix} ||                  my $dd .= $param->{ $name . '_day_' . $suffix} ||
69                          ( $suffix eq 'from' ? 1 : 31);                          ( $suffix eq 'from' ? 1 : 31);
70    
71                    $yyyy =~ s/\D//g;
72                    $mm =~ s/\D//g;
73                    $dd =~ s/\D//g;
74    
75                  my $dt = new DateTime(                  my $dt = new DateTime(
76                          year => $yyyy,                          year => $yyyy,
77                          month => $mm,                          month => $mm,
78                          day => $dd                          day => $dd
79                  );                  );
80                    print STDERR "mk_epoch_date($name,$suffix) [$yyyy-$mm-$dd] = " . $dt->ymd . " " . $dt->hms . "\n";
81                  return $dt->epoch || 'NULL';                  return $dt->epoch || 'NULL';
82          }          }
83    
84          return (          my @ret = (
85                  mk_epoch_date('search_backup', 'from'),                  mk_epoch_date('search_backup', 'from'),
86                  mk_epoch_date('search_backup', 'to'),                  mk_epoch_date('search_backup', 'to'),
87                  mk_epoch_date('search', 'from'),                  mk_epoch_date('search', 'from'),
88                  mk_epoch_date('search', 'to'),                  mk_epoch_date('search', 'to'),
89          );          );
90    
91            return @ret;
92    
93  }  }
94    
95    
# Line 104  sub getWhere($) { Line 113  sub getWhere($) {
113  }  }
114    
115    
116  sub getFiles($$) {  sub getFiles($) {
117          my ($param, $offset) = @_;          my ($param) = @_;
118    
119            my $offset = $param->{'offset'} || 0;
120            $offset *= $on_page;
121    
122          my $dbh = get_dbh();          my $dbh = get_dbh();
123    
# Line 113  sub getFiles($$) { Line 125  sub getFiles($$) {
125                  files.id                        AS fid,                  files.id                        AS fid,
126                  hosts.name                      AS hname,                  hosts.name                      AS hname,
127                  shares.name                     AS sname,                  shares.name                     AS sname,
                 -- shares.share                 AS sharename,  
128                  files.backupnum                 AS backupnum,                  files.backupnum                 AS backupnum,
                 -- files.name                   AS filename,  
129                  files.path                      AS filepath,                  files.path                      AS filepath,
130                  files.date                      AS date,                  files.date                      AS date,
131                  files.type                      AS type,                  files.type                      AS type,
132                  files.size                      AS size,                  files.size                      AS size
                 -- dvds.name                    AS dvd  
                 null                            AS dvd  
133          };          };
134    
135          my $sql_from = qq{          my $sql_from = qq{
136                  FROM files                  FROM files
137                          INNER JOIN shares       ON files.shareID=shares.ID                          INNER JOIN shares       ON files.shareID=shares.ID
138                          INNER JOIN hosts        ON hosts.ID = shares.hostID                          INNER JOIN hosts        ON hosts.ID = shares.hostID
139                          INNER JOIN backups      ON backups.num = files.backupnum and backups.hostID = hosts.ID AND backups.shareID = shares.ID                          INNER JOIN backups      ON backups.num = files.backupnum and backups.hostID = hosts.ID AND backups.shareID = files.shareID
         };  
   
         my $sql_dvd_from = qq{  
                         -- LEFT  JOIN dvds              ON dvds.ID = files.dvdid  
140          };          };
141    
142          my $sql_where;          my $sql_where;
# Line 146  sub getFiles($$) { Line 150  sub getFiles($$) {
150          };          };
151    
152          my $sql_count = qq{ select count(files.id) $sql_from $sql_where };          my $sql_count = qq{ select count(files.id) $sql_from $sql_where };
153          my $sql_results = qq{ select $sql_cols $sql_from $sql_dvd_from $sql_where $sql_order };          my $sql_results = qq{ select $sql_cols $sql_from $sql_where $sql_order };
   
         $offset ||= 0;  
         $offset = ($offset * $on_page);  
154    
155          my $sth = $dbh->prepare($sql_count);          my $sth = $dbh->prepare($sql_count);
156          $sth->execute();          $sth->execute();
# Line 174  sub getFiles($$) { Line 175  sub getFiles($$) {
175          return ($results, \@ret);          return ($results, \@ret);
176  }  }
177    
178  sub getFilesHyperEstraier($$) {  sub getHyperEstraier_url($) {
179          my ($param, $offset) = @_;          my ($use_hest) = @_;
180    
181            return unless $use_hest;
182    
183            use HyperEstraier;
184            my ($index_path, $index_node_url);
185    
186            if ($use_hest =~ m#^http://#) {
187                    $index_node_url = $use_hest;
188            } else {
189                    $index_path = $TopDir . '/' . $index_path;
190                    $index_path =~ s#//#/#g;
191            }
192            return ($index_path, $index_node_url);
193    }
194    
195    sub getFilesHyperEstraier($) {
196            my ($param) = @_;
197    
198            my $offset = $param->{'offset'} || 0;
199            $offset *= $on_page;
200    
201          die "no index_path?" unless ($index_path);          die "no index_path?" unless ($index_path);
202    
203          use HyperEstraier;          use HyperEstraier;
204    
205            my ($index_path, $index_node_url) = getHyperEstraier_url($index_path);
206    
207          # open the database          # open the database
208          my $db = HyperEstraier::Database->new();          my $db;
209          $db->open($index_path, $HyperEstraier::ESTDBREADER);          if ($index_path) {
210                    $db = HyperEstraier::Database->new();
211                    $db->open($index_path, $HyperEstraier::ESTDBREADER);
212            } elsif ($index_node_url) {
213                    $db ||= HyperEstraier::Node->new($index_node_url);
214                    $db->set_auth('admin', 'admin');
215            } else {
216                    die "BUG: unimplemented";
217            }
218    
219          # create a search condition object          # create a search condition object
220          my $cond = HyperEstraier::Condition->new();          my $cond = HyperEstraier::Condition->new();
# Line 191  sub getFilesHyperEstraier($$) { Line 222  sub getFilesHyperEstraier($$) {
222          my $q = $param->{'search_filename'};          my $q = $param->{'search_filename'};
223          my $shareid = $param->{'search_share'};          my $shareid = $param->{'search_share'};
224    
225          if ($q) {          if (length($q) > 0) {
226                  $q =~ s/(.)/$1 /g;                  # exact match
227                    $cond->add_attr("filepath ISTRINC $q");
228    
229                    $q =~ s/(.)/$1 /g;
230                  # set the search phrase to the search condition object                  # set the search phrase to the search condition object
231                  $cond->set_phrase($q);                  $cond->set_phrase($q);
232            }
233    
234                  my ($backup_from, $backup_to, $files_from, $files_to) = dates_from_form($param);          my ($backup_from, $backup_to, $files_from, $files_to) = dates_from_form($param);
   
                 $cond->add_attr("backup_date NUMGE $backup_from") if ($backup_from);  
                 $cond->add_attr("backup_date NUMLE $backup_to") if ($backup_to);  
235    
236                  $cond->add_attr("date NUMGE $files_from") if ($files_from);          $cond->add_attr("backup_date NUMGE $backup_from") if ($backup_from);
237                  $cond->add_attr("date NUMLE $files_to") if ($files_to);          $cond->add_attr("backup_date NUMLE $backup_to") if ($backup_to);
238    
239                  $cond->add_attr("shareid NUMEQ $shareid") if ($shareid);          $cond->add_attr("date NUMGE $files_from") if ($files_from);
240          }          $cond->add_attr("date NUMLE $files_to") if ($files_to);
241    
242          $offset ||= 0;          $cond->add_attr("shareid NUMEQ $shareid") if ($shareid);
         $offset = ($offset * $on_page);  
243    
244  #       $cond->set_max( $offset + $on_page );  #       $cond->set_max( $offset + $on_page );
245          $cond->set_options( $HyperEstraier::Condition::SURE );          $cond->set_options( $HyperEstraier::Condition::SURE );
246          $cond->set_order( 'date NUMA' );          $cond->set_order( 'date NUMA' );
247    
248          # get the result of search          # get the result of search
         my $result = $db->search($cond, 0);  
         $result->get(0);  
   
249          my @res;          my @res;
250          my $hits = $result->size;          my ($result, $hits);
251    
252            if ($index_path) {
253                    $result = $db->search($cond, 0);
254                    $hits = $result->size;
255            } elsif ($index_node_url) {
256                    $result = $db->search($cond, 0);
257                    $hits = $result->doc_num;
258            } else {
259                    die "BUG: unimplemented";
260            }
261    
262          # for each document in result          # for each document in result
263          for my $i ($offset .. $result->size-1) {          for my $i ($offset .. ($offset + $on_page - 1)) {
264                  my $id = $result->get($i);                  last if ($i >= $hits);
265                  my $doc = $db->get_doc($id, 0);  
266                    my $doc;
267                    if ($index_path) {
268                            my $id = $result->get($i);
269                            $doc = $db->get_doc($id, 0);
270                    } elsif ($index_node_url) {
271                            $doc = $result->get_doc($i);
272                    } else {
273                            die "BUG: unimplemented";
274                    }
275    
276                  my $row;                  my $row;
277                  foreach my $c (qw/fid hname sname backupnum fiilename filepath date type size/) {                  foreach my $c (qw/fid hname sname backupnum fiilename filepath date type size/) {
# Line 237  sub getFilesHyperEstraier($$) { Line 283  sub getFilesHyperEstraier($$) {
283          return ($hits, \@res);          return ($hits, \@res);
284  }  }
285    
286    sub getGzipName($$$)
287    {
288            my ($host, $share, $backupnum) = @_;
289            my $ret = $Conf{GzipSchema};
290            
291            $share =~ s/\//_/g;
292            $ret =~ s/\\h/$host/ge;
293            $ret =~ s/\\s/$share/ge;
294            $ret =~ s/\\n/$backupnum/ge;
295            
296            return $ret;
297            
298    }
299    
300  sub getBackupsNotBurned() {  sub getBackupsNotBurned() {
301    
302          my $dbh = get_dbh();          my $dbh = get_dbh();
303    
304          my $sql = q{          my $sql = q{
305          SELECT                  SELECT
306                  backups.hostID          AS hostid,                          backups.hostID AS hostID,
307                  min(hosts.name)         AS host,                          hosts.name AS host,
308                  backups.num             AS backupnum,                          shares.name AS share,
309                  min(backups.type)       AS type,                          backups.id AS backupnum,
310                  min(backups.date)       AS date,                          backups.type AS type,
311                  min(backups.size)       AS size                          backups.date AS date,
312          FROM files                          backups.size AS size
313                  INNER JOIN shares       ON files.shareID=shares.ID                  FROM backups
314                  INNER JOIN hosts        ON hosts.ID = shares.hostID                  WHERE id not in( select id from backups,archive_backup where archive_backup.backup_id=backups.id)
315                  INNER JOIN backups      ON backups.num = files.backupnum and backups.hostID = hosts.ID AND backups.shareID = shares.ID                  ORDER BY backups.date
         WHERE  
                 files.dvdid     IS NULL  
         GROUP BY  
                 backups.hostID, backups.num  
         ORDER BY min(backups.date)  
316          };          };
317          my $sth = $dbh->prepare( $sql );          my $sth = $dbh->prepare( $sql );
318          my @ret;          my @ret;
# Line 265  sub getBackupsNotBurned() { Line 321  sub getBackupsNotBurned() {
321          while ( my $row = $sth->fetchrow_hashref() ) {          while ( my $row = $sth->fetchrow_hashref() ) {
322                  $row->{'age'} = sprintf("%0.1f", ( (time() - $row->{'date'}) / 86400 ) );                  $row->{'age'} = sprintf("%0.1f", ( (time() - $row->{'date'}) / 86400 ) );
323                  $row->{'size'} = sprintf("%0.2f", $row->{'size'} / 1024 / 1024);                  $row->{'size'} = sprintf("%0.2f", $row->{'size'} / 1024 / 1024);
324                    my (undef,undef,undef,undef,undef,undef,undef,$fs_size,undef,undef,undef,undef,undef) =
325                            stat( $Conf{InstallDir}.'/'.$Conf{GzipTempDir}.'/'.
326                                    getGzipName($row->{'host'}, $row->{share}, $row->{'backupnum'}));
327                    $row->{'fs_size'} = $fs_size;
328                  push @ret, $row;                  push @ret, $row;
329          }          }
330                
# Line 274  sub getBackupsNotBurned() { Line 334  sub getBackupsNotBurned() {
334  sub displayBackupsGrid()  sub displayBackupsGrid()
335    {    {
336        my $retHTML = "";        my $retHTML = "";
       my $addForm = 1;  
337                
338        if ($addForm) {          $retHTML .= <<EOF3;
   
             $retHTML .= <<EOF3;  
339  <script language="javascript" type="text/javascript">  <script language="javascript" type="text/javascript">
340  <!--  <!--
341    
# Line 296  sub displayBackupsGrid() Line 353  sub displayBackupsGrid()
353          }          }
354        }        }
355      }      }
356        
357        function sumiraj()
358        {
359            var suma = 0;
360            for (var i = 0; i < document.forma.elements.length; i++)    
361                    {
362                            var e = document.forma.elements[i];
363                            if ((e.checked || !e.checked) && e.name != \'all\')
364                            {
365                                    if (e.checked)
366                                    {
367                                            var ret = e.name.match("fcb(.*)");
368                                            suma += parseInt(eval("document.forma.fss"+ret[1]+".value"));
369                                            
370                                    }
371                            }
372            }
373            document.forma.totalsize.value = suma;
374            return suma;
375        }
376  //-->  //-->
377  </script>        </script>      
378  EOF3  EOF3
379                $retHTML .= q{<form name="forma" method="GET" action="}."$MyURL"."?action=burn\"";          $retHTML .= q{
380                $retHTML.= q{<input type="hidden" value="burn" name="action">};                  <form name="forma" method="GET" action=};
381                $retHTML .= q{<input type="hidden" value="results" name="search_results">};                  $retHTML .= "\"".$MyURL."\"";
382          }                  $retHTML .= q{?action=burn>
383          $retHTML .= qq{                          <input type="hidden" value="burn" name="action">
384                  <table style="fview" border="1" cellspacing="0" cellpadding="3">                          <input type="hidden" value="results" name="search_results">
385                  <tr class="tableheader">                          <table style="fview" border="0" cellspacing="0" cellpadding="2">
386          };                          <tr class="tableheader">
387                            <td class="tableheader">
388          if ($addForm) {                                  <input type="checkbox" name="allFiles" onClick="checkAll('allFiles');">
389              $retHTML .= "<td class=\"tableheader\"><input type=\"checkbox\" name=\"allFiles\" onClick=\"checkAll('allFiles');\"></td>";                          </td>
390          }                          <td align="center">Share</td>
391          $retHTML .=  qq{                          <td align="center">Backup no</td>
392                  <td align="center">Host</td>                          <td align="center">Type</td>
393                  <td align="center">Backup no</td>                          <td align="center">date</td>
394                  <td align="center">Type</td>                          <td align="center">age/days</td>
395                  <td align="center">date</td>                          <td align="center">size/MB</td>
396                  <td align="center">age/days</td>                          <td align="center">gzip size</td>
397                  <td align="center">size/MB</td>                          </tr>
                 </tr>  
         };  
   
         my @backups = getBackupsNotBurned();  
         my $backup;  
398    
         if ($addForm) {  
                 $retHTML .= qq{  
399                          <tr><td colspan=7 style="tableheader">                          <tr><td colspan=7 style="tableheader">
400                          <input type="submit" value="Burn selected backups on medium" name="submitBurner">                          <input type="submit" value="Burn selected backups on medium" name="submitBurner">
401                          </td></tr>                          </td></tr>
402                  };          };
         }  
403    
404          foreach $backup(@backups) {          my @color = (' bgcolor="#e0e0e0"', '');
405    
406            my $i = 0;
407            my $host = '';
408    
409            foreach my $backup ( getBackupsNotBurned() ) {
410    
411                    if ($host ne $backup->{'host'}) {
412                            $i++;
413                            $host = $backup->{'host'};
414                    }
415                  my $ftype = "";                  my $ftype = "";
416                            
417                  $retHTML .= "<tr>";                  $retHTML .= "<tr" . $color[$i %2 ] . ">";
418                  if ($addForm) {                  $retHTML .= '<td class="fview"><input type="checkbox" name="fcb' .
419                          $retHTML .= '<td class="fview"><input type="checkbox" name="fcb' .                                                                                          $backup->{'hostid'}.'_'.$backup->{'backupnum'} .
420                                  $backup->{'hostid'}.'_'.$backup->{'backupnum'} .                                                                                          '" value="' . $backup->{'hostid'}.'_'.$backup->{'backupnum'} .
421                                  '" value="' . $backup->{'hostid'}.'_'.$backup->{'backupnum'} .                                                                                          '" onClick="sumiraj();"></td>';
                                 '"></td>';  
                 }            
422                            
423                  $retHTML .= '<td class="fviewborder">' . $backup->{'host'} . '</td>' .                  $retHTML .=
424                          '<td class="fviewborder">' . $backup->{'backupnum'} . '</td>' .                          '<td align="right">' . $backup->{'host'} . ':' . $backup->{'share'} . '</td>' .
425                          '<td class="fviewborder">' . $backup->{'type'} . '</td>' .                          '<td align="center">' . $backup->{'backupnum'} . '</td>' .
426                          '<td class="fviewborder">' . epoch_to_iso( $backup->{'date'} ) . '</td>' .                          '<td align="center">' . $backup->{'type'} . '</td>' .
427                          '<td class="fviewborder">' . $backup->{'age'} . '</td>' .                          '<td align="center">' . epoch_to_iso( $backup->{'date'} ) . '</td>' .
428                          '<td class="fviewborder">' . $backup->{'size'} . '</td>' .                          '<td align="center">' . $backup->{'age'} . '</td>' .
429                          '</tr>';                          '<td align="right">' . $backup->{'size'} . '</td>' .
430          }                          '<td align="right">' . $backup->{'fs_size'} .
431                            '<input type="hidden" name="fss'.$backup->{'hostid'}.'_'.$backup->{'backupnum'} . '"'.
432                            'value="'. $backup->{'fs_size'} .'"'.'</td>' .
433                            "</tr>\n";
434    
         $retHTML .= "</table>";  
435    
         if ($addForm) {  
                 $retHTML .= "</form>";  
436          }          }
437    
438            $retHTML .= "</table>";
439            $retHTML .= "total gzip size:<input type=\"text\" name=\"totalsize\"><br>";
440            $retHTML .= "Note:<input type=\"text\" name=\"note\">";
441            $retHTML .= "</form>";
442                
443          return $retHTML;          return $retHTML;
444  }        }      
# Line 373  sub displayGrid($) { Line 454  sub displayGrid($) {
454          my $start_t = time();          my $start_t = time();
455    
456          my ($results, $files);          my ($results, $files);
457          if ($param->{'use_hest'}) {          if ($param->{'use_hest'} && length($hilite) > 0) {
458                  ($results, $files) = getFilesHyperEstraier($param, $offset);                  ($results, $files) = getFilesHyperEstraier($param);
459          } else {          } else {
460                  ($results, $files) = getFiles($param, $offset);                  ($results, $files) = getFiles($param);
461          }          }
462    
463          my $dur_t = time() - $start_t;          my $dur_t = time() - $start_t;
# Line 402  sub displayGrid($) { Line 483  sub displayGrid($) {
483          </div>          </div>
484          <table style="fview" width="100%" border="0" cellpadding="2" cellspacing="0">          <table style="fview" width="100%" border="0" cellpadding="2" cellspacing="0">
485                  <tr class="fviewheader">                  <tr class="fviewheader">
486                    <td></td>
487                  <td align="center">Share</td>                  <td align="center">Share</td>
488                  <td align="center">Type and Name</td>                  <td align="center">Type and Name</td>
489                  <td align="center">#</td>                  <td align="center">#</td>
# Line 426  sub displayGrid($) { Line 508  sub displayGrid($) {
508                  return sprintf(qq{<a href="?action=%s&host=%s&num=%d&share=%s&dir=%s">%s</a>}, $action, @_);                  return sprintf(qq{<a href="?action=%s&host=%s&num=%d&share=%s&dir=%s">%s</a>}, $action, @_);
509          }          }
510    
511            my $i = $offset * $on_page;
512    
513          foreach $file (@{ $files }) {          foreach $file (@{ $files }) {
514                    $i++;
515    
516                  my $typeStr  = BackupPC::Attrib::fileType2Text(undef, $file->{'type'});                  my $typeStr  = BackupPC::Attrib::fileType2Text(undef, $file->{'type'});
517                  $retHTML .= qq{<tr class="fviewborder">};                  $retHTML .= qq{<tr class="fviewborder">};
518    
519                    $retHTML .= qq{<td class="fviewborder">$i</td>};
520    
521                  $retHTML .=                  $retHTML .=
522                          qq{<td class="fviewborder" align="right">} . $file->{'hname'} . ':' . $file->{'sname'} . qq{</td>} .                          qq{<td class="fviewborder" align="right">} . $file->{'hname'} . ':' . $file->{'sname'} . qq{</td>} .
523                          qq{<td class="fviewborder"><img src="$Conf{CgiImageDirURL}/icon-$typeStr.gif" alt="$typeStr" align="middle">&nbsp;} . hilite_html( $file->{'filepath'}, $hilite ) . qq{</td>} .                          qq{<td class="fviewborder"><img src="$Conf{CgiImageDirURL}/icon-$typeStr.gif" alt="$typeStr" align="middle">&nbsp;} . hilite_html( $file->{'filepath'}, $hilite ) . qq{</td>} .
524                          qq{<td class="fviewborder" align="center">} . restore_link( $typeStr, ${EscURI( $file->{'hname'} )}, $file->{'backupnum'}, ${EscURI( $file->{'sname'})}, ${EscURI( $file->{'filepath'} )}, $file->{'backupnum'} ) . qq{</td>} .                          qq{<td class="fviewborder" align="center">} . restore_link( $typeStr, ${EscURI( $file->{'hname'} )}, $file->{'backupnum'}, ${EscURI( $file->{'sname'})}, ${EscURI( $file->{'filepath'} )}, $file->{'backupnum'} ) . qq{</td>} .
525                          qq{<td class="fviewborder" align="right">} . $file->{'size'} . qq{</td>} .                          qq{<td class="fviewborder" align="right">} . $file->{'size'} . qq{</td>} .
526                          qq{<td class="fviewborder">} . epoch_to_iso( $file->{'date'} ) . qq{</td>} .                          qq{<td class="fviewborder">} . epoch_to_iso( $file->{'date'} ) . qq{</td>} .
527                          qq{<td class="fviewborder">} . $file->{'dvd'} . qq{</td>};                          qq{<td class="fviewborder">} . '?' . qq{</td>};
528    
529                  $retHTML .= "</tr>";                  $retHTML .= "</tr>";
530          }          }
Legend:
Removed from v.86  
changed lines
  Added in v.121
  ViewVC Help
Powered by ViewVC 1.1.26