/[BackupPC]/trunk/lib/BackupPC/SearchLib.pm
This is repository of my old source code which isn't updated any more. Go to git.rot13.org for current projects!
ViewVC logotype

Diff of /trunk/lib/BackupPC/SearchLib.pm

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 88 by dpavlin, Sun Aug 28 14:15:01 2005 UTC revision 137 by iklaric, Thu Sep 29 08:46:13 2005 UTC
# Line 15  my $pager_pages = 10; Line 15  my $pager_pages = 10;
15  my $dsn = $Conf{SearchDSN};  my $dsn = $Conf{SearchDSN};
16  my $db_user = $Conf{SearchUser} || '';  my $db_user = $Conf{SearchUser} || '';
17    
18  my $index_path = $Conf{HyperEstraierIndex};  my $hest_index_path = $Conf{HyperEstraierIndex};
 if ($index_path) {  
         $index_path = $TopDir . '/' . $index_path;  
         $index_path =~ s#//#/#g;  
 }  
19    
20  my $dbh;  my $dbh;
21    
# Line 175  sub getFiles($) { Line 171  sub getFiles($) {
171          return ($results, \@ret);          return ($results, \@ret);
172  }  }
173    
174    sub getHyperEstraier_url($) {
175            my ($use_hest) = @_;
176    
177            return unless $use_hest;
178    
179            use HyperEstraier;
180            my ($index_path, $index_node_url);
181    
182            if ($use_hest =~ m#^http://#) {
183                    $index_node_url = $use_hest;
184            } else {
185                    $index_path = $TopDir . '/' . $index_path;
186                    $index_path =~ s#//#/#g;
187            }
188            return ($index_path, $index_node_url);
189    }
190    
191  sub getFilesHyperEstraier($) {  sub getFilesHyperEstraier($) {
192          my ($param) = @_;          my ($param) = @_;
193    
194          my $offset = $param->{'offset'} || 0;          my $offset = $param->{'offset'} || 0;
195          $offset *= $on_page;          $offset *= $on_page;
196    
197          die "no index_path?" unless ($index_path);          die "no index_path?" unless ($hest_index_path);
198    
199          use HyperEstraier;          use HyperEstraier;
200    
201            my ($index_path, $index_node_url) = getHyperEstraier_url($hest_index_path);
202    
203          # open the database          # open the database
204          my $db = HyperEstraier::Database->new();          my $db;
205          $db->open($index_path, $HyperEstraier::ESTDBREADER);          if ($index_path) {
206                    $db = HyperEstraier::Database->new();
207                    $db->open($index_path, $HyperEstraier::ESTDBREADER);
208            } elsif ($index_node_url) {
209                    $db ||= HyperEstraier::Node->new($index_node_url);
210                    $db->set_auth('admin', 'admin');
211            } else {
212                    die "BUG: unimplemented";
213            }
214    
215          # create a search condition object          # create a search condition object
216          my $cond = HyperEstraier::Condition->new();          my $cond = HyperEstraier::Condition->new();
# Line 196  sub getFilesHyperEstraier($) { Line 219  sub getFilesHyperEstraier($) {
219          my $shareid = $param->{'search_share'};          my $shareid = $param->{'search_share'};
220    
221          if (length($q) > 0) {          if (length($q) > 0) {
222                  $q =~ s/(.)/$1 /g;                  # exact match
223                    $cond->add_attr("filepath ISTRINC $q");
224    
225                    $q =~ s/(.)/$1 /g;
226                  # set the search phrase to the search condition object                  # set the search phrase to the search condition object
227                  $cond->set_phrase($q);                  $cond->set_phrase($q);
228          }          }
# Line 217  sub getFilesHyperEstraier($) { Line 242  sub getFilesHyperEstraier($) {
242          $cond->set_order( 'date NUMA' );          $cond->set_order( 'date NUMA' );
243    
244          # get the result of search          # get the result of search
         my $result = $db->search($cond, 0);  
   
245          my @res;          my @res;
246          my $hits = $result->size;          my ($result, $hits);
247    
248            if ($index_path) {
249                    $result = $db->search($cond, 0);
250                    $hits = $result->size;
251            } elsif ($index_node_url) {
252                    $result = $db->search($cond, 0);
253                    $hits = $result->doc_num;
254            } else {
255                    die "BUG: unimplemented";
256            }
257    
258          # for each document in result          # for each document in result
259          for my $i ($offset .. ($offset + $on_page - 1)) {          for my $i ($offset .. ($offset + $on_page - 1)) {
260                  last if ($i >= $hits);                  last if ($i >= $hits);
261    
262                  my $id = $result->get($i);                  my $doc;
263                  my $doc = $db->get_doc($id, 0);                  if ($index_path) {
264                            my $id = $result->get($i);
265                            $doc = $db->get_doc($id, 0);
266                    } elsif ($index_node_url) {
267                            $doc = $result->get_doc($i);
268                    } else {
269                            die "BUG: unimplemented";
270                    }
271    
272                  my $row;                  my $row;
273                  foreach my $c (qw/fid hname sname backupnum fiilename filepath date type size/) {                  foreach my $c (qw/fid hname sname backupnum fiilename filepath date type size/) {
# Line 239  sub getFilesHyperEstraier($) { Line 279  sub getFilesHyperEstraier($) {
279          return ($hits, \@res);          return ($hits, \@res);
280  }  }
281    
282    sub getGzipName($$$)
283    {
284            my ($host, $share, $backupnum) = @_;
285            my $ret = $Conf{GzipSchema};
286            
287            $share =~ s/\//_/g;
288            $ret =~ s/\\h/$host/ge;
289            $ret =~ s/\\s/$share/ge;
290            $ret =~ s/\\n/$backupnum/ge;
291            
292            return $ret;
293            
294    }
295    
296  sub getBackupsNotBurned() {  sub getBackupsNotBurned() {
297    
298          my $dbh = get_dbh();          my $dbh = get_dbh();
299          my $sql = q{  
300          SELECT          my $sql = q{
301                  backups.hostID          AS hostid,                  SELECT
302                  min(hosts.name)         AS host,                          backups.hostID AS hostID,
303                  backups.num             AS backupnum,                          hosts.name AS host,
304                  min(backups.type)       AS type,                          shares.name AS share,
305                  min(backups.date)       AS date,                          backups.id AS backupnum,
306                  min(backups.size)       AS size                          backups.type AS type,
307          FROM files                          backups.date AS date,
308                  INNER JOIN shares       ON files.shareID=shares.ID                          backups.size AS size
309                  INNER JOIN hosts        ON hosts.ID = shares.hostID                  FROM backups
310                  INNER JOIN backups      ON backups.num = files.backupnum and backups.hostID = hosts.ID AND backups.shareID = shares.ID                  INNER JOIN shares       ON backups.shareID=shares.ID
311          GROUP BY                  INNER JOIN hosts        ON backups.hostID = hosts.ID
312                  backups.hostID, backups.num                  LEFT OUTER JOIN archive_backup ON archive_backup.backup_id = backups.id
313          ORDER BY min(backups.date)                  WHERE backups.size > 0 AND archive_backup.backup_id IS NULL
314                    GROUP BY
315                            backups.hostID,
316                            hosts.name,
317                            shares.name,
318                            backups.num,
319                            backups.shareid,
320                            backups.id,
321                            backups.type,
322                            backups.date,
323                            backups.size
324                    ORDER BY backups.date
325          };          };
326          my $sth = $dbh->prepare( $sql );          my $sth = $dbh->prepare( $sql );
327          my @ret;          my @ret;
# Line 265  sub getBackupsNotBurned() { Line 330  sub getBackupsNotBurned() {
330          while ( my $row = $sth->fetchrow_hashref() ) {          while ( my $row = $sth->fetchrow_hashref() ) {
331                  $row->{'age'} = sprintf("%0.1f", ( (time() - $row->{'date'}) / 86400 ) );                  $row->{'age'} = sprintf("%0.1f", ( (time() - $row->{'date'}) / 86400 ) );
332                  $row->{'size'} = sprintf("%0.2f", $row->{'size'} / 1024 / 1024);                  $row->{'size'} = sprintf("%0.2f", $row->{'size'} / 1024 / 1024);
333                    my (undef,undef,undef,undef,undef,undef,undef,$fs_size,undef,undef,undef,undef,undef) =
334                            stat( $Conf{InstallDir}.'/'.$Conf{GzipTempDir}.'/'.
335                                    getGzipName($row->{'host'}, $row->{share}, $row->{'backupnum'}));
336                    $row->{'fs_size'} = $fs_size;
337                  push @ret, $row;                  push @ret, $row;
338          }          }
339                
340          return @ret;                return @ret;      
341  }  }
342    
343  sub displayBackupsGrid()  sub displayBackupsGrid() {
344    {  
345        my $retHTML = "";          my $retHTML .= q{
346        my $addForm = 1;                  <form id="forma" method="POST" action=};
347                          $retHTML .= "\"".$MyURL."\"";
348        if ($addForm) {                  $retHTML .= q{?action=burn>
349            };
350    
351            $retHTML .= <<'EOF3';
352    <style>
353    <!--
354    
355              $retHTML .= <<EOF3;  div#fixedBox {
356            position: absolute;
357            bottom: 1em;
358            left: 0.5em;
359            padding: 0.5em;
360            width: 10em;
361            background: #e0f0e0;
362            border: 1px solid #00ff00;
363    }
364    @media screen {
365            div#fixedBox {
366                    position: fixed;
367            }
368            /* Don't do this at home */
369            * html {
370                    overflow-y: hidden;
371            }
372            * html body {
373                    overflow-y: auto;
374                    height: 100%;
375                    padding: 0 1em 0 12em;
376                    font-size: 100%;
377            }
378            * html div#fixedBox {
379                    position: absolute;    
380            }
381            /* All done. */
382    }
383    
384    #mContainer {
385            position: relative;
386            width: 100%;
387            height: 1.1em;
388            padding: 0px;
389            border: 1px solid #000000;
390    }
391    
392    #gradient {
393            position: absolute;
394            top: 0px;
395            left: 0px;
396            width: 100%;
397            height: 100%;
398            display: block;
399            background-color: #ffff00;
400    }
401    
402    #mask {
403            position: absolute;
404            top: 0px;
405            left: 0px;
406            width: 100%;
407            height: 100%;
408            display: block;
409            font-size: 1px;
410            background-color: #FFFFFF;
411            overflow: hidden;
412    }
413    
414    #progressIndicator {
415            position: absolute;
416            top: 0px;
417            left: 0px;
418            width: 100%;
419            height: 100%;
420            display: block;
421            font-weight: bold;
422            color: #404040;
423            font-size: 10pt;
424            text-align: center;
425    }
426    
427    -->
428    </style>
429  <script language="javascript" type="text/javascript">  <script language="javascript" type="text/javascript">
430  <!--  <!--
431    
432      function checkAll(location)  var debug_div = null;
433      {  var media_size = 4400 * 1024;
434        for (var i=0;i<document.forma.elements.length;i++)  
435        {  function debug(msg) {
436          var e = document.forma.elements[i];  //      return; // Disable debugging
437          if ((e.checked || !e.checked) && e.name != \'all\') {  
438              if (eval("document.forma."+location+".checked")) {          if (! debug_div) debug_div = document.getElementById('debug');
439                  e.checked = true;  
440              } else {          // this will create debug div if it doesn't exist.
441                  e.checked = false;          if (! debug_div) {
442              }                  debug_div = document.createElement('div');
443          }                  if (document.body) document.body.appendChild(debug_div);
444        }                  else debug_div = null;
445      }          }
446            if (debug_div) {
447                    debug_div.appendChild(document.createTextNode(msg));
448                    debug_div.appendChild(document.createElement("br"));
449            }
450    }
451    
452    
453    var element_id_cache = Array();
454    
455    function element_id(name,element) {
456            if (! element_id_cache[name]) {
457                    element_id_cache[name] = self.document.getElementById(name);
458            }
459            return element_id_cache[name];
460    }
461    
462    function checkAll(location) {
463            var len = element_id('forma').elements.length;
464            var check_all = element_id('allFiles');
465            var suma = 0;
466    
467            for (var i = 0; i < len; i++) {
468    
469                    var e = element_id('forma').elements[i];
470                    if (e.name != 'all' && e.name.substr(0,3) == 'fcb') {
471                            if (check_all.checked) {
472                                    var el = element_id("fss" + e.name.substr(3));
473                                    var size = parseInt(el.value) || 0;
474                                    debug('suma: '+suma+' size: '+size);
475                                    if ((suma + size) < media_size) {
476                                            suma += size;
477                                            e.checked = true;
478                                    } else {
479                                            break;
480                                    }
481                            } else {
482                                    e.checked = false;
483                            }
484                    }
485            }
486            update_sum(suma);
487    }
488    
489    function update_sum(suma) {
490            element_id('forma').totalsize.value = suma;
491            pbar_set(suma, media_size);
492            debug('total size: '+suma);
493    }
494    
495    function sumiraj(e) {
496            var suma = parseInt(element_id('forma').totalsize.value) || 0;
497            var len = element_id('forma').elements.length;
498            if (e) {
499                    var size = parseInt( element_id("fss" + e.name.substr(3)).value );
500                    if (e.checked) {
501                            suma += size;
502                    } else {
503                            suma -= size;
504                    }
505            } else {
506                    suma = 0;
507                    for (var i = 0; i < len; i++) {
508                            var e = element_id('forma').elements[i];
509                            if (e.name != 'all' && e.checked && e.name.substr(0,3) == 'fcb') {
510                                    var el = element_id("fss" + e.name.substr(3));
511                                    if (el && el.value) suma += parseInt(el.value) || 0;
512                            }
513                    }
514            }
515            update_sum(suma);
516            return suma;
517    }
518    
519    /* progress bar */
520    
521    var _pbar_width = 0;
522    var _pbar_warn = 10;    // change color in last 10%
523    
524    function pbar_reset() {
525            element_id("mask").style.left = "0px";
526            _pbar_width = element_id("mContainer").offsetWidth - 2;
527            element_id("mask").style.width = _pbar_width + "px";
528            element_id("progressIndicator").style.zIndex  = 10;
529            element_id("mask").style.display = "block";
530            element_id("progressIndicator").innerHTML = "0";
531    }
532    
533    function dec2hex(d) {
534            var hch="0123456789ABCDEF";
535            var a=d%16;
536            var q=(d-a)/16;
537            return hch.charAt(q)+hch.charAt(a);
538    }
539    
540    
541    function pbar_set(amount, max) {
542    
543            debug('pbar_set( '+amount+' , '+max+' )');
544    
545            curWidth = parseInt(element_id("mask").offsetWidth);
546            curLeft = parseInt(element_id("mask").offsetLeft);
547    
548    
549            var pcnt = Math.floor( amount * 100 / max );
550            var p90 = 100 - _pbar_warn;
551            var pcol = pcnt - p90;
552            if (pcol < _pbar_warn) {
553                    if (pcol < 0) pcol = 0;
554                    var e = element_id("submitBurner");
555                    if (e && e.disabled) {
556                            debug('enable_button');
557                            var a = e.getAttributeNode('disabled') || null;
558                            if (a) e.removeAttributeNode(a);
559                    }
560            } else if (pcol > _pbar_warn) {
561                    debug('disable button');
562                    pcol = _pbar_warn;
563                    var e = element_id("submitBurner");
564                    if (! e.disabled) e.disabled = true;
565            }
566            var col_g = Math.floor( ( _pbar_warn - pcol ) * 255 / _pbar_warn );
567            var col = '#ff' + dec2hex( col_g ) + '00';
568    
569            //debug('pcol: '+pcol+' g:'+col_g+' _pbar_warn:'+ _pbar_warn + ' color: '+col);
570            element_id("gradient").style.backgroundColor = col;
571    
572            var size = parseInt( _pbar_width * amount / max );
573    
574            curWidth = _pbar_width - size;
575            curLeft = size ;
576    
577            //debug('size: '+size+' curWidth '+curWidth+' curLeft: '+curLeft);
578    
579            element_id("progressIndicator").innerHTML = pcnt + '%';
580            //element_id("progressIndicator").innerHTML = amount;
581    
582            if (curLeft > _pbar_width) {
583                    element_id("mask").style.display = "none";
584                    return;
585            } else {
586                    element_id("mask").style.display = "";
587            }
588    
589            //if(parseInt(element_id("mask").offsetWidth)>10)
590            element_id("mask").style.width = curWidth + "px";
591            element_id("mask").style.left = curLeft + "px";
592    
593    }
594    
595    if (!self.body) self.body = new Object();
596    self.onload = self.document.onload = self.body.onload = function() {
597            pbar_reset();
598            sumiraj();
599    }
600    
601  //-->  //-->
602  </script>        </script>
603    <div id="fixedBox">
604    
605    Size:
606    <input type="text" name="totalsize" size="7" readonly>
607    
608    <div id="mContainer">
609            <div id="gradient"></div>
610            <div id="mask"></div>
611            <div id="progressIndicator">&nbsp;</div>
612    </div>
613    
614    <br/>
615    Note:
616    <br/>
617    <textarea name="note" cols="10" rows="5">
618    </textarea>
619    <br/>
620    <input type="submit" id="submitBurner" value="Burn selected" name="submitBurner">
621    
622    </div>
623    <div id="debug" style="float: right; width: 10em; border: 1px #ff0000 solid; background-color: #ffe0e0; -moz-opacity: 0.7;">
624    no debug output yet
625    </div>
626  EOF3  EOF3
627                $retHTML .= q{<form name="forma" method="GET" action="}."$MyURL"."?action=burn\"";          $retHTML .= q{
628                $retHTML.= q{<input type="hidden" value="burn" name="action">};                          <input type="hidden" value="burn" name="action">
629                $retHTML .= q{<input type="hidden" value="results" name="search_results">};                          <input type="hidden" value="results" name="search_results">
630          }                          <table style="fview" border="0" cellspacing="0" cellpadding="2">
631          $retHTML .= qq{                          <tr class="tableheader">
632                  <table style="fview" border="1" cellspacing="0" cellpadding="3">                          <td class="tableheader">
633                  <tr class="tableheader">                                  <input type="checkbox" name="allFiles" id="allFiles" onClick="checkAll('allFiles');">
634          };                          </td>
635                            <td align="center">Share</td>
636                            <td align="center">Backup no</td>
637                            <td align="center">Type</td>
638                            <td align="center">date</td>
639                            <td align="center">age/days</td>
640                            <td align="center">size/MB</td>
641                            <td align="center">gzip size</td>
642                            </tr>
643    
         if ($addForm) {  
             $retHTML .= "<td class=\"tableheader\"><input type=\"checkbox\" name=\"allFiles\" onClick=\"checkAll('allFiles');\"></td>";  
         }  
         $retHTML .=  qq{  
                 <td align="center">Host</td>  
                 <td align="center">Backup no</td>  
                 <td align="center">Type</td>  
                 <td align="center">date</td>  
                 <td align="center">age/days</td>  
                 <td align="center">size/MB</td>  
                 </tr>  
644          };          };
645    
646          my @backups = getBackupsNotBurned();          my @color = (' bgcolor="#e0e0e0"', '');
         my $backup;  
647    
648          if ($addForm) {          my $i = 0;
649                  $retHTML .= qq{          my $host = '';
                         <tr><td colspan=7 style="tableheader">  
                         <input type="submit" value="Burn selected backups on medium" name="submitBurner">  
                         </td></tr>  
                 };  
         }  
650    
651          foreach $backup(@backups) {          foreach my $backup ( getBackupsNotBurned() ) {
652    
653                    if ($host ne $backup->{'host'}) {
654                            $i++;
655                            $host = $backup->{'host'};
656                    }
657                  my $ftype = "";                  my $ftype = "";
               
                 $retHTML .= "<tr>";  
                 if ($addForm) {  
                         $retHTML .= '<td class="fview"><input type="checkbox" name="fcb' .  
                                 $backup->{'hostid'}.'_'.$backup->{'backupnum'} .  
                                 '" value="' . $backup->{'hostid'}.'_'.$backup->{'backupnum'} .  
                                 '"></td>';  
                 }            
               
                 $retHTML .= '<td class="fviewborder">' . $backup->{'host'} . '</td>' .  
                         '<td class="fviewborder">' . $backup->{'backupnum'} . '</td>' .  
                         '<td class="fviewborder">' . $backup->{'type'} . '</td>' .  
                         '<td class="fviewborder">' . epoch_to_iso( $backup->{'date'} ) . '</td>' .  
                         '<td class="fviewborder">' . $backup->{'age'} . '</td>' .  
                         '<td class="fviewborder">' . $backup->{'size'} . '</td>' .  
                         '</tr>';  
         }  
658    
659          $retHTML .= "</table>";                  $retHTML .=
660                            '<tr' . $color[$i %2 ] . '>
661                            <td class="fview">';
662                    # FIXME
663                    $backup->{'fs_size'} = int($backup->{'size'} * 1024);
664                    if (($backup->{'fs_size'} || 0) > 0) {
665                            $retHTML .= '
666                            <input type="checkbox" name="fcb' .
667                            $backup->{'hostid'}.'_'.$backup->{'backupnum'} .
668                            '" value="' . $backup->{'hostid'}.'_'.$backup->{'backupnum'} .
669                            '" onClick="sumiraj(this);">';
670                    }
671                    $retHTML .=
672                            '</td>' .
673                            '<td align="right">' . $backup->{'host'} . ':' . $backup->{'share'} . '</td>' .
674                            '<td align="center">' . $backup->{'backupnum'} . '</td>' .
675                            '<td align="center">' . $backup->{'type'} . '</td>' .
676                            '<td align="center">' . epoch_to_iso( $backup->{'date'} ) . '</td>' .
677                            '<td align="center">' . $backup->{'age'} . '</td>' .
678                            '<td align="right">' . $backup->{'size'} . '</td>' .
679                            '<td align="right">' . $backup->{'fs_size'} .
680                            '<input type="hidden" iD="fss'.$backup->{'hostid'}.'_'.$backup->{'backupnum'} . '" value="'. $backup->{'fs_size'} .'"></td>' .
681    
682          if ($addForm) {                          "</tr>\n";
                 $retHTML .= "</form>";  
683          }          }
684    
685            $retHTML .= "</table>";
686            $retHTML .= "</form>";
687                
688          return $retHTML;          return $retHTML;
689  }        }      

Legend:
Removed from v.88  
changed lines
  Added in v.137

  ViewVC Help
Powered by ViewVC 1.1.26