/[Grep]/lib/Grep/Search.pm
This is repository of my old source code which isn't updated any more. Go to git.rot13.org for current projects!
ViewVC logotype

Diff of /lib/Grep/Search.pm

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 47 by dpavlin, Wed Feb 21 03:04:48 2007 UTC revision 60 by dpavlin, Wed Feb 21 19:31:26 2007 UTC
# Line 11  my $index_path = Jifty::Util->app_root . Line 11  my $index_path = Jifty::Util->app_root .
11    
12  my ( $analyzer, $store, $writer );  my ( $analyzer, $store, $writer );
13    
14  my $debug = 0;  my $debug = 1;
15    my $create;
16    
17  sub reopen_index {  sub create {
18          my $self = shift;  
19            if (defined( $create )) {
20                    Jifty->log->debug("using previous create $create");
21                    return $create;
22            }
23    
         $analyzer ||= new Lucene::Analysis::Standard::StandardAnalyzer();  
         my $create = 0;  
24          if (! -e "$index_path/segments") {          if (! -e "$index_path/segments") {
25                  $create = 1;                  $create = 1;
26                  Jifty->log->debug("creating index $index_path") unless ($store);                  Jifty->log->debug("create index $index_path");
27          } else {          } else {
28                  Jifty->log->debug("using index: $index_path") unless ($store);                  $create = 0;
29                    Jifty->log->debug("open index: $index_path");
30          }          }
31          $store ||= Lucene::Store::FSDirectory->getDirectory( $index_path, $create );          return $create;
32    }
33    
34    sub analyzer {
35            my $self = shift;
36            $analyzer ||= new Lucene::Analysis::Standard::StandardAnalyzer();
37            return $analyzer;
38    }
39    
40    sub store {
41            my $self = shift;
42    
43            $store ||= Lucene::Store::FSDirectory->getDirectory( $index_path, $self->create );
44            return $store;
45    }
46    
47    sub writer {
48            my $self = shift;
49            $writer ||= new Lucene::Index::IndexWriter( $self->store, $self->analyzer, $self->create );
50            return $writer;
51  }  }
52    
53  =head2 add  =head2 add
# Line 40  sub add { Line 63  sub add {
63    
64          die "record not Jifty::Record but ", ref $i unless ($i->isa('Jifty::Record'));          die "record not Jifty::Record but ", ref $i unless ($i->isa('Jifty::Record'));
65    
         $self->reopen_index;  
   
         $writer ||= new Lucene::Index::IndexWriter( $store, $analyzer, 0 );  
   
66          my $pk = { $i->primary_keys };          my $pk = { $i->primary_keys };
67    
68          my $doc = new Lucene::Document;          my $doc = new Lucene::Document;
# Line 55  sub add { Line 74  sub add {
74                  my $v = $i->$c;                  my $v = $i->$c;
75    
76                  if ( ref($v) ne '' ) {                  if ( ref($v) ne '' ) {
77                          if ($i->$c->can('id')) {  
78                                  $v = $i->$c->id;                          foreach my $f_c ( qw/id name title/ ) {
79                                  warn "  # $c = $v [id]\n" if ($debug);                                  if ( $i->$c->can( $f_c ) ) {
80                                  $doc->add(Lucene::Document::Field->Keyword( $c, $v ));                                          my $f_v = $i->$c->$f_c || $i->$c->{values}->{ $f_c };
81                          } elsif ($v->isa('Jifty::DateTime')) {                                          my $col = $c . '_' . $f_c;
82                                            if ( $f_v ) {
83                                                    warn "  # $col = $f_v\n" if ($debug);
84                                                    $doc->add(Lucene::Document::Field->Text( $col, $f_v ));
85                                            } else {
86                                                    warn "  . $col is NULL\n" if ($debug);
87                                            }
88                                    }
89                            }
90    
91                            if ($v->isa('Jifty::DateTime')) {
92                                  warn "  d $c = $v\n" if ($debug);                                  warn "  d $c = $v\n" if ($debug);
93                                  $doc->add(Lucene::Document::Field->Keyword( $c, "$v" ));                                  $doc->add(Lucene::Document::Field->Keyword( $c, "$v" ));
94                          } else {                          } else {
# Line 77  sub add { Line 106  sub add {
106                          warn "  * $c = $v\n" if ($debug);                          warn "  * $c = $v\n" if ($debug);
107                  } else {                  } else {
108                          $doc->add(Lucene::Document::Field->Text( $c, $v ));                          $doc->add(Lucene::Document::Field->Text( $c, $v ));
109                          warn "  + $c = $v\n" if ($debug);                          warn "  + $c = ", $self->snippet( 50, $v ), "\n" if ($debug);
110                  }                  }
111          }          }
112    
113          $writer->addDocument($doc);          $self->writer->addDocument($doc);
114    
115          Jifty->log->debug("added ", $i->id, " to index");          Jifty->log->debug("added ", $i->id, " to index");
116  }  }
# Line 97  sub collection { Line 126  sub collection {
126    
127          my $q = shift or die "no q?";          my $q = shift or die "no q?";
128    
129          $self->reopen_index;          return if ( $self->create );
130    
131          my $searcher = new Lucene::Search::IndexSearcher($store);          my $searcher = new Lucene::Search::IndexSearcher($self->store);
132          my $parser = new Lucene::QueryParser("content", $analyzer);          my $parser = new Lucene::QueryParser("content", $self->analyzer);
133          my $query = $parser->parse( $q );          my $query = $parser->parse( $q );
134    
135          Jifty->log->debug("searching for '$q'");          Jifty->log->debug("searching for '$q' using ", $query->toString);
136    
137          my $hits = $searcher->search($query);          my $hits = $searcher->search($query);
138          my $num_hits = $hits->length();          my $num_hits = $hits->length();
# Line 156  sub finish { Line 185  sub finish {
185                  $writer->close;                  $writer->close;
186          }          }
187          undef $writer;          undef $writer;
188            undef $create;
189    
190            return;
191  }  }
192    
193    =for TODO
194    
195  sub _signal {  sub _signal {
196          my $s = shift;          my $s = shift;
197          warn "catched SIG $s\n";          warn "catched SIG $s\n";
# Line 169  $SIG{'__DIE__'} = \&_signal; Line 203  $SIG{'__DIE__'} = \&_signal;
203  $SIG{'INT'} = \&_signal;  $SIG{'INT'} = \&_signal;
204  $SIG{'QUIT'} = \&_signal;  $SIG{'QUIT'} = \&_signal;
205    
206    =cut
207    
208    =head2 snippet
209    
210      my $short = $self->snippet( 50, $text );
211    
212    
213    =cut
214    
215    sub snippet {
216            my $self = shift;
217    
218            my $len = shift or die "no len?";
219            my $m = join(" ", @_);
220    
221            $m =~ s/\s+/ /gs;
222    
223            if (length($m) > $len) {
224                    return substr($m,0,$len) . '...';
225            } else {
226                    return $m;
227            }
228    }
229    
230  1;  1;
Legend:
Removed from v.47  
changed lines
  Added in v.60
  ViewVC Help
Powered by ViewVC 1.1.26