/[Grep]/lib/Grep/Action/Fetch.pm
This is repository of my old source code which isn't updated any more. Go to git.rot13.org for current projects!
ViewVC logotype

Diff of /lib/Grep/Action/Fetch.pm

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 42 by dpavlin, Tue Feb 20 12:26:14 2007 UTC revision 46 by dpavlin, Tue Feb 20 22:44:59 2007 UTC
# Line 45  use Jifty::Action schema { Line 45  use Jifty::Action schema {
45  #               available are qw/result result_short/;  #               available are qw/result result_short/;
46                  available are qw/long short title/;                  available are qw/long short title/;
47    
         param publish =>  
                 label is 'In which queue?';  
   
48  };  };
49    
50  =head2 take_action  =head2 take_action
# Line 64  sub take_action { Line 61  sub take_action {
61    
62          my $feed = Grep::Model::Feed->new();          my $feed = Grep::Model::Feed->new();
63          my $feed_id = $self->argument_value('feed');          my $feed_id = $self->argument_value('feed');
         my $publish = $self->argument_value('publish');  
64          my $q = $self->argument_value('q');          my $q = $self->argument_value('q');
65            my $user_id = Jifty->web->current_user->id;
66    
67          if (! $feed_id) {          if (! $feed_id) {
68                  $self->result->message("Need feed ID");                  $self->result->message("Need feed ID");
# Line 79  sub take_action { Line 76  sub take_action {
76                  return 0;                  return 0;
77          }          }
78    
79            my $message;
80          my $uri = $feed->uri;          my $uri = $feed->uri;
81          if ($uri =~ m/%s/) {          if ($uri =~ m/%s/) {
82                  $uri = $feed->search_uri( $q );                  $uri = $feed->search_uri( $q );
83                  Jifty->log->info("Searching ", $feed->title, " at $uri");                  $message = 'Searching';
84          } else {          } else {
85                  Jifty->log->info("Fetching ", $feed->title, " at $uri");                  $message = 'Fetching';
86          }          }
87            $message .= ' ' . $feed->title . " at $uri";
88    
89          my $items = Grep::Model::ItemCollection->new();          Jifty->log->info( $message );
90    
91          sub abort {          my $items = Grep::Model::ItemCollection->new();
                 my $message = join(" ", @_);  
                 if ( $publish ) {  
                         Grep::Event::Result->new({  
                                 q => $q, coll => $items,  
                                 message => $message, class => 'error',  
                         })->publish;  
                         return;  
                 } else {  
                         $self->result->error( $message );  
                         return;  
                 }  
         }  
92    
93          my $ua = LWP::UserAgent->new;          my $ua = LWP::UserAgent->new;
94          $ua->default_header( 'Cookie' => $feed->cookie );          $ua->default_header( 'Cookie' => $feed->cookie );
95          my $r = $ua->get( $uri );          my $r = $ua->get( $uri );
96          return abort(          return $self->result->error(
97                  $feed->title . " returned " . $r->status_line . " for $uri\n"                  $feed->title . " returned " . $r->status_line . " for $uri\n"
98          ) unless ( $r->is_success );          ) unless ( $r->is_success );
99    
100          my $content = $r->content;          my $content = $r->content;
101    
102          return abort( "No content returned from $uri" ) unless length( $content ) > 1;          return $self->result->error( "No content returned from $uri" ) unless length( $content ) > 1;
103    
104    
105          my $xml_feed = XML::Feed->parse( \$content )          my $xml_feed = XML::Feed->parse( \$content )
106                  or return abort( $feed->title, " returned ", XML::Feed->errstr, " for $uri" );                  or return $self->result->error( $feed->title, " returned ", XML::Feed->errstr, " for $uri" );
107    
108          warn "getting entries from ", $xml_feed->title, "\n";          warn "getting entries from ", $xml_feed->title, "\n";
109    
110            my $new;
111    
112          for my $entry ($xml_feed->entries) {          for my $entry ($xml_feed->entries) {
113                  my $i = Grep::Model::Item->new();                  my $i = Grep::Model::Item->new();
114    
115                  $i->load_or_create(                  my ($ok,$msg) = $i->load_or_create(
116                          in_feed => $feed,                          in_feed => $feed,
117                          title => $entry->title,                          title => $entry->title,
118                          link => $entry->link,                          link => $entry->link,
# Line 135  sub take_action { Line 124  sub take_action {
124                          modified => $entry->modified ? $entry->modified->strftime("%Y-%m-%d %H:%M:%S") : undef,                          modified => $entry->modified ? $entry->modified->strftime("%Y-%m-%d %H:%M:%S") : undef,
125                  );                  );
126    
127                  if ( $i->id ) {                  if ( $ok ) {
128                            Jifty->log->debug("item ", $i->id, ": $msg");
129                          $items->add_record( $i );                          $items->add_record( $i );
130                            # count new objects
131                          Jifty->log->debug("added ", $i->id, " to collection");                          $new++ if ($msg !~ m/^Found/);
132                  } else {                  } else {
133                          warn "can't add entry ", dump( $entry ) unless ( $i->id );                          warn "can't add entry ", dump( $entry ), "\n";
134                  }                  }
135    
136          }          }
137    
138          if ( my $count = $items->count ) {          if ( my $count = $items->count ) {
139    
140                  my $message = "$count results for '$q' in " . $feed->title;                  # construct a proper sentence :-)
141                    my $message = $count
142                            . ( $new == $count ? ' new' : '' )
143                            . ( $new == 0 ? ' old' : '' )
144                            . ' results '  
145                            . ( $new && $new < $count ? "of which $new new " : '' )
146                            . "for '$q' in " . $feed->title;
147            
148                  $self->result->message( $message );                  $self->result->message( $message );
149    
150                  if ( $publish ) {                  $self->result->content( items => $items );
                         Grep::Event::Result->new({  
                                 q => $q, coll => $items,  
                                 item_fragment => $self->argument_value('item_fragment'),  
                                 message => $message, class => 'message',  
                         })->publish;  
                         Jifty->log->debug( "$count items published for '$q'" );  
                 } else {  
                         $self->result->content( items => $items );  
                         Jifty->log->debug( "$count items for '$q' found" );  
                 }  
151                  $self->result->content( count => $items->count );                  $self->result->content( count => $items->count );
152    
153          } else {          } else {
154                  return abort( "No results for '$q' in " . $feed->title );                  return $self->result->error( "No results for '$q' in " . $feed->title );
155          }          }
156    
157          return $items;          return $items;
Legend:
Removed from v.42  
changed lines
  Added in v.46
  ViewVC Help
Powered by ViewVC 1.1.26