/[webpac]/trunk/index_DBI.pm
This is repository of my old source code which isn't updated any more. Go to git.rot13.org for current projects!
ViewVC logotype

Diff of /trunk/index_DBI.pm

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 11 by dpavlin, Wed Jan 22 20:24:32 2003 UTC revision 50 by dpavlin, Sun Jun 1 13:46:42 2003 UTC
# Line 5  Line 5 
5  package index_DBI;  package index_DBI;
6  use strict qw(vars);  use strict qw(vars);
7  use vars qw($Count);  use vars qw($Count);
8    use HTML::Entities;
9    
10  use DBI;  use DBI;
11    
12  my %Table;      # index tables which where visited in this run  my %Table;      # index tables which where visited in this run
13    my %sth_cache;  # cache prepared statements
14    
15  sub new {  sub new {
16          my $class = shift;          my $class = shift;
17          my $self = {};          my $self = {};
18          bless($self, $class);          bless($self, $class);
19    
20          # FIX: config params          my $dbd = shift || die "need dbi_dbd= in [global] section of configuration file";
21          $self->{dbh} = DBI->connect("DBI:Pg:dbname=webpac","dpavlin","") || die $DBI::errstr;          my $dsn = shift || die "need dbi_dsn= in [global] section of configuration file";
22            my $user = shift || die "need dbi_user= in [global] section of configuration file";
23            my $passwd = shift || die "need dbi_passwd= in [global] section of configuration file";
24    
25            $self->{dbh} = DBI->connect("DBI:$dbd:$dsn",$user,$passwd) || die $DBI::errstr;
26          # begin transaction          # begin transaction
27          $self->{dbh}->begin_work || die $self->{dbh}->errstr();          $self->{dbh}->begin_work || die $self->{dbh}->errstr();
28    
# Line 30  sub delete_and_create { Line 36  sub delete_and_create {
36    
37          my $field = shift;          my $field = shift;
38    
39    #print "#### delete_and_create($field)\n";
40    
41          $self->{dbh}->commit;          $self->{dbh}->commit;
         $self->{dbh}->begin_work;  
42    
43          my $sql = "select count(*) from $field";          my $sql = "select count(*) from $field";
44          my $sth = $self->{dbh}->prepare($sql) || die $self->{dbh}->errstr();          my $sth = $self->{dbh}->prepare($sql) || die $self->{dbh}->errstr();
45  # FIX: this is not a good way to check if table exists!  # FIX: this is not a good way to check if table exists!
46          if (1 || $sth->execute() && $sth->fetchrow_hashref) {          if ($sth->execute() && $sth->fetchrow_hashref) {
47                  my $sql = "drop table $field";                  my $sql = "drop table $field";
48  #               my $sth = $self->{dbh}->do($sql) || die "SQL: $sql ".$self->{dbh}->errstr();                  $self->{dbh}->begin_work;
49                    my $sth = $self->{dbh}->do($sql) || die "SQL: $sql ".$self->{dbh}->errstr();
50                    $self->{dbh}->commit;
51          }          }
52          $sql = "create table $field (          $sql = "create table $field (
53                          item varchar(255),                          item varchar(255),
54                          ident varchar(255),                          ident varchar(255),
55                          count int,                          count int,
56                            ord int,
57                          primary key (item,ident)                          primary key (item,ident)
58                  )";                  )";
 #       $sth = $self->{dbh}->do($sql) || die "SQL: $sql ".$self->{dbh}->errstr();  
         $sth = $self->{dbh}->do($sql) || warn "SQL: $sql ".$self->{dbh}->errstr();  
59    
60            $self->{dbh}->begin_work;
61            $sth = $self->{dbh}->do($sql); # || warn "SQL: $sql ".$self->{dbh}->errstr();
62          $self->{dbh}->commit;          $self->{dbh}->commit;
63    
64          $self->{dbh}->begin_work;          $self->{dbh}->begin_work;
65  }  }
66    
# Line 57  sub insert { Line 68  sub insert {
68          my $self = shift;          my $self = shift;
69    
70          my $field = shift;          my $field = shift;
71          my $index_data = shift;          my $index_data = shift || print STDERR "\$index->insert($field,NULL,...)";
72          my $ident = shift;      # e.g. library id          my $ident = shift || '';        # e.g. library id
73    
74          if (! $index_data) {          if (! $index_data) {
75                  print STDERR "\$index->insert() -- no value to insert\n";                  print STDERR "\$index->insert() -- no value to insert\n";
# Line 67  sub insert { Line 78  sub insert {
78    
79          if (! $Table{$field}) {          if (! $Table{$field}) {
80                  $self->delete_and_create($field);                  $self->delete_and_create($field);
81    
82                    my $sql = "select item from $field where upper(item)=upper(?)";
83                    $sth_cache{$field."select"} = $self->{dbh}->prepare($sql) || die $self->{dbh}->errstr();
84    
85                    $sql = "insert into $field (item,ident,count) values (?,?,?)";
86                    $sth_cache{$field."insert"} = $self->{dbh}->prepare($sql) || die $self->{dbh}->errstr();
87    
88                    $sql = "update $field set count = count + 1 where item = ? and ident = ?";
89                    $sth_cache{$field."update"} = $self->{dbh}->prepare($sql) || die $self->{dbh}->errstr();
90          }          }
91          $Table{$field}++;          $Table{$field}++;
92    
93          my $sql = "select item from $field where upper(item)=upper(?)";          $sth_cache{$field."select"}->execute($index_data) || die "cache: $field select; ".$self->{dbh}->errstr();
94          my $sth = $self->{dbh}->prepare($sql) || die $self->{dbh}->errstr();          if (! $sth_cache{$field."select"}->fetchrow_hashref) {
95          $sth->execute($index_data) || die "sql: $sql; ".$self->{dbh}->errstr();                  $index_data = substr($index_data,0,255);
96          if (! $sth->fetchrow_hashref) {                  $sth_cache{$field."insert"}->execute($index_data,$ident,1) || die "cache: $field insert; ".$self->{dbh}->errstr();
                 my $sql = "insert into $field (item,ident,count) values (?,?,?)";  
                 my $sth = $self->{dbh}->prepare($sql) || die $self->{dbh}->errstr();  
                 $sth->execute($index_data,$ident,1) || die "sql: $sql; ".$self->{dbh}->errstr();  
97  #print stderr "in index: $index_data\n";  #print stderr "in index: $index_data\n";
98          } else {          } else {
99                  my $sql = "update $field set count = count + 1 where item = ? and ident = ?";                  $sth_cache{$field."update"}->execute($index_data,$ident) || die "cache: $field update; ".$self->{dbh}->errstr();
                 my $sth = $self->{dbh}->prepare($sql) || die $self->{dbh}->errstr();  
                 $sth->execute($index_data,$ident) || die "sql: $sql; ".$self->{dbh}->errstr();  
100          }          }
101  }  }
102    
# Line 91  sub check { Line 106  sub check {
106          my $field = shift;          my $field = shift;
107    
108          my $sql = "select count(*) from $field";          my $sql = "select count(*) from $field";
109          return $self->{dbh}->do($sql);  
110            my $sth = $self->{dbh}->prepare($sql) || die $self->{dbh}->errstr();
111            $sth->execute() || die "sql: $sql; ".$self->{dbh}->errstr();
112    
113            my ($total) = $sth->fetchrow_array();
114    
115            return $total;
116  }  }
117    
118    
# Line 102  sub fetch { Line 123  sub fetch {
123          my $what = shift || 'item';     # 'item,ident'          my $what = shift || 'item';     # 'item,ident'
124          my $where = shift;          my $where = shift;
125    
126            my $from_ord = shift || 0;
127            my $rows = shift || 10;
128    
129          my @sql_args;          my @sql_args;
130    
131          my $sql = "select $what from $field";          my $sql = "select $what,ord from $field";
132    
133          if ($where) {          if ($where) {
134                  $sql .= " where upper(item) like upper(?)||'%'";                  my $sql2 = " select ord from $field where upper($what) like upper(?)||'%'";
135                  push @sql_args,$where;                  my $sth = $self->{dbh}->prepare($sql2) || die "sql2: $sql2; ".$self->{dbh}->errstr();
136    
137                    $sth->execute($where) || die "sql2: $sql2; ".$self->{dbh}->errstr();
138                    if (my $row = $sth->fetchrow_hashref) {
139                            $from_ord += $row->{ord} - 1;
140                    }
141          }          }
142          $sql .= " order by item";          $sql .= " order by ord limit $rows offset $from_ord";
143    
144          my $sth = $self->{dbh}->prepare($sql) || die "sql: $sql; ".$self->{dbh}->errstr();          my $sth = $self->{dbh}->prepare($sql) || die "prepare: $sql; ".$self->{dbh}->errstr();
145          $sth->execute(@sql_args) || die "sql: $sql; ".$self->{dbh}->errstr();          $sth->execute() || die "execute: $sql; ".$self->{dbh}->errstr();
146          my @arr;          my @arr;
147          while (my $row = $sth->fetchrow_hashref) {          while (my $row = $sth->fetchrow_hashref) {
148                    $row->{item} = HTML::Entities::encode($row->{item},'<>&"');
149                  push @arr,$row;                  push @arr,$row;
150          }          }
151          return @arr;          return @arr;
# Line 123  sub fetch { Line 154  sub fetch {
154  sub close {  sub close {
155          my $self = shift;          my $self = shift;
156    
157    
158            # re-create ord column (sorted order) in table
159            sub create_ord {
160    
161                    my $table = shift;
162    
163                    $self->{dbh}->begin_work || die $self->{dbh}->errstr();
164    
165                    my $sql = "select oid from $table order by upper(item)";
166                    my $sth = $self->{dbh}->prepare($sql) || die "sql: $sql; ".$self->{dbh}->errstr();
167                    $sql = "update $table set ord=? where oid=?";
168                    my $sth_update = $self->{dbh}->prepare($sql) || die "sql: $sql; ".$self->{dbh}->errstr();
169                    $sth->execute() || die "sql: $sql; ".$self->{dbh}->errstr();
170                    my $ord = 1;
171                    while (my $row = $sth->fetchrow_hashref) {
172                            $sth_update->execute($ord++,$row->{oid});
173                    }
174    
175                    $self->{dbh}->commit || die $self->{dbh}->errstr();
176            }
177            #--- end of sub
178    
179          if ($self->{dbh}) {          if ($self->{dbh}) {
180    
181                    # commit
182                  $self->{dbh}->commit || die $self->{dbh}->errstr();                  $self->{dbh}->commit || die $self->{dbh}->errstr();
183    
184                    foreach my $table (keys %Table) {
185    # FIX
186    print STDERR "creating ord for $table...\n";
187                            create_ord($table);
188                            undef $sth_cache{$table."select"};
189                            undef $sth_cache{$table."insert"};
190                            undef $sth_cache{$table."update"};
191                    }
192    
193                  $self->{dbh}->disconnect;                  $self->{dbh}->disconnect;
194                  undef $self->{dbh};                  undef $self->{dbh};
195          }          }

Legend:
Removed from v.11  
changed lines
  Added in v.50

  ViewVC Help
Powered by ViewVC 1.1.26