/[webpac]/trunk/parse_format.pm
This is repository of my old source code which isn't updated any more. Go to git.rot13.org for current projects!
ViewVC logotype

Diff of /trunk/parse_format.pm

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 62 by dpavlin, Fri Jul 4 20:11:48 2003 UTC revision 488 by dpavlin, Wed Sep 29 17:22:24 2004 UTC
# Line 3  Line 3 
3  # parse_format(...)  # parse_format(...)
4  #  #
5    
   
6  sub parse_format {  sub parse_format {
7          my $type = shift || die "parset_format must be called with type!";          my $type = shift || die "parset_format must be called with type!";
8          my $format = shift || die "parse_format must be called with format!";          my $format = shift || die "parse_format must be called with format!";
# Line 16  sub parse_format { Line 15  sub parse_format {
15                  return parse_excel_format($format,$row,$i,$codepage);                  return parse_excel_format($format,$row,$i,$codepage);
16          } elsif ($type eq "marc") {          } elsif ($type eq "marc") {
17                  return parse_iso_format($format,$row,$i,$codepage,'marc_sf');                  return parse_iso_format($format,$row,$i,$codepage,'marc_sf');
18            } elsif ($type eq "feed") {
19                    return parse_feed_format($format,$row,$i,$codepage);
20          }          }
21  }  }
22    
# Line 35  sub parse_iso_format { Line 36  sub parse_iso_format {
36          my $out;          my $out;
37          my $out_swish;          my $out_swish;
38    
         my $prefix = "";  
         if ($format =~ s/^([^\d]+)//) {  
                 $prefix = $1;  
         }  
   
39          my $display;          my $display;
40          my $swish;          my $swish;
41    
42          sub cnv_cp {          sub cnv_cp {
43                  my $tmp = shift;                  my $codepage = shift;
44                    my $tmp = shift || return;
45                  if ($codepage) {                  if ($codepage) {
46                          $tmp = $codepage->convert($tmp) || print STDERR "$1$2 = '$tmp' can't convert";                          $tmp = $codepage->convert($tmp) || print STDERR "iso: '$tmp' can't convert\n";
47                  }                  }
48                  return $tmp;                  return $tmp;
49          }          }
50    
51          while ($format) {          # if format doesn't exits, store it in cache
52  #print STDERR "\n#### $format";          if (! defined($cache->{format}->{$format})) {
53                  # this is EBSCO special to support numeric subfield in  #               print STDERR "parsing format for '$format'\n";
54                  # form of 856#3                  my @fmt;
55                  if ($format =~ s/^(\d\d\d)#*(\w?)//) {  
56                          my $tmp = get_sf($row,$1,$2,$i);                  my $f = $format;
57                          if ($tmp) {  
58                                  $display .= $prefix.cnv_cp($tmp);                  my $eval;
59                    $eval = $1 if ($f =~ s/^eval{([^}]+?)}//);
60    
61                    if ($f =~ s/^([^\d]+)//) {
62                            if ($f) {       # there is more to parse
63                                    push @fmt,$1;
64                            } else {
65                                    @fmt = ('',$1,undef,'');
66    #print STDERR "just one field: $1\n";
67                            }
68                    } else {
69                            push @fmt,'';
70                    }
71    
72                    while ($f) {
73    #       print STDERR "\n#### $f";
74                            # this is EBSCO special to support numeric subfield in
75                            # form of 856#3
76                            if ($f =~ s/^(\d\d\d)#*(\w?)//) {
77                                    push @fmt,$1;
78                                    if ($2) {
79                                            push @fmt,$2;
80                                    } else {
81                                            push @fmt,undef;
82                                    }
83                            # this might be our local scpeciality -- fields 10 and 11
84                            # (as opposed to 010 and 011) so they are strictly listed
85                            # here
86                            } elsif ($f =~ s/^(1[01]\w?)//) {
87                                    push @fmt,$1;
88                                    push @fmt,undef;
89                            } elsif ($f =~ s/^mfn//i) {
90                                    push @fmt,'mfn';
91                                    push @fmt,'';
92                            } elsif ($f =~ s/^([^\d]+)(\d{0,3})/$2/) {
93                                    # still prefix?
94                                    if ($#fmt == 0) {
95                                            $fmt[0] .= $1;
96                                    } else {
97                                            push @fmt,$1;
98                                    }
99                            } elsif ($f =~ s/^([^\d]+\d{0,2})//) {
100                                    if ($#fmt == 0) {
101                                            $fmt[0] .= $1;
102                                    } else {
103                                            push @fmt,$1;
104                                    }
105                            } elsif ($f =~ s/^(\d{1,2})//) {
106                                    if ($#fmt == 0) {
107                                            $fmt[0] .= $1;
108                                    } else {
109                                            push @fmt,$1;
110                                    }
111                            } else {
112                                    print STDERR "unparsed format: $f\n";
113                                    $f = "";
114                            }
115                    }
116                    push @fmt,'' if ($#fmt % 3 != 0);       # add empty suffix
117    
118                    $cache->{format_eval}->{$format} = $eval; # store eval string (if any)
119    
120                    $cache->{format}->{$format} = \@fmt;
121                    
122    #               print STDERR "storing format for '$format': [",join("|",@fmt),"]\n";
123    #               print STDERR "storing format for '$format':",Dumper(@fmt),"\n";
124    #               print STDERR Dumper($cache->{format}->{$format});
125            }
126    
127            # now produce actual record
128            my $tmp = $cache->{format}->{$format} || die "no format cache for '$format'";
129            my @fmt = @{$tmp};
130    #       print STDERR "using format for '$format':",Dumper(@fmt),"\n";
131    #       print STDERR "tmp ",Dumper($tmp);
132    #       print STDERR "cache: ",Dumper($cache->{format}->{$format});
133    
134            # prefix
135            my $prefix = shift @fmt;
136            my $sufix;
137            while($#fmt > 1) {
138                    my $f = shift @fmt || die "BUG: field name can't be empty!";
139                    my $sf = shift @fmt;
140    
141                    if ($f eq 'mfn' && $i == 0) {
142                            $display .= $sufix if ($display);
143                            $display .= $row->{mfn};
144                    } else {
145                            my $val = &$func($row,$f,$sf,$i);
146                            if ($val) {
147    #                               print STDERR "val: $val\n";
148                                    my $tmp = cnv_cp($codepage,$val);
149                                    if ($display) {
150                                            $display .= $sufix.$tmp;
151                                    } else {
152                                            $display = $tmp;
153                                    }
154                                  $swish .= $tmp." ";                                  $swish .= $tmp." ";
 #print STDERR " == $tmp";  
155                          }                          }
156                          $prefix = "";                  }
157                  # this might be our local scpeciality -- fields 10 and 11                  $sufix = shift @fmt;
158                  # (as opposed to 010 and 011) so they are strictly listed          }
159                  # here          $display = $prefix.$display.$sufix if ($display);
160                  } elsif ($format =~ s/^(1[01])//) {  
161                          my $tmp = get_sf($row,$1,undef,$i);          my $eval = $cache->{format_eval}->{$format};
162                          if ($tmp) {          if ($eval) {
163                                  $display .= $prefix.cnv_cp($tmp);                  sub fld2str {
164                            my ($func,$row,$f,$sf,$i) = @_;
165    #print STDERR "## in fld2str\n";
166                            my $tmp = $codepage->convert(&$func($row,$f,$sf,$i)) ||  $codepage->convert(&$func($row,$f,$sf,0)) || '';
167                            return "'$tmp'";
168                    }
169    
170                    $eval =~ s/v(\d+)\^(\w*)/fld2str($func,$row,$1,$2,$i)/eg;
171    #print STDERR "## eval: $eval\n";
172                    if (eval "$eval") {
173                            die "eval error: eval{$eval}: $@" if ($@);
174                            return ($swish,$display);
175                    } else {
176                            die "eval error: eval{$eval}: $@" if ($@);
177                            return (undef,undef);
178                    }
179            }
180    
181            if (@fmt) {
182                    print STDERR "format left unused: [",join("|",@fmt),"]\n";
183                    print STDERR "format: [",join("|",@{$tmp}),"]\n";
184            }
185    
186    #       print STDERR "format: {",$format || '',"} display: {",$display || '',"} swish: {",$swish || '',"}\n";
187    
188            return ($swish,$display);
189    }
190    
191    #-------------------------------------------------------------
192    
193    sub parse_excel_format {
194            my $format = shift;
195            my $row = shift;
196            my $i = shift;
197            #my $codepage = shift;
198            #
199            # data allready comes in utf-8 due to change in
200            # SpreadSheet::ParseExcel::FmtDefault line 69 from
201            #       return pack('C*', unpack('n*', $sTxt));
202            # to following which returns utf-8:
203            #       return pack('U*', unpack('n*', $sTxt));
204            #
205    
206            return if ($i > 0);     # Excel doesn't support repeatable fields
207    
208            my $out;
209            my $out_swish;
210    
211            my $prefix = "";
212            if ($format =~ s/^([^A-Z\|]{1,3})//) {
213                    $prefix = $1;
214            }
215    
216            my $display;
217            my $swish;
218    
219            while ($format && length($format) > 0) {
220    #print STDERR "\n#### $format #";
221                    if ($format =~ s/^\|([A-Z]{1,2})\|//) {
222    #print STDERR "--$1-> $format -[",length($format),"] ";
223                            if ($row->{$1}) {
224                                    my $tmp = $row->{$1};
225                                    $display .= $prefix . $tmp;
226                                  $swish .= $tmp." ";                                  $swish .= $tmp." ";
227    #print STDERR " == $tmp";
228                          }                          }
229                          $prefix = "";                          $prefix = "";
230                  } elsif ($format =~ s/^mfn//i) {                  } elsif ($format =~ s/^([^A-Z\|]+)(\|[A-Z]{1,2}\|)/$2/) {
                         $display .= $prefix . $row->{mfn};  
                         $prefix = "";  
                 } elsif ($format =~ s/^([^\d]+)(\d{0,3})/$2/) {  
                         $prefix .= $1 if ($display);  
                 } elsif ($format =~ s/^([^\d]+\d{0,2})//) {  
                         $prefix .= $1 if ($display);  
                 } elsif ($format =~ s/^(\d{1,2})//) {  
231                          $prefix .= $1 if ($display);                          $prefix .= $1 if ($display);
232                  } else {                  } else {
233                          print STDERR "unparsed format: $format\n";                          #print STDERR "unparsed format: $format\n";
234                          $prefix .= $format;                          $prefix .= $format;
235                          $format = "";                          $format = "";
236                  }                  }
237    #print STDERR " display: $display swish: $swish [format: $format]";
238          }          }
239          # add suffix          # add suffix
240          $display .= $prefix if ($display);          $display .= $prefix if ($display);
# Line 96  sub parse_iso_format { Line 244  sub parse_iso_format {
244    
245  #-------------------------------------------------------------  #-------------------------------------------------------------
246    
247  sub parse_excel_format {  sub parse_feed_format {
248          my $format = shift;          my $format = shift;
249          my $row = shift;          my $data = shift;
250          my $i = shift;          my $i = shift;
251          my $codepage = shift;          my $codepage = shift;
252    
253            # XXX feed doesn't support repeatable fields, but they really
254            # should, This is a bug. It should be fixed!
255            return if ($i > 0);
256    
257          my $out;          my $out;
258          my $out_swish;          my $out_swish;
259    
260          my $prefix = "";          my $prefix = "";
261          if ($format =~ s/^([^A-Z\|]{1,3})//) {          if ($format =~ s/^([^\d\|]{1,3})//) {
262                  $prefix = $1;                  $prefix = $1;
263          }          }
264    
# Line 115  sub parse_excel_format { Line 267  sub parse_excel_format {
267    
268          while ($format && length($format) > 0) {          while ($format && length($format) > 0) {
269  #print STDERR "\n#### $format #";  #print STDERR "\n#### $format #";
270                  if ($format =~ s/^\|([A-Z]{1,2})\|//) {                  if ($format =~ s/^\|(\d+)\|//) {
271  #print STDERR "--$1-> $format -[",length($format),"] ";  #print STDERR "--$1-> $format -[",length($format),"] ";
272                          if ($row->{$1}) {                          if ($data->{$1}) {
273                                  my $tmp = $row->{$1};                                  my $tmp = $data->{$1};
274                                  if ($codepage) {                                  if ($codepage) {
275                                          $tmp = $codepage->convert($tmp) || warn "excel: $1 '$tmp' can't convert";                                          $tmp = $codepage->convert($tmp) || warn "feed: $1 '$tmp' can't convert\n";
276                                  }                                  }
277                                  $display .= $prefix . $tmp;                                  $display .= $prefix . $tmp;
278                                  $swish .= $tmp." ";                                  $swish .= $tmp." ";
279  #print STDERR " == $tmp";  #print STDERR " == $tmp";
280                          }                          }
281                          $prefix = "";                          $prefix = "";
282                  } elsif ($format =~ s/^([^A-Z\|]+)(\|[A-Z]{1,2}\|)/$2/) {                  } elsif ($format =~ s/^([^\d\|]+)(\|\d+\|)/$2/) {
283                          $prefix .= $1 if ($display);                          $prefix .= $1 if ($display);
284                  } else {                  } else {
285                          print STDERR "unparsed format: $format\n";                          print STDERR "unparsed format: $format\n";
# Line 142  sub parse_excel_format { Line 294  sub parse_excel_format {
294          return ($swish,$display);          return ($swish,$display);
295  }  }
296    
297    #-------------------------------------------------------------
298    
299  1;  1;

Legend:
Removed from v.62  
changed lines
  Added in v.488

  ViewVC Help
Powered by ViewVC 1.1.26