Bug 26265: (QA follow-up) Remove g option from regex, add few dirs
[koha.git] / acqui / addorderiso2709.pl
1 #!/usr/bin/perl
2
3 #A script that lets the user populate a basket from an iso2709 file
4 #the script first displays a list of import batches, then when a batch is selected displays all the biblios in it.
5 #The user can then pick which biblios they want to order
6
7 # Copyright 2008 - 2011 BibLibre SARL
8 #
9 # This file is part of Koha.
10 #
11 # Koha is free software; you can redistribute it and/or modify it
12 # under the terms of the GNU General Public License as published by
13 # the Free Software Foundation; either version 3 of the License, or
14 # (at your option) any later version.
15 #
16 # Koha is distributed in the hope that it will be useful, but
17 # WITHOUT ANY WARRANTY; without even the implied warranty of
18 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the
19 # GNU General Public License for more details.
20 #
21 # You should have received a copy of the GNU General Public License
22 # along with Koha; if not, see <http://www.gnu.org/licenses>.
23
24 use Modern::Perl;
25 use CGI qw ( -utf8 );
26 use Carp;
27 use YAML qw/Load/;
28 use List::MoreUtils qw/uniq/;
29
30 use C4::Context;
31 use C4::Auth;
32 use C4::Output;
33 use C4::ImportBatch;
34 use C4::Matcher;
35 use C4::Search qw/FindDuplicate/;
36 use C4::Acquisition;
37 use C4::Biblio;
38 use C4::Items;
39 use C4::Koha;
40 use C4::Budgets;
41 use C4::Acquisition;
42 use C4::Suggestions;    # GetSuggestion
43 use C4::Members;
44
45 use Koha::Number::Price;
46 use Koha::Libraries;
47 use Koha::Acquisition::Baskets;
48 use Koha::Acquisition::Currencies;
49 use Koha::Acquisition::Orders;
50 use Koha::Acquisition::Booksellers;
51 use Koha::Patrons;
52
53 my $input = new CGI;
54 my ($template, $loggedinuser, $cookie, $userflags) = get_template_and_user({
55     template_name => "acqui/addorderiso2709.tt",
56     query => $input,
57     type => "intranet",
58     authnotrequired => 0,
59     flagsrequired   => { acquisition => 'order_manage' },
60     debug => 1,
61 });
62
63 my $cgiparams = $input->Vars;
64 my $op = $cgiparams->{'op'} || '';
65 my $booksellerid  = $input->param('booksellerid');
66 my $allmatch = $input->param('allmatch');
67 my $bookseller = Koha::Acquisition::Booksellers->find( $booksellerid );
68
69 $template->param(scriptname => "/cgi-bin/koha/acqui/addorderiso2709.pl",
70                 booksellerid => $booksellerid,
71                 booksellername => $bookseller->name,
72                 );
73
74 if ($cgiparams->{'import_batch_id'} && $op eq ""){
75     $op = "batch_details";
76 }
77
78 #Needed parameters:
79 if (! $cgiparams->{'basketno'}){
80     die "Basketnumber required to order from iso2709 file import";
81 }
82 my $basket = Koha::Acquisition::Baskets->find( $cgiparams->{basketno} );
83
84 #
85 # 1st step = choose the file to import into acquisition
86 #
87 if ($op eq ""){
88     $template->param("basketno" => $cgiparams->{'basketno'});
89 #display batches
90     import_batches_list($template);
91 #
92 # 2nd step = display the content of the chosen file
93 #
94 } elsif ($op eq "batch_details"){
95 #display lines inside the selected batch
96     # get currencies (for change rates calcs if needed)
97     my @currencies = Koha::Acquisition::Currencies->search;
98
99     $template->param("batch_details" => 1,
100                      "basketno"      => $cgiparams->{'basketno'},
101                      currencies => \@currencies,
102                      bookseller => $bookseller,
103                      "allmatch" => $allmatch,
104                      );
105     import_biblios_list($template, $cgiparams->{'import_batch_id'});
106     if ( $basket->effective_create_items eq 'ordering' && !$basket->is_standing ) {
107         # prepare empty item form
108         my $cell = PrepareItemrecordDisplay( '', '', '', 'ACQ' );
109
110         #     warn "==> ".Data::Dumper::Dumper($cell);
111         unless ($cell) {
112             $cell = PrepareItemrecordDisplay( '', '', '', '' );
113             $template->param( 'NoACQframework' => 1 );
114         }
115         my @itemloop;
116         push @itemloop, $cell;
117
118         $template->param( items => \@itemloop );
119     }
120 #
121 # 3rd step = import the records
122 #
123 } elsif ( $op eq 'import_records' ) {
124 #import selected lines
125     $template->param('basketno' => $cgiparams->{'basketno'});
126 # Budget_id is mandatory for adding an order, we just add a default, the user needs to modify this aftewards
127     my $budgets = GetBudgets();
128     if (scalar @$budgets == 0){
129         die "No budgets defined, can't continue";
130     }
131     my $budget_id = @$budgets[0]->{'budget_id'};
132 #get all records from a batch, and check their import status to see if they are checked.
133 #(default values: quantity 1, uncertainprice yes, first budget)
134
135     # retrieve the file you want to import
136     my $import_batch_id = $cgiparams->{'import_batch_id'};
137     my $biblios = GetImportRecordsRange($import_batch_id);
138     my $duplinbatch;
139     my $imported = 0;
140     my @import_record_id_selected = $input->multi_param("import_record_id");
141     my @quantities = $input->multi_param('quantity');
142     my @prices = $input->multi_param('price');
143     my @budgets_id = $input->multi_param('budget_id');
144     my @discount = $input->multi_param('discount');
145     my @sort1 = $input->multi_param('sort1');
146     my @sort2 = $input->multi_param('sort2');
147     my $matcher_id = $input->param('matcher_id');
148     my $active_currency = Koha::Acquisition::Currencies->get_active;
149     my $biblio_count = 0;
150     for my $biblio (@$biblios){
151         $biblio_count++;
152         my $duplifound = 0;
153         # Check if this import_record_id was selected
154         next if not grep { $_ eq $$biblio{import_record_id} } @import_record_id_selected;
155         my ( $marcblob, $encoding ) = GetImportRecordMarc( $biblio->{'import_record_id'} );
156         my $marcrecord = MARC::Record->new_from_usmarc($marcblob) || die "couldn't translate marc information";
157         my $match = GetImportRecordMatches( $biblio->{'import_record_id'}, 1 );
158         my $biblionumber=$#$match > -1?$match->[0]->{'biblionumber'}:0;
159         my $c_quantity = shift( @quantities ) || GetMarcQuantity($marcrecord, C4::Context->preference('marcflavour') ) || 1;
160         my $c_budget_id = shift( @budgets_id ) || $input->param('all_budget_id') || $budget_id;
161         my $c_discount = shift ( @discount);
162         $c_discount = $c_discount / 100 if $c_discount > 1;
163         my $c_sort1 = shift( @sort1 ) || $input->param('all_sort1') || '';
164         my $c_sort2 = shift( @sort2 ) || $input->param('all_sort2') || '';
165
166         # Insert the biblio, or find it through matcher
167         unless ( $biblionumber ) {
168             if ($matcher_id) {
169                 if ( $matcher_id eq '_TITLE_AUTHOR_' ) {
170                     $duplifound = 1 if FindDuplicate($marcrecord);
171                 }
172                 else {
173                     my $matcher = C4::Matcher->fetch($matcher_id);
174                     my @matches = $matcher->get_matches( $marcrecord, my $max_matches = 1 );
175                     $duplifound = 1 if @matches;
176                 }
177
178                 $duplinbatch = $import_batch_id and next if $duplifound;
179             }
180
181             # add the biblio
182             my $bibitemnum;
183
184             # remove ISBN -
185             my ( $isbnfield, $isbnsubfield ) = GetMarcFromKohaField( 'biblioitems.isbn' );
186             if ( $marcrecord->field($isbnfield) ) {
187                 foreach my $field ( $marcrecord->field($isbnfield) ) {
188                     foreach my $subfield ( $field->subfield($isbnsubfield) ) {
189                         my $newisbn = $field->subfield($isbnsubfield);
190                         $newisbn =~ s/-//g;
191                         $field->update( $isbnsubfield => $newisbn );
192                     }
193                 }
194             }
195             ( $biblionumber, $bibitemnum ) = AddBiblio( $marcrecord, $cgiparams->{'frameworkcode'} || '' );
196             SetImportRecordStatus( $biblio->{'import_record_id'}, 'imported' );
197         } else {
198             SetImportRecordStatus( $biblio->{'import_record_id'}, 'imported' );
199         }
200
201         # Add items from MarcItemFieldsToOrder
202         my @homebranches = $input->multi_param('homebranch_' . $biblio_count);
203         my $count = scalar @homebranches;
204         my @holdingbranches = $input->multi_param('holdingbranch_' . $biblio_count);
205         my @itypes = $input->multi_param('itype_' . $biblio_count);
206         my @nonpublic_notes = $input->multi_param('nonpublic_note_' . $biblio_count);
207         my @public_notes = $input->multi_param('public_note_' . $biblio_count);
208         my @locs = $input->multi_param('loc_' . $biblio_count);
209         my @ccodes = $input->multi_param('ccode_' . $biblio_count);
210         my @notforloans = $input->multi_param('notforloan_' . $biblio_count);
211         my @uris = $input->multi_param('uri_' . $biblio_count);
212         my @copynos = $input->multi_param('copyno_' . $biblio_count);
213         my @budget_codes = $input->multi_param('budget_code_' . $biblio_count);
214         my @itemprices = $input->multi_param('itemprice_' . $biblio_count);
215         my @replacementprices = $input->multi_param('replacementprice_' . $biblio_count);
216         my @itemcallnumbers = $input->multi_param('itemcallnumber_' . $biblio_count);
217         my $itemcreation = 0;
218
219         my @itemnumbers;
220         for (my $i = 0; $i < $count; $i++) {
221             $itemcreation = 1;
222             my ($item_bibnum, $item_bibitemnum, $itemnumber) = AddItem({
223                 homebranch => $homebranches[$i],
224                 holdingbranch => $holdingbranches[$i],
225                 itemnotes_nonpublic => $nonpublic_notes[$i],
226                 itemnotes => $public_notes[$i],
227                 location => $locs[$i],
228                 ccode => $ccodes[$i],
229                 itype => $itypes[$i],
230                 notforloan => $notforloans[$i],
231                 uri => $uris[$i],
232                 copynumber => $copynos[$i],
233                 price => $itemprices[$i],
234                 replacementprice => $replacementprices[$i],
235                 itemcallnumber => $itemcallnumbers[$i],
236             }, $biblionumber);
237             push( @itemnumbers, $itemnumber );
238         }
239         if ($itemcreation == 1) {
240             # Group orderlines from MarcItemFieldsToOrder
241             my $budget_hash;
242             for (my $i = 0; $i < $count; $i++) {
243                 $budget_hash->{$budget_codes[$i]}->{quantity} += 1;
244                 $budget_hash->{$budget_codes[$i]}->{price} = $itemprices[$i];
245                 $budget_hash->{$budget_codes[$i]}->{replacementprice} = $replacementprices[$i];
246                 $budget_hash->{$budget_codes[$i]}->{itemnumbers} //= [];
247                 push @{ $budget_hash->{$budget_codes[$i]}->{itemnumbers} }, $itemnumbers[$i];
248             }
249
250             # Create orderlines from MarcItemFieldsToOrder
251             while(my ($budget_id, $infos) = each %$budget_hash) {
252                 if ($budget_id) {
253                     my %orderinfo = (
254                         biblionumber       => $biblionumber,
255                         basketno           => $cgiparams->{'basketno'},
256                         quantity           => $infos->{quantity},
257                         budget_id          => $budget_id,
258                         currency           => $cgiparams->{'all_currency'},
259                     );
260
261                     my $price = $infos->{price};
262                     if ($price){
263                         # in France, the cents separator is the , but sometimes, ppl use a .
264                         # in this case, the price will be x100 when unformatted ! Replace the . by a , to get a proper price calculation
265                         $price =~ s/\./,/ if C4::Context->preference("CurrencyFormat") eq "FR";
266                         $price = Koha::Number::Price->new($price)->unformat;
267                         $orderinfo{tax_rate} = $bookseller->tax_rate;
268                         my $c = $c_discount ? $c_discount : $bookseller->discount / 100;
269                         $orderinfo{discount} = $c;
270                         if ( $c_discount ) {
271                             $orderinfo{ecost} = $price;
272                             $orderinfo{rrp}   = $orderinfo{ecost} / ( 1 - $c );
273                         } else {
274                             $orderinfo{ecost} = $price * ( 1 - $c );
275                             $orderinfo{rrp}   = $price;
276                         }
277                         $orderinfo{listprice} = $orderinfo{rrp} / $active_currency->rate;
278                         $orderinfo{unitprice} = $orderinfo{ecost};
279                         $orderinfo{total} = $orderinfo{ecost} * $infos->{quantity};
280                     } else {
281                         $orderinfo{listprice} = 0;
282                     }
283                     $orderinfo{replacementprice} = $infos->{replacementprice} || 0;
284
285                     # remove uncertainprice flag if we have found a price in the MARC record
286                     $orderinfo{uncertainprice} = 0 if $orderinfo{listprice};
287
288                     %orderinfo = %{
289                         C4::Acquisition::populate_order_with_prices(
290                             {
291                                 order        => \%orderinfo,
292                                 booksellerid => $booksellerid,
293                                 ordering     => 1,
294                                 receiving    => 1,
295                             }
296                         )
297                     };
298
299                     my $order = Koha::Acquisition::Order->new( \%orderinfo )->store;
300                     $order->add_item( $_ ) for @{ $budget_hash->{$budget_id}->{itemnumbers} };
301                 }
302             }
303         } else {
304             # 3rd add order
305             my $patron = Koha::Patrons->find( $loggedinuser );
306             # get quantity in the MARC record (1 if none)
307             my $quantity = GetMarcQuantity($marcrecord, C4::Context->preference('marcflavour')) || 1;
308             my %orderinfo = (
309                 biblionumber       => $biblionumber,
310                 basketno           => $cgiparams->{'basketno'},
311                 quantity           => $c_quantity,
312                 branchcode         => $patron->branchcode,
313                 budget_id          => $c_budget_id,
314                 uncertainprice     => 1,
315                 sort1              => $c_sort1,
316                 sort2              => $c_sort2,
317                 order_internalnote => $cgiparams->{'all_order_internalnote'},
318                 order_vendornote   => $cgiparams->{'all_order_vendornote'},
319                 currency           => $cgiparams->{'all_currency'},
320             );
321             # get the price if there is one.
322             my $price= shift( @prices ) || GetMarcPrice($marcrecord, C4::Context->preference('marcflavour'));
323             if ($price){
324                 # in France, the cents separator is the , but sometimes, ppl use a .
325                 # in this case, the price will be x100 when unformatted ! Replace the . by a , to get a proper price calculation
326                 $price =~ s/\./,/ if C4::Context->preference("CurrencyFormat") eq "FR";
327                 $price = Koha::Number::Price->new($price)->unformat;
328                 $orderinfo{tax_rate} = $bookseller->tax_rate;
329                 my $c = $c_discount ? $c_discount : $bookseller->discount / 100;
330                 $orderinfo{discount} = $c;
331                 if ( $c_discount ) {
332                     $orderinfo{ecost} = $price;
333                     $orderinfo{rrp}   = $orderinfo{ecost} / ( 1 - $c );
334                 } else {
335                     $orderinfo{ecost} = $price * ( 1 - $c );
336                     $orderinfo{rrp}   = $price;
337                 }
338                 $orderinfo{listprice} = $orderinfo{rrp} / $active_currency->rate;
339                 $orderinfo{unitprice} = $orderinfo{ecost};
340                 $orderinfo{total} = $orderinfo{ecost} * $c_quantity;
341             } else {
342                 $orderinfo{listprice} = 0;
343             }
344
345         # remove uncertainprice flag if we have found a price in the MARC record
346         $orderinfo{uncertainprice} = 0 if $orderinfo{listprice};
347
348         %orderinfo = %{
349             C4::Acquisition::populate_order_with_prices(
350                 {
351                     order        => \%orderinfo,
352                     booksellerid => $booksellerid,
353                     ordering     => 1,
354                     receiving    => 1,
355                 }
356             )
357         };
358
359         my $order = Koha::Acquisition::Order->new( \%orderinfo )->store;
360
361         # 4th, add items if applicable
362         # parse the item sent by the form, and create an item just for the import_record_id we are dealing with
363         # this is not optimised, but it's working !
364         if ( $basket->effective_create_items eq 'ordering' && !$basket->is_standing ) {
365             my @tags         = $input->multi_param('tag');
366             my @subfields    = $input->multi_param('subfield');
367             my @field_values = $input->multi_param('field_value');
368             my @serials      = $input->multi_param('serial');
369             my @ind_tag   = $input->multi_param('ind_tag');
370             my @indicator = $input->multi_param('indicator');
371             my $item;
372             push @{ $item->{tags} },         $tags[0];
373             push @{ $item->{subfields} },    $subfields[0];
374             push @{ $item->{field_values} }, $field_values[0];
375             push @{ $item->{ind_tag} },      $ind_tag[0];
376             push @{ $item->{indicator} },    $indicator[0];
377             my $xml = TransformHtmlToXml( \@tags, \@subfields, \@field_values, \@indicator, \@ind_tag );
378             my $record = MARC::Record::new_from_xml( $xml, 'UTF-8' );
379             for (my $qtyloop=1;$qtyloop <= $c_quantity;$qtyloop++) {
380                 my ( $biblionumber, $bibitemnum, $itemnumber ) = AddItemFromMarc( $record, $biblionumber );
381                 $order->add_item( $itemnumber );
382                 }
383             } else {
384                 SetImportRecordStatus( $biblio->{'import_record_id'}, 'imported' );
385             }
386         }
387         $imported++;
388     }
389     # go to basket page
390     if ( $imported ) {
391         print $input->redirect("/cgi-bin/koha/acqui/basket.pl?basketno=".$cgiparams->{'basketno'}."&amp;duplinbatch=$duplinbatch");
392     } else {
393         print $input->redirect("/cgi-bin/koha/acqui/addorderiso2709.pl?import_batch_id=$import_batch_id&amp;basketno=".$cgiparams->{'basketno'}."&amp;booksellerid=$booksellerid&amp;allmatch=1");
394     }
395     exit;
396 }
397
398 my $budgets = GetBudgets();
399 my $budget_id = @$budgets[0]->{'budget_id'};
400 # build bookfund list
401 my $patron = Koha::Patrons->find( $loggedinuser )->unblessed;
402 my $budget = GetBudget($budget_id);
403
404 # build budget list
405 my $budget_loop = [];
406 my $budgets_hierarchy = GetBudgetHierarchy;
407 foreach my $r ( @{$budgets_hierarchy} ) {
408     next unless (CanUserUseBudget($patron, $r, $userflags));
409     if ( !defined $r->{budget_amount} || $r->{budget_amount} == 0 ) {
410         next;
411     }
412     push @{$budget_loop},
413       { b_id  => $r->{budget_id},
414         b_txt => $r->{budget_name},
415         b_code => $r->{budget_code},
416         b_sort1_authcat => $r->{'sort1_authcat'},
417         b_sort2_authcat => $r->{'sort2_authcat'},
418         b_active => $r->{budget_period_active},
419         b_sel => ( $r->{budget_id} == $budget_id ) ? 1 : 0,
420       };
421 }
422
423 @{$budget_loop} =
424   sort { uc( $a->{b_txt}) cmp uc( $b->{b_txt}) } @{$budget_loop};
425
426 $template->param( budget_loop    => $budget_loop,);
427
428 output_html_with_http_headers $input, $cookie, $template->output;
429
430
431 sub import_batches_list {
432     my ($template) = @_;
433     my $batches = GetImportBatchRangeDesc();
434
435     my @list = ();
436     foreach my $batch (@$batches) {
437         if ( $batch->{'import_status'} =~ /^staged$|^reverted$/ && $batch->{'record_type'} eq 'biblio') {
438             # check if there is at least 1 line still staged
439             my $stagedList=GetImportRecordsRange($batch->{'import_batch_id'}, undef, 1, $batch->{import_status}, { order_by_direction => 'ASC' });
440             if (scalar @$stagedList) {
441                 push @list, {
442                         import_batch_id => $batch->{'import_batch_id'},
443                         num_records => $batch->{'num_records'},
444                         num_items => $batch->{'num_items'},
445                         staged_date => $batch->{'upload_timestamp'},
446                         import_status => $batch->{'import_status'},
447                         file_name => $batch->{'file_name'},
448                         comments => $batch->{'comments'},
449                 };
450             } else {
451                 # if there are no more line to includes, set the status to imported
452                 SetImportBatchStatus( $batch->{'import_batch_id'}, 'imported' );
453             }
454         }
455     }
456     $template->param(batch_list => \@list); 
457     my $num_batches = GetNumberOfNonZ3950ImportBatches();
458     $template->param(num_results => $num_batches);
459 }
460
461 sub import_biblios_list {
462     my ($template, $import_batch_id) = @_;
463     my $batch = GetImportBatch($import_batch_id,'staged');
464     return () unless $batch and $batch->{import_status} =~ /^staged$|^reverted$/;
465     my $biblios = GetImportRecordsRange($import_batch_id,'','',$batch->{import_status});
466     my @list = ();
467     my $item_error = 0;
468
469     my $ccodes = { map { $_->{authorised_value} => $_->{opac_description} } Koha::AuthorisedValues->get_descriptions_by_koha_field( { frameworkcode => '', kohafield => 'items.ccode' } ) };
470     my $locations = { map { $_->{authorised_value} => $_->{opac_description} } Koha::AuthorisedValues->get_descriptions_by_koha_field( { frameworkcode => '', kohafield => 'items.location' } ) };
471     my $notforloans = { map { $_->{authorised_value} => $_->{lib} } Koha::AuthorisedValues->get_descriptions_by_koha_field( { frameworkcode => '', kohafield => 'items.notforloan' } ) };
472     # location list
473     my @locations;
474     foreach (sort keys %$locations) {
475         push @locations, { code => $_, description => "$_ - " . $locations->{$_} };
476     }
477     my @ccodes;
478     foreach (sort {$ccodes->{$a} cmp $ccodes->{$b}} keys %$ccodes) {
479         push @ccodes, { code => $_, description => $ccodes->{$_} };
480     }
481     my @notforloans;
482     foreach (sort {$notforloans->{$a} cmp $notforloans->{$b}} keys %$notforloans) {
483         push @notforloans, { code => $_, description => $notforloans->{$_} };
484     }
485
486     my $biblio_count = 0;
487     foreach my $biblio (@$biblios) {
488         my $item_id = 1;
489         $biblio_count++;
490         my $citation = $biblio->{'title'};
491         $citation .= " $biblio->{'author'}" if $biblio->{'author'};
492         $citation .= " (" if $biblio->{'issn'} or $biblio->{'isbn'};
493         $citation .= $biblio->{'isbn'} if $biblio->{'isbn'};
494         $citation .= ", " if $biblio->{'issn'} and $biblio->{'isbn'};
495         $citation .= $biblio->{'issn'} if $biblio->{'issn'};
496         $citation .= ")" if $biblio->{'issn'} or $biblio->{'isbn'};
497         my $match = GetImportRecordMatches($biblio->{'import_record_id'}, 1);
498         my %cellrecord = (
499             import_record_id => $biblio->{'import_record_id'},
500             citation => $citation,
501             import  => 1,
502             status => $biblio->{'status'},
503             record_sequence => $biblio->{'record_sequence'},
504             overlay_status => $biblio->{'overlay_status'},
505             match_biblionumber => $#$match > -1 ? $match->[0]->{'biblionumber'} : 0,
506             match_citation     => $#$match > -1 ? $match->[0]->{'title'} || '' . ' ' . $match->[0]->{'author'} || '': '',
507             match_score => $#$match > -1 ? $match->[0]->{'score'} : 0,
508         );
509         my ( $marcblob, $encoding ) = GetImportRecordMarc( $biblio->{'import_record_id'} );
510         my $marcrecord = MARC::Record->new_from_usmarc($marcblob) || die "couldn't translate marc information";
511
512         my $infos = get_infos_syspref('MarcFieldsToOrder', $marcrecord, ['price', 'quantity', 'budget_code', 'discount', 'sort1', 'sort2','replacementprice']);
513         my $price = $infos->{price};
514         my $replacementprice = $infos->{replacementprice};
515         my $quantity = $infos->{quantity};
516         my $budget_code = $infos->{budget_code};
517         my $discount = $infos->{discount};
518         my $sort1 = $infos->{sort1};
519         my $sort2 = $infos->{sort2};
520         my $budget_id;
521         if($budget_code) {
522             my $biblio_budget = GetBudgetByCode($budget_code);
523             if($biblio_budget) {
524                 $budget_id = $biblio_budget->{budget_id};
525             }
526         }
527
528         # Items
529         my @itemlist = ();
530         my $all_items_quantity = 0;
531         my $alliteminfos = get_infos_syspref_on_item('MarcItemFieldsToOrder', $marcrecord, ['homebranch', 'holdingbranch', 'itype', 'nonpublic_note', 'public_note', 'loc', 'ccode', 'notforloan', 'uri', 'copyno', 'price', 'replacementprice', 'itemcallnumber', 'quantity', 'budget_code']);
532         if ($alliteminfos != -1) {
533             foreach my $iteminfos (@$alliteminfos) {
534                 my $item_homebranch = $iteminfos->{homebranch};
535                 my $item_holdingbranch = $iteminfos->{holdingbranch};
536                 my $item_itype = $iteminfos->{itype};
537                 my $item_nonpublic_note = $iteminfos->{nonpublic_note};
538                 my $item_public_note = $iteminfos->{public_note};
539                 my $item_loc = $iteminfos->{loc};
540                 my $item_ccode = $iteminfos->{ccode};
541                 my $item_notforloan = $iteminfos->{notforloan};
542                 my $item_uri = $iteminfos->{uri};
543                 my $item_copyno = $iteminfos->{copyno};
544                 my $item_quantity = $iteminfos->{quantity} || 1;
545                 my $item_budget_code = $iteminfos->{budget_code};
546                 my $item_budget_id;
547                 if ( $iteminfos->{budget_code} ) {
548                     my $item_budget = GetBudgetByCode( $iteminfos->{budget_code} );
549                     if ( $item_budget ) {
550                         $item_budget_id = $item_budget->{budget_id};
551                     }
552                 }
553                 my $item_price = $iteminfos->{price};
554                 my $item_replacement_price = $iteminfos->{replacementprice};
555                 my $item_callnumber = $iteminfos->{itemcallnumber};
556
557                 for (my $i = 0; $i < $item_quantity; $i++) {
558
559                     my %itemrecord = (
560                         'item_id' => $item_id++,
561                         'biblio_count' => $biblio_count,
562                         'homebranch' => $item_homebranch,
563                         'holdingbranch' => $item_holdingbranch,
564                         'itype' => $item_itype,
565                         'nonpublic_note' => $item_nonpublic_note,
566                         'public_note' => $item_public_note,
567                         'loc' => $item_loc,
568                         'ccode' => $item_ccode,
569                         'notforloan' => $item_notforloan,
570                         'uri' => $item_uri,
571                         'copyno' => $item_copyno,
572                         'quantity' => $item_quantity,
573                         'budget_id' => $item_budget_id || $budget_id,
574                         'itemprice' => $item_price || $price,
575                         'replacementprice' => $item_replacement_price || $replacementprice,
576                         'itemcallnumber' => $item_callnumber,
577                     );
578                     $all_items_quantity++;
579                     push @itemlist, \%itemrecord;
580
581                 }
582             }
583
584             $cellrecord{'iteminfos'} = \@itemlist;
585         } else {
586             $cellrecord{'item_error'} = 1;
587         }
588         push @list, \%cellrecord;
589
590         if ($alliteminfos == -1 || scalar(@$alliteminfos) == 0) {
591             $cellrecord{price} = $price || '';
592             $cellrecord{replacementprice} = $replacementprice || '';
593             $cellrecord{quantity} = $quantity || '';
594             $cellrecord{budget_id} = $budget_id || '';
595             $cellrecord{discount} = $discount || '';
596             $cellrecord{sort1} = $sort1 || '';
597             $cellrecord{sort2} = $sort2 || '';
598         } else {
599             $cellrecord{quantity} = $all_items_quantity;
600         }
601
602     }
603     my $num_records = $batch->{'num_records'};
604     my $overlay_action = GetImportBatchOverlayAction($import_batch_id);
605     my $nomatch_action = GetImportBatchNoMatchAction($import_batch_id);
606     my $item_action = GetImportBatchItemAction($import_batch_id);
607     my @itypes = Koha::ItemTypes->search;
608     $template->param(biblio_list => \@list,
609                         num_results => $num_records,
610                         import_batch_id => $import_batch_id,
611                         "overlay_action_${overlay_action}" => 1,
612                         overlay_action => $overlay_action,
613                         "nomatch_action_${nomatch_action}" => 1,
614                         nomatch_action => $nomatch_action,
615                         "item_action_${item_action}" => 1,
616                         item_action => $item_action,
617                         item_error => $item_error,
618                         libraries => scalar Koha::Libraries->search(),
619                         locationloop => \@locations,
620                         itypeloop => \@itypes,
621                         ccodeloop => \@ccodes,
622                         notforloanloop => \@notforloans,
623                     );
624     batch_info($template, $batch);
625 }
626
627 sub batch_info {
628     my ($template, $batch) = @_;
629     $template->param(batch_info => 1,
630                                       file_name => $batch->{'file_name'},
631                                           comments => $batch->{'comments'},
632                                           import_status => $batch->{'import_status'},
633                                           upload_timestamp => $batch->{'upload_timestamp'},
634                                           num_records => $batch->{'num_records'},
635                                           num_items => $batch->{'num_items'});
636     if ($batch->{'num_records'} > 0) {
637         if ($batch->{'import_status'} eq 'staged' or $batch->{'import_status'} eq 'reverted') {
638             $template->param(can_commit => 1);
639         }
640         if ($batch->{'import_status'} eq 'imported') {
641             $template->param(can_revert => 1);
642         }
643     }
644     if (defined $batch->{'matcher_id'}) {
645         my $matcher = C4::Matcher->fetch($batch->{'matcher_id'});
646         if (defined $matcher) {
647             $template->param('current_matcher_id' => $batch->{'matcher_id'},
648                                               'current_matcher_code' => $matcher->code(),
649                                               'current_matcher_description' => $matcher->description());
650         }
651     }
652     add_matcher_list($batch->{'matcher_id'}, $template);
653 }
654
655 sub add_matcher_list {
656     my ($current_matcher_id, $template) = @_;
657     my @matchers = C4::Matcher::GetMatcherList();
658     if (defined $current_matcher_id) {
659         for (my $i = 0; $i <= $#matchers; $i++) {
660             if ($matchers[$i]->{'matcher_id'} == $current_matcher_id) {
661                 $matchers[$i]->{'selected'} = 1;
662             }
663         }
664     }
665     $template->param(available_matchers => \@matchers);
666 }
667
668 sub get_infos_syspref {
669     my ($syspref_name, $record, $field_list) = @_;
670     my $syspref = C4::Context->preference($syspref_name);
671     $syspref = "$syspref\n\n"; # YAML is anal on ending \n. Surplus does not hurt
672     my $yaml = eval {
673         YAML::Load($syspref);
674     };
675     if ( $@ ) {
676         warn "Unable to parse $syspref syspref : $@";
677         return ();
678     }
679     my $r;
680     for my $field_name ( @$field_list ) {
681         next unless exists $yaml->{$field_name};
682         my @fields = split /\|/, $yaml->{$field_name};
683         for my $field ( @fields ) {
684             my ( $f, $sf ) = split /\$/, $field;
685             next unless $f and $sf;
686             if ( my $v = $record->subfield( $f, $sf ) ) {
687                 $r->{$field_name} = $v;
688             }
689             last if $yaml->{$field};
690         }
691     }
692     return $r;
693 }
694
695 sub equal_number_of_fields {
696     my ($tags_list, $record) = @_;
697     my $tag_fields_count;
698     for my $tag (@$tags_list) {
699         my @fields = $record->field($tag);
700         $tag_fields_count->{$tag} = scalar @fields;
701     }
702
703     my $tags_count;
704     foreach my $key ( keys %$tag_fields_count ) {
705         if ( $tag_fields_count->{$key} > 0 ) { # Having 0 of a field is ok
706             $tags_count //= $tag_fields_count->{$key}; # Start with the count from the first occurrence
707             return -1 if $tag_fields_count->{$key} != $tags_count; # All counts of various fields should be equal if they exist
708         }
709     }
710
711     return $tags_count;
712 }
713
714 sub get_infos_syspref_on_item {
715     my ($syspref_name, $record, $field_list) = @_;
716     my $syspref = C4::Context->preference($syspref_name);
717     $syspref = "$syspref\n\n"; # YAML is anal on ending \n. Surplus does not hurt
718     my $yaml = eval {
719         YAML::Load($syspref);
720     };
721     if ( $@ ) {
722         warn "Unable to parse $syspref syspref : $@";
723         return ();
724     }
725     my @result;
726     my @tags_list;
727
728     # Check tags in syspref definition
729     for my $field_name ( @$field_list ) {
730         next unless exists $yaml->{$field_name};
731         my @fields = split /\|/, $yaml->{$field_name};
732         for my $field ( @fields ) {
733             my ( $f, $sf ) = split /\$/, $field;
734             next unless $f and $sf;
735             push @tags_list, $f;
736         }
737     }
738     @tags_list = List::MoreUtils::uniq(@tags_list);
739
740     my $tags_count = equal_number_of_fields(\@tags_list, $record);
741     # Return if the number of these fields in the record is not the same.
742     return -1 if $tags_count == -1;
743
744     # Gather the fields
745     my $fields_hash;
746     foreach my $tag (@tags_list) {
747         my @tmp_fields;
748         foreach my $field ($record->field($tag)) {
749             push @tmp_fields, $field;
750         }
751         $fields_hash->{$tag} = \@tmp_fields;
752     }
753
754     for (my $i = 0; $i < $tags_count; $i++) {
755         my $r;
756         for my $field_name ( @$field_list ) {
757             next unless exists $yaml->{$field_name};
758             my @fields = split /\|/, $yaml->{$field_name};
759             for my $field ( @fields ) {
760                 my ( $f, $sf ) = split /\$/, $field;
761                 next unless $f and $sf;
762                 my $v = $fields_hash->{$f}[$i] ? $fields_hash->{$f}[$i]->subfield( $sf ) : undef;
763                 $r->{$field_name} = $v if (defined $v);
764                 last if $yaml->{$field};
765             }
766         }
767         push @result, $r;
768     }
769     return \@result;
770 }