Merge branch 'master' of ssh://git.freeside.biz/home/git/freeside
[freeside.git] / FS / FS / Template_Mixin.pm
1 package FS::Template_Mixin;
2
3 use strict;
4 use vars qw( $DEBUG $me
5              $money_char
6              $date_format
7            );
8              # but NOT $conf
9 use vars qw( $invoice_lines @buf ); #yuck
10 use List::Util qw(sum); #can't import first, it conflicts with cust_main.first
11 use Date::Format;
12 use Date::Language;
13 use Time::Local qw( timelocal );
14 use Text::Template 1.20;
15 use File::Temp 0.14;
16 use Archive::Zip qw( :ERROR_CODES :CONSTANTS );
17 use IO::Scalar;
18 use HTML::Entities;
19 use Cwd;
20 use FS::UID;
21 use FS::Misc qw( send_email );
22 use FS::Record qw( qsearch qsearchs dbh );
23 use FS::Conf;
24 use FS::Misc qw( generate_ps generate_pdf );
25 use FS::pkg_category;
26 use FS::pkg_class;
27 use FS::invoice_mode;
28 use FS::L10N;
29
30 $DEBUG = 0;
31 $me = '[FS::Template_Mixin]';
32 FS::UID->install_callback( sub {
33   my $conf = new FS::Conf; #global
34   $money_char  = $conf->config('money_char')  || '$';
35   $date_format = $conf->config('date_format') || '%x'; #/YY
36 } );
37
38 =item conf [ MODE ]
39
40 Returns a configuration handle (L<FS::Conf>) set to the customer's locale.
41
42 If the "mode" pseudo-field is set on the object, the configuration handle
43 will be an L<FS::invoice_conf> for that invoice mode (and the customer's
44 locale).
45
46 =cut
47
48 sub conf {
49   my $self = shift;
50   my $mode = $self->get('mode');
51   if ($self->{_conf} and !defined($mode)) {
52     return $self->{_conf};
53   }
54
55   my $cust_main = $self->cust_main;
56   my $locale = $cust_main ? $cust_main->locale : '';
57   my $conf;
58   if ( $mode ) {
59     if ( ref $mode and $mode->isa('FS::invoice_mode') ) {
60       $mode = $mode->modenum;
61     } elsif ( $mode =~ /\D/ ) {
62       die "invalid invoice mode $mode";
63     }
64     $conf = qsearchs('invoice_conf', { modenum => $mode, locale => $locale });
65     if (!$conf) {
66       $conf = qsearchs('invoice_conf', { modenum => $mode, locale => '' });
67       # it doesn't have a locale, but system conf still might
68       $conf->set('locale' => $locale) if $conf;
69     }
70   }
71   # if $mode is unspecified, or if there is no invoice_conf matching this mode
72   # and locale, then use the system config only (but with the locale)
73   $conf ||= FS::Conf->new({ 'locale' => $locale });
74   # cache it
75   return $self->{_conf} = $conf;
76 }
77
78 =item print_text OPTIONS
79
80 Returns an text invoice, as a list of lines.
81
82 Options can be passed as a hash.
83
84 I<time>, if specified, is used to control the printing of overdue messages.  The
85 default is now.  It isn't the date of the invoice; that's the `_date' field.
86 It is specified as a UNIX timestamp; see L<perlfunc/"time">.  Also see
87 L<Time::Local> and L<Date::Parse> for conversion functions.
88
89 I<template>, if specified, is the name of a suffix for alternate invoices.
90
91 I<notice_name>, if specified, overrides "Invoice" as the name of the sent document (templates from 10/2009 or newer required)
92
93 =cut
94
95 sub print_text {
96   my $self = shift;
97   my %params;
98   if ( ref($_[0]) ) {
99     %params = %{ shift() };
100   } else {
101     %params = @_;
102   }
103
104   $params{'format'} = 'template'; # for some reason
105
106   $self->print_generic( %params );
107 }
108
109 =item print_latex HASHREF
110
111 Internal method - returns a filename of a filled-in LaTeX template for this
112 invoice (Note: add ".tex" to get the actual filename), and a filename of
113 an associated logo (with the .eps extension included).
114
115 See print_ps and print_pdf for methods that return PostScript and PDF output.
116
117 Options can be passed as a hash.
118
119 I<time>, if specified, is used to control the printing of overdue messages.  The
120 default is now.  It isn't the date of the invoice; that's the `_date' field.
121 It is specified as a UNIX timestamp; see L<perlfunc/"time">.  Also see
122 L<Time::Local> and L<Date::Parse> for conversion functions.
123
124 I<template>, if specified, is the name of a suffix for alternate invoices.
125 This is strongly deprecated; see L<FS::invoice_conf> for the right way to
126 customize invoice templates for different purposes.
127
128 I<notice_name>, if specified, overrides "Invoice" as the name of the sent document (templates from 10/2009 or newer required)
129
130 =cut
131
132 sub print_latex {
133   my $self = shift;
134   my %params;
135
136   if ( ref($_[0]) ) {
137     %params = %{ shift() };
138   } else {
139     %params = @_;
140   }
141
142   $params{'format'} = 'latex';
143   my $conf = $self->conf;
144
145   # this needs to go away
146   my $template = $params{'template'};
147   # and this especially
148   $template ||= $self->_agent_template
149     if $self->can('_agent_template');
150
151   #the new way
152   $self->set('mode', $params{mode})
153     if $params{mode};
154
155   my $pkey = $self->primary_key;
156   my $tmp_template = $self->table. '.'. $self->$pkey. '.XXXXXXXX';
157
158   my $dir = $FS::UID::conf_dir. "/cache.". $FS::UID::datasrc;
159   my $lh = new File::Temp(
160     TEMPLATE => $tmp_template,
161     DIR      => $dir,
162     SUFFIX   => '.eps',
163     UNLINK   => 0,
164   ) or die "can't open temp file: $!\n";
165
166   my $agentnum = $self->agentnum;
167
168   if ( $template && $conf->exists("logo_${template}.eps", $agentnum) ) {
169     print $lh $conf->config_binary("logo_${template}.eps", $agentnum)
170       or die "can't write temp file: $!\n";
171   } else {
172     print $lh $conf->config_binary('logo.eps', $agentnum)
173       or die "can't write temp file: $!\n";
174   }
175   close $lh;
176   $params{'logo_file'} = $lh->filename;
177
178   if( $conf->exists('invoice-barcode')
179         && $self->can('invoice_barcode')
180         && $self->invnum ) { # don't try to barcode statements
181       my $png_file = $self->invoice_barcode($dir);
182       my $eps_file = $png_file;
183       $eps_file =~ s/\.png$/.eps/g;
184       $png_file =~ /(barcode.*png)/;
185       $png_file = $1;
186       $eps_file =~ /(barcode.*eps)/;
187       $eps_file = $1;
188
189       my $curr_dir = cwd();
190       chdir($dir);
191       # after painfuly long experimentation, it was determined that sam2p won't
192       # accept : and other chars in the path, no matter how hard I tried to
193       # escape them, hence the chdir (and chdir back, just to be safe)
194       system('sam2p', '-j:quiet', $png_file, 'EPS:', $eps_file ) == 0
195         or die "sam2p failed: $!\n";
196       unlink($png_file);
197       chdir($curr_dir);
198
199       $params{'barcode_file'} = $eps_file;
200   }
201
202   my @filled_in = $self->print_generic( %params );
203
204   my $fh = new File::Temp( TEMPLATE => $tmp_template,
205                            DIR      => $dir,
206                            SUFFIX   => '.tex',
207                            UNLINK   => 0,
208                          ) or die "can't open temp file: $!\n";
209   binmode($fh, ':utf8'); # language support
210   print $fh join('', @filled_in );
211   close $fh;
212
213   $fh->filename =~ /^(.*).tex$/ or die "unparsable filename: ". $fh->filename;
214   return ($1, $params{'logo_file'}, $params{'barcode_file'});
215
216 }
217
218 sub agentnum {
219   my $self = shift;
220   my $cust_main = $self->cust_main;
221   $cust_main ? $cust_main->agentnum : $self->prospect_main->agentnum;
222 }
223
224 =item print_generic OPTION => VALUE ...
225
226 Internal method - returns a filled-in template for this invoice as a scalar.
227
228 See print_ps and print_pdf for methods that return PostScript and PDF output.
229
230 Required options
231
232 =over 4
233
234 =item format
235
236 The B<format> option is required and should be set to html, latex (print and PDF) or template (plaintext).
237
238 =back
239
240 Additional options
241
242 =over 4
243
244 =item notice_name
245
246 Overrides "Invoice" as the name of the sent document.
247
248 =item today
249
250 Used to control the printing of overdue messages.  The
251 default is now.  It isn't the date of the invoice; that's the `_date' field.
252 It is specified as a UNIX timestamp; see L<perlfunc/"time">.  Also see
253 L<Time::Local> and L<Date::Parse> for conversion functions.
254
255 =item logo_file
256
257 Logo file (path to temporary EPS file on the local filesystem)
258
259 =item cid
260
261 CID for inline (emailed) images (logo)
262
263 =item locale
264
265 Override customer's locale
266
267 =item unsquelch_cdr
268
269 Overrides any per customer cdr squelching when true
270
271 =item no_number
272
273 Supress the (invoice, quotation, statement, etc.) number
274
275 =item no_date
276
277 Supress the date
278
279 =item no_coupon
280
281 Supress the payment coupon
282
283 =item barcode_file
284
285 Barcode file (path to temporary EPS file on the local filesystem)
286
287 =item barcode_img
288
289 Flag indicating the barcode image should be a link (normal HTML dipaly)
290
291 =item barcode_cid
292
293 Barcode CID for inline (emailed) images
294
295 =item preref_callback
296
297 Coderef run for each line item, code should return HTML to be displayed
298 before that line item (quotations only)
299
300 =item template
301
302 Deprecated.  Used as a suffix for a configuration template.  Please
303 don't use this, it deprecated in favor of more flexible alternatives.
304
305 =back
306
307 =cut
308
309 #what's with all the sprintf('%10.2f')'s in here?  will it cause any
310 # (alignment in text invoice?) problems to change them all to '%.2f' ?
311 # yes: fixed width/plain text printing will be borked
312 sub print_generic {
313   my( $self, %params ) = @_;
314   my $conf = $self->conf;
315
316   my $today = $params{today} ? $params{today} : time;
317   warn "$me print_generic called on $self with suffix $params{template}\n"
318     if $DEBUG;
319
320   my $format = $params{format};
321   die "Unknown format: $format"
322     unless $format =~ /^(latex|html|template)$/;
323
324   my $cust_main = $self->cust_main || $self->prospect_main;
325
326   my $locale = $params{'locale'} || $cust_main->locale;
327
328   my %delimiters = ( 'latex'    => [ '[@--', '--@]' ],
329                      'html'     => [ '<%=', '%>' ],
330                      'template' => [ '{', '}' ],
331                    );
332
333   warn "$me print_generic creating template\n"
334     if $DEBUG > 1;
335
336   # set the notice name here, and nowhere else.
337   my $notice_name =  $params{notice_name}
338                   || $conf->config('notice_name')
339                   || $self->notice_name;
340
341   #create the template
342   my $template = $params{template} ? $params{template} : $self->_agent_template;
343   my $templatefile = $self->template_conf. $format;
344   $templatefile .= "_$template"
345     if length($template) && $conf->exists($templatefile."_$template");
346
347   $self->set('_template',$template);
348
349   # the base template
350   my @invoice_template = map "$_\n", $conf->config($templatefile)
351     or die "cannot load config data $templatefile";
352
353   if ( $format eq 'latex' && grep { /^%%Detail/ } @invoice_template ) {
354     #change this to a die when the old code is removed
355     # it's been almost ten years, changing it to a die
356     die "old-style invoice template $templatefile; ".
357          "patch with conf/invoice_latex.diff or use new conf/invoice_latex*\n";
358          #$old_latex = 'true';
359          #@invoice_template = _translate_old_latex_format(@invoice_template);
360   }
361
362   warn "$me print_generic creating T:T object\n"
363     if $DEBUG > 1;
364
365   my $text_template = new Text::Template(
366     TYPE => 'ARRAY',
367     SOURCE => \@invoice_template,
368     DELIMITERS => $delimiters{$format},
369   );
370
371   warn "$me print_generic compiling T:T object\n"
372     if $DEBUG > 1;
373
374   $text_template->compile()
375     or die "Can't compile $templatefile: $Text::Template::ERROR\n";
376
377
378   # additional substitution could possibly cause breakage in existing templates
379   my %convert_maps = (
380     'latex' => {
381                  'notes'         => sub { map "$_", @_ },
382                  'footer'        => sub { map "$_", @_ },
383                  'smallfooter'   => sub { map "$_", @_ },
384                  'returnaddress' => sub { map "$_", @_ },
385                  'coupon'        => sub { map "$_", @_ },
386                  'summary'       => sub { map "$_", @_ },
387                },
388     'html'  => {
389                  'notes' =>
390                    sub {
391                      map {
392                        s/%%(.*)$/<!-- $1 -->/g;
393                        s/\\section\*\{\\textsc\{(.)(.*)\}\}/<p><b><font size="+1">$1<\/font>\U$2<\/b>/g;
394                        s/\\begin\{enumerate\}/<ol>/g;
395                        s/\\item /  <li>/g;
396                        s/\\end\{enumerate\}/<\/ol>/g;
397                        s/\\textbf\{(.*)\}/<b>$1<\/b>/g;
398                        s/\\\\\*/<br>/g;
399                        s/\\dollar ?/\$/g;
400                        s/\\#/#/g;
401                        s/~/&nbsp;/g;
402                        $_;
403                      }  @_
404                    },
405                  'footer' =>
406                    sub { map { s/~/&nbsp;/g; s/\\\\\*?\s*$/<BR>/; $_; } @_ },
407                  'smallfooter' =>
408                    sub { map { s/~/&nbsp;/g; s/\\\\\*?\s*$/<BR>/; $_; } @_ },
409                  'returnaddress' =>
410                    sub {
411                      map {
412                        s/~/&nbsp;/g;
413                        s/\\\\\*?\s*$/<BR>/;
414                        s/\\hyphenation\{[\w\s\-]+}//;
415                        s/\\([&])/$1/g;
416                        $_;
417                      }  @_
418                    },
419                  'coupon'        => sub { "" },
420                  'summary'       => sub { "" },
421                },
422     'template' => {
423                  'notes' =>
424                    sub {
425                      map {
426                        s/%%.*$//g;
427                        s/\\section\*\{\\textsc\{(.*)\}\}/\U$1/g;
428                        s/\\begin\{enumerate\}//g;
429                        s/\\item /  * /g;
430                        s/\\end\{enumerate\}//g;
431                        s/\\textbf\{(.*)\}/$1/g;
432                        s/\\\\\*/ /;
433                        s/\\dollar ?/\$/g;
434                        $_;
435                      }  @_
436                    },
437                  'footer' =>
438                    sub { map { s/~/ /g; s/\\\\\*?\s*$/\n/; $_; } @_ },
439                  'smallfooter' =>
440                    sub { map { s/~/ /g; s/\\\\\*?\s*$/\n/; $_; } @_ },
441                  'returnaddress' =>
442                    sub {
443                      map {
444                        s/~/ /g;
445                        s/\\\\\*?\s*$/\n/;             # dubious
446                        s/\\hyphenation\{[\w\s\-]+}//;
447                        $_;
448                      }  @_
449                    },
450                  'coupon'        => sub { "" },
451                  'summary'       => sub { "" },
452                },
453   );
454
455
456   # hashes for differing output formats
457   my %nbsps = ( 'latex'    => '~',
458                 'html'     => '',    # '&nbps;' would be nice
459                 'template' => '',    # not used
460               );
461   my $nbsp = $nbsps{$format};
462
463   my %escape_functions = ( 'latex'    => \&_latex_escape,
464                            'html'     => \&_html_escape_nbsp,#\&encode_entities,
465                            'template' => sub { shift },
466                          );
467   my $escape_function = $escape_functions{$format};
468   my $escape_function_nonbsp = ($format eq 'html')
469                                  ? \&_html_escape : $escape_function;
470
471   my %newline_tokens = (  'latex'     => '\\\\',
472                           'html'      => '<br>',
473                           'template'  => "\n",
474                         );
475   my $newline_token = $newline_tokens{$format};
476
477   warn "$me generating template variables\n"
478     if $DEBUG > 1;
479
480   # generate template variables
481   my $returnaddress;
482
483   if (
484          defined( $conf->config_orbase( "invoice_${format}returnaddress",
485                                         $template
486                                       )
487                 )
488        && length( $conf->config_orbase( "invoice_${format}returnaddress",
489                                         $template
490                                       )
491                 )
492   ) {
493
494     $returnaddress = join("\n",
495       $conf->config_orbase("invoice_${format}returnaddress", $template)
496     );
497
498   } elsif ( grep /\S/,
499             $conf->config_orbase('invoice_latexreturnaddress', $template) ) {
500
501     my $convert_map = $convert_maps{$format}{'returnaddress'};
502     $returnaddress =
503       join( "\n",
504             &$convert_map( $conf->config_orbase( "invoice_latexreturnaddress",
505                                                  $template
506                                                )
507                          )
508           );
509   } elsif ( grep /\S/, $conf->config('company_address', $cust_main->agentnum) ) {
510
511     my $convert_map = $convert_maps{$format}{'returnaddress'};
512     $returnaddress = join( "\n", &$convert_map(
513                                    map { s/( {2,})/'~' x length($1)/eg;
514                                          s/$/\\\\\*/;
515                                          $_
516                                        }
517                                      ( $conf->config('company_name', $cust_main->agentnum),
518                                        $conf->config('company_address', $cust_main->agentnum),
519                                      )
520                                  )
521                      );
522
523   } else {
524
525     my $warning = "Couldn't find a return address; ".
526                   "do you need to set the company_address configuration value?";
527     warn "$warning\n";
528     $returnaddress = $nbsp;
529     #$returnaddress = $warning;
530
531   }
532
533   warn "$me generating invoice data\n"
534     if $DEBUG > 1;
535
536   my $agentnum = $cust_main->agentnum;
537
538   my %invoice_data = (
539
540     #invoice from info
541     'company_name'    => scalar( $conf->config('company_name', $agentnum) ),
542     'company_address' => join("\n", $conf->config('company_address', $agentnum) ). "\n",
543     'company_phonenum'=> scalar( $conf->config('company_phonenum', $agentnum) ),
544     'returnaddress'   => $returnaddress,
545     'agent'           => &$escape_function($cust_main->agent->agent),
546
547     #invoice/quotation info
548     'no_number'       => $params{'no_number'},
549     'invnum'          => ( $params{'no_number'} ? '' : $self->invnum ),
550     'quotationnum'    => $self->quotationnum,
551     'no_date'         => $params{'no_date'},
552     '_date'           => ( $params{'no_date'} ? '' : $self->_date ),
553       # workaround for inconsistent behavior in the early plain text
554       # templates; see RT#28271
555     'date'            => ( $params{'no_date'}
556                              ? ''
557                              : ($format eq 'template'
558                                ? $self->_date
559                                : $self->time2str_local('long', $self->_date, $format)
560                                )
561                          ),
562     'today'           => $self->time2str_local('long', $today, $format),
563     'terms'           => $self->terms,
564     'template'        => $template, #params{'template'},
565     'notice_name'     => $notice_name, # escape?
566     'current_charges' => sprintf("%.2f", $self->charged),
567     'duedate'         => $self->due_date2str('rdate'), #date_format?
568     'duedate_long'    => $self->due_date2str('long'),
569
570     #customer info
571     'custnum'         => $cust_main->display_custnum,
572     'prospectnum'     => $cust_main->prospectnum,
573     'agent_custid'    => &$escape_function($cust_main->agent_custid),
574     ( map { $_ => &$escape_function($cust_main->$_()) }
575         qw( company address1 address2 city state zip fax )
576     ),
577     'payname'         => &$escape_function( $cust_main->invoice_attn
578                                              || $cust_main->contact_firstlast ),
579
580     #global config
581     'ship_enable'     => $cust_main->invoice_ship_address || $conf->exists('invoice-ship_address'),
582     'unitprices'      => $conf->exists('invoice-unitprice'),
583     'smallernotes'    => $conf->exists('invoice-smallernotes'),
584     'smallerfooter'   => $conf->exists('invoice-smallerfooter'),
585     'balance_due_below_line' => $conf->exists('balance_due_below_line'),
586
587     #layout info -- would be fancy to calc some of this and bury the template
588     #               here in the code
589     'topmargin'             => scalar($conf->config('invoice_latextopmargin', $agentnum)),
590     'headsep'               => scalar($conf->config('invoice_latexheadsep', $agentnum)),
591     'textheight'            => scalar($conf->config('invoice_latextextheight', $agentnum)),
592     'extracouponspace'      => scalar($conf->config('invoice_latexextracouponspace', $agentnum)),
593     'couponfootsep'         => scalar($conf->config('invoice_latexcouponfootsep', $agentnum)),
594     'verticalreturnaddress' => $conf->exists('invoice_latexverticalreturnaddress', $agentnum),
595     'addresssep'            => scalar($conf->config('invoice_latexaddresssep', $agentnum)),
596     'amountenclosedsep'     => scalar($conf->config('invoice_latexcouponamountenclosedsep', $agentnum)),
597     'coupontoaddresssep'    => scalar($conf->config('invoice_latexcoupontoaddresssep', $agentnum)),
598     'addcompanytoaddress'   => $conf->exists('invoice_latexcouponaddcompanytoaddress', $agentnum),
599
600     # better hang on to conf_dir for a while (for old templates)
601     'conf_dir'        => "$FS::UID::conf_dir/conf.$FS::UID::datasrc",
602
603     #these are only used when doing paged plaintext
604     'page'            => 1,
605     'total_pages'     => 1,
606
607   );
608
609   #quotations have $name
610   $invoice_data{'name'} = $invoice_data{'payname'};
611
612   #localization
613   $invoice_data{'emt'} = sub { &$escape_function($self->mt(@_)) };
614   # prototype here to silence warnings
615   $invoice_data{'time2str'} = sub ($;$$) { $self->time2str_local(@_, $format) };
616
617   my $min_sdate = 999999999999;
618   my $max_edate = 0;
619   foreach my $cust_bill_pkg ( $self->cust_bill_pkg ) {
620     next unless $cust_bill_pkg->pkgnum > 0;
621     $min_sdate = $cust_bill_pkg->sdate
622       if length($cust_bill_pkg->sdate) && $cust_bill_pkg->sdate < $min_sdate;
623     $max_edate = $cust_bill_pkg->edate
624       if length($cust_bill_pkg->edate) && $cust_bill_pkg->edate > $max_edate;
625   }
626
627   $invoice_data{'bill_period'} = '';
628   $invoice_data{'bill_period'} =
629       $self->time2str_local('%e %h', $min_sdate, $format)
630       . " to " .
631       $self->time2str_local('%e %h', $max_edate, $format)
632     if ($max_edate != 0 && $min_sdate != 999999999999);
633
634   $invoice_data{finance_section} = '';
635   if ( $conf->config('finance_pkgclass') ) {
636     my $pkg_class =
637       qsearchs('pkg_class', { classnum => $conf->config('finance_pkgclass') });
638     $invoice_data{finance_section} = $pkg_class->categoryname;
639   }
640   $invoice_data{finance_amount} = '0.00';
641   $invoice_data{finance_section} ||= 'Finance Charges'; #avoid config confusion
642
643   my $countrydefault = $conf->config('countrydefault') || 'US';
644   foreach ( qw( address1 address2 city state zip country fax) ){
645     my $method = 'ship_'.$_;
646     $invoice_data{"ship_$_"} = $escape_function->($cust_main->$method);
647   }
648   if ( length($cust_main->ship_company) ) {
649     $invoice_data{'ship_company'} = $escape_function->($cust_main->ship_company);
650   } else {
651     $invoice_data{'ship_company'} = $escape_function->($cust_main->company);
652   }
653   $invoice_data{'ship_contact'} = $escape_function->($cust_main->contact);
654   $invoice_data{'ship_country'} = ''
655     if ( $invoice_data{'ship_country'} eq $countrydefault );
656
657   $invoice_data{'cid'} = $params{'cid'}
658     if $params{'cid'};
659
660   if ( $cust_main->bill_locationnum
661        && $cust_main->bill_location->country ne $countrydefault ) {
662     $invoice_data{'country'} = &$escape_function($cust_main->bill_country_full);
663   } else {
664     $invoice_data{'country'} = '';
665   }
666
667   my @address = ();
668   $invoice_data{'address'} = \@address;
669   push @address,
670     $invoice_data{'payname'}.
671       ( $cust_main->po_number
672           ? " (P.O. #". $cust_main->po_number. ")"
673           : ''
674       )
675   ;
676   push @address, $cust_main->company
677     if $cust_main->company;
678   push @address, $cust_main->address1;
679   push @address, $cust_main->address2
680     if $cust_main->address2;
681   push @address,
682     $cust_main->city. ", ". $cust_main->state. "  ".  $cust_main->zip;
683   push @address, $invoice_data{'country'}
684     if $invoice_data{'country'};
685   push @address, ''
686     while (scalar(@address) < 5);
687
688   $invoice_data{'logo_file'} = $params{'logo_file'}
689     if $params{'logo_file'};
690   $invoice_data{'barcode_file'} = $params{'barcode_file'}
691     if $params{'barcode_file'};
692   $invoice_data{'barcode_img'} = $params{'barcode_img'}
693     if $params{'barcode_img'};
694   $invoice_data{'barcode_cid'} = $params{'barcode_cid'}
695     if $params{'barcode_cid'};
696
697
698   # re: rt:78190
699   #   using owed_on_invoice() instead of owed() here for $balance_due
700   #   using _items_previous_total() instead of ->previous() for $pr_total
701   #
702   #   owed_on_invoice() is aware of configuration flags that affect how an
703   #     invoice is rendered.  May not return actual current balance. Will
704   #     return balance appropriate for the invoice being rendered, based
705   #     on which past due items, current charges, and future payments are
706   #     displayed.
707   #
708   #   Going forward, usage of owed(), or bypassing cust_bill helper methods
709   #     when generating invoice lines may lead to incorrect or misleading
710   #     math on invoices.
711   #
712   #   Helper methods that are aware of invoicing conf flags:
713   #   - owed_on_invoice          # use instead of owed()
714   #   - _items_previous()        # use instead of previous()
715   #   - _items_credits()         # use instead of cust_credit()
716   #   - _items_payments()
717   #   - _items_total()
718   #   - _items_previous_total()  # use instead of previous()
719   #   - _items_payments_total()
720   #   - _items_credits_total()   # use instead of cust_credit()
721
722   my $pr_total    = $self->_items_previous_total();
723
724   my $balance_due = $self->owed_on_invoice();
725   $invoice_data{'balance'} = sprintf("%.2f", $balance_due);
726
727   # flag telling this invoice to have a first-page summary
728   my $summarypage = '';
729
730   if ( $self->custnum && $self->invnum ) {
731     # XXX should be an FS::cust_bill method to set the defaults, instead
732     # of checking the type here
733
734     # info from customer's last invoice before this one, for some
735     # summary formats
736     $invoice_data{'last_bill'} = {};
737
738     #    my $last_bill = $self->previous_bill;
739     # if ( $last_bill ) {
740
741     # Populate template stash for previous balance and payments
742     if ($pr_total) {
743       # Used on summary page as "Previous Balance"
744       $invoice_data{'true_previous_balance'} = sprintf("%.2f", $pr_total);
745
746       # Used on summary page as "Payments"
747       $invoice_data{'balance_adjustments'} = sprintf("%.2f",
748         $self->_items_payments_total() + $self->_items_credits_total()
749       );
750
751       # Used in invoice template as "Previous Balance"
752       $invoice_data{'previous_balance'} = sprintf("%.2f", $pr_total);
753
754       # $invoice_data{last_bill}{_date}:
755       # Not used in default templates, but may be in use by someone
756       #
757       # ! May be a problem field if they are using it... this field
758       #   stores the date of the previous invoice... it is possible to
759       #   carry a balance, but have the immediately previous invoice paid off.
760       #   In this case, this field might be presenting bad data?  Not
761       #   altering the problematic behavior, because someone might be
762       #   expecting this bad behavior in their templates for some other
763       #   purpose, such as a "your last bill was dated %_date%"
764       my $last_bill = $self->previous_bill;
765       $invoice_data{'last_bill'}{'_date'}
766         = ref $last_bill
767         ? $last_bill->_date()
768         : undef;
769
770       # $invoice_data{previous_payments}
771       # Not used in default templates, but may be in use by someone
772       #
773       # Returns an array of hrefs representing payments, each with keys:
774       #  - _date:       epoch timestamp
775       #  - date:        text formatted date
776       #  - amount:      money formatted amount string
777       #  - payinfo:     string from payby_payinfo_pretty()
778       #  - paynum:      id for cust_pay
779       #  - description: Text description for bill line item
780       #
781       my @payments = $self->_items_payments();
782       $invoice_data{previous_payments} = \@payments;
783
784       # $invoice_data{previous_credits}
785       # Not used in default templates, but may be in use by someone
786       #
787       # Returns an array of hrefs representing credits, each with keys:
788       #  - _date:        epoch timestamp
789       #  - date:         text formatted date
790       #  - amount:       money formatted amount string
791       #  - crednum:      id for cust_credit
792       #  - description:  Text description for bill line item
793       #  - creditreason: reason() from cust_credit
794       #
795       my @credits = $self->_items_credits();
796       $invoice_data{previous_credits} = \@credits;
797
798       # Populate formatted date field
799       for my $pmt_href (@payments, @credits) {
800         $pmt_href->{date} = $self->time2str_local(
801           'long',
802           $pmt_href->{_date},
803           $format
804         );
805       }
806
807     } else {
808       # There are no outstanding invoices    = YAPH
809       $invoice_data{'true_previous_balance'} =
810       $invoice_data{'balance_adjustments'}   =
811       $invoice_data{'previous_balance'}      = '0.00';
812       $invoice_data{'previous_payments'}     =
813       $invoice_data{'previous_credits'}      = [];
814     }
815
816     # Condencing a lot of debug staements here
817     if ($DEBUG) {
818       warn "\$invoice_data{$_}: $invoice_data{$_}"
819         for qw(
820           true_previous_balance
821           balance_adjustments
822           previous_balance
823           previous_payments
824           previous_credits
825         );
826     }
827
828     if ( $conf->config_bool('invoice_usesummary', $agentnum) ) {
829       $invoice_data{'summarypage'} = $summarypage = 1;
830     }
831
832   } # if this is an invoice
833
834   warn "$me substituting variables in notes, footer, smallfooter\n"
835     if $DEBUG > 1;
836
837   my $tc = $self->template_conf;
838   my @include = ( [ $tc,        'notes' ],
839                   [ 'invoice_', 'footer' ],
840                   [ 'invoice_', 'smallfooter', ],
841                   [ 'invoice_', 'watermark' ],
842                 );
843   push @include, [ $tc,        'coupon', ]
844     unless $params{'no_coupon'};
845
846   foreach my $i (@include) {
847
848     # load the configuration for this sub-template
849
850     my($base, $include) = @$i;
851
852     my $inc_file = $conf->key_orbase("$base$format$include", $template);
853
854     my @inc_src = $conf->config($inc_file, $agentnum);
855     if (!@inc_src) {
856       my $converter = $convert_maps{$format}{$include};
857       if ( $converter ) {
858         # then attempt to convert LaTeX to the requested format
859         $inc_file = $conf->key_orbase($base.'latex'.$include, $template);
860         @inc_src = &$converter( $conf->config($inc_file, $agentnum) );
861         foreach (@inc_src) {
862           # this isn't included in the convert_maps
863           my ($open, $close) = @{ $delimiters{$format} };
864           s/\[\@--/$open/g;
865           s/--\@\]/$close/g;
866         }
867       }
868     } # else @inc_src is empty and that's fine
869
870     # make a Text::Template out of it
871
872     my $inc_tt = new Text::Template (
873       TYPE       => 'ARRAY',
874       SOURCE     => [ map "$_\n", @inc_src ],
875       DELIMITERS => $delimiters{$format},
876     ) or die "Can't create new Text::Template object: $Text::Template::ERROR";
877
878     unless ( $inc_tt->compile() ) {
879       my $error = "Can't compile $inc_file template: $Text::Template::ERROR\n";
880       warn $error. "Template:\n". join('', map "$_\n", @inc_src);
881       die $error;
882     }
883
884     # fill in variables
885
886     $invoice_data{$include} = $inc_tt->fill_in( HASH => \%invoice_data );
887
888     $invoice_data{$include} =~ s/\n+$//
889       if ($format eq 'latex');
890   }
891
892 # if (well, probably when) we still need PO numbers in the brave new world of
893 # 4.x, then we'll have to add them back as their own customer fields
894 #  # let invoices use either of these as needed
895 #  $invoice_data{'po_num'} = ($cust_main->payby eq 'BILL')
896 #    ? $cust_main->payinfo : '';
897 #  $invoice_data{'po_line'} =
898 #    (  $cust_main->payby eq 'BILL' && $cust_main->payinfo )
899 #      ? &$escape_function($self->mt("Purchase Order #").$cust_main->payinfo)
900 #      : $nbsp;
901
902   my %money_chars = ( 'latex'    => '',
903                       'html'     => $conf->config('money_char') || '$',
904                       'template' => '',
905                     );
906   my $money_char = $money_chars{$format};
907
908   # extremely dubious
909   my %other_money_chars = ( 'latex'    => '\dollar ',#XXX should be a config too
910                             'html'     => $conf->config('money_char') || '$',
911                             'template' => '',
912                           );
913   my $other_money_char = $other_money_chars{$format};
914   $invoice_data{'dollar'} = $other_money_char;
915
916   my %minus_signs = ( 'latex'    => '$-$',
917                       'html'     => '&minus;',
918                       'template' => '- ' );
919   my $minus = $minus_signs{$format};
920
921   my @detail_items = ();
922   my @total_items = ();
923   my @buf = ();
924   my @sections = ();
925
926   $invoice_data{'detail_items'} = \@detail_items;
927   $invoice_data{'total_items'} = \@total_items;
928   $invoice_data{'buf'} = \@buf;
929   $invoice_data{'sections'} = \@sections;
930
931   warn "$me generating sections\n"
932     if $DEBUG > 1;
933
934   my $unsquelched = $params{unsquelch_cdr} || $cust_main->squelch_cdr ne 'Y';
935   my $multisection = $self->has_sections;
936   if ( $multisection ) {
937     $invoice_data{multisection} = $conf->config($tc.'sections_method') || 1;
938   }
939   my $late_sections;
940   my $extra_sections = [];
941   my $extra_lines = ();
942
943   # default section ('Charges')
944   my $default_section = { 'description' => '',
945                           'subtotal'    => '',
946                           'no_subtotal' => 1,
947                         };
948
949   # Previous Charges section
950   # subtotal is the first return value from $self->previous
951   my $previous_section;
952   # if the invoice has major sections, or if we're summarizing previous
953   # charges with a single line, or if we've been specifically told to put them
954   # in a section, create a section for previous charges:
955   if ( $multisection or
956        $conf->exists('previous_balance-summary_only') or
957        $conf->exists('previous_balance-section') ) {
958
959     $previous_section =  { 'description' => $self->mt('Previous Charges'),
960                            'subtotal'    => $other_money_char.
961                                             sprintf('%.2f', $pr_total),
962                            'summarized'  => '', #why? $summarypage ? 'Y' : '',
963                          };
964
965     # Include balance aging line and template variables
966     my @aged_balances = $self->_items_aging_balances();
967     ( $invoice_data{aged_balance_current},
968       $invoice_data{aged_balance_30d},
969       $invoice_data{aged_balance_60d},
970       $invoice_data{aged_balance_90d}
971     ) = @aged_balances;
972
973     if ($conf->exists('invoice_include_aging')) {
974       $previous_section->{posttotal} = sprintf(
975         '0 / 30 / 60 / 90 days overdue %.2f / %.2f / %.2f / %.2f',
976         @aged_balances,
977       );
978     }
979
980   } else {
981     # otherwise put them in the main section
982     $previous_section = $default_section;
983   }
984
985   my $adjust_section = {
986     'description'    => $self->mt('Credits, Payments, and Adjustments'),
987     'adjust_section' => 1,
988     'subtotal'       => 0,   # adjusted below
989   };
990   my $adjust_weight = _pkg_category($adjust_section->{description})
991                         ? _pkg_category($adjust_section->{description})->weight
992                         : 0;
993   $adjust_section->{'summarized'} = ''; #why? $summarypage && !$adjust_weight ? 'Y' : '';
994   # Note: 'sort_weight' here is actually a flag telling whether there is an
995   # explicit package category for the adjust section. If so, certain behavior
996   # happens.
997   $adjust_section->{'sort_weight'} = $adjust_weight;
998
999
1000   if ( $multisection ) {
1001     ($extra_sections, $extra_lines) =
1002       $self->_items_extra_usage_sections($escape_function_nonbsp, $format)
1003       if $conf->exists('usage_class_as_a_section', $cust_main->agentnum)
1004       && $self->can('_items_extra_usage_sections');
1005
1006     push @$extra_sections, $adjust_section if $adjust_section->{sort_weight};
1007
1008     push @detail_items, @$extra_lines if $extra_lines;
1009
1010     # the code is written so that both methods can be used together, but
1011     # we haven't yet changed the template to take advantage of that, so for
1012     # now, treat them as mutually exclusive.
1013     my %section_method = ( by_category => 1 );
1014     if ( $conf->config($tc.'sections_method') eq 'location' ) {
1015       %section_method = ( by_location => 1 );
1016     }
1017     my ($early, $late) =
1018       $self->_items_sections( 'summary' => $summarypage,
1019                               'escape'  => $escape_function_nonbsp,
1020                               'extra_sections' => $extra_sections,
1021                               'format'  => $format,
1022                               %section_method
1023                             );
1024     push @sections, @$early;
1025     $late_sections = $late;
1026
1027     if (    $conf->exists('svc_phone_sections')
1028          && $self->can('_items_svc_phone_sections')
1029        )
1030     {
1031       my ($phone_sections, $phone_lines) =
1032         $self->_items_svc_phone_sections($escape_function_nonbsp, $format);
1033       push @{$late_sections}, @$phone_sections;
1034       push @detail_items, @$phone_lines;
1035     }
1036     if ( $conf->exists('voip-cust_accountcode_cdr')
1037          && $cust_main->accountcode_cdr
1038          && $self->can('_items_accountcode_cdr')
1039        )
1040     {
1041       my ($accountcode_section, $accountcode_lines) =
1042         $self->_items_accountcode_cdr($escape_function_nonbsp,$format);
1043       if ( scalar(@$accountcode_lines) ) {
1044           push @{$late_sections}, $accountcode_section;
1045           push @detail_items, @$accountcode_lines;
1046       }
1047     }
1048   } else {# not multisection
1049     # make a default section
1050     push @sections, $default_section;
1051     # and calculate the finance charge total, since it won't get done otherwise.
1052     # and the default section total
1053     # XXX possibly finance_pkgclass should not be used in this manner?
1054     my @finance_charges;
1055     my @charges;
1056     foreach my $cust_bill_pkg ( $self->cust_bill_pkg ) {
1057       if ( $invoice_data{finance_section} and
1058         grep { $_->section eq $invoice_data{finance_section} }
1059            $cust_bill_pkg->cust_bill_pkg_display ) {
1060         # I think these are always setup fees, but just to be sure...
1061         push @finance_charges, $cust_bill_pkg->recur + $cust_bill_pkg->setup;
1062       } else {
1063         push @charges, $cust_bill_pkg->recur + $cust_bill_pkg->setup;
1064       }
1065     }
1066     $invoice_data{finance_amount} =
1067       sprintf('%.2f', sum( @finance_charges ) || 0);
1068     $default_section->{subtotal} = $other_money_char.
1069                                     sprintf('%.2f', sum( @charges ) || 0);
1070   }
1071
1072   # start setting up summary subtotals
1073   my @summary_subtotals;
1074   my $method = $conf->config('summary_subtotals_method');
1075   if ( $method and $method ne $conf->config($tc.'sections_method') ) {
1076     # then re-section them by the correct method
1077     my %section_method = ( by_category => 1 );
1078     if ( $conf->config('summary_subtotals_method') eq 'location' ) {
1079       %section_method = ( by_location => 1 );
1080     }
1081     my ($early, $late) =
1082       $self->_items_sections( 'summary' => $summarypage,
1083                               'escape'  => $escape_function_nonbsp,
1084                               'extra_sections' => $extra_sections,
1085                               'format'  => $format,
1086                               %section_method
1087                             );
1088     foreach ( @$early ) {
1089       next if $_->{subtotal} == 0;
1090       $_->{subtotal} = $other_money_char.sprintf('%.2f', $_->{subtotal});
1091       push @summary_subtotals, $_;
1092     }
1093   } else {
1094     # subtotal sectioning is the same as for the actual invoice sections
1095     @summary_subtotals = grep $_->{subtotal}, @sections;
1096   }
1097
1098   # Hereafter, push sections to both @sections and @summary_subtotals
1099   # if they belong in both places (e.g. tax section).  Late sections are
1100   # never in @summary_subtotals.
1101
1102   # previous invoice balances in the Previous Charges section if there
1103   # is one, otherwise in the main detail section
1104   # (except if summary_only is enabled, don't show them at all)
1105   if ( $self->can('_items_previous') &&
1106        $self->enable_previous &&
1107        ! $conf->exists('previous_balance-summary_only') ) {
1108
1109     warn "$me adding previous balances\n"
1110       if $DEBUG > 1;
1111
1112     foreach my $line_item ( $self->_items_previous ) {
1113
1114       my $detail = {
1115         ref             => $line_item->{'pkgnum'},
1116         pkgpart         => $line_item->{'pkgpart'},
1117         #quantity        => 1, # not really correct
1118         section         => $previous_section, # which might be $default_section
1119         description     => &$escape_function($line_item->{'description'}),
1120         ext_description => [ map { &$escape_function($_) }
1121                              @{ $line_item->{'ext_description'} || [] }
1122                            ],
1123         amount          => $money_char . $line_item->{'amount'},
1124         product_code    => $line_item->{'pkgpart'} || 'N/A',
1125       };
1126
1127       push @detail_items, $detail;
1128       push @buf, [ $detail->{'description'},
1129                    $money_char. sprintf("%10.2f", $line_item->{'amount'}),
1130                  ];
1131     }
1132
1133   }
1134
1135   if ( $pr_total && $self->enable_previous ) {
1136     push @buf, ['','-----------'];
1137     push @buf, [ $self->mt('Total Previous Balance'),
1138                  $money_char. sprintf("%10.2f", $pr_total) ];
1139     push @buf, ['',''];
1140   }
1141
1142   if ( $conf->exists('svc_phone-did-summary') && $self->can('_did_summary') ) {
1143       warn "$me adding DID summary\n"
1144         if $DEBUG > 1;
1145
1146       my ($didsummary,$minutes) = $self->_did_summary;
1147       my $didsummary_desc = 'DID Activity Summary (since last invoice)';
1148       push @detail_items,
1149        { 'description' => $didsummary_desc,
1150            'ext_description' => [ $didsummary, $minutes ],
1151        };
1152   }
1153
1154   foreach my $section (@sections, @$late_sections) {
1155
1156     # begin some normalization
1157     $section->{'subtotal'} = $section->{'amount'}
1158       if $multisection
1159          && !exists($section->{subtotal})
1160          && exists($section->{amount});
1161
1162     $invoice_data{finance_amount} = sprintf('%.2f', $section->{'subtotal'} )
1163       if ( $invoice_data{finance_section} &&
1164            $section->{'description'} eq $invoice_data{finance_section} );
1165
1166     if ( $multisection ) {
1167
1168       if ( ref($section->{'subtotal'}) ) {
1169
1170         $section->{'subtotal'} =
1171           sprintf("$other_money_char%.2f to $other_money_char%.2f",
1172                     $section->{'subtotal'}[0],
1173                     $section->{'subtotal'}[1]
1174                  );
1175
1176       } else {
1177
1178         $section->{'subtotal'} = $other_money_char.
1179                                  sprintf('%.2f', $section->{'subtotal'})
1180
1181       }
1182
1183       # continue some normalization
1184       $section->{'amount'}   = $section->{'subtotal'}
1185
1186     }
1187
1188     if ( $section->{'description'} ) {
1189       push @buf, ( [ &$escape_function($section->{'description'}), '' ],
1190                    [ '', '' ],
1191                  );
1192     }
1193
1194     warn "$me   setting options\n"
1195       if $DEBUG > 1;
1196
1197     my %options = ();
1198     $options{'section'} = $section if $multisection;
1199     $options{'section_with_taxes'} = 1
1200       if $multisection
1201       && $conf->config_bool('invoice_sections_with_taxes', $cust_main->agentnum);
1202     $options{'format'} = $format;
1203     $options{'escape_function'} = $escape_function;
1204     $options{'no_usage'} = 1 unless $unsquelched;
1205     $options{'unsquelched'} = $unsquelched;
1206     $options{'summary_page'} = $summarypage;
1207     $options{'skip_usage'} =
1208       scalar(@$extra_sections) && !grep{$section == $_} @$extra_sections;
1209     $options{'preref_callback'} = $params{'preref_callback'};
1210     $options{'disable_line_item_date_ranges'} =
1211       $conf->exists('disable_line_item_date_ranges');
1212
1213     warn "$me   searching for line items\n"
1214       if $DEBUG > 1;
1215
1216     my %section_tax_lines;
1217     my %seen_tax_lines;
1218     foreach my $line_item ( $self->_items_pkg(%options),
1219                             $self->_items_fee(%options) ) {
1220
1221       # When bill is sectioned by location, fees may be displayed within the
1222       # appropriate location section.  Suppress this fee from the taxes/fees
1223       # end section, so it doesn't appear to be charged twice and make the
1224       # subtotals seem incorrect
1225       next
1226         if $line_item->{locationnum}
1227         && ref $options{section}
1228         && !exists $options{section}->{locationnum}
1229         && $self->has_sections
1230         && $conf->config($tc.'sections_method') eq 'location';
1231
1232       warn "$me     adding line item ".
1233            join(', ', map "$_=>".$line_item->{$_}, keys %$line_item). "\n"
1234         if $DEBUG > 1;
1235
1236       push @buf, ( [ $line_item->{'description'},
1237                      $money_char. sprintf("%10.2f", $line_item->{'amount'}),
1238                    ],
1239                    map { [ " ". $_, '' ] } @{$line_item->{'ext_description'}},
1240                  );
1241
1242       $line_item->{'ref'} = $line_item->{'pkgnum'};
1243       $line_item->{'product_code'} = $line_item->{'pkgpart'} || 'N/A'; # mt()?
1244       $line_item->{'section'} = $section;
1245       $line_item->{'description'} = &$escape_function($line_item->{'description'});
1246       $line_item->{'amount'} = $money_char.$line_item->{'amount'};
1247
1248       if ( length($line_item->{'unit_amount'}) ) {
1249         $line_item->{'unit_amount'} = $money_char.$line_item->{'unit_amount'};
1250       }
1251       $line_item->{'ext_description'} ||= [];
1252
1253       if ( $options{section_with_taxes} && ref $line_item->{pkg_tax} ) {
1254         for my $line_tax ( @{$ line_item->{pkg_tax} } ) {
1255
1256           # It is rarely possible for the same tax record to be presented here
1257           # multiple times.  See cust_bill_pkg::_pkg_tax_list for more info
1258           next if $seen_tax_lines{ $line_tax->{billpkgtaxlocationnum} };
1259           $seen_tax_lines{ $line_tax->{billpkgtaxlocationnum} } = 1;
1260
1261           $section_tax_lines{ $line_tax->{taxname} } += $line_tax->{amount};
1262         }
1263       }
1264
1265       push @detail_items, $line_item;
1266     }
1267
1268     # If conf flag invoice_sections_with_taxes:
1269     # - Add @detail_items for taxes into each section
1270     # - Update section subtotal to include taxes
1271     if ( $options{section_with_taxes} && %section_tax_lines ) {
1272       for my $taxname ( keys %section_tax_lines ) {
1273
1274         push @detail_items, {
1275           section => $section,
1276           amount  => sprintf($money_char."%.2f",$section_tax_lines{$taxname}),
1277           description => &$escape_function($taxname),
1278         };
1279
1280         # Append taxes to total.  If line format resembles "$5.00 to $12.00"
1281         # append to the second value.
1282
1283         # $section->{subtotal} = '$5.00 to 12.00'; # for testing:
1284         if ($section->{subtotal} =~ /to/) {
1285           my @subtotal = split /\s/, $section->{subtotal};
1286           $subtotal[2] =~ s/[^\d\.]//g;
1287           $subtotal[2] = sprintf(
1288             $money_char."%.2f",
1289             ( $subtotal[2] + $section_tax_lines{$taxname} )
1290           );
1291           $section->{subtotal} = join ' ', @subtotal;
1292         } else {
1293           $section->{subtotal} =~ s/[^\d\.]//g;
1294           $section->{subtotal} = sprintf(
1295             $money_char . "%.2f",
1296             ( $section->{subtotal} + $section_tax_lines{$taxname} )
1297           );
1298         }
1299
1300       }
1301     }
1302
1303     if ( $section->{'description'} ) {
1304       push @buf, ( ['','-----------'],
1305                    [ $section->{'description'}. ' sub-total',
1306                       $section->{'subtotal'} # already formatted this
1307                    ],
1308                    [ '', '' ],
1309                    [ '', '' ],
1310                  );
1311     }
1312
1313   }
1314
1315   $invoice_data{current_less_finance} =
1316     sprintf('%.2f', $self->charged - $invoice_data{finance_amount} );
1317
1318   # if there's anything in the Previous Charges section, prepend it to the list
1319   if ( $pr_total and $previous_section ne $default_section ) {
1320     unshift @sections, $previous_section;
1321     # but not @summary_subtotals
1322   }
1323
1324   warn "$me adding taxes\n"
1325     if $DEBUG > 1;
1326
1327   # create a tax section if we don't yet have one
1328   my @items_tax = $self->_items_tax;
1329   my $tax_description = 'Taxes, Surcharges, and Fees';
1330   my $tax_section =
1331     List::Util::first { $_->{description} eq $tax_description } @sections;
1332   if (!$tax_section) {
1333     $tax_section = { 'description' => $tax_description };
1334     push @sections, $tax_section if $multisection and @items_tax > 0;
1335   }
1336   $tax_section->{tax_section} = 1; # mark this section as containing taxes
1337   # if this is an existing tax section, we're merging the tax items into it.
1338   # grab the taxtotal that's already there, strip the money symbol if any
1339   my $taxtotal = $tax_section->{'subtotal'} || 0;
1340   $taxtotal =~ s/^\Q$other_money_char\E//;
1341
1342   # this does nothing
1343   #my $tax_weight = _pkg_category($tax_section->{description})
1344   #                      ? _pkg_category($tax_section->{description})->weight
1345   #                      : 0;
1346   #$tax_section->{'summarized'} = ''; #why? $summarypage && !$tax_weight ? 'Y' : '';
1347   #$tax_section->{'sort_weight'} = $tax_weight;
1348
1349   my $invoice_sections_with_taxes = $conf->config_bool(
1350     'invoice_sections_with_taxes', $cust_main->agentnum
1351   );
1352
1353   foreach my $tax ( @items_tax ) {
1354
1355
1356     my $description = &$escape_function( $tax->{'description'} );
1357     my $amount      = sprintf( '%.2f', $tax->{'amount'} );
1358
1359     if ( $multisection ) {
1360       if ( !$invoice_sections_with_taxes ) {
1361
1362         $taxtotal += $tax->{'amount'};
1363
1364         push @detail_items, {
1365           ext_description => [],
1366           ref          => '',
1367           quantity     => '',
1368           description  => $description,
1369           amount       => $money_char. $amount,
1370           product_code => '',
1371           section      => $tax_section,
1372         };
1373
1374       }
1375     } else {
1376
1377       $taxtotal += $tax->{'amount'};
1378
1379       push @total_items, {
1380         'total_item'   => $description,
1381         'total_amount' => $other_money_char. $amount,
1382       };
1383
1384     }
1385
1386     push @buf,[ $description,
1387                 $money_char. $amount,
1388               ];
1389
1390   }
1391
1392   if ( @items_tax ) {
1393     my $total = {};
1394     $total->{'total_item'} = $self->mt('Sub-total');
1395     $total->{'total_amount'} =
1396       $other_money_char. sprintf('%.2f', $self->charged - $taxtotal );
1397
1398     if ( $multisection ) {
1399
1400       if ( $conf->config_bool('invoice_sections_with_taxes', $cust_main->agentnum) ) {
1401         # If all tax items are displayed in location/category sections,
1402         # remove the empty tax section
1403         @sections = grep{ $_ ne $tax_section } @sections
1404           unless grep{ $_->{section} eq $tax_section } @detail_items;
1405       }
1406
1407       if ( $taxtotal > 0 ) {
1408         # there are taxes, so prepare the section to be displayed.
1409         # $taxtotal already includes any line items that were already in the
1410         # section (fees, taxes that are charged as packages for some reason).
1411         # also set 'summarized' to false so that this isn't a summary-only
1412         # section.
1413         $tax_section->{'subtotal'} = $other_money_char.
1414                                      sprintf('%.2f', $taxtotal);
1415         $tax_section->{'pretotal'} = 'New charges sub-total '.
1416                                      $total->{'total_amount'};
1417         $tax_section->{'description'} = $self->mt($tax_description);
1418         $tax_section->{'summarized'} = '';
1419
1420         # append tax section unless it's already there
1421         push @sections, $tax_section
1422           unless grep {$_ eq $tax_section} @sections;
1423
1424         push @summary_subtotals, $tax_section
1425           unless grep {$_ eq $tax_section} @summary_subtotals;
1426
1427       }
1428     } else {
1429       unshift @total_items, $total;
1430     }
1431   }
1432   $invoice_data{'taxtotal'} = sprintf('%.2f', $taxtotal);
1433
1434   ###
1435   # Totals
1436   ###
1437
1438   my %embolden_functions = (
1439     'latex'    => sub { return '\textbf{'. shift(). '}' },
1440     'html'     => sub { return '<b>'. shift(). '</b>' },
1441     'template' => sub { shift },
1442   );
1443   my $embolden_function = $embolden_functions{$format};
1444
1445   if ( $multisection ) {
1446
1447     if ( $adjust_section->{'sort_weight'} ) {
1448       $adjust_section->{'posttotal'} = $self->mt('Balance Forward').' '.
1449         $other_money_char.  sprintf("%.2f", ($self->billing_balance || 0) );
1450     } else{
1451       $adjust_section->{'pretotal'} = $self->mt('New charges total').' '.
1452         $other_money_char.  sprintf('%.2f', $self->charged );
1453     }
1454
1455   }
1456
1457   if ( $self->can('_items_total') ) { # should always be true now
1458
1459     # even for multisection, need plain text version
1460
1461     my @new_total_items = $self->_items_total;
1462
1463     push @buf,['','-----------'];
1464
1465     foreach ( @new_total_items ) {
1466       my ($item, $amount) = ($_->{'total_item'}, $_->{'total_amount'});
1467       $_->{'total_item'}   = &$embolden_function( $item );
1468
1469       if ( ref($amount) ) {
1470         $_->{'total_amount'} = &$embolden_function(
1471                                  $other_money_char.$amount->[0]. ' to '.
1472                                  $other_money_char.$amount->[1]
1473                                );
1474       } else {
1475         $_->{'total_amount'} = &$embolden_function( $other_money_char.$amount );
1476       }
1477
1478       # but if it's multisection, don't append to @total_items. the adjust
1479       # section has all this stuff
1480       push @total_items, $_ if !$multisection;
1481       push @buf, [ $item, $money_char.sprintf('%10.2f',$amount) ];
1482     }
1483
1484     push @buf, [ '', '' ];
1485
1486     # if we're showing previous invoices, also show previous
1487     # credits and payments
1488     if ( $self->enable_previous
1489           and $self->can('_items_credits')
1490           and $self->can('_items_payments') )
1491       {
1492
1493       # credits
1494       my $credittotal = 0;
1495       foreach my $credit (
1496         $self->_items_credits( 'template' => $template, 'trim_len' => 40 )
1497       ) {
1498
1499         my $total;
1500         $total->{'total_item'} = &$escape_function($credit->{'description'});
1501         $credittotal += $credit->{'amount'};
1502         $total->{'total_amount'} = $minus.$other_money_char.$credit->{'amount'};
1503         if ( $multisection ) {
1504           push @detail_items, {
1505             ext_description => [],
1506             ref          => '',
1507             quantity     => '',
1508             description  => &$escape_function($credit->{'description'}),
1509             amount       => $money_char . $credit->{'amount'},
1510             product_code => '',
1511             section      => $adjust_section,
1512           };
1513         } else {
1514           push @total_items, $total;
1515         }
1516
1517       }
1518       $invoice_data{'credittotal'} = sprintf('%.2f', $credittotal);
1519
1520       #credits (again)
1521       foreach my $credit (
1522         $self->_items_credits( 'template' => $template, 'trim_len'=>32 )
1523       ) {
1524         push @buf, [ $credit->{'description'}, $money_char.$credit->{'amount'} ];
1525       }
1526
1527       # payments
1528       my $paymenttotal = 0;
1529       foreach my $payment (
1530         $self->_items_payments( 'template' => $template )
1531       ) {
1532         my $total = {};
1533         $total->{'total_item'} = &$escape_function($payment->{'description'});
1534         $paymenttotal += $payment->{'amount'};
1535         $total->{'total_amount'} = $minus.$other_money_char.$payment->{'amount'};
1536         if ( $multisection ) {
1537           push @detail_items, {
1538             ext_description => [],
1539             ref          => '',
1540             quantity     => '',
1541             description  => &$escape_function($payment->{'description'}),
1542             amount       => $money_char . $payment->{'amount'},
1543             product_code => '',
1544             section      => $adjust_section,
1545           };
1546         }else{
1547           push @total_items, $total;
1548         }
1549         push @buf, [ $payment->{'description'},
1550                      $money_char. sprintf("%10.2f", $payment->{'amount'}),
1551                    ];
1552       }
1553       $invoice_data{'paymenttotal'} = sprintf('%.2f', $paymenttotal);
1554
1555       if ( $multisection ) {
1556         $adjust_section->{'subtotal'} = $other_money_char.
1557                                         sprintf('%.2f', $credittotal + $paymenttotal);
1558
1559         #why this? because {sort_weight} forces the adjust_section to appear
1560         #in @extra_sections instead of @sections. obviously.
1561         push @sections, $adjust_section
1562           unless $adjust_section->{sort_weight};
1563         # do not summarize; adjustments there are shown according to
1564         # different rules
1565       }
1566
1567       # create Balance Due message
1568       {
1569         my $total;
1570         $total->{'total_item'} = &$embolden_function($self->balance_due_msg);
1571         $total->{'total_amount'} =
1572           &$embolden_function(
1573             $other_money_char. sprintf('%.2f', #why? $summarypage
1574                                                #  ? $self->charged +
1575                                                #    $self->billing_balance
1576                                                #  :
1577                                                    $balance_due
1578                                       )
1579           );
1580         if ( $multisection && !$adjust_section->{sort_weight} ) {
1581           $adjust_section->{'posttotal'} = $total->{'total_item'}. ' '.
1582                                            $total->{'total_amount'};
1583         } else {
1584           push @total_items, $total;
1585         }
1586         push @buf,['','-----------'];
1587         push @buf,[$self->balance_due_msg, $money_char.
1588           sprintf("%10.2f", $balance_due ) ];
1589       }
1590
1591       if ( $conf->exists('previous_balance-show_credit')
1592           and $cust_main->balance < 0 ) {
1593         my $credit_total = {
1594           'total_item'    => &$embolden_function($self->credit_balance_msg),
1595           'total_amount'  => &$embolden_function(
1596             $other_money_char. sprintf('%.2f', -$cust_main->balance)
1597           ),
1598         };
1599         if ( $multisection ) {
1600           $adjust_section->{'posttotal'} .= $newline_token .
1601             $credit_total->{'total_item'} . ' ' . $credit_total->{'total_amount'};
1602         }
1603         else {
1604           push @total_items, $credit_total;
1605         }
1606         push @buf,['','-----------'];
1607         push @buf,[$self->credit_balance_msg, $money_char.
1608           sprintf("%10.2f", -$cust_main->balance ) ];
1609       }
1610     }
1611
1612   } #end of default total adding ! can('_items_total')
1613
1614   if ( $multisection ) {
1615     if (    $conf->exists('svc_phone_sections')
1616          && $self->can('_items_svc_phone_sections')
1617        )
1618     {
1619       my $total;
1620       $total->{'total_item'} = &$embolden_function($self->balance_due_msg);
1621       $total->{'total_amount'} =
1622         &$embolden_function(
1623           $other_money_char. sprintf('%.2f', $balance_due)
1624         );
1625       my $last_section = pop @sections;
1626       $last_section->{'posttotal'} = $total->{'total_item'}. ' '.
1627                                      $total->{'total_amount'};
1628       push @sections, $last_section;
1629     }
1630     push @sections, @$late_sections
1631       if $unsquelched;
1632   }
1633
1634   # make a discounts-available section, even without multisection
1635   if ( $conf->exists('discount-show_available')
1636        and my @discounts_avail = $self->_items_discounts_avail ) {
1637     my $discount_section = {
1638       'description' => $self->mt('Discounts Available'),
1639       'subtotal'    => '',
1640       'no_subtotal' => 1,
1641     };
1642
1643     push @sections, $discount_section; # do not summarize
1644     push @detail_items, map { +{
1645         'ref'         => '', #should this be something else?
1646         'section'     => $discount_section,
1647         'description' => &$escape_function( $_->{description} ),
1648         'amount'      => $money_char . &$escape_function( $_->{amount} ),
1649         'ext_description' => [ &$escape_function($_->{ext_description}) || () ],
1650     } } @discounts_avail;
1651   }
1652
1653   # not adding any more sections after this
1654   $invoice_data{summary_subtotals} = \@summary_subtotals;
1655
1656   # usage subtotals
1657   if ( $conf->exists('usage_class_summary')
1658        and $self->can('_items_usage_class_summary') ) {
1659     my @usage_subtotals = $self->_items_usage_class_summary(escape => $escape_function, 'money_char' => $other_money_char);
1660     if ( @usage_subtotals ) {
1661       unshift @sections, $usage_subtotals[0]->{section}; # do not summarize
1662       unshift @detail_items, @usage_subtotals;
1663     }
1664   }
1665
1666   # invoice history "section" (not really a section)
1667   # not to be included in any subtotals, completely independent of
1668   # everything...
1669   if ( $conf->exists('previous_invoice_history') and $cust_main->isa('FS::cust_main') ) {
1670     my %history;
1671     my %monthorder;
1672     foreach my $cust_bill ( $cust_main->cust_bill ) {
1673       # XXX hardcoded format, and currently only 'charged'; add other fields
1674       # if they become necessary
1675       my $date = $self->time2str_local('%b %Y', $cust_bill->_date);
1676       $history{$date} ||= 0;
1677       $history{$date} += $cust_bill->charged;
1678       # just so we have a numeric sort key
1679       $monthorder{$date} ||= $cust_bill->_date;
1680     }
1681     my @sorted_months = sort { $monthorder{$a} <=> $monthorder{$b} }
1682                         keys %history;
1683     my @sorted_amounts = map { sprintf('%.2f', $history{$_}) } @sorted_months;
1684     $invoice_data{monthly_history} = [ \@sorted_months, \@sorted_amounts ];
1685   }
1686
1687   # service locations: another option for template customization
1688   my %location_info;
1689   foreach my $item (@detail_items) {
1690     if ( $item->{locationnum} ) {
1691       $location_info{ $item->{locationnum} } ||= {
1692         FS::cust_location->by_key( $item->{locationnum} )->location_hash
1693       };
1694     }
1695   }
1696   $invoice_data{location_info} = \%location_info;
1697
1698   # debugging hook: call this with 'diag' => 1 to just get a hash of
1699   # the invoice variables
1700   return \%invoice_data if ( $params{'diag'} );
1701
1702   # All sections and items are built; now fill in templates.
1703   my @includelist = ();
1704   push @includelist, 'summary' if $summarypage;
1705   foreach my $include ( @includelist ) {
1706
1707     my $inc_file = $conf->key_orbase("invoice_${format}$include", $template);
1708     my @inc_src;
1709
1710     if ( length( $conf->config($inc_file, $agentnum) ) ) {
1711
1712       @inc_src = $conf->config($inc_file, $agentnum);
1713
1714     } else {
1715
1716       $inc_file = $conf->key_orbase("invoice_latex$include", $template);
1717
1718       my $convert_map = $convert_maps{$format}{$include};
1719
1720       @inc_src = map { s/\[\@--/$delimiters{$format}[0]/g;
1721                        s/--\@\]/$delimiters{$format}[1]/g;
1722                        $_;
1723                      }
1724                  &$convert_map( $conf->config($inc_file, $agentnum) );
1725
1726     }
1727
1728     my $inc_tt = new Text::Template (
1729       TYPE       => 'ARRAY',
1730       SOURCE     => [ map "$_\n", @inc_src ],
1731       DELIMITERS => $delimiters{$format},
1732     ) or die "Can't create new Text::Template object: $Text::Template::ERROR";
1733
1734     unless ( $inc_tt->compile() ) {
1735       my $error = "Can't compile $inc_file template: $Text::Template::ERROR\n";
1736       warn $error. "Template:\n". join('', map "$_\n", @inc_src);
1737       die $error;
1738     }
1739
1740     $invoice_data{$include} = $inc_tt->fill_in( HASH => \%invoice_data );
1741
1742     $invoice_data{$include} =~ s/\n+$//
1743       if ($format eq 'latex');
1744   }
1745
1746   $invoice_lines = 0;
1747   my $wasfunc = 0;
1748   foreach ( grep /invoice_lines\(\d*\)/, @invoice_template ) { #kludgy
1749     /invoice_lines\((\d*)\)/;
1750     $invoice_lines += $1 || scalar(@buf);
1751     $wasfunc=1;
1752   }
1753   die "no invoice_lines() functions in template?"
1754     if ( $format eq 'template' && !$wasfunc );
1755
1756   if ( $invoice_lines ) {
1757     $invoice_data{'total_pages'} = int( scalar(@buf) / $invoice_lines );
1758     $invoice_data{'total_pages'}++
1759       if scalar(@buf) % $invoice_lines;
1760   }
1761
1762   #setup subroutine for the template
1763   $invoice_data{invoice_lines} = sub {
1764     my $lines = shift || scalar(@buf);
1765     map {
1766       scalar(@buf)
1767         ? shift @buf
1768         : [ '', '' ];
1769     }
1770     ( 1 .. $lines );
1771   };
1772
1773   if ($format eq 'template') {
1774
1775     my $lines;
1776     my @collect;
1777     while (@buf) {
1778       push @collect, split("\n",
1779         $text_template->fill_in( HASH => \%invoice_data )
1780       );
1781       $invoice_data{'page'}++;
1782     }
1783     map "$_\n", @collect;
1784
1785   } else { # this is where we actually create the invoice
1786
1787     if ( $params{no_addresses} ) {
1788       delete $invoice_data{$_} foreach qw(
1789         payname company address1 address2 city state zip country
1790       );
1791       $invoice_data{returnaddress} = '~';
1792     }
1793
1794     warn "filling in template for invoice ". $self->invnum. "\n"
1795       if $DEBUG;
1796     warn join("\n", map " $_ => ". $invoice_data{$_}, keys %invoice_data). "\n"
1797       if $DEBUG > 1;
1798
1799     $text_template->fill_in(HASH => \%invoice_data);
1800   }
1801 }
1802
1803 sub notice_name { '('.shift->table.')'; }
1804
1805 # this is not supposed to happen
1806 sub template_conf { warn "bare FS::Template_Mixin::template_conf";
1807   'invoice_';
1808 }
1809
1810 =item print_ps HASHREF | [ TIME [ , TEMPLATE ] ]
1811
1812 Returns an postscript invoice, as a scalar.
1813
1814 Options can be passed as a hashref (recommended) or as a list of time, template
1815 and then any key/value pairs for any other options.
1816
1817 I<time> an optional value used to control the printing of overdue messages.  The
1818 default is now.  It isn't the date of the invoice; that's the `_date' field.
1819 It is specified as a UNIX timestamp; see L<perlfunc/"time">.  Also see
1820 L<Time::Local> and L<Date::Parse> for conversion functions.
1821
1822 I<notice_name>, if specified, overrides "Invoice" as the name of the sent document (templates from 10/2009 or newer required)
1823
1824 =cut
1825
1826 sub print_ps {
1827   my $self = shift;
1828
1829   my ($file, $logofile, $barcodefile) = $self->print_latex(@_);
1830   my $ps = generate_ps($file);
1831   unlink($logofile);
1832   unlink($barcodefile) if $barcodefile;
1833
1834   $ps;
1835 }
1836
1837 =item print_pdf HASHREF | [ TIME [ , TEMPLATE ] ]
1838
1839 Returns an PDF invoice, as a scalar.
1840
1841 Options can be passed as a hashref (recommended) or as a list of time, template
1842 and then any key/value pairs for any other options.
1843
1844 I<time> an optional value used to control the printing of overdue messages.  The
1845 default is now.  It isn't the date of the invoice; that's the `_date' field.
1846 It is specified as a UNIX timestamp; see L<perlfunc/"time">.  Also see
1847 L<Time::Local> and L<Date::Parse> for conversion functions.
1848
1849 I<template>, if specified, is the name of a suffix for alternate invoices.
1850
1851 I<notice_name>, if specified, overrides "Invoice" as the name of the sent document (templates from 10/2009 or newer required)
1852
1853 =cut
1854
1855 sub print_pdf {
1856   my $self = shift;
1857
1858   my ($file, $logofile, $barcodefile) = $self->print_latex(@_);
1859   my $pdf = generate_pdf($file);
1860   unlink($logofile);
1861   unlink($barcodefile) if $barcodefile;
1862
1863   $pdf;
1864 }
1865
1866 =item print_html HASHREF | [ TIME [ , TEMPLATE [ , CID ] ] ]
1867
1868 Returns an HTML invoice, as a scalar.
1869
1870 I<time> an optional value used to control the printing of overdue messages.  The
1871 default is now.  It isn't the date of the invoice; that's the `_date' field.
1872 It is specified as a UNIX timestamp; see L<perlfunc/"time">.  Also see
1873 L<Time::Local> and L<Date::Parse> for conversion functions.
1874
1875 I<template>, if specified, is the name of a suffix for alternate invoices.
1876
1877 I<notice_name>, if specified, overrides "Invoice" as the name of the sent document (templates from 10/2009 or newer required)
1878
1879 I<cid> is a MIME Content-ID used to create a "cid:" URL for the logo image, used
1880 when emailing the invoice as part of a multipart/related MIME email.
1881
1882 =cut
1883
1884 sub print_html {
1885   my $self = shift;
1886   my %params;
1887   if ( ref($_[0]) ) {
1888     %params = %{ shift() };
1889   } else {
1890     %params = @_;
1891   }
1892   $params{'format'} = 'html';
1893
1894   $self->print_generic( %params );
1895 }
1896
1897 # quick subroutine for print_latex
1898 #
1899 # There are ten characters that LaTeX treats as special characters, which
1900 # means that they do not simply typeset themselves:
1901 #      # $ % & ~ _ ^ \ { }
1902 #
1903 # TeX ignores blanks following an escaped character; if you want a blank (as
1904 # in "10% of ..."), you have to "escape" the blank as well ("10\%\ of ...").
1905
1906 sub _latex_escape {
1907   my $value = shift;
1908   $value =~ s/([#\$%&~_\^{}])( )?/"\\$1". ( ( defined($2) && length($2) ) ? "\\$2" : '' )/ge;
1909   $value =~ s/([<>])/\$$1\$/g;
1910   $value;
1911 }
1912
1913 sub _html_escape {
1914   my $value = shift;
1915   encode_entities($value);
1916   $value;
1917 }
1918
1919 sub _html_escape_nbsp {
1920   my $value = _html_escape(shift);
1921   $value =~ s/ +/&nbsp;/g;
1922   $value;
1923 }
1924
1925 #utility methods for print_*
1926
1927 sub _translate_old_latex_format {
1928   warn "_translate_old_latex_format called\n"
1929     if $DEBUG;
1930
1931   my @template = ();
1932   while ( @_ ) {
1933     my $line = shift;
1934
1935     if ( $line =~ /^%%Detail\s*$/ ) {
1936
1937       push @template, q![@--!,
1938                       q!  foreach my $_tr_line (@detail_items) {!,
1939                       q!    if ( scalar ($_tr_item->{'ext_description'} ) ) {!,
1940                       q!      $_tr_line->{'description'} .= !,
1941                       q!        "\\tabularnewline\n~~".!,
1942                       q!        join( "\\tabularnewline\n~~",!,
1943                       q!          @{$_tr_line->{'ext_description'}}!,
1944                       q!        );!,
1945                       q!    }!;
1946
1947       while ( ( my $line_item_line = shift )
1948               !~ /^%%EndDetail\s*$/                            ) {
1949         $line_item_line =~ s/'/\\'/g;    # nice LTS
1950         $line_item_line =~ s/\\/\\\\/g;  # escape quotes and backslashes
1951         $line_item_line =~ s/\$(\w+)/'. \$_tr_line->{$1}. '/g;
1952         push @template, "    \$OUT .= '$line_item_line';";
1953       }
1954
1955       push @template, '}',
1956                       '--@]';
1957       #' doh, gvim
1958     } elsif ( $line =~ /^%%TotalDetails\s*$/ ) {
1959
1960       push @template, '[@--',
1961                       '  foreach my $_tr_line (@total_items) {';
1962
1963       while ( ( my $total_item_line = shift )
1964               !~ /^%%EndTotalDetails\s*$/                      ) {
1965         $total_item_line =~ s/'/\\'/g;    # nice LTS
1966         $total_item_line =~ s/\\/\\\\/g;  # escape quotes and backslashes
1967         $total_item_line =~ s/\$(\w+)/'. \$_tr_line->{$1}. '/g;
1968         push @template, "    \$OUT .= '$total_item_line';";
1969       }
1970
1971       push @template, '}',
1972                       '--@]';
1973
1974     } else {
1975       $line =~ s/\$(\w+)/[\@-- \$$1 --\@]/g;
1976       push @template, $line;
1977     }
1978
1979   }
1980
1981   if ($DEBUG) {
1982     warn "$_\n" foreach @template;
1983   }
1984
1985   (@template);
1986 }
1987
1988 =item terms
1989
1990 =cut
1991
1992 sub terms {
1993   my $self = shift;
1994   my $conf = $self->conf;
1995
1996   #check for an invoice-specific override
1997   return $self->invoice_terms if $self->invoice_terms;
1998
1999   #check for a customer- specific override
2000   my $cust_main = $self->cust_main;
2001   return $cust_main->invoice_terms if $cust_main && $cust_main->invoice_terms;
2002
2003   my $agentnum = '';
2004   if ( $cust_main ) {
2005     $agentnum = $cust_main->agentnum;
2006   } elsif ( my $prospect_main = $self->prospect_main ) {
2007     $agentnum = $prospect_main->agentnum;
2008   }
2009
2010   #use configured default
2011   $conf->config('invoice_default_terms', $agentnum) || '';
2012 }
2013
2014 =item due_date
2015
2016 =cut
2017
2018 sub due_date {
2019   my $self = shift;
2020   my $duedate = '';
2021   if ( $self->terms =~ /^\s*Net\s*(\d+)\s*$/ ) {
2022     $duedate = $self->_date() + ( $1 * 86400 );
2023   } elsif ( $self->terms =~ /^End of Month$/ ) {
2024     my ($mon,$year) = (localtime($self->_date) )[4,5];
2025     $mon++;
2026     until ( $mon < 12 ) { $mon -= 12; $year++; }
2027     my $nextmonth_first = timelocal(0,0,0,1,$mon,$year);
2028     $duedate = $nextmonth_first - 86400;
2029   }
2030   $duedate;
2031 }
2032
2033 =item due_date2str
2034
2035 =cut
2036
2037 sub due_date2str {
2038   my $self = shift;
2039   $self->due_date ? $self->time2str_local(shift, $self->due_date) : '';
2040 }
2041
2042 =item invoice_pay_by_msg
2043
2044   displays the invoice_pay_by_msg or default Please pay by [_1] if empty.
2045
2046 =cut
2047
2048 sub invoice_pay_by_msg {
2049   my $self = shift;
2050   my $msg = '';
2051   my $please_pay_by =
2052         $self->conf->config('invoice_pay_by_msg', $self->agentnum)
2053         || 'Please pay by [_1]';
2054   $msg .= ' - ' . $self->mt($please_pay_by, $self->due_date2str('short')) . ' ';
2055
2056   $msg;
2057 }
2058
2059 =item balance_due_msg
2060
2061 =cut
2062
2063 sub balance_due_msg {
2064   my $self = shift;
2065   my $msg = $self->mt('Balance Due');
2066   return $msg unless $self->terms; # huh?
2067   if ( !$self->conf->exists('invoice_show_prior_due_date')
2068        || $self->has_sections ) {
2069     # if enabled, the due date is shown with Total New Charges (see
2070     # _items_total) and not here
2071     # (yes, or if invoice_sections is enabled; this is just for compatibility)
2072     if ( $self->due_date ) {
2073       $msg .= $self->invoice_pay_by_msg
2074        unless $self->conf->config_bool('invoice_omit_due_date',$self->agentnum);
2075     } elsif ( $self->terms ) {
2076       $msg .= ' - '. $self->mt($self->terms);
2077     }
2078   }
2079   $msg;
2080 }
2081
2082 =item balance_due_date
2083
2084 =cut
2085
2086 sub balance_due_date {
2087   my $self = shift;
2088   my $conf = $self->conf;
2089   my $duedate = '';
2090   my $terms = $self->terms;
2091   if ( $terms =~ /^\s*Net\s*(\d+)\s*$/ ) {
2092     $duedate = $self->time2str_local('rdate', $self->_date + ($1*86400) );
2093   }
2094   $duedate;
2095 }
2096
2097 sub credit_balance_msg {
2098   my $self = shift;
2099   $self->mt('Credit Balance Remaining')
2100 }
2101
2102 =item _date_pretty
2103
2104 Returns a string with the date, for example: "3/20/2008", localized for the
2105 customer.  Use _date_pretty_unlocalized for non-end-customer display use.
2106
2107 =cut
2108
2109 sub _date_pretty {
2110   my $self = shift;
2111   $self->time2str_local('short', $self->_date);
2112 }
2113
2114 =item _date_pretty_unlocalized
2115
2116 Returns a string with the date, for example: "3/20/2008", in the format
2117 configured for the back-office.  Use _date_pretty for end-customer display use.
2118
2119 =cut
2120
2121 sub _date_pretty_unlocalized {
2122   my $self = shift;
2123   time2str($date_format, $self->_date);
2124 }
2125
2126 =item email HASHREF
2127
2128 Emails this template.
2129
2130 Options are passed as a hashref.  Available options:
2131
2132 =over 4
2133
2134 =item from
2135
2136 If specified, overrides the default From: address.
2137
2138 =item notice_name
2139
2140 If specified, overrides the name of the sent document ("Invoice" or "Quotation")
2141
2142 =item template
2143
2144 (Deprecated) If specified, is the name of a suffix for alternate template files.
2145
2146 =back
2147
2148 Options accepted by generate_email can also be used.
2149
2150 =cut
2151
2152 sub email {
2153   my $self = shift;
2154   my $opt = shift || {};
2155   if ($opt and !ref($opt)) {
2156     die ref($self). '->email called with positional parameters';
2157   }
2158
2159   return if $self->hide;
2160
2161   my $error = send_email(
2162     $self->generate_email(
2163       'subject'     => $self->email_subject($opt->{template}),
2164       %$opt, # template, etc.
2165     )
2166   );
2167
2168   die "can't email: $error\n" if $error;
2169 }
2170
2171 =item generate_email OPTION => VALUE ...
2172
2173 Options:
2174
2175 =over 4
2176
2177 =item from
2178
2179 sender address, required
2180
2181 =item template
2182
2183 alternate template name, optional
2184
2185 =item subject
2186
2187 email subject, optional
2188
2189 =item notice_name
2190
2191 notice name instead of "Invoice", optional
2192
2193 =back
2194
2195 Returns an argument list to be passed to L<FS::Misc::send_email>.
2196
2197 =cut
2198
2199 use MIME::Entity;
2200 use Encode;
2201
2202 sub generate_email {
2203
2204   my $self = shift;
2205   my %args = @_;
2206   my $conf = $self->conf;
2207
2208   my $me = '[FS::Template_Mixin::generate_email]';
2209
2210   my %return = (
2211     'from'      => $args{'from'},
2212     'subject'   => ($args{'subject'} || $self->email_subject),
2213     'custnum'   => $self->custnum,
2214     'msgtype'   => 'invoice',
2215   );
2216
2217   $args{'unsquelch_cdr'} = $conf->exists('voip-cdr_email');
2218
2219   my $cust_main = $self->cust_main;
2220
2221   if (ref($args{'to'}) eq 'ARRAY') {
2222     $return{'to'} = $args{'to'};
2223   } elsif ( $cust_main ) {
2224     $return{'to'} = [ $cust_main->invoicing_list_emailonly ];
2225   }
2226
2227   my $tc = $self->template_conf;
2228
2229   my @text; # array of lines
2230   my $html; # a big string
2231   my @related_parts; # will contain the text/HTML alternative, and images
2232   my $related; # will contain the multipart/related object
2233
2234   if ( $conf->exists($tc. 'email_pdf') ) {
2235     if ( my $msgnum = $conf->config($tc.'email_pdf_msgnum') ) {
2236
2237       warn "$me using '${tc}email_pdf_msgnum' in multipart message"
2238         if $DEBUG;
2239
2240       my $msg_template = FS::msg_template->by_key($msgnum)
2241         or die "${tc}email_pdf_msgnum $msgnum not found\n";
2242       my $cust_msg = $msg_template->prepare(
2243         cust_main => $self->cust_main,
2244         object    => $self,
2245         msgtype   => 'invoice',
2246       );
2247
2248       # XXX hack to make this work in the new cust_msg era; consider replacing
2249       # with cust_bill_send_with_notice events.
2250       my @parts = $cust_msg->parts;
2251       foreach my $part (@parts) { # will only have two parts, normally
2252         if ( $part->mime_type eq 'text/plain' ) {
2253           @text = @{ $part->body };
2254         } elsif ( $part->mime_type eq 'text/html' ) {
2255           $html = $part->bodyhandle->as_string;
2256         }
2257       }
2258
2259     } elsif ( my @note = $conf->config($tc.'email_pdf_note') ) {
2260
2261       warn "$me using '${tc}email_pdf_note' in multipart message"
2262         if $DEBUG;
2263       @text = $conf->config($tc.'email_pdf_note');
2264       $html = join('<BR>', @text);
2265
2266     } # else use the plain text invoice
2267   }
2268
2269   if (!@text) {
2270
2271     if ( $conf->config($tc.'template') ) {
2272
2273       warn "$me generating plain text invoice"
2274         if $DEBUG;
2275
2276       @text = $self->print_text(\%args);
2277
2278     } else {
2279
2280       warn "$me no plain text version exists; sending empty message body"
2281         if $DEBUG;
2282
2283     }
2284
2285   }
2286
2287   my $text_part = build MIME::Entity (
2288     'Type'        => 'text/plain',
2289     'Encoding'    => 'quoted-printable',
2290     'Charset'     => 'UTF-8',
2291     #'Encoding'    => '7bit',
2292     'Data'        => [
2293       map
2294         { Encode::encode('UTF-8', $_, Encode::FB_WARN | Encode::LEAVE_SRC ) }
2295         @text
2296     ],
2297     'Disposition' => 'inline',
2298   );
2299
2300   if (!$html) {
2301
2302     if ( $conf->exists($tc.'html') ) {
2303       warn "$me generating HTML invoice"
2304         if $DEBUG;
2305
2306       $args{'from'} =~ /\@([\w\.\-]+)/;
2307       my $from = $1 || 'example.com';
2308       my $content_id = join('.', rand()*(2**32), $$, time). "\@$from";
2309
2310       my $logo;
2311       my $agentnum = $cust_main ? $cust_main->agentnum
2312                                 : $self->prospect_main->agentnum;
2313       if ( defined($args{'template'}) && length($args{'template'})
2314            && $conf->exists( 'logo_'. $args{'template'}. '.png', $agentnum )
2315          )
2316       {
2317         $logo = 'logo_'. $args{'template'}. '.png';
2318       } else {
2319         $logo = "logo.png";
2320       }
2321       my $image_data = $conf->config_binary( $logo, $agentnum);
2322
2323       push @related_parts, build MIME::Entity
2324         'Type'       => 'image/png',
2325         'Encoding'   => 'base64',
2326         'Data'       => $image_data,
2327         'Filename'   => 'logo.png',
2328         'Content-ID' => "<$content_id>",
2329       ;
2330
2331       if ( ref($self) eq 'FS::cust_bill' && $conf->exists('invoice-barcode') ) {
2332         my $barcode_content_id = join('.', rand()*(2**32), $$, time). "\@$from";
2333         push @related_parts, build MIME::Entity
2334           'Type'       => 'image/png',
2335           'Encoding'   => 'base64',
2336           'Data'       => $self->invoice_barcode(0),
2337           'Filename'   => 'barcode.png',
2338           'Content-ID' => "<$barcode_content_id>",
2339         ;
2340         $args{'barcode_cid'} = $barcode_content_id;
2341       }
2342
2343       $html = $self->print_html({ 'cid'=>$content_id, %args });
2344     }
2345
2346   }
2347
2348   if ( $html ) {
2349
2350     warn "$me creating HTML/text multipart message"
2351       if $DEBUG;
2352
2353     $return{'nobody'} = 1;
2354
2355     my $alternative = build MIME::Entity
2356       'Type'        => 'multipart/alternative',
2357       #'Encoding'    => '7bit',
2358       'Disposition' => 'inline'
2359     ;
2360
2361     if ( @text ) {
2362       $alternative->add_part($text_part);
2363     }
2364
2365     $alternative->attach(
2366       'Type'        => 'text/html',
2367       'Encoding'    => 'quoted-printable',
2368       'Data'        => [ '<html>',
2369                          '  <head>',
2370                          '    <title>',
2371                          '      '. encode_entities($return{'subject'}),
2372                          '    </title>',
2373                          '  </head>',
2374                          '  <body bgcolor="#e8e8e8">',
2375                          Encode::encode(
2376                            'UTF-8',
2377                            $html,
2378                            Encode::FB_WARN | Encode::LEAVE_SRC
2379                          ),
2380                          '  </body>',
2381                          '</html>',
2382                        ],
2383       'Disposition' => 'inline',
2384       #'Filename'    => 'invoice.pdf',
2385     );
2386
2387     unshift @related_parts, $alternative;
2388
2389     $related = build MIME::Entity 'Type'     => 'multipart/related',
2390                                   'Encoding' => '7bit';
2391
2392     #false laziness w/Misc::send_email
2393     $related->head->replace('Content-type',
2394       $related->mime_type.
2395       '; boundary="'. $related->head->multipart_boundary. '"'.
2396       '; type=multipart/alternative'
2397     );
2398
2399     $related->add_part($_) foreach @related_parts;
2400
2401   }
2402
2403   my @otherparts = ();
2404   if ( ref($self) eq 'FS::cust_bill' && $cust_main->email_csv_cdr ) {
2405
2406     if ( $conf->config('voip-cdr_email_attach') eq 'zip' ) {
2407
2408       my $data = join('', map "$_\n",
2409                    $self->call_details(prepend_billed_number=>1)
2410                  );
2411
2412       my $zip = new Archive::Zip;
2413       my $file = $zip->addString( $data, 'usage-'.$self->invnum.'.csv' );
2414       $file->desiredCompressionMethod( COMPRESSION_DEFLATED );
2415
2416       my $zipdata = '';
2417       my $SH = IO::Scalar->new(\$zipdata);
2418       my $status = $zip->writeToFileHandle($SH);
2419       die "Error zipping CDR attachment: $!" unless $status == AZ_OK;
2420
2421       push @otherparts, build MIME::Entity
2422         'Type'        => 'application/zip',
2423         'Encoding'    => 'base64',
2424         'Data'        => $zipdata,
2425         'Disposition' => 'attachment',
2426         'Filename'    => 'usage-'. $self->invnum. '.zip',
2427       ;
2428
2429     } else { # } elsif ( $conf->config('voip-cdr_email_attach') eq 'csv' ) {
2430
2431       push @otherparts, build MIME::Entity
2432         'Type'        => 'text/csv',
2433         'Encoding'    => '7bit',
2434         'Data'        => [ map { "$_\n" }
2435                              $self->call_details('prepend_billed_number' => 1)
2436                          ],
2437         'Disposition' => 'attachment',
2438         'Filename'    => 'usage-'. $self->invnum. '.csv',
2439       ;
2440
2441     }
2442
2443   }
2444
2445   if ( $conf->exists($tc.'email_pdf') ) {
2446
2447     #attaching pdf too:
2448     # multipart/mixed
2449     #   multipart/related
2450     #     multipart/alternative
2451     #       text/plain
2452     #       text/html
2453     #     image/png
2454     #   application/pdf
2455
2456     my $pdf = build MIME::Entity $self->mimebuild_pdf(\%args);
2457     push @otherparts, $pdf;
2458   }
2459
2460   if (@otherparts) {
2461     $return{'content-type'} = 'multipart/mixed'; # of the outer container
2462     if ( $html ) {
2463       $return{'mimeparts'} = [ $related, @otherparts ];
2464       $return{'type'} = 'multipart/related'; # of the first part
2465     } else {
2466       $return{'mimeparts'} = [ $text_part, @otherparts ];
2467       $return{'type'} = 'text/plain';
2468     }
2469   } elsif ( $html ) { # no PDF or CSV, strip the outer container
2470     $return{'mimeparts'} = \@related_parts;
2471     $return{'content-type'} = 'multipart/related';
2472     $return{'type'} = 'multipart/alternative';
2473   } else { # no HTML either
2474     $return{'body'} = \@text;
2475     $return{'content-type'} = 'text/plain';
2476   }
2477
2478   %return;
2479
2480 }
2481
2482 =item mimebuild_pdf
2483
2484 Returns a list suitable for passing to MIME::Entity->build(), representing
2485 this quotation or invoice as PDF attachment.
2486
2487 =cut
2488
2489 sub mimebuild_pdf {
2490   my $self = shift;
2491   (
2492     'Type'        => 'application/pdf',
2493     'Encoding'    => 'base64',
2494     'Data'        => [ $self->print_pdf(@_) ],
2495     'Disposition' => 'attachment',
2496     'Filename'    => $self->pdf_filename,
2497   );
2498 }
2499
2500 =item postal_mail_fsinc
2501
2502 Sends this invoice to the Freeside Internet Services, Inc. print and mail
2503 service.
2504
2505 =cut
2506
2507 use CAM::PDF;
2508 use IO::Socket::SSL;
2509 use LWP::UserAgent;
2510 use HTTP::Request::Common qw( POST );
2511 use Cpanel::JSON::XS;
2512 use MIME::Base64;
2513 sub postal_mail_fsinc {
2514   my ( $self, %opt ) = @_;
2515
2516   my $url = 'https://ws.freeside.biz/print';
2517
2518   my $cust_main = $self->cust_main;
2519   my $agentnum = $cust_main->agentnum;
2520   my $bill_location = $cust_main->bill_location;
2521
2522   die "Extra charges for international mailing; contact support\@freeside.biz to enable\n"
2523     if $bill_location->country ne 'US';
2524
2525   my $conf = new FS::Conf;
2526
2527   my @company_address = $conf->config('company_address', $agentnum);
2528   my ( $company_address1, $company_address2, $company_city, $company_state, $company_zip );
2529   if ( $company_address[2] =~ /^\s*(\S.*\S)\s*[\s,](\w\w),?\s*(\d{5}(-\d{4})?)\s*$/ ) {
2530     $company_address1 = $company_address[0];
2531     $company_address2 = $company_address[1];
2532     $company_city  = $1;
2533     $company_state = $2;
2534     $company_zip   = $3;
2535   } elsif ( $company_address[1] =~ /^\s*(\S.*\S)\s*[\s,](\w\w),?\s*(\d{5}(-\d{4})?)\s*$/ ) {
2536     $company_address1 = $company_address[0];
2537     $company_address2 = '';
2538     $company_city  = $1;
2539     $company_state = $2;
2540     $company_zip   = $3;
2541   } else {
2542     die "Unparsable company_address; contact support\@freeside.biz\n";
2543   }
2544   $company_city =~ s/,$//;
2545
2546   my $file = $self->print_pdf(%opt, 'no_addresses' => 1);
2547   my $pages = CAM::PDF->new($file)->numPages;
2548
2549   my $ua = LWP::UserAgent->new(
2550     'ssl_opts' => {
2551       verify_hostname => 0,
2552       SSL_verify_mode => IO::Socket::SSL::SSL_VERIFY_NONE,
2553       SSL_version     => 'SSLv3',
2554     }
2555   );
2556   my $response = $ua->request( POST $url, [
2557     'support-key'      => scalar($conf->config('support-key')),
2558     'file'             => encode_base64($file),
2559     'pages'            => $pages,
2560
2561     #from:
2562     'company_name'     => scalar( $conf->config('company_name', $agentnum) ),
2563     'company_address1' => $company_address1,
2564     'company_address2' => $company_address2,
2565     'company_city'     => $company_city,
2566     'company_state'    => $company_state,
2567     'company_zip'      => $company_zip,
2568     'company_country'  => 'US',
2569     'company_phonenum' => scalar($conf->config('company_phonenum', $agentnum)),
2570     'company_email'    => scalar($conf->config('invoice_from', $agentnum)),
2571
2572     #to:
2573     'name'             => $cust_main->invoice_attn
2574                             || $cust_main->contact_firstlast,
2575     'company'          => $cust_main->company,
2576     'address1'         => $bill_location->address1,
2577     'address2'         => $bill_location->address2,
2578     'city'             => $bill_location->city,
2579     'state'            => $bill_location->state,
2580     'zip'              => $bill_location->zip,
2581     'country'          => $bill_location->country,
2582   ]);
2583
2584   die "Print connection error: ". $response->message.
2585       ' ('. $response->as_string. ")\n"
2586     unless $response->is_success;
2587
2588   local $@;
2589   my $content = eval { decode_json($response->content) };
2590   die "Print JSON error : $@\n" if $@;
2591
2592   die $content->{error}."\n"
2593     if $content->{error};
2594
2595   #TODO: store this so we can query for a status later
2596   warn "Invoice printed, ID ". $content->{id}. "\n";
2597
2598   $content->{id};
2599
2600 }
2601
2602 =item _items_sections OPTIONS
2603
2604 Generate section information for all items appearing on this invoice.
2605 This will only be called for multi-section invoices.
2606
2607 For each line item (L<FS::cust_bill_pkg> record), this will fetch all
2608 related display records (L<FS::cust_bill_pkg_display>) and organize
2609 them into two groups ("early" and "late" according to whether they come
2610 before or after the total), then into sections.  A subtotal is calculated
2611 for each section.
2612
2613 Section descriptions are returned in sort weight order.  Each consists
2614 of a hash containing:
2615
2616 description: the package category name, escaped
2617 subtotal: the total charges in that section
2618 tax_section: a flag indicating that the section contains only tax charges
2619 summarized: same as tax_section, for some reason
2620 sort_weight: the package category's sort weight
2621
2622 If 'condense' is set on the display record, it also contains everything
2623 returned from C<_condense_section()>, i.e. C<_condensed_foo_generator>
2624 coderefs to generate parts of the invoice.  This is not advised.
2625
2626 The method returns two arrayrefs, one of "early" sections and one of "late"
2627 sections.
2628
2629 OPTIONS may include:
2630
2631 by_location: a flag to divide the invoice into sections by location.
2632 Each section hash will have a 'location' element containing a hashref of
2633 the location fields (see L<FS::cust_location>).  The section description
2634 will be the location label, but the template can use any of the location
2635 fields to create a suitable label.
2636
2637 by_category: a flag to divide the invoice into sections using display
2638 records (see L<FS::cust_bill_pkg_display>).  This is the "traditional"
2639 behavior.  Each section hash will have a 'category' element containing
2640 the section name from the display record (which probably equals the
2641 category name of the package, but may not in some cases).
2642
2643 summary: a flag indicating that this is a summary-format invoice.
2644 Turning this on has the following effects:
2645 - Ignores display items with the 'summary' flag.
2646 - Places all sections in the "early" group even if they have post_total.
2647 - Creates sections for all non-disabled package categories, even if they
2648 have no charges on this invoice, as well as a section with no name.
2649
2650 escape: an escape function to use for section titles.
2651
2652 extra_sections: an arrayref of additional sections to return after the
2653 sorted list.  If there are any of these, section subtotals exclude
2654 usage charges.
2655
2656 format: 'latex', 'html', or 'template' (i.e. text).  Not used, but
2657 passed through to C<_condense_section()>.
2658
2659 =cut
2660
2661 use vars qw(%pkg_category_cache);
2662 sub _items_sections {
2663   my $self = shift;
2664   my %opt = @_;
2665
2666   my $escape = $opt{escape};
2667   my @extra_sections = @{ $opt{extra_sections} || [] };
2668
2669   # $subtotal{$locationnum}{$categoryname} = amount.
2670   # if we're not using by_location, $locationnum is undef.
2671   # if we're not using by_category, you guessed it, $categoryname is undef.
2672   # if we're not using either one, we shouldn't be here in the first place...
2673   my %subtotal = ();
2674   my %late_subtotal = ();
2675   my %not_tax = ();
2676
2677   # About tax items + multisection invoices:
2678   # If either invoice_*summary option is enabled, AND there is a
2679   # package category with the name of the tax, then there will be
2680   # a display record assigning the tax item to that category.
2681   #
2682   # However, the taxes are always placed in the "Taxes, Surcharges,
2683   # and Fees" section regardless of that.  The only effect of the
2684   # display record is to create a subtotal for the summary page.
2685
2686   # cache these
2687   my $pkg_hash = $self->cust_pkg_hash;
2688
2689   foreach my $cust_bill_pkg ( $self->cust_bill_pkg )
2690   {
2691
2692       my $usage = $cust_bill_pkg->usage;
2693
2694       my $locationnum;
2695       if ( $opt{by_location} ) {
2696         if ( $cust_bill_pkg->pkgnum ) {
2697           $locationnum = $pkg_hash->{ $cust_bill_pkg->pkgnum }->locationnum;
2698         } else {
2699           $locationnum = '';
2700         }
2701       } else {
2702         $locationnum = undef;
2703       }
2704
2705       # as in _items_cust_pkg, if a line item has no display records,
2706       # cust_bill_pkg_display() returns a default record for it
2707
2708       foreach my $display ($cust_bill_pkg->cust_bill_pkg_display) {
2709         next if ( $display->summary && $opt{summary} );
2710
2711         #my $section = $display->section;
2712         #false laziness with the method, but for efficiency inside this loop
2713         my $section = $display->get('section');
2714         if ( !$section && !$cust_bill_pkg->hidden ) {
2715           $section = $cust_bill_pkg->get('categoryname'); #cust_bill->cust_bill_pkg added it (XXX quotations / quotation_section)
2716         }
2717
2718         my $type    = $display->type;
2719         # Set $section = undef if we're sectioning by location and this
2720         # line item _has_ a location (i.e. isn't a fee).
2721         $section = undef if $locationnum;
2722
2723         # set this flag if the section is not tax-only
2724         $not_tax{$locationnum}{$section} = 1
2725           if $cust_bill_pkg->pkgnum  or $cust_bill_pkg->feepart;
2726
2727         # there's actually a very important piece of logic buried in here:
2728         # incrementing $late_subtotal{$section} CREATES
2729         # $late_subtotal{$section}.  keys(%late_subtotal) is later used
2730         # to define the list of late sections, and likewise keys(%subtotal).
2731         # When _items_cust_bill_pkg is called to generate line items for
2732         # real, it will be called with 'section' => $section for each
2733         # of these.
2734         if ( $display->post_total && !$opt{summary} ) {
2735           if (! $type || $type eq 'S') {
2736             $late_subtotal{$locationnum}{$section} += $cust_bill_pkg->setup
2737               if $cust_bill_pkg->setup != 0
2738               || $cust_bill_pkg->setup_show_zero;
2739           }
2740
2741           if (! $type) {
2742             $late_subtotal{$locationnum}{$section} += $cust_bill_pkg->recur
2743               if $cust_bill_pkg->recur != 0
2744               || $cust_bill_pkg->recur_show_zero;
2745           }
2746
2747           if ($type && $type eq 'R') {
2748             $late_subtotal{$locationnum}{$section} += $cust_bill_pkg->recur - $usage
2749               if $cust_bill_pkg->recur != 0
2750               || $cust_bill_pkg->recur_show_zero;
2751           }
2752
2753           if ($type && $type eq 'U') {
2754             $late_subtotal{$locationnum}{$section} += $usage
2755               unless scalar(@extra_sections);
2756           }
2757
2758         } else { # it's a pre-total (normal) section
2759
2760           # skip tax items unless they're explicitly included in a section
2761           next if $cust_bill_pkg->pkgnum == 0 and
2762                   ! $cust_bill_pkg->feepart   and
2763                   ! $section;
2764
2765           if ( $type eq 'S' ) {
2766             $subtotal{$locationnum}{$section} += $cust_bill_pkg->setup
2767               if $cust_bill_pkg->setup != 0
2768               || $cust_bill_pkg->setup_show_zero;
2769           } elsif ( $type eq 'R' ) {
2770             $subtotal{$locationnum}{$section} += $cust_bill_pkg->recur - $usage
2771               if $cust_bill_pkg->recur != 0
2772               || $cust_bill_pkg->recur_show_zero;
2773           } elsif ( $type eq 'U' ) {
2774             $subtotal{$locationnum}{$section} += $usage
2775               unless scalar(@extra_sections);
2776           } elsif ( !$type ) {
2777             $subtotal{$locationnum}{$section} += $cust_bill_pkg->setup
2778                                                + $cust_bill_pkg->recur;
2779           }
2780
2781         }
2782
2783       }
2784
2785   }
2786
2787   %pkg_category_cache = ();
2788
2789   # summary invoices need subtotals for all non-disabled package categories,
2790   # even if they're zero
2791   # but currently assume that there are no location sections, or at least
2792   # that the summary page doesn't care about them
2793   if ( $opt{summary} ) {
2794     foreach my $category (qsearch('pkg_category', {disabled => ''})) {
2795       $subtotal{''}{$category->categoryname} ||= 0;
2796     }
2797     $subtotal{''}{''} ||= 0;
2798   }
2799
2800   my @sections;
2801   foreach my $post_total (0,1) {
2802     my @these;
2803     my $s = $post_total ? \%late_subtotal : \%subtotal;
2804     foreach my $locationnum (keys %$s) {
2805       foreach my $sectionname (keys %{ $s->{$locationnum} }) {
2806         my $section = {
2807                         'subtotal'    => $s->{$locationnum}{$sectionname},
2808                         'sort_weight' => 0,
2809                       };
2810         if ( $locationnum ) {
2811           $section->{'locationnum'} = $locationnum;
2812           my $location = FS::cust_location->by_key($locationnum);
2813           $section->{'description'} = &{ $escape }($location->location_label);
2814           # Better ideas? This will roughly group them by proximity,
2815           # which alpha sorting on any of the address fields won't.
2816           # Sorting by locationnum is meaningless.
2817           # We have to sort on _something_ or the order may change
2818           # randomly from one invoice to the next, which will confuse
2819           # people.
2820           $section->{'sort_weight'} = sprintf('%012s',$location->zip) .
2821                                       $locationnum;
2822           $section->{'location'} = {
2823             label_prefix => &{ $escape }($location->label_prefix),
2824             map { $_ => &{ $escape }($location->get($_)) }
2825               $location->fields
2826           };
2827         } else {
2828           $section->{'category'} = $sectionname;
2829           $section->{'description'} = &{ $escape }($sectionname);
2830           if ( _pkg_category($sectionname) ) {
2831             $section->{'sort_weight'} = _pkg_category($sectionname)->weight;
2832             if ( _pkg_category($sectionname)->condense ) {
2833               $section = { %$section, $self->_condense_section($opt{format}) };
2834             }
2835           }
2836         }
2837         if ( !$post_total and !$not_tax{$locationnum}{$sectionname} ) {
2838           # then it's a tax-only section
2839           $section->{'summarized'} = 'Y';
2840           $section->{'tax_section'} = 'Y';
2841         }
2842         push @these, $section;
2843       } # foreach $sectionname
2844     } #foreach $locationnum
2845     push @these, @extra_sections if $post_total == 0;
2846     # need an alpha sort for location sections, because postal codes can
2847     # be non-numeric
2848     $sections[ $post_total ] = [ sort {
2849       $opt{'by_location'} ?
2850         ($a->{sort_weight} cmp $b->{sort_weight}) :
2851         ($a->{sort_weight} <=> $b->{sort_weight})
2852       } @these ];
2853   } #foreach $post_total
2854
2855   return @sections; # early, late
2856 }
2857
2858 #helper subs for above
2859
2860 sub cust_pkg_hash {
2861   my $self = shift;
2862   $self->{cust_pkg} ||= { map { $_->pkgnum => $_ } $self->cust_pkg };
2863 }
2864
2865 sub _pkg_category {
2866   my $categoryname = shift;
2867   $pkg_category_cache{$categoryname} ||=
2868     qsearchs( 'pkg_category', { 'categoryname' => $categoryname } );
2869 }
2870
2871 my %condensed_format = (
2872   'label' => [ qw( Description Qty Amount ) ],
2873   'fields' => [
2874                 sub { shift->{description} },
2875                 sub { shift->{quantity} },
2876                 sub { my($href, %opt) = @_;
2877                       ($opt{dollar} || ''). $href->{amount};
2878                     },
2879               ],
2880   'align'  => [ qw( l r r ) ],
2881   'span'   => [ qw( 5 1 1 ) ],            # unitprices?
2882   'width'  => [ qw( 10.7cm 1.4cm 1.6cm ) ],   # don't like this
2883 );
2884
2885 sub _condense_section {
2886   my ( $self, $format ) = ( shift, shift );
2887   ( 'condensed' => 1,
2888     map { my $method = "_condensed_$_"; $_ => $self->$method($format) }
2889       qw( description_generator
2890           header_generator
2891           total_generator
2892           total_line_generator
2893         )
2894   );
2895 }
2896
2897 sub _condensed_generator_defaults {
2898   my ( $self, $format ) = ( shift, shift );
2899   return ( \%condensed_format, ' ', ' ', ' ', sub { shift } );
2900 }
2901
2902 my %html_align = (
2903   'c' => 'center',
2904   'l' => 'left',
2905   'r' => 'right',
2906 );
2907
2908 sub _condensed_header_generator {
2909   my ( $self, $format ) = ( shift, shift );
2910
2911   my ( $f, $prefix, $suffix, $separator, $column ) =
2912     _condensed_generator_defaults($format);
2913
2914   if ($format eq 'latex') {
2915     $prefix = "\\hline\n\\rule{0pt}{2.5ex}\n\\makebox[1.4cm]{}&\n";
2916     $suffix = "\\\\\n\\hline";
2917     $separator = "&\n";
2918     $column =
2919       sub { my ($d,$a,$s,$w) = @_;
2920             return "\\multicolumn{$s}{$a}{\\makebox[$w][$a]{\\textbf{$d}}}";
2921           };
2922   } elsif ( $format eq 'html' ) {
2923     $prefix = '<th></th>';
2924     $suffix = '';
2925     $separator = '';
2926     $column =
2927       sub { my ($d,$a,$s,$w) = @_;
2928             return qq!<th align="$html_align{$a}">$d</th>!;
2929       };
2930   }
2931
2932   sub {
2933     my @args = @_;
2934     my @result = ();
2935
2936     foreach  (my $i = 0; $f->{label}->[$i]; $i++) {
2937       push @result,
2938         &{$column}( map { $f->{$_}->[$i] } qw(label align span width) );
2939     }
2940
2941     $prefix. join($separator, @result). $suffix;
2942   };
2943
2944 }
2945
2946 sub _condensed_description_generator {
2947   my ( $self, $format ) = ( shift, shift );
2948
2949   my ( $f, $prefix, $suffix, $separator, $column ) =
2950     _condensed_generator_defaults($format);
2951
2952   my $money_char = '$';
2953   if ($format eq 'latex') {
2954     $prefix = "\\hline\n\\multicolumn{1}{c}{\\rule{0pt}{2.5ex}~} &\n";
2955     $suffix = '\\\\';
2956     $separator = " & \n";
2957     $column =
2958       sub { my ($d,$a,$s,$w) = @_;
2959             return "\\multicolumn{$s}{$a}{\\makebox[$w][$a]{\\textbf{$d}}}";
2960           };
2961     $money_char = '\\dollar';
2962   }elsif ( $format eq 'html' ) {
2963     $prefix = '"><td align="center"></td>';
2964     $suffix = '';
2965     $separator = '';
2966     $column =
2967       sub { my ($d,$a,$s,$w) = @_;
2968             return qq!<td align="$html_align{$a}">$d</td>!;
2969       };
2970     #$money_char = $conf->config('money_char') || '$';
2971     $money_char = '';  # this is madness
2972   }
2973
2974   sub {
2975     #my @args = @_;
2976     my $href = shift;
2977     my @result = ();
2978
2979     foreach  (my $i = 0; $f->{label}->[$i]; $i++) {
2980       my $dollar = '';
2981       $dollar = $money_char if $i == scalar(@{$f->{label}})-1;
2982       push @result,
2983         &{$column}( &{$f->{fields}->[$i]}($href, 'dollar' => $dollar),
2984                     map { $f->{$_}->[$i] } qw(align span width)
2985                   );
2986     }
2987
2988     $prefix. join( $separator, @result ). $suffix;
2989   };
2990
2991 }
2992
2993 sub _condensed_total_generator {
2994   my ( $self, $format ) = ( shift, shift );
2995
2996   my ( $f, $prefix, $suffix, $separator, $column ) =
2997     _condensed_generator_defaults($format);
2998   my $style = '';
2999
3000   if ($format eq 'latex') {
3001     $prefix = "& ";
3002     $suffix = "\\\\\n";
3003     $separator = " & \n";
3004     $column =
3005       sub { my ($d,$a,$s,$w) = @_;
3006             return "\\multicolumn{$s}{$a}{\\makebox[$w][$a]{$d}}";
3007           };
3008   }elsif ( $format eq 'html' ) {
3009     $prefix = '';
3010     $suffix = '';
3011     $separator = '';
3012     $style = 'border-top: 3px solid #000000;border-bottom: 3px solid #000000;';
3013     $column =
3014       sub { my ($d,$a,$s,$w) = @_;
3015             return qq!<td align="$html_align{$a}" style="$style">$d</td>!;
3016       };
3017   }
3018
3019
3020   sub {
3021     my @args = @_;
3022     my @result = ();
3023
3024     #  my $r = &{$f->{fields}->[$i]}(@args);
3025     #  $r .= ' Total' unless $i;
3026
3027     foreach  (my $i = 0; $f->{label}->[$i]; $i++) {
3028       push @result,
3029         &{$column}( &{$f->{fields}->[$i]}(@args). ($i ? '' : ' Total'),
3030                     map { $f->{$_}->[$i] } qw(align span width)
3031                   );
3032     }
3033
3034     $prefix. join( $separator, @result ). $suffix;
3035   };
3036
3037 }
3038
3039 =item total_line_generator FORMAT
3040
3041 Returns a coderef used for generation of invoice total line items for this
3042 usage_class.  FORMAT is either html or latex
3043
3044 =cut
3045
3046 # should not be used: will have issues with hash element names (description vs
3047 # total_item and amount vs total_amount -- another array of functions?
3048
3049 sub _condensed_total_line_generator {
3050   my ( $self, $format ) = ( shift, shift );
3051
3052   my ( $f, $prefix, $suffix, $separator, $column ) =
3053     _condensed_generator_defaults($format);
3054   my $style = '';
3055
3056   if ($format eq 'latex') {
3057     $prefix = "& ";
3058     $suffix = "\\\\\n";
3059     $separator = " & \n";
3060     $column =
3061       sub { my ($d,$a,$s,$w) = @_;
3062             return "\\multicolumn{$s}{$a}{\\makebox[$w][$a]{$d}}";
3063           };
3064   }elsif ( $format eq 'html' ) {
3065     $prefix = '';
3066     $suffix = '';
3067     $separator = '';
3068     $style = 'border-top: 3px solid #000000;border-bottom: 3px solid #000000;';
3069     $column =
3070       sub { my ($d,$a,$s,$w) = @_;
3071             return qq!<td align="$html_align{$a}" style="$style">$d</td>!;
3072       };
3073   }
3074
3075
3076   sub {
3077     my @args = @_;
3078     my @result = ();
3079
3080     foreach  (my $i = 0; $f->{label}->[$i]; $i++) {
3081       push @result,
3082         &{$column}( &{$f->{fields}->[$i]}(@args),
3083                     map { $f->{$_}->[$i] } qw(align span width)
3084                   );
3085     }
3086
3087     $prefix. join( $separator, @result ). $suffix;
3088   };
3089
3090 }
3091
3092 =item _items_pkg [ OPTIONS ]
3093
3094 Return line item hashes for each package item on this invoice. Nearly
3095 equivalent to
3096
3097 $self->_items_cust_bill_pkg([ $self->cust_bill_pkg ])
3098
3099 OPTIONS are passed through to _items_cust_bill_pkg, and should include
3100 'format' and 'escape_function' at minimum.
3101
3102 To produce items for a specific invoice section, OPTIONS should include
3103 'section', a hashref containing 'category' and/or 'locationnum' keys.
3104
3105 'section' may also contain a key named 'condensed'. If this is present
3106 and has a true value, _items_pkg will try to merge identical items into items
3107 with 'quantity' equal to the number of items (not the sum of their separate
3108 quantities, for some reason).
3109
3110 =cut
3111
3112 sub _items_nontax {
3113   my $self = shift;
3114   # The order of these is important.  Bundled line items will be merged into
3115   # the most recent non-hidden item, so it needs to be the one with:
3116   # - the same pkgnum
3117   # - the same start date
3118   # - no pkgpart_override
3119   #
3120   # So: sort by pkgnum,
3121   # then by sdate
3122   # then sort the base line item before any overrides
3123   # then sort hidden before non-hidden add-ons
3124   # then sort by override pkgpart (for consistency)
3125   sort { $a->pkgnum <=> $b->pkgnum        or
3126          $a->sdate  <=> $b->sdate         or
3127          ($a->pkgpart_override ? 0 : -1)  or
3128          ($b->pkgpart_override ? 0 : 1)   or
3129          $b->hidden cmp $a->hidden        or
3130          $a->pkgpart_override <=> $b->pkgpart_override
3131        }
3132   # and of course exclude taxes and fees
3133   grep { $_->pkgnum > 0 } $self->cust_bill_pkg;
3134 }
3135
3136 sub _items_fee {
3137   my $self = shift;
3138   my %options = @_;
3139   my @cust_bill_pkg = grep { $_->feepart } $self->cust_bill_pkg;
3140   my $escape_function = $options{escape_function};
3141
3142   my $locale = $self->quotationnum
3143              ? $self->prospect_main->locale
3144              : $self->cust_main->locale;
3145
3146   my @items;
3147   foreach my $cust_bill_pkg (@cust_bill_pkg) {
3148     # cache this, so we don't look it up again in every section
3149     my $part_fee = $cust_bill_pkg->get('part_fee')
3150        || $cust_bill_pkg->part_fee;
3151     $cust_bill_pkg->set('part_fee', $part_fee);
3152     if (!$part_fee) {
3153       #die "fee definition not found for line item #".$cust_bill_pkg->billpkgnum."\n"; # might make more sense
3154       warn "fee definition not found for line item #".$cust_bill_pkg->billpkgnum."\n";
3155       next;
3156     }
3157
3158     # If _items_fee is called while building a sectioned invoice,
3159     #   - invoice_sections_method: category
3160     #     Skip fee records that do not match the section category.
3161     #   - invoice_sections_method: location
3162     #     Skip fee records always for location sections.
3163     #     The fee records will be presented in the tax/fee section instead.
3164     if (
3165       exists( $options{section} )
3166       and
3167       (
3168         (
3169           exists( $options{section}{category} )
3170           and
3171           $part_fee->categoryname ne $options{section}{category}
3172         )
3173         or
3174         exists( $options{section}{location})
3175       )
3176     ) {
3177       warn "skipping fee '".$part_fee->itemdesc.
3178            "'--not in section $options{section}{category}\n" if $DEBUG;
3179       next;
3180     }
3181
3182     my @ext_desc;
3183     my %base_invnums; # invnum => invoice date
3184     foreach ($cust_bill_pkg->cust_bill_pkg_fee) {
3185       if ($_->base_invnum) {
3186         my $base_bill = FS::cust_bill->by_key($_->base_invnum);
3187         my $base_date = $self->time2str_local('short', $base_bill->_date)
3188           if $base_bill;
3189         $base_invnums{$_->base_invnum} = $base_date || '';
3190       }
3191     }
3192     foreach (sort keys(%base_invnums)) {
3193       next if $_ == $self->invnum;
3194       # per convention, we must escape ext_description lines
3195       push @ext_desc,
3196         &{$escape_function}(
3197           $self->mt('from invoice #[_1] on [_2]', $_, $base_invnums{$_})
3198         );
3199     }
3200     my $desc = $part_fee->itemdesc_locale($locale);
3201     # but not escape the base description line
3202
3203     my @pkg_tax = $cust_bill_pkg->_pkg_tax_list
3204       if $options{section_with_taxes};
3205
3206     push @items,
3207       { feepart     => $cust_bill_pkg->feepart,
3208         billpkgnum  => $cust_bill_pkg->billpkgnum,
3209         amount      => sprintf('%.2f', $cust_bill_pkg->setup + $cust_bill_pkg->recur),
3210         description => $desc,
3211         pkg_tax     => \@pkg_tax,
3212         ext_description => \@ext_desc,
3213         # sdate/edate?
3214       };
3215   }
3216   @items;
3217 }
3218
3219 sub _items_pkg {
3220   my $self = shift;
3221   my %options = @_;
3222
3223   warn "$me _items_pkg searching for all package line items\n"
3224     if $DEBUG > 1;
3225
3226   my @cust_bill_pkg = $self->_items_nontax;
3227
3228   warn "$me _items_pkg filtering line items\n"
3229     if $DEBUG > 1;
3230   my @items = $self->_items_cust_bill_pkg(\@cust_bill_pkg, @_);
3231
3232   if ($options{section} && $options{section}->{condensed}) {
3233
3234     warn "$me _items_pkg condensing section\n"
3235       if $DEBUG > 1;
3236
3237     my %itemshash = ();
3238     local $Storable::canonical = 1;
3239     foreach ( @items ) {
3240       my $item = { %$_ };
3241       delete $item->{ref};
3242       delete $item->{ext_description};
3243       my $key = freeze($item);
3244       $itemshash{$key} ||= 0;
3245       $itemshash{$key} ++; # += $item->{quantity};
3246     }
3247     @items = sort { $a->{description} cmp $b->{description} }
3248              map { my $i = thaw($_);
3249                    $i->{quantity} = $itemshash{$_};
3250                    $i->{amount} =
3251                      sprintf( "%.2f", $i->{quantity} * $i->{amount} );#unit_amount
3252                    $i;
3253                  }
3254              keys %itemshash;
3255   }
3256
3257   warn "$me _items_pkg returning ". scalar(@items). " items\n"
3258     if $DEBUG > 1;
3259
3260   @items;
3261 }
3262
3263 sub _taxsort {
3264   return 0 unless $a->itemdesc cmp $b->itemdesc;
3265   return -1 if $b->itemdesc eq 'Tax';
3266   return 1 if $a->itemdesc eq 'Tax';
3267   return -1 if $b->itemdesc eq 'Other surcharges';
3268   return 1 if $a->itemdesc eq 'Other surcharges';
3269   $a->itemdesc cmp $b->itemdesc;
3270 }
3271
3272 sub _items_tax {
3273   my $self = shift;
3274   my @cust_bill_pkg = sort _taxsort grep { ! $_->pkgnum and ! $_->feepart }
3275     $self->cust_bill_pkg;
3276   my @items = $self->_items_cust_bill_pkg(\@cust_bill_pkg, @_);
3277
3278   if ( $self->conf->exists('always_show_tax') ) {
3279     my $itemdesc = $self->conf->config('always_show_tax') || 'Tax';
3280     if (0 == grep { $_->{description} eq $itemdesc } @items) {
3281       push @items,
3282         { 'description' => $itemdesc,
3283           'amount'      => 0.00 };
3284     }
3285   }
3286   @items;
3287 }
3288
3289 =item _items_cust_bill_pkg CUST_BILL_PKGS OPTIONS
3290
3291 Takes an arrayref of L<FS::cust_bill_pkg> objects, and returns a
3292 list of hashrefs describing the line items they generate on the invoice.
3293
3294 OPTIONS may include:
3295
3296 format: the invoice format.
3297
3298 escape_function: the function used to escape strings.
3299
3300 DEPRECATED? (expensive, mostly unused?)
3301 format_function: the function used to format CDRs.
3302
3303 section: a hashref containing 'category' and/or 'locationnum'; if this
3304 is present, only returns line items that belong to that category and/or
3305 location (whichever is defined).
3306
3307 multisection: a flag indicating that this is a multisection invoice,
3308 which does something complicated.
3309
3310 section_with_taxes:  Look up and include applied taxes for each record
3311
3312 Returns a list of hashrefs, each of which may contain:
3313
3314 pkgnum, description, amount, unit_amount, quantity, pkgpart, _is_setup, and
3315 ext_description, which is an arrayref of detail lines to show below
3316 the package line.
3317
3318 =cut
3319
3320 sub _items_cust_bill_pkg {
3321   my $self = shift;
3322   my $conf = $self->conf;
3323   my $cust_bill_pkgs = shift;
3324   my %opt = @_;
3325
3326   my $format = $opt{format} || '';
3327   my $escape_function = $opt{escape_function} || sub { shift };
3328   my $format_function = $opt{format_function} || '';
3329   my $no_usage = $opt{no_usage} || '';
3330   my $unsquelched = $opt{unsquelched} || ''; #unused
3331   my ($section, $locationnum, $category);
3332   if ( $opt{section} ) {
3333     $category = $opt{section}->{category};
3334     $locationnum = $opt{section}->{locationnum};
3335   }
3336   my $summary_page = $opt{summary_page} || ''; #unused
3337   my $multisection = defined($category) || defined($locationnum);
3338   # this variable is the value of the config setting, not whether it applies
3339   # to this particular line item.
3340   my $discount_show_always = $conf->exists('discount-show-always');
3341
3342   my $maxlength = $conf->config('cust_bill-latex_lineitem_maxlength') || 40;
3343
3344   my $cust_main = $self->cust_main;#for per-agent cust_bill-line_item-ate_style
3345
3346   my $agentnum = $self->agentnum;
3347
3348   # for location labels: use default location on the invoice date
3349   my $default_locationnum;
3350   if ( $conf->exists('invoice-all_pkg_addresses') ) {
3351     $default_locationnum = 0; # treat them all as non-default
3352   } elsif ( $self->custnum ) {
3353     my $h_cust_main;
3354     my @h_search = FS::h_cust_main->sql_h_search($self->_date);
3355     $h_cust_main = qsearchs({
3356         'table'     => 'h_cust_main',
3357         'hashref'   => { custnum => $self->custnum },
3358         'extra_sql' => $h_search[1],
3359         'addl_from' => $h_search[3],
3360     }) || $cust_main;
3361     $default_locationnum = $h_cust_main->ship_locationnum;
3362   } elsif ( $self->prospectnum ) {
3363     my $cust_location = qsearchs('cust_location',
3364       { prospectnum => $self->prospectnum,
3365         disabled => '' });
3366     $default_locationnum = $cust_location->locationnum if $cust_location;
3367   }
3368
3369   my @b = (); # accumulator for the line item hashes that we'll return
3370   my ($s, $r, $u, $d) = ( undef, undef, undef, undef );
3371             # the 'current' line item hashes for setup, recur, usage, discount
3372   foreach my $cust_bill_pkg ( @$cust_bill_pkgs )
3373   {
3374     # if the current line item is waiting to go out, and the one we're about
3375     # to start is not bundled, then push out the current one and start a new
3376     # one.
3377     if ( $d ) {
3378       $d->{amount} = $d->{setup_amount} + $d->{recur_amount};
3379     }
3380     foreach ( $s, $r, ($opt{skip_usage} ? () : $u ), $d ) {
3381       if ( $_ && !$cust_bill_pkg->hidden ) {
3382         $_->{amount}      = sprintf( "%.2f", $_->{amount} );
3383         $_->{amount}      =~ s/^\-0\.00$/0.00/;
3384         if (exists($_->{unit_amount})) {
3385           $_->{unit_amount} = sprintf( "%.2f", $_->{unit_amount} );
3386         }
3387         push @b, { %$_ };
3388         # we already decided to create this display line; don't reconsider it
3389         # now.
3390         #  if $_->{amount} != 0
3391         #  || $discount_show_always
3392         #  || ( ! $_->{_is_setup} && $_->{recur_show_zero} )
3393         #  || (   $_->{_is_setup} && $_->{setup_show_zero} )
3394         ;
3395         $_ = undef;
3396       }
3397     }
3398
3399     if ( $locationnum ) {
3400       # this is a location section; skip packages that aren't at this
3401       # service location.
3402       next if $cust_bill_pkg->pkgnum == 0; # skips fees...
3403       next if $self->cust_pkg_hash->{ $cust_bill_pkg->pkgnum }->locationnum
3404               != $locationnum;
3405     }
3406
3407     # Consider display records for this item to determine if it belongs
3408     # in this section.  Note that if there are no display records, there
3409     # will be a default pseudo-record that includes all charge types
3410     # and has no section name.
3411     my @cust_bill_pkg_display = $cust_bill_pkg->can('cust_bill_pkg_display')
3412                                   ? $cust_bill_pkg->cust_bill_pkg_display
3413                                   : ( $cust_bill_pkg );
3414
3415     warn "$me _items_cust_bill_pkg considering cust_bill_pkg ".
3416          $cust_bill_pkg->billpkgnum. ", pkgnum ". $cust_bill_pkg->pkgnum. "\n"
3417       if $DEBUG > 1;
3418
3419     if ( defined($category) ) {
3420       # then this is a package category section; process all display records
3421       # that belong to this section.
3422       @cust_bill_pkg_display = grep { $_->section eq $category }
3423                                 @cust_bill_pkg_display;
3424     } else {
3425       # otherwise, process all display records that aren't usage summaries
3426       # (I don't think there should be usage summaries if you aren't using
3427       # category sections, but this is the historical behavior)
3428       @cust_bill_pkg_display = grep { !$_->summary }
3429                                 @cust_bill_pkg_display;
3430     }
3431
3432     my $classname = ''; # package class name, will fill in later
3433
3434     foreach my $display (@cust_bill_pkg_display) {
3435
3436       warn "$me _items_cust_bill_pkg considering cust_bill_pkg_display ".
3437            $display->billpkgdisplaynum. "\n"
3438         if $DEBUG > 1;
3439
3440       my $type = $display->type;
3441
3442       my $desc = $cust_bill_pkg->desc( $cust_main ? $cust_main->locale : '' );
3443       $desc = substr($desc, 0, $maxlength). '...'
3444         if $format eq 'latex' && length($desc) > $maxlength;
3445
3446       my %details_opt = ( 'format'          => $format,
3447                           'escape_function' => $escape_function,
3448                           'format_function' => $format_function,
3449                           'no_usage'        => $opt{'no_usage'},
3450                         );
3451
3452       if ( $cust_bill_pkg->pkgnum > 0 ) {
3453         # a "normal" package line item (not a quotation, not a fee, not a tax)
3454
3455         warn "$me _items_cust_bill_pkg cust_bill_pkg is non-tax\n"
3456           if $DEBUG > 1;
3457
3458         my $cust_pkg = $cust_bill_pkg->cust_pkg;
3459         my $part_pkg = $cust_pkg->part_pkg;
3460
3461         # which pkgpart to show for display purposes?
3462         my $pkgpart = $cust_bill_pkg->pkgpart_override || $cust_pkg->pkgpart;
3463
3464         # start/end dates for invoice formats that do nonstandard
3465         # things with them
3466         my %item_dates = ();
3467         %item_dates = map { $_ => $cust_bill_pkg->$_ } ('sdate', 'edate')
3468           unless $part_pkg->option('disable_line_item_date_ranges',1);
3469
3470         # not normally used, but pass this to the template anyway
3471         $classname = $part_pkg->classname;
3472
3473         my @pkg_tax = $cust_bill_pkg->_pkg_tax_list
3474           if $opt{section_with_taxes};
3475
3476         if (    (!$type || $type eq 'S')
3477              && (    $cust_bill_pkg->setup != 0
3478                   || $cust_bill_pkg->setup_show_zero
3479                   || ($discount_show_always and $cust_bill_pkg->unitsetup > 0)
3480                 )
3481            )
3482          {
3483
3484           warn "$me _items_cust_bill_pkg adding setup\n"
3485             if $DEBUG > 1;
3486
3487           # append the word 'Setup' to the setup line if there's going to be
3488           # a recur line for the same package (i.e. not a one-time charge)
3489           # XXX localization
3490           my $description = $desc;
3491           $description .= ' Setup'
3492             if $cust_bill_pkg->recur != 0
3493             || ($discount_show_always and $cust_bill_pkg->unitrecur > 0)
3494             || $cust_bill_pkg->recur_show_zero;
3495
3496           my $disable_date_ranges =
3497                $opt{disable_line_item_date_ranges}
3498             || $part_pkg->option('disable_line_item_date_ranges', 1);
3499
3500           $description .= $cust_bill_pkg->time_period_pretty(
3501                             $part_pkg,
3502                             $agentnum,
3503                             disable_date_ranges => $disable_date_ranges,
3504                           )
3505             if $part_pkg->is_prepaid #for prepaid, "display the validity period
3506                                      # triggered by the recurring charge freq
3507                                      # (RT#26274)
3508             && $cust_bill_pkg->recur == 0
3509             && ! $cust_bill_pkg->recur_show_zero;
3510
3511           my @d = ();
3512           my @svc_labels = ();
3513           my $svc_label = '';
3514
3515           unless ( $part_pkg->hide_svc_detail ) {
3516
3517             # still pass the svc_label through to the template, even if
3518             # not displaying it as an ext_description
3519             @svc_labels = map &{$escape_function}($_),
3520               $cust_pkg->h_labels_short($self->_date,
3521                                         undef,
3522                                         'I',
3523                                         $self->conf->{locale},
3524                                        );
3525             $svc_label = $svc_labels[0];
3526
3527           }
3528
3529           unless ( $part_pkg->hide_svc_detail
3530                 || $cust_bill_pkg->hidden )
3531           {
3532
3533             push @d, @svc_labels
3534               unless $cust_bill_pkg->pkgpart_override; #don't redisplay services
3535             # show the location label if it's not the customer's default
3536             # location, and we're not grouping items by location already
3537             if ( $cust_pkg->locationnum != $default_locationnum
3538                   and !defined($locationnum) ) {
3539               my $loc = $cust_pkg->location_label;
3540               $loc = substr($loc, 0, $maxlength). '...'
3541                 if $format eq 'latex' && length($loc) > $maxlength;
3542               push @d, &{$escape_function}($loc);
3543             }
3544
3545           } #unless hiding service details
3546
3547           push @d, $cust_bill_pkg->details(%details_opt)
3548             if $cust_bill_pkg->recur == 0;
3549
3550           if ( $cust_bill_pkg->hidden ) {
3551             $s->{amount}      += $cust_bill_pkg->setup;
3552             $s->{unit_amount} += $cust_bill_pkg->unitsetup;
3553             push @{ $s->{ext_description} }, @d;
3554           } else {
3555             $s = {
3556               billpkgnum      => $cust_bill_pkg->billpkgnum,
3557               _is_setup       => 1,
3558               description     => $description,
3559               pkgpart         => $pkgpart,
3560               pkgnum          => $cust_bill_pkg->pkgnum,
3561               amount          => $cust_bill_pkg->setup,
3562               setup_show_zero => $cust_bill_pkg->setup_show_zero,
3563               unit_amount     => $cust_bill_pkg->unitsetup,
3564               quantity        => $cust_bill_pkg->quantity,
3565               ext_description => \@d,
3566               svc_label       => ($svc_label || ''),
3567               locationnum     => $cust_pkg->locationnum, # sure, why not?
3568               pkg_tax         => \@pkg_tax,
3569             };
3570           };
3571
3572         }
3573
3574         # should we show a recur line?
3575         # if type eq 'S', then NO, because we've been told not to.
3576         # otherwise, show the recur line if:
3577         # - there's a recurring charge
3578         # - or recur_show_zero is on
3579         # - or there's a positive unitrecur (so it's been discounted to zero)
3580         #   and discount-show-always is on
3581         if (    ( !$type || $type eq 'R' || $type eq 'U' )
3582              && (
3583                      $cust_bill_pkg->recur != 0
3584                   || !defined($s)
3585                   || ($discount_show_always and $cust_bill_pkg->unitrecur > 0)
3586                   || $cust_bill_pkg->recur_show_zero
3587                 )
3588            )
3589         {
3590
3591           warn "$me _items_cust_bill_pkg adding recur/usage\n"
3592             if $DEBUG > 1;
3593
3594           my $is_summary = $display->summary;
3595           my $description = $desc;
3596           if ( $type eq 'U' and defined($r) ) {
3597             # don't just show the same description as the recur line
3598             $description = $self->mt('Usage charges');
3599           }
3600
3601           my $disable_date_ranges =
3602                $opt{disable_line_item_date_ranges}
3603             || $part_pkg->option('disable_line_item_date_ranges', 1);
3604
3605           $description .= $cust_bill_pkg->time_period_pretty(
3606                                     $part_pkg,
3607                                     $agentnum,
3608                                     disable_date_ranges => $disable_date_ranges,
3609                           );
3610
3611           my @d = ();
3612           my @seconds = (); # for display of usage info
3613           my @svc_labels = ();
3614           my $svc_label = '';
3615
3616           #at least until cust_bill_pkg has "past" ranges in addition to
3617           #the "future" sdate/edate ones... see #3032
3618           my @dates = ( $self->_date );
3619           my $prev = $cust_bill_pkg->previous_cust_bill_pkg;
3620           push @dates, $prev->sdate if $prev;
3621           push @dates, undef if !$prev;
3622
3623           unless ( $part_pkg->hide_svc_detail ) {
3624             @svc_labels = map &{$escape_function}($_),
3625               $cust_pkg->h_labels_short(@dates,
3626                                         'I',
3627                                         $self->conf->{locale});
3628             $svc_label = $svc_labels[0];
3629           }
3630
3631           # show service labels, unless...
3632                     # the package is set not to display them
3633           unless ( $part_pkg->hide_svc_detail
3634                     # or this is a tax-like line item
3635                 || $cust_bill_pkg->itemdesc
3636                     # or this is a hidden (bundled) line item
3637                 || $cust_bill_pkg->hidden
3638                     # or this is a usage summary line
3639                 || $is_summary && $type && $type eq 'U'
3640                     # or this is a usage line and there's a recurring line
3641                     # for the package in the same section (which will
3642                     # have service labels already)
3643                 || ($type eq 'U' and defined($r))
3644               )
3645           {
3646
3647             warn "$me _items_cust_bill_pkg adding service details\n"
3648               if $DEBUG > 1;
3649
3650             push @d, @svc_labels
3651               unless $cust_bill_pkg->pkgpart_override; #don't redisplay services
3652             warn "$me _items_cust_bill_pkg done adding service details\n"
3653               if $DEBUG > 1;
3654
3655             # show the location label if it's not the customer's default
3656             # location, and we're not grouping items by location already
3657             if ( $cust_pkg->locationnum != $default_locationnum
3658                   and !defined($locationnum) ) {
3659               my $loc = $cust_pkg->location_label;
3660               $loc = substr($loc, 0, $maxlength). '...'
3661                 if $format eq 'latex' && length($loc) > $maxlength;
3662               push @d, &{$escape_function}($loc);
3663             }
3664
3665             # Display of seconds_since_sqlradacct:
3666             # On the invoice, when processing @detail_items, look for a field
3667             # named 'seconds'.  This will contain total seconds for each
3668             # service, in the same order as @ext_description.  For services
3669             # that don't support this it will show undef.
3670             if ( $conf->exists('svc_acct-usage_seconds')
3671                  and ! $cust_bill_pkg->pkgpart_override ) {
3672               foreach my $cust_svc (
3673                   $cust_pkg->h_cust_svc(@dates, 'I')
3674                 ) {
3675
3676                 # eval because not having any part_export_usage exports
3677                 # is a fatal error, last_bill/_date because that's how
3678                 # sqlradius_hour billing does it
3679                 my $sec = eval {
3680                   $cust_svc->seconds_since_sqlradacct($dates[1] || 0, $dates[0]);
3681                 };
3682                 push @seconds, $sec;
3683               }
3684             } #if svc_acct-usage_seconds
3685
3686           } # if we are showing service labels
3687
3688           unless ( $is_summary ) {
3689             warn "$me _items_cust_bill_pkg adding details\n"
3690               if $DEBUG > 1;
3691
3692             #instead of omitting details entirely in this case (unwanted side
3693             # effects), just omit CDRs
3694             $details_opt{'no_usage'} = 1
3695               if $type && $type eq 'R';
3696
3697             push @d, $cust_bill_pkg->details(%details_opt);
3698           }
3699
3700           warn "$me _items_cust_bill_pkg calculating amount\n"
3701             if $DEBUG > 1;
3702
3703           my $amount = 0;
3704           if (!$type) {
3705             $amount = $cust_bill_pkg->recur;
3706           } elsif ($type eq 'R') {
3707             $amount = $cust_bill_pkg->recur - $cust_bill_pkg->usage;
3708           } elsif ($type eq 'U') {
3709             $amount = $cust_bill_pkg->usage;
3710           }
3711
3712           if ( !$type || $type eq 'R' ) {
3713
3714             warn "$me _items_cust_bill_pkg adding recur\n"
3715               if $DEBUG > 1;
3716
3717             my $unit_amount =
3718               ( $cust_bill_pkg->unitrecur > 0 ) ? $cust_bill_pkg->unitrecur
3719                                                 : $amount;
3720
3721             if ( $cust_bill_pkg->hidden ) {
3722               $r->{amount}      += $amount;
3723               $r->{unit_amount} += $unit_amount;
3724               push @{ $r->{ext_description} }, @d;
3725             } else {
3726               $r = {
3727                 billpkgnum      => $cust_bill_pkg->billpkgnum,
3728                 description     => $description,
3729                 pkgpart         => $pkgpart,
3730                 pkgnum          => $cust_bill_pkg->pkgnum,
3731                 amount          => $amount,
3732                 recur_show_zero => $cust_bill_pkg->recur_show_zero,
3733                 unit_amount     => $unit_amount,
3734                 quantity        => $cust_bill_pkg->quantity,
3735                 %item_dates,
3736                 ext_description => \@d,
3737                 svc_label       => ($svc_label || ''),
3738                 locationnum     => $cust_pkg->locationnum,
3739                 pkg_tax         => \@pkg_tax,
3740               };
3741               $r->{'seconds'} = \@seconds if grep {defined $_} @seconds;
3742             }
3743
3744           } else {  # $type eq 'U'
3745
3746             warn "$me _items_cust_bill_pkg adding usage\n"
3747               if $DEBUG > 1;
3748
3749             if ( $cust_bill_pkg->hidden and defined($u) ) {
3750               # if this is a hidden package and there's already a usage
3751               # line for the bundle, add this package's total amount and
3752               # usage details to it
3753               $u->{amount}      += $amount;
3754               push @{ $u->{ext_description} }, @d;
3755             } elsif ( $amount ) {
3756               # create a new usage line
3757               $u = {
3758                 billpkgnum      => $cust_bill_pkg->billpkgnum,
3759                 description     => $description,
3760                 pkgpart         => $pkgpart,
3761                 pkgnum          => $cust_bill_pkg->pkgnum,
3762                 amount          => $amount,
3763                 usage_item      => 1,
3764                 recur_show_zero => $cust_bill_pkg->recur_show_zero,
3765                 %item_dates,
3766                 ext_description => \@d,
3767                 locationnum     => $cust_pkg->locationnum,
3768                 pkg_tax         => \@pkg_tax,
3769               };
3770             } # else this has no usage, so don't create a usage section
3771           }
3772
3773         } # recurring or usage with recurring charge
3774
3775       } else { # taxes and fees
3776
3777         warn "$me _items_cust_bill_pkg cust_bill_pkg is tax\n"
3778           if $DEBUG > 1;
3779
3780         # items of this kind should normally not have sdate/edate.
3781         push @b, {
3782           'description' => $desc,
3783           'amount'      => sprintf('%.2f', $cust_bill_pkg->setup
3784                                            + $cust_bill_pkg->recur)
3785         };
3786
3787       } # if package line item / other line item
3788
3789       # decide whether to show active discounts here
3790       if (
3791           # case 1: we are showing a single line for the package
3792           ( !$type )
3793           # case 2: we are showing a setup line for a package that has
3794           # no base recurring fee
3795           or ( $type eq 'S' and $cust_bill_pkg->unitrecur == 0 )
3796           # case 3: we are showing a recur line for a package that has
3797           # a base recurring fee
3798           or ( $type eq 'R' and $cust_bill_pkg->unitrecur > 0 )
3799       ) {
3800
3801         my $item_discount = $cust_bill_pkg->_item_discount;
3802         if ( $item_discount ) {
3803           # $item_discount->{amount} is negative
3804
3805           if ( $d and $cust_bill_pkg->hidden ) {
3806             $d->{setup_amount} += $item_discount->{setup_amount};
3807             $d->{recur_amount} += $item_discount->{recur_amount};
3808           } else {
3809             $d = $item_discount;
3810             $_ = &{$escape_function}($_) foreach @{ $d->{ext_description} };
3811           }
3812
3813           # update the active line (before the discount) to show the
3814           # original price (whether this is a hidden line or not)
3815
3816           $s->{amount} -= $item_discount->{setup_amount} if $s;
3817           $r->{amount} -= $item_discount->{recur_amount} if $r;
3818
3819         } # if there are any discounts
3820       } # if this is an appropriate place to show discounts
3821
3822     } # foreach $display
3823
3824   }
3825
3826   # discount amount is internally split up
3827   if ( $d ) {
3828     $d->{amount} = $d->{setup_amount} + $d->{recur_amount};
3829   }
3830
3831   foreach ( $s, $r, ($opt{skip_usage} ? () : $u ), $d ) {
3832     if ( $_  ) {
3833       $_->{amount}      = sprintf( "%.2f", $_->{amount} ),
3834         if exists($_->{amount});
3835       $_->{amount}      =~ s/^\-0\.00$/0.00/;
3836       if (exists($_->{unit_amount})) {
3837         $_->{unit_amount} = sprintf( "%.2f", $_->{unit_amount} );
3838       }
3839
3840       push @b, { %$_ };
3841       #if $_->{amount} != 0
3842       #  || $discount_show_always
3843       #  || ( ! $_->{_is_setup} && $_->{recur_show_zero} )
3844       #  || (   $_->{_is_setup} && $_->{setup_show_zero} )
3845     }
3846   }
3847
3848   warn "$me _items_cust_bill_pkg done considering cust_bill_pkgs\n"
3849     if $DEBUG > 1;
3850
3851   @b;
3852
3853 }
3854
3855 =item _items_discounts_avail
3856
3857 Returns an array of line item hashrefs representing available term discounts
3858 for this invoice.  This makes the same assumptions that apply to term
3859 discounts in general: that the package is billed monthly, at a flat rate,
3860 with no usage charges.  A prorated first month will be handled, as will
3861 a setup fee if the discount is allowed to apply to setup fees.
3862
3863 =cut
3864
3865 sub _items_discounts_avail {
3866   my $self = shift;
3867
3868   #maybe move this method from cust_bill when quotations support discount_plans
3869   return () unless $self->can('discount_plans');
3870   my %plans = $self->discount_plans;
3871
3872   my $list_pkgnums = 0; # if any packages are not eligible for all discounts
3873   $list_pkgnums = grep { $_->list_pkgnums } values %plans;
3874
3875   map {
3876     my $months = $_;
3877     my $plan = $plans{$months};
3878
3879     my $term_total = sprintf('%.2f', $plan->discounted_total);
3880     my $percent = sprintf('%.0f',
3881                           100 * (1 - $term_total / $plan->base_total) );
3882     my $permonth = sprintf('%.2f', $term_total / $months);
3883     my $detail = $self->mt('discount on item'). ' '.
3884                  join(', ', map { "#$_" } $plan->pkgnums)
3885       if $list_pkgnums;
3886
3887     # discounts for non-integer months don't work anyway
3888     $months = sprintf("%d", $months);
3889
3890     +{
3891       description => $self->mt('Save [_1]% by paying for [_2] months',
3892                                 $percent, $months),
3893       amount      => $self->mt('[_1] ([_2] per month)',
3894                                 $term_total, $money_char.$permonth),
3895       ext_description => ($detail || ''),
3896     }
3897   } #map
3898   sort { $b <=> $a } keys %plans;
3899
3900 }
3901
3902 =item has_sections AGENTNUM
3903
3904 Return true if invoice_sections should be enabled for this bill.
3905  (Inherited by both cust_bill and cust_bill_void)
3906
3907 Determination:
3908 * False if not an invoice
3909 * True always if conf invoice_sections is enabled
3910 * True always if sections_by_location is enabled
3911 * True if conf invoice_sections_multilocation > 1,
3912   and location_count >= invoice_sections_multilocation
3913 * Else, False
3914
3915 =cut
3916
3917 sub has_sections {
3918   my ($self, $agentnum) = @_;
3919
3920   return 0 unless $self->invnum > 0;
3921
3922   $agentnum ||= $self->agentnum;
3923   return 1 if $self->conf->config_bool('invoice_sections', $agentnum);
3924   return 1 if $self->conf->exists('sections_by_location', $agentnum);
3925
3926   my $location_min = $self->conf->config(
3927     'invoice_sections_multilocation', $agentnum,
3928   );
3929
3930   return 1
3931     if $location_min
3932     && $self->location_count >= $location_min;
3933
3934   0;
3935 }
3936
3937
3938 =item location_count
3939
3940 Return the number of locations billed on this invoice
3941
3942 =cut
3943
3944 sub location_count {
3945   my ($self) = @_;
3946   return 0 unless $self->invnum;
3947
3948   # SELECT COUNT( DISTINCT cust_pkg.locationnum )
3949   # FROM cust_bill_pkg
3950   # LEFT JOIN cust_pkg USING (pkgnum)
3951   # WHERE invnum = 278
3952   #   AND cust_bill_pkg.pkgnum > 0
3953
3954   my $result = qsearchs({
3955     select    => 'COUNT(DISTINCT cust_pkg.locationnum) as location_count',
3956     table     => 'cust_bill_pkg',
3957     addl_from => 'LEFT JOIN cust_pkg USING (pkgnum)',
3958     extra_sql => 'WHERE invnum = '.dbh->quote( $self->invnum )
3959                . '  AND cust_bill_pkg.pkgnum > 0'
3960   });
3961   ref $result ? $result->location_count : 0;
3962 }
3963
3964
3965
3966 1;