Merge branch 'FREESIDE_3_BRANCH' of git.freeside.biz:/home/git/freeside into FREESIDE...
[freeside.git] / FS / FS / cust_main.pm
1 package FS::cust_main;
2
3 require 5.006;
4 use strict;
5 use base qw( FS::cust_main::Packages FS::cust_main::Status
6              FS::cust_main::NationalID
7              FS::cust_main::Billing FS::cust_main::Billing_Realtime
8              FS::cust_main::Billing_Discount
9              FS::cust_main::Billing_ThirdParty
10              FS::cust_main::Location
11              FS::cust_main::Credit_Limit
12              FS::otaker_Mixin FS::payinfo_Mixin FS::cust_main_Mixin
13              FS::geocode_Mixin FS::Quotable_Mixin FS::Sales_Mixin
14              FS::o2m_Common
15              FS::Record
16            );
17 use vars qw( $DEBUG $me $conf $default_agent_custid $custnum_display_length
18              @encrypted_fields
19              $import
20              $ignore_expired_card $ignore_banned_card $ignore_illegal_zip
21              $skip_fuzzyfiles
22              @paytypes
23            );
24 use Carp;
25 use Scalar::Util qw( blessed );
26 use Time::Local qw(timelocal);
27 use Storable qw(thaw);
28 use MIME::Base64;
29 use Data::Dumper;
30 use Tie::IxHash;
31 use Digest::MD5 qw(md5_base64);
32 use Date::Format;
33 #use Date::Manip;
34 use File::Temp; #qw( tempfile );
35 use Email::Address;
36 use Business::CreditCard 0.28;
37 use FS::UID qw( getotaker dbh driver_name );
38 use FS::Record qw( qsearchs qsearch dbdef regexp_sql );
39 use FS::Misc qw( generate_email send_email generate_ps do_print money_pretty card_types );
40 use FS::Msgcat qw(gettext);
41 use FS::CurrentUser;
42 use FS::TicketSystem;
43 use FS::payby;
44 use FS::cust_pkg;
45 use FS::cust_svc;
46 use FS::cust_bill;
47 use FS::cust_bill_void;
48 use FS::legacy_cust_bill;
49 use FS::cust_pay;
50 use FS::cust_pay_pending;
51 use FS::cust_pay_void;
52 use FS::cust_pay_batch;
53 use FS::cust_credit;
54 use FS::cust_refund;
55 use FS::part_referral;
56 use FS::cust_main_county;
57 use FS::cust_location;
58 use FS::cust_class;
59 use FS::cust_main_exemption;
60 use FS::cust_tax_adjustment;
61 use FS::cust_tax_location;
62 use FS::agent;
63 use FS::cust_main_invoice;
64 use FS::cust_tag;
65 use FS::prepay_credit;
66 use FS::queue;
67 use FS::part_pkg;
68 use FS::part_export;
69 #use FS::cust_event;
70 use FS::type_pkgs;
71 use FS::payment_gateway;
72 use FS::agent_payment_gateway;
73 use FS::banned_pay;
74 use FS::cust_main_note;
75 use FS::cust_attachment;
76 use FS::contact;
77 use FS::Locales;
78 use FS::upgrade_journal;
79 use FS::reason;
80
81 # 1 is mostly method/subroutine entry and options
82 # 2 traces progress of some operations
83 # 3 is even more information including possibly sensitive data
84 $DEBUG = 0;
85 $me = '[FS::cust_main]';
86
87 $import = 0;
88 $ignore_expired_card = 0;
89 $ignore_banned_card = 0;
90
91 $skip_fuzzyfiles = 0;
92
93 @encrypted_fields = ('payinfo', 'paycvv');
94 sub nohistory_fields { ('payinfo', 'paycvv'); }
95
96 @paytypes = ('', 'Personal checking', 'Personal savings', 'Business checking', 'Business savings');
97
98 #ask FS::UID to run this stuff for us later
99 #$FS::UID::callback{'FS::cust_main'} = sub { 
100 install_callback FS::UID sub { 
101   $conf = new FS::Conf;
102   $default_agent_custid   = $conf->exists('cust_main-default_agent_custid');
103   $custnum_display_length = $conf->config('cust_main-custnum-display_length');
104 };
105
106 sub _cache {
107   my $self = shift;
108   my ( $hashref, $cache ) = @_;
109   if ( exists $hashref->{'pkgnum'} ) {
110     #@{ $self->{'_pkgnum'} } = ();
111     my $subcache = $cache->subcache( 'pkgnum', 'cust_pkg', $hashref->{custnum});
112     $self->{'_pkgnum'} = $subcache;
113     #push @{ $self->{'_pkgnum'} },
114     FS::cust_pkg->new_or_cached($hashref, $subcache) if $hashref->{pkgnum};
115   }
116 }
117
118 =head1 NAME
119
120 FS::cust_main - Object methods for cust_main records
121
122 =head1 SYNOPSIS
123
124   use FS::cust_main;
125
126   $record = new FS::cust_main \%hash;
127   $record = new FS::cust_main { 'column' => 'value' };
128
129   $error = $record->insert;
130
131   $error = $new_record->replace($old_record);
132
133   $error = $record->delete;
134
135   $error = $record->check;
136
137   @cust_pkg = $record->all_pkgs;
138
139   @cust_pkg = $record->ncancelled_pkgs;
140
141   @cust_pkg = $record->suspended_pkgs;
142
143   $error = $record->bill;
144   $error = $record->bill %options;
145   $error = $record->bill 'time' => $time;
146
147   $error = $record->collect;
148   $error = $record->collect %options;
149   $error = $record->collect 'invoice_time'   => $time,
150                           ;
151
152 =head1 DESCRIPTION
153
154 An FS::cust_main object represents a customer.  FS::cust_main inherits from 
155 FS::Record.  The following fields are currently supported:
156
157 =over 4
158
159 =item custnum
160
161 Primary key (assigned automatically for new customers)
162
163 =item agentnum
164
165 Agent (see L<FS::agent>)
166
167 =item refnum
168
169 Advertising source (see L<FS::part_referral>)
170
171 =item first
172
173 First name
174
175 =item last
176
177 Last name
178
179 =item ss
180
181 Cocial security number (optional)
182
183 =item company
184
185 (optional)
186
187 =item daytime
188
189 phone (optional)
190
191 =item night
192
193 phone (optional)
194
195 =item fax
196
197 phone (optional)
198
199 =item mobile
200
201 phone (optional)
202
203 =item payby
204
205 Payment Type (See L<FS::payinfo_Mixin> for valid payby values)
206
207 =item payinfo
208
209 Payment Information (See L<FS::payinfo_Mixin> for data format)
210
211 =item paymask
212
213 Masked payinfo (See L<FS::payinfo_Mixin> for how this works)
214
215 =item paycvv
216
217 Card Verification Value, "CVV2" (also known as CVC2 or CID), the 3 or 4 digit number on the back (or front, for American Express) of the credit card
218
219 =item paydate
220
221 Expiration date, mm/yyyy, m/yyyy, mm/yy or m/yy
222
223 =item paystart_month
224
225 Start date month (maestro/solo cards only)
226
227 =item paystart_year
228
229 Start date year (maestro/solo cards only)
230
231 =item payissue
232
233 Issue number (maestro/solo cards only)
234
235 =item payname
236
237 Name on card or billing name
238
239 =item payip
240
241 IP address from which payment information was received
242
243 =item paycardtype
244
245 The credit card type (deduced from the card number).
246
247 =item tax
248
249 Tax exempt, empty or `Y'
250
251 =item usernum
252
253 Order taker (see L<FS::access_user>)
254
255 =item comments
256
257 Comments (optional)
258
259 =item referral_custnum
260
261 Referring customer number
262
263 =item spool_cdr
264
265 Enable individual CDR spooling, empty or `Y'
266
267 =item dundate
268
269 A suggestion to events (see L<FS::part_bill_event">) to delay until this unix timestamp
270
271 =item squelch_cdr
272
273 Discourage individual CDR printing, empty or `Y'
274
275 =item edit_subject
276
277 Allow self-service editing of ticket subjects, empty or 'Y'
278
279 =item calling_list_exempt
280
281 Do not call, empty or 'Y'
282
283 =item invoice_ship_address
284
285 Display ship_address ("Service address") on invoices for this customer, empty or 'Y'
286
287 =back
288
289 =head1 METHODS
290
291 =over 4
292
293 =item new HASHREF
294
295 Creates a new customer.  To add the customer to the database, see L<"insert">.
296
297 Note that this stores the hash reference, not a distinct copy of the hash it
298 points to.  You can ask the object for a copy with the I<hash> method.
299
300 =cut
301
302 sub table { 'cust_main'; }
303
304 =item insert [ CUST_PKG_HASHREF [ , INVOICING_LIST_ARYREF ] [ , OPTION => VALUE ... ] ]
305
306 Adds this customer to the database.  If there is an error, returns the error,
307 otherwise returns false.
308
309 Usually the customer's location will not yet exist in the database, and
310 the C<bill_location> and C<ship_location> pseudo-fields must be set to 
311 uninserted L<FS::cust_location> objects.  These will be inserted and linked
312 (in both directions) to the new customer record.  If they're references 
313 to the same object, they will become the same location.
314
315 CUST_PKG_HASHREF: If you pass a Tie::RefHash data structure to the insert
316 method containing FS::cust_pkg and FS::svc_I<tablename> objects, all records
317 are inserted atomicly, or the transaction is rolled back.  Passing an empty
318 hash reference is equivalent to not supplying this parameter.  There should be
319 a better explanation of this, but until then, here's an example:
320
321   use Tie::RefHash;
322   tie %hash, 'Tie::RefHash'; #this part is important
323   %hash = (
324     $cust_pkg => [ $svc_acct ],
325     ...
326   );
327   $cust_main->insert( \%hash );
328
329 INVOICING_LIST_ARYREF: If you pass an arrarref to the insert method, it will
330 be set as the invoicing list (see L<"invoicing_list">).  Errors return as
331 expected and rollback the entire transaction; it is not necessary to call 
332 check_invoicing_list first.  The invoicing_list is set after the records in the
333 CUST_PKG_HASHREF above are inserted, so it is now possible to set an
334 invoicing_list destination to the newly-created svc_acct.  Here's an example:
335
336   $cust_main->insert( {}, [ $email, 'POST' ] );
337
338 Currently available options are: I<depend_jobnum>, I<noexport>,
339 I<tax_exemption> and I<prospectnum>.
340
341 If I<depend_jobnum> is set, all provisioning jobs will have a dependancy
342 on the supplied jobnum (they will not run until the specific job completes).
343 This can be used to defer provisioning until some action completes (such
344 as running the customer's credit card successfully).
345
346 The I<noexport> option is deprecated.  If I<noexport> is set true, no
347 provisioning jobs (exports) are scheduled.  (You can schedule them later with
348 the B<reexport> method.)
349
350 The I<tax_exemption> option can be set to an arrayref of tax names or a hashref
351 of tax names and exemption numbers.  FS::cust_main_exemption records will be
352 created and inserted.
353
354 If I<prospectnum> is set, moves contacts and locations from that prospect.
355
356 =cut
357
358 sub insert {
359   my $self = shift;
360   my $cust_pkgs = @_ ? shift : {};
361   my $invoicing_list = @_ ? shift : '';
362   my %options = @_;
363   warn "$me insert called with options ".
364        join(', ', map { "$_: $options{$_}" } keys %options ). "\n"
365     if $DEBUG;
366
367   local $SIG{HUP} = 'IGNORE';
368   local $SIG{INT} = 'IGNORE';
369   local $SIG{QUIT} = 'IGNORE';
370   local $SIG{TERM} = 'IGNORE';
371   local $SIG{TSTP} = 'IGNORE';
372   local $SIG{PIPE} = 'IGNORE';
373
374   my $oldAutoCommit = $FS::UID::AutoCommit;
375   local $FS::UID::AutoCommit = 0;
376   my $dbh = dbh;
377
378   my $prepay_identifier = '';
379   my( $amount, $seconds, $upbytes, $downbytes, $totalbytes ) = (0, 0, 0, 0, 0);
380   my $payby = '';
381   if ( $self->payby eq 'PREPAY' ) {
382
383     $self->payby('BILL');
384     $prepay_identifier = $self->payinfo;
385     $self->payinfo('');
386
387     warn "  looking up prepaid card $prepay_identifier\n"
388       if $DEBUG > 1;
389
390     my $error = $self->get_prepay( $prepay_identifier,
391                                    'amount_ref'     => \$amount,
392                                    'seconds_ref'    => \$seconds,
393                                    'upbytes_ref'    => \$upbytes,
394                                    'downbytes_ref'  => \$downbytes,
395                                    'totalbytes_ref' => \$totalbytes,
396                                  );
397     if ( $error ) {
398       $dbh->rollback if $oldAutoCommit;
399       #return "error applying prepaid card (transaction rolled back): $error";
400       return $error;
401     }
402
403     $payby = 'PREP' if $amount;
404
405   } elsif ( $self->payby =~ /^(CASH|WEST|MCRD|MCHK|PPAL)$/ ) {
406
407     $payby = $1;
408     $self->payby('BILL');
409     $amount = $self->paid;
410
411   }
412
413   # insert locations
414   foreach my $l (qw(bill_location ship_location)) {
415
416     my $loc = delete $self->hashref->{$l} or return "$l not set";
417     
418     if ( !$loc->locationnum ) {
419       # warn the location that we're going to insert it with no custnum
420       $loc->set(custnum_pending => 1);
421       warn "  inserting $l\n"
422         if $DEBUG > 1;
423       my $error = $loc->insert;
424       if ( $error ) {
425         $dbh->rollback if $oldAutoCommit;
426         my $label = $l eq 'ship_location' ? 'service' : 'billing';
427         return "$error (in $label location)";
428       }
429
430     } elsif ( $loc->prospectnum ) {
431
432       $loc->prospectnum('');
433       $loc->set(custnum_pending => 1);
434       my $error = $loc->replace;
435       if ( $error ) {
436         $dbh->rollback if $oldAutoCommit;
437         my $label = $l eq 'ship_location' ? 'service' : 'billing';
438         return "$error (moving $label location)";
439       }
440
441     } elsif ( ($loc->custnum || 0) > 0 ) {
442       # then it somehow belongs to another customer--shouldn't happen
443       $dbh->rollback if $oldAutoCommit;
444       return "$l belongs to customer ".$loc->custnum;
445     }
446     # else it already belongs to this customer 
447     # (happens when ship_location is identical to bill_location)
448
449     $self->set($l.'num', $loc->locationnum);
450
451     if ( $self->get($l.'num') eq '' ) {
452       $dbh->rollback if $oldAutoCommit;
453       return "$l not set";
454     }
455   }
456
457   warn "  inserting $self\n"
458     if $DEBUG > 1;
459
460   $self->signupdate(time) unless $self->signupdate;
461
462   $self->auto_agent_custid()
463     if $conf->config('cust_main-auto_agent_custid') && ! $self->agent_custid;
464
465   my $error =  $self->check_payinfo_cardtype
466             || $self->SUPER::insert;
467   if ( $error ) {
468     $dbh->rollback if $oldAutoCommit;
469     #return "inserting cust_main record (transaction rolled back): $error";
470     return $error;
471   }
472
473   # now set cust_location.custnum
474   foreach my $l (qw(bill_location ship_location)) {
475     warn "  setting $l.custnum\n"
476       if $DEBUG > 1;
477     my $loc = $self->$l;
478     unless ( $loc->custnum ) {
479       $loc->set(custnum => $self->custnum);
480       $error ||= $loc->replace;
481     }
482
483     if ( $error ) {
484       $dbh->rollback if $oldAutoCommit;
485       return "error setting $l custnum: $error";
486     }
487   }
488
489   warn "  setting invoicing list\n"
490     if $DEBUG > 1;
491
492   if ( $invoicing_list ) {
493     $error = $self->check_invoicing_list( $invoicing_list );
494     if ( $error ) {
495       $dbh->rollback if $oldAutoCommit;
496       #return "checking invoicing_list (transaction rolled back): $error";
497       return $error;
498     }
499     $self->invoicing_list( $invoicing_list );
500   }
501
502   warn "  setting customer tags\n"
503     if $DEBUG > 1;
504
505   foreach my $tagnum ( @{ $self->tagnum || [] } ) {
506     my $cust_tag = new FS::cust_tag { 'tagnum'  => $tagnum,
507                                       'custnum' => $self->custnum };
508     my $error = $cust_tag->insert;
509     if ( $error ) {
510       $dbh->rollback if $oldAutoCommit;
511       return $error;
512     }
513   }
514
515   my $prospectnum = delete $options{'prospectnum'};
516   if ( $prospectnum ) {
517
518     warn "  moving contacts and locations from prospect $prospectnum\n"
519       if $DEBUG > 1;
520
521     my $prospect_main =
522       qsearchs('prospect_main', { 'prospectnum' => $prospectnum } );
523     unless ( $prospect_main ) {
524       $dbh->rollback if $oldAutoCommit;
525       return "Unknown prospectnum $prospectnum";
526     }
527     $prospect_main->custnum($self->custnum);
528     $prospect_main->disabled('Y');
529     my $error = $prospect_main->replace;
530     if ( $error ) {
531       $dbh->rollback if $oldAutoCommit;
532       return $error;
533     }
534
535     my @contact = $prospect_main->contact;
536     my @cust_location = $prospect_main->cust_location;
537     my @qual = $prospect_main->qual;
538
539     foreach my $r ( @contact, @cust_location, @qual ) {
540       $r->prospectnum('');
541       $r->custnum($self->custnum);
542       my $error = $r->replace;
543       if ( $error ) {
544         $dbh->rollback if $oldAutoCommit;
545         return $error;
546       }
547     }
548
549   }
550
551   # validate card (needs custnum already set)
552   if ( $self->payby =~ /^(CARD|DCRD)$/
553        && $conf->exists('business-onlinepayment-verification') ) {
554     $error = $self->realtime_verify_bop({ 'method'=>'CC' });
555     if ( $error ) {
556       $dbh->rollback if $oldAutoCommit;
557       return $error;
558     }
559   }
560
561   warn "  setting contacts\n"
562     if $DEBUG > 1;
563
564   if ( my $contact = delete $options{'contact'} ) {
565
566     foreach my $c ( @$contact ) {
567       $c->custnum($self->custnum);
568       my $error = $c->insert;
569       if ( $error ) {
570         $dbh->rollback if $oldAutoCommit;
571         return $error;
572       }
573
574     }
575
576   } elsif ( my $contact_params = delete $options{'contact_params'} ) {
577
578     my $error = $self->process_o2m( 'table'  => 'contact',
579                                     'fields' => FS::contact->cgi_contact_fields,
580                                     'params' => $contact_params,
581                                   );
582     if ( $error ) {
583       $dbh->rollback if $oldAutoCommit;
584       return $error;
585     }
586   }
587
588   warn "  setting cust_main_exemption\n"
589     if $DEBUG > 1;
590
591   my $tax_exemption = delete $options{'tax_exemption'};
592   if ( $tax_exemption ) {
593
594     $tax_exemption = { map { $_ => '' } @$tax_exemption }
595       if ref($tax_exemption) eq 'ARRAY';
596
597     foreach my $taxname ( keys %$tax_exemption ) {
598       my $cust_main_exemption = new FS::cust_main_exemption {
599         'custnum'       => $self->custnum,
600         'taxname'       => $taxname,
601         'exempt_number' => $tax_exemption->{$taxname},
602       };
603       my $error = $cust_main_exemption->insert;
604       if ( $error ) {
605         $dbh->rollback if $oldAutoCommit;
606         return "inserting cust_main_exemption (transaction rolled back): $error";
607       }
608     }
609   }
610
611   warn "  ordering packages\n"
612     if $DEBUG > 1;
613
614   $error = $self->order_pkgs( $cust_pkgs,
615                               %options,
616                               'seconds_ref'    => \$seconds,
617                               'upbytes_ref'    => \$upbytes,
618                               'downbytes_ref'  => \$downbytes,
619                               'totalbytes_ref' => \$totalbytes,
620                             );
621   if ( $error ) {
622     $dbh->rollback if $oldAutoCommit;
623     return $error;
624   }
625
626   if ( $seconds ) {
627     $dbh->rollback if $oldAutoCommit;
628     return "No svc_acct record to apply pre-paid time";
629   }
630   if ( $upbytes || $downbytes || $totalbytes ) {
631     $dbh->rollback if $oldAutoCommit;
632     return "No svc_acct record to apply pre-paid data";
633   }
634
635   if ( $amount ) {
636     warn "  inserting initial $payby payment of $amount\n"
637       if $DEBUG > 1;
638     $error = $self->insert_cust_pay($payby, $amount, $prepay_identifier);
639     if ( $error ) {
640       $dbh->rollback if $oldAutoCommit;
641       return "inserting payment (transaction rolled back): $error";
642     }
643   }
644
645   unless ( $import || $skip_fuzzyfiles ) {
646     warn "  queueing fuzzyfiles update\n"
647       if $DEBUG > 1;
648     $error = $self->queue_fuzzyfiles_update;
649     if ( $error ) {
650       $dbh->rollback if $oldAutoCommit;
651       return "updating fuzzy search cache: $error";
652     }
653   }
654
655   # FS::geocode_Mixin::after_insert or something?
656   if ( $conf->config('tax_district_method') and !$import ) {
657     # if anything non-empty, try to look it up
658     my $queue = new FS::queue {
659       'job'     => 'FS::geocode_Mixin::process_district_update',
660       'custnum' => $self->custnum,
661     };
662     my $error = $queue->insert( ref($self), $self->custnum );
663     if ( $error ) {
664       $dbh->rollback if $oldAutoCommit;
665       return "queueing tax district update: $error";
666     }
667   }
668
669   # cust_main exports!
670   warn "  exporting\n" if $DEBUG > 1;
671
672   my $export_args = $options{'export_args'} || [];
673
674   my @part_export =
675     map qsearch( 'part_export', {exportnum=>$_} ),
676       $conf->config('cust_main-exports'); #, $agentnum
677
678   foreach my $part_export ( @part_export ) {
679     my $error = $part_export->export_insert($self, @$export_args);
680     if ( $error ) {
681       $dbh->rollback if $oldAutoCommit;
682       return "exporting to ". $part_export->exporttype.
683              " (transaction rolled back): $error";
684     }
685   }
686
687   #foreach my $depend_jobnum ( @$depend_jobnums ) {
688   #    warn "[$me] inserting dependancies on supplied job $depend_jobnum\n"
689   #      if $DEBUG;
690   #    foreach my $jobnum ( @jobnums ) {
691   #      my $queue = qsearchs('queue', { 'jobnum' => $jobnum } );
692   #      warn "[$me] inserting dependancy for job $jobnum on $depend_jobnum\n"
693   #        if $DEBUG;
694   #      my $error = $queue->depend_insert($depend_jobnum);
695   #      if ( $error ) {
696   #        $dbh->rollback if $oldAutoCommit;
697   #        return "error queuing job dependancy: $error";
698   #      }
699   #    }
700   #  }
701   #
702   #}
703   #
704   #if ( exists $options{'jobnums'} ) {
705   #  push @{ $options{'jobnums'} }, @jobnums;
706   #}
707
708   warn "  insert complete; committing transaction\n"
709     if $DEBUG > 1;
710
711   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
712   '';
713
714 }
715
716 use File::CounterFile;
717 sub auto_agent_custid {
718   my $self = shift;
719
720   my $format = $conf->config('cust_main-auto_agent_custid');
721   my $agent_custid;
722   if ( $format eq '1YMMXXXXXXXX' ) {
723
724     my $counter = new File::CounterFile 'cust_main.agent_custid';
725     $counter->lock;
726
727     my $ym = 100000000000 + time2str('%y%m00000000', time);
728     if ( $ym > $counter->value ) {
729       $counter->{'value'} = $agent_custid = $ym;
730       $counter->{'updated'} = 1;
731     } else {
732       $agent_custid = $counter->inc;
733     }
734
735     $counter->unlock;
736
737   } else {
738     die "Unknown cust_main-auto_agent_custid format: $format";
739   }
740
741   $self->agent_custid($agent_custid);
742
743 }
744
745 =item PACKAGE METHODS
746
747 Documentation on customer package methods has been moved to
748 L<FS::cust_main::Packages>.
749
750 =item recharge_prepay IDENTIFIER | PREPAY_CREDIT_OBJ [ , AMOUNTREF, SECONDSREF, UPBYTEREF, DOWNBYTEREF ]
751
752 Recharges this (existing) customer with the specified prepaid card (see
753 L<FS::prepay_credit>), specified either by I<identifier> or as an
754 FS::prepay_credit object.  If there is an error, returns the error, otherwise
755 returns false.
756
757 Optionally, five scalar references can be passed as well.  They will have their
758 values filled in with the amount, number of seconds, and number of upload,
759 download, and total bytes applied by this prepaid card.
760
761 =cut
762
763 #the ref bullshit here should be refactored like get_prepay.  MyAccount.pm is
764 #the only place that uses these args
765 sub recharge_prepay { 
766   my( $self, $prepay_credit, $amountref, $secondsref, 
767       $upbytesref, $downbytesref, $totalbytesref ) = @_;
768
769   local $SIG{HUP} = 'IGNORE';
770   local $SIG{INT} = 'IGNORE';
771   local $SIG{QUIT} = 'IGNORE';
772   local $SIG{TERM} = 'IGNORE';
773   local $SIG{TSTP} = 'IGNORE';
774   local $SIG{PIPE} = 'IGNORE';
775
776   my $oldAutoCommit = $FS::UID::AutoCommit;
777   local $FS::UID::AutoCommit = 0;
778   my $dbh = dbh;
779
780   my( $amount, $seconds, $upbytes, $downbytes, $totalbytes) = ( 0, 0, 0, 0, 0 );
781
782   my $error = $self->get_prepay( $prepay_credit,
783                                  'amount_ref'     => \$amount,
784                                  'seconds_ref'    => \$seconds,
785                                  'upbytes_ref'    => \$upbytes,
786                                  'downbytes_ref'  => \$downbytes,
787                                  'totalbytes_ref' => \$totalbytes,
788                                )
789            || $self->increment_seconds($seconds)
790            || $self->increment_upbytes($upbytes)
791            || $self->increment_downbytes($downbytes)
792            || $self->increment_totalbytes($totalbytes)
793            || $self->insert_cust_pay_prepay( $amount,
794                                              ref($prepay_credit)
795                                                ? $prepay_credit->identifier
796                                                : $prepay_credit
797                                            );
798
799   if ( $error ) {
800     $dbh->rollback if $oldAutoCommit;
801     return $error;
802   }
803
804   if ( defined($amountref)  ) { $$amountref  = $amount;  }
805   if ( defined($secondsref) ) { $$secondsref = $seconds; }
806   if ( defined($upbytesref) ) { $$upbytesref = $upbytes; }
807   if ( defined($downbytesref) ) { $$downbytesref = $downbytes; }
808   if ( defined($totalbytesref) ) { $$totalbytesref = $totalbytes; }
809
810   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
811   '';
812
813 }
814
815 =item get_prepay IDENTIFIER | PREPAY_CREDIT_OBJ [ , OPTION => VALUE ... ]
816
817 Looks up and deletes a prepaid card (see L<FS::prepay_credit>),
818 specified either by I<identifier> or as an FS::prepay_credit object.
819
820 Available options are: I<amount_ref>, I<seconds_ref>, I<upbytes_ref>, I<downbytes_ref>, and I<totalbytes_ref>.  The scalars (provided by references) will be
821 incremented by the values of the prepaid card.
822
823 If the prepaid card specifies an I<agentnum> (see L<FS::agent>), it is used to
824 check or set this customer's I<agentnum>.
825
826 If there is an error, returns the error, otherwise returns false.
827
828 =cut
829
830
831 sub get_prepay {
832   my( $self, $prepay_credit, %opt ) = @_;
833
834   local $SIG{HUP} = 'IGNORE';
835   local $SIG{INT} = 'IGNORE';
836   local $SIG{QUIT} = 'IGNORE';
837   local $SIG{TERM} = 'IGNORE';
838   local $SIG{TSTP} = 'IGNORE';
839   local $SIG{PIPE} = 'IGNORE';
840
841   my $oldAutoCommit = $FS::UID::AutoCommit;
842   local $FS::UID::AutoCommit = 0;
843   my $dbh = dbh;
844
845   unless ( ref($prepay_credit) ) {
846
847     my $identifier = $prepay_credit;
848
849     $prepay_credit = qsearchs(
850       'prepay_credit',
851       { 'identifier' => $identifier },
852       '',
853       'FOR UPDATE'
854     );
855
856     unless ( $prepay_credit ) {
857       $dbh->rollback if $oldAutoCommit;
858       return "Invalid prepaid card: ". $identifier;
859     }
860
861   }
862
863   if ( $prepay_credit->agentnum ) {
864     if ( $self->agentnum && $self->agentnum != $prepay_credit->agentnum ) {
865       $dbh->rollback if $oldAutoCommit;
866       return "prepaid card not valid for agent ". $self->agentnum;
867     }
868     $self->agentnum($prepay_credit->agentnum);
869   }
870
871   my $error = $prepay_credit->delete;
872   if ( $error ) {
873     $dbh->rollback if $oldAutoCommit;
874     return "removing prepay_credit (transaction rolled back): $error";
875   }
876
877   ${ $opt{$_.'_ref'} } += $prepay_credit->$_()
878     for grep $opt{$_.'_ref'}, qw( amount seconds upbytes downbytes totalbytes );
879
880   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
881   '';
882
883 }
884
885 =item increment_upbytes SECONDS
886
887 Updates this customer's single or primary account (see L<FS::svc_acct>) by
888 the specified number of upbytes.  If there is an error, returns the error,
889 otherwise returns false.
890
891 =cut
892
893 sub increment_upbytes {
894   _increment_column( shift, 'upbytes', @_);
895 }
896
897 =item increment_downbytes SECONDS
898
899 Updates this customer's single or primary account (see L<FS::svc_acct>) by
900 the specified number of downbytes.  If there is an error, returns the error,
901 otherwise returns false.
902
903 =cut
904
905 sub increment_downbytes {
906   _increment_column( shift, 'downbytes', @_);
907 }
908
909 =item increment_totalbytes SECONDS
910
911 Updates this customer's single or primary account (see L<FS::svc_acct>) by
912 the specified number of totalbytes.  If there is an error, returns the error,
913 otherwise returns false.
914
915 =cut
916
917 sub increment_totalbytes {
918   _increment_column( shift, 'totalbytes', @_);
919 }
920
921 =item increment_seconds SECONDS
922
923 Updates this customer's single or primary account (see L<FS::svc_acct>) by
924 the specified number of seconds.  If there is an error, returns the error,
925 otherwise returns false.
926
927 =cut
928
929 sub increment_seconds {
930   _increment_column( shift, 'seconds', @_);
931 }
932
933 =item _increment_column AMOUNT
934
935 Updates this customer's single or primary account (see L<FS::svc_acct>) by
936 the specified number of seconds or bytes.  If there is an error, returns
937 the error, otherwise returns false.
938
939 =cut
940
941 sub _increment_column {
942   my( $self, $column, $amount ) = @_;
943   warn "$me increment_column called: $column, $amount\n"
944     if $DEBUG;
945
946   return '' unless $amount;
947
948   my @cust_pkg = grep { $_->part_pkg->svcpart('svc_acct') }
949                       $self->ncancelled_pkgs;
950
951   if ( ! @cust_pkg ) {
952     return 'No packages with primary or single services found'.
953            ' to apply pre-paid time';
954   } elsif ( scalar(@cust_pkg) > 1 ) {
955     #maybe have a way to specify the package/account?
956     return 'Multiple packages found to apply pre-paid time';
957   }
958
959   my $cust_pkg = $cust_pkg[0];
960   warn "  found package pkgnum ". $cust_pkg->pkgnum. "\n"
961     if $DEBUG > 1;
962
963   my @cust_svc =
964     $cust_pkg->cust_svc( $cust_pkg->part_pkg->svcpart('svc_acct') );
965
966   if ( ! @cust_svc ) {
967     return 'No account found to apply pre-paid time';
968   } elsif ( scalar(@cust_svc) > 1 ) {
969     return 'Multiple accounts found to apply pre-paid time';
970   }
971   
972   my $svc_acct = $cust_svc[0]->svc_x;
973   warn "  found service svcnum ". $svc_acct->pkgnum.
974        ' ('. $svc_acct->email. ")\n"
975     if $DEBUG > 1;
976
977   $column = "increment_$column";
978   $svc_acct->$column($amount);
979
980 }
981
982 =item insert_cust_pay_prepay AMOUNT [ PAYINFO ]
983
984 Inserts a prepayment in the specified amount for this customer.  An optional
985 second argument can specify the prepayment identifier for tracking purposes.
986 If there is an error, returns the error, otherwise returns false.
987
988 =cut
989
990 sub insert_cust_pay_prepay {
991   shift->insert_cust_pay('PREP', @_);
992 }
993
994 =item insert_cust_pay_cash AMOUNT [ PAYINFO ]
995
996 Inserts a cash payment in the specified amount for this customer.  An optional
997 second argument can specify the payment identifier for tracking purposes.
998 If there is an error, returns the error, otherwise returns false.
999
1000 =cut
1001
1002 sub insert_cust_pay_cash {
1003   shift->insert_cust_pay('CASH', @_);
1004 }
1005
1006 =item insert_cust_pay_west AMOUNT [ PAYINFO ]
1007
1008 Inserts a Western Union payment in the specified amount for this customer.  An
1009 optional second argument can specify the prepayment identifier for tracking
1010 purposes.  If there is an error, returns the error, otherwise returns false.
1011
1012 =cut
1013
1014 sub insert_cust_pay_west {
1015   shift->insert_cust_pay('WEST', @_);
1016 }
1017
1018 sub insert_cust_pay {
1019   my( $self, $payby, $amount ) = splice(@_, 0, 3);
1020   my $payinfo = scalar(@_) ? shift : '';
1021
1022   my $cust_pay = new FS::cust_pay {
1023     'custnum' => $self->custnum,
1024     'paid'    => sprintf('%.2f', $amount),
1025     #'_date'   => #date the prepaid card was purchased???
1026     'payby'   => $payby,
1027     'payinfo' => $payinfo,
1028   };
1029   $cust_pay->insert;
1030
1031 }
1032
1033 =item reexport
1034
1035 This method is deprecated.  See the I<depend_jobnum> option to the insert and
1036 order_pkgs methods for a better way to defer provisioning.
1037
1038 Re-schedules all exports by calling the B<reexport> method of all associated
1039 packages (see L<FS::cust_pkg>).  If there is an error, returns the error;
1040 otherwise returns false.
1041
1042 =cut
1043
1044 sub reexport {
1045   my $self = shift;
1046
1047   carp "WARNING: FS::cust_main::reexport is deprectated; ".
1048        "use the depend_jobnum option to insert or order_pkgs to delay export";
1049
1050   local $SIG{HUP} = 'IGNORE';
1051   local $SIG{INT} = 'IGNORE';
1052   local $SIG{QUIT} = 'IGNORE';
1053   local $SIG{TERM} = 'IGNORE';
1054   local $SIG{TSTP} = 'IGNORE';
1055   local $SIG{PIPE} = 'IGNORE';
1056
1057   my $oldAutoCommit = $FS::UID::AutoCommit;
1058   local $FS::UID::AutoCommit = 0;
1059   my $dbh = dbh;
1060
1061   foreach my $cust_pkg ( $self->ncancelled_pkgs ) {
1062     my $error = $cust_pkg->reexport;
1063     if ( $error ) {
1064       $dbh->rollback if $oldAutoCommit;
1065       return $error;
1066     }
1067   }
1068
1069   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
1070   '';
1071
1072 }
1073
1074 =item delete [ OPTION => VALUE ... ]
1075
1076 This deletes the customer.  If there is an error, returns the error, otherwise
1077 returns false.
1078
1079 This will completely remove all traces of the customer record.  This is not
1080 what you want when a customer cancels service; for that, cancel all of the
1081 customer's packages (see L</cancel>).
1082
1083 If the customer has any uncancelled packages, you need to pass a new (valid)
1084 customer number for those packages to be transferred to, as the "new_customer"
1085 option.  Cancelled packages will be deleted.  Did I mention that this is NOT
1086 what you want when a customer cancels service and that you really should be
1087 looking at L<FS::cust_pkg/cancel>?  
1088
1089 You can't delete a customer with invoices (see L<FS::cust_bill>),
1090 statements (see L<FS::cust_statement>), credits (see L<FS::cust_credit>),
1091 payments (see L<FS::cust_pay>) or refunds (see L<FS::cust_refund>), unless you
1092 set the "delete_financials" option to a true value.
1093
1094 =cut
1095
1096 sub delete {
1097   my( $self, %opt ) = @_;
1098
1099   local $SIG{HUP} = 'IGNORE';
1100   local $SIG{INT} = 'IGNORE';
1101   local $SIG{QUIT} = 'IGNORE';
1102   local $SIG{TERM} = 'IGNORE';
1103   local $SIG{TSTP} = 'IGNORE';
1104   local $SIG{PIPE} = 'IGNORE';
1105
1106   my $oldAutoCommit = $FS::UID::AutoCommit;
1107   local $FS::UID::AutoCommit = 0;
1108   my $dbh = dbh;
1109
1110   if ( qsearch('agent', { 'agent_custnum' => $self->custnum } ) ) {
1111      $dbh->rollback if $oldAutoCommit;
1112      return "Can't delete a master agent customer";
1113   }
1114
1115   #use FS::access_user
1116   if ( qsearch('access_user', { 'user_custnum' => $self->custnum } ) ) {
1117      $dbh->rollback if $oldAutoCommit;
1118      return "Can't delete a master employee customer";
1119   }
1120
1121   tie my %financial_tables, 'Tie::IxHash',
1122     'cust_bill'      => 'invoices',
1123     'cust_statement' => 'statements',
1124     'cust_credit'    => 'credits',
1125     'cust_pay'       => 'payments',
1126     'cust_refund'    => 'refunds',
1127   ;
1128    
1129   foreach my $table ( keys %financial_tables ) {
1130
1131     my @records = $self->$table();
1132
1133     if ( @records && ! $opt{'delete_financials'} ) {
1134       $dbh->rollback if $oldAutoCommit;
1135       return "Can't delete a customer with ". $financial_tables{$table};
1136     }
1137
1138     foreach my $record ( @records ) {
1139       my $error = $record->delete;
1140       if ( $error ) {
1141         $dbh->rollback if $oldAutoCommit;
1142         return "Error deleting ". $financial_tables{$table}. ": $error\n";
1143       }
1144     }
1145
1146   }
1147
1148   my @cust_pkg = $self->ncancelled_pkgs;
1149   if ( @cust_pkg ) {
1150     my $new_custnum = $opt{'new_custnum'};
1151     unless ( qsearchs( 'cust_main', { 'custnum' => $new_custnum } ) ) {
1152       $dbh->rollback if $oldAutoCommit;
1153       return "Invalid new customer number: $new_custnum";
1154     }
1155     foreach my $cust_pkg ( @cust_pkg ) {
1156       my %hash = $cust_pkg->hash;
1157       $hash{'custnum'} = $new_custnum;
1158       my $new_cust_pkg = new FS::cust_pkg ( \%hash );
1159       my $error = $new_cust_pkg->replace($cust_pkg,
1160                                          options => { $cust_pkg->options },
1161                                         );
1162       if ( $error ) {
1163         $dbh->rollback if $oldAutoCommit;
1164         return $error;
1165       }
1166     }
1167   }
1168   my @cancelled_cust_pkg = $self->all_pkgs;
1169   foreach my $cust_pkg ( @cancelled_cust_pkg ) {
1170     my $error = $cust_pkg->delete;
1171     if ( $error ) {
1172       $dbh->rollback if $oldAutoCommit;
1173       return $error;
1174     }
1175   }
1176
1177   #cust_tax_adjustment in financials?
1178   #cust_pay_pending?  ouch
1179   #cust_recon?
1180   foreach my $table (qw(
1181     cust_main_invoice cust_main_exemption cust_tag cust_attachment contact
1182     cust_location cust_main_note cust_tax_adjustment
1183     cust_pay_void cust_pay_batch queue cust_tax_exempt
1184   )) {
1185     foreach my $record ( qsearch( $table, { 'custnum' => $self->custnum } ) ) {
1186       my $error = $record->delete;
1187       if ( $error ) {
1188         $dbh->rollback if $oldAutoCommit;
1189         return $error;
1190       }
1191     }
1192   }
1193
1194   my $sth = $dbh->prepare(
1195     'UPDATE cust_main SET referral_custnum = NULL WHERE referral_custnum = ?'
1196   ) or do {
1197     my $errstr = $dbh->errstr;
1198     $dbh->rollback if $oldAutoCommit;
1199     return $errstr;
1200   };
1201   $sth->execute($self->custnum) or do {
1202     my $errstr = $sth->errstr;
1203     $dbh->rollback if $oldAutoCommit;
1204     return $errstr;
1205   };
1206
1207   #tickets
1208
1209   my $ticket_dbh = '';
1210   if ($conf->config('ticket_system') eq 'RT_Internal') {
1211     $ticket_dbh = $dbh;
1212   } elsif ($conf->config('ticket_system') eq 'RT_External') {
1213     my ($datasrc, $user, $pass) = $conf->config('ticket_system-rt_external_datasrc');
1214     $ticket_dbh = DBI->connect($datasrc, $user, $pass, { 'ChopBlanks' => 1 });
1215       #or die "RT_External DBI->connect error: $DBI::errstr\n";
1216   }
1217
1218   if ( $ticket_dbh ) {
1219
1220     my $ticket_sth = $ticket_dbh->prepare(
1221       'DELETE FROM Links WHERE Target = ?'
1222     ) or do {
1223       my $errstr = $ticket_dbh->errstr;
1224       $dbh->rollback if $oldAutoCommit;
1225       return $errstr;
1226     };
1227     $ticket_sth->execute('freeside://freeside/cust_main/'.$self->custnum)
1228       or do {
1229         my $errstr = $ticket_sth->errstr;
1230         $dbh->rollback if $oldAutoCommit;
1231         return $errstr;
1232       };
1233
1234     #check and see if the customer is the only link on the ticket, and
1235     #if so, set the ticket to deleted status in RT?
1236     #maybe someday, for now this will at least fix tickets not displaying
1237
1238   }
1239
1240   #delete the customer record
1241
1242   my $error = $self->SUPER::delete;
1243   if ( $error ) {
1244     $dbh->rollback if $oldAutoCommit;
1245     return $error;
1246   }
1247
1248   # cust_main exports!
1249
1250   #my $export_args = $options{'export_args'} || [];
1251
1252   my @part_export =
1253     map qsearch( 'part_export', {exportnum=>$_} ),
1254       $conf->config('cust_main-exports'); #, $agentnum
1255
1256   foreach my $part_export ( @part_export ) {
1257     my $error = $part_export->export_delete( $self ); #, @$export_args);
1258     if ( $error ) {
1259       $dbh->rollback if $oldAutoCommit;
1260       return "exporting to ". $part_export->exporttype.
1261              " (transaction rolled back): $error";
1262     }
1263   }
1264
1265   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
1266   '';
1267
1268 }
1269
1270 =item merge NEW_CUSTNUM [ , OPTION => VALUE ... ]
1271
1272 This merges this customer into the provided new custnum, and then deletes the
1273 customer.  If there is an error, returns the error, otherwise returns false.
1274
1275 The source customer's name, company name, phone numbers, agent,
1276 referring customer, customer class, advertising source, order taker, and
1277 billing information (except balance) are discarded.
1278
1279 All packages are moved to the target customer.  Packages with package locations
1280 are preserved.  Packages without package locations are moved to a new package
1281 location with the source customer's service/shipping address.
1282
1283 All invoices, statements, payments, credits and refunds are moved to the target
1284 customer.  The source customer's balance is added to the target customer.
1285
1286 All notes, attachments, tickets and customer tags are moved to the target
1287 customer.
1288
1289 Change history is not currently moved.
1290
1291 =cut
1292
1293 sub merge {
1294   my( $self, $new_custnum, %opt ) = @_;
1295
1296   return "Can't merge a customer into self" if $self->custnum == $new_custnum;
1297
1298   my $new_cust_main = qsearchs( 'cust_main', { 'custnum' => $new_custnum } )
1299     or return "Invalid new customer number: $new_custnum";
1300
1301   return 'Access denied: "Merge customer across agents" access right required to merge into a customer of a different agent'
1302     if $self->agentnum != $new_cust_main->agentnum 
1303     && ! $FS::CurrentUser::CurrentUser->access_right('Merge customer across agents');
1304
1305   local $SIG{HUP} = 'IGNORE';
1306   local $SIG{INT} = 'IGNORE';
1307   local $SIG{QUIT} = 'IGNORE';
1308   local $SIG{TERM} = 'IGNORE';
1309   local $SIG{TSTP} = 'IGNORE';
1310   local $SIG{PIPE} = 'IGNORE';
1311
1312   my $oldAutoCommit = $FS::UID::AutoCommit;
1313   local $FS::UID::AutoCommit = 0;
1314   my $dbh = dbh;
1315
1316   if ( qsearch('agent', { 'agent_custnum' => $self->custnum } ) ) {
1317      $dbh->rollback if $oldAutoCommit;
1318      return "Can't merge a master agent customer";
1319   }
1320
1321   #use FS::access_user
1322   if ( qsearch('access_user', { 'user_custnum' => $self->custnum } ) ) {
1323      $dbh->rollback if $oldAutoCommit;
1324      return "Can't merge a master employee customer";
1325   }
1326
1327   if ( qsearch('cust_pay_pending', { 'custnum' => $self->custnum,
1328                                      'status'  => { op=>'!=', value=>'done' },
1329                                    }
1330               )
1331   ) {
1332      $dbh->rollback if $oldAutoCommit;
1333      return "Can't merge a customer with pending payments";
1334   }
1335
1336   tie my %financial_tables, 'Tie::IxHash',
1337     'cust_bill'         => 'invoices',
1338     'cust_bill_void'    => 'voided invoices',
1339     'cust_statement'    => 'statements',
1340     'cust_credit'       => 'credits',
1341     'cust_credit_void'  => 'voided credits',
1342     'cust_pay'          => 'payments',
1343     'cust_pay_void'     => 'voided payments',
1344     'cust_refund'       => 'refunds',
1345   ;
1346    
1347   foreach my $table ( keys %financial_tables ) {
1348
1349     my @records = $self->$table();
1350
1351     foreach my $record ( @records ) {
1352       $record->custnum($new_custnum);
1353       my $error = $record->replace;
1354       if ( $error ) {
1355         $dbh->rollback if $oldAutoCommit;
1356         return "Error merging ". $financial_tables{$table}. ": $error\n";
1357       }
1358     }
1359
1360   }
1361
1362   my $name = $self->ship_name; #?
1363
1364   my $locationnum = '';
1365   foreach my $cust_pkg ( $self->all_pkgs ) {
1366     $cust_pkg->custnum($new_custnum);
1367
1368     unless ( $cust_pkg->locationnum ) {
1369       unless ( $locationnum ) {
1370         my $cust_location = new FS::cust_location {
1371           $self->location_hash,
1372           'custnum' => $new_custnum,
1373         };
1374         my $error = $cust_location->insert;
1375         if ( $error ) {
1376           $dbh->rollback if $oldAutoCommit;
1377           return $error;
1378         }
1379         $locationnum = $cust_location->locationnum;
1380       }
1381       $cust_pkg->locationnum($locationnum);
1382     }
1383
1384     my $error = $cust_pkg->replace;
1385     if ( $error ) {
1386       $dbh->rollback if $oldAutoCommit;
1387       return $error;
1388     }
1389
1390     # add customer (ship) name to svc_phone.phone_name if blank
1391     my @cust_svc = $cust_pkg->cust_svc;
1392     foreach my $cust_svc (@cust_svc) {
1393       my($label, $value, $svcdb) = $cust_svc->label;
1394       next unless $svcdb eq 'svc_phone';
1395       my $svc_phone = $cust_svc->svc_x;
1396       next if $svc_phone->phone_name;
1397       $svc_phone->phone_name($name);
1398       my $error = $svc_phone->replace;
1399       if ( $error ) {
1400         $dbh->rollback if $oldAutoCommit;
1401         return $error;
1402       }
1403     }
1404
1405   }
1406
1407   #not considered:
1408   # cust_tax_exempt (texas tax exemptions)
1409   # cust_recon (some sort of not-well understood thing for OnPac)
1410
1411   #these are moved over
1412   foreach my $table (qw(
1413     cust_tag cust_location contact cust_attachment cust_main_note
1414     cust_tax_adjustment cust_pay_batch queue
1415   )) {
1416     foreach my $record ( qsearch( $table, { 'custnum' => $self->custnum } ) ) {
1417       $record->custnum($new_custnum);
1418       my $error = $record->replace;
1419       if ( $error ) {
1420         $dbh->rollback if $oldAutoCommit;
1421         return $error;
1422       }
1423     }
1424   }
1425
1426   #these aren't preserved
1427   foreach my $table (qw(
1428     cust_main_exemption cust_main_invoice
1429   )) {
1430     foreach my $record ( qsearch( $table, { 'custnum' => $self->custnum } ) ) {
1431       my $error = $record->delete;
1432       if ( $error ) {
1433         $dbh->rollback if $oldAutoCommit;
1434         return $error;
1435       }
1436     }
1437   }
1438
1439
1440   my $sth = $dbh->prepare(
1441     'UPDATE cust_main SET referral_custnum = ? WHERE referral_custnum = ?'
1442   ) or do {
1443     my $errstr = $dbh->errstr;
1444     $dbh->rollback if $oldAutoCommit;
1445     return $errstr;
1446   };
1447   $sth->execute($new_custnum, $self->custnum) or do {
1448     my $errstr = $sth->errstr;
1449     $dbh->rollback if $oldAutoCommit;
1450     return $errstr;
1451   };
1452
1453   #tickets
1454
1455   my $ticket_dbh = '';
1456   if ($conf->config('ticket_system') eq 'RT_Internal') {
1457     $ticket_dbh = $dbh;
1458   } elsif ($conf->config('ticket_system') eq 'RT_External') {
1459     my ($datasrc, $user, $pass) = $conf->config('ticket_system-rt_external_datasrc');
1460     $ticket_dbh = DBI->connect($datasrc, $user, $pass, { 'ChopBlanks' => 1 });
1461       #or die "RT_External DBI->connect error: $DBI::errstr\n";
1462   }
1463
1464   if ( $ticket_dbh ) {
1465
1466     my $ticket_sth = $ticket_dbh->prepare(
1467       'UPDATE Links SET Target = ? WHERE Target = ?'
1468     ) or do {
1469       my $errstr = $ticket_dbh->errstr;
1470       $dbh->rollback if $oldAutoCommit;
1471       return $errstr;
1472     };
1473     $ticket_sth->execute('freeside://freeside/cust_main/'.$new_custnum,
1474                          'freeside://freeside/cust_main/'.$self->custnum)
1475       or do {
1476         my $errstr = $ticket_sth->errstr;
1477         $dbh->rollback if $oldAutoCommit;
1478         return $errstr;
1479       };
1480
1481   }
1482
1483   #delete the customer record
1484
1485   my $error = $self->delete;
1486   if ( $error ) {
1487     $dbh->rollback if $oldAutoCommit;
1488     return $error;
1489   }
1490
1491   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
1492   '';
1493
1494 }
1495
1496 =item replace [ OLD_RECORD ] [ INVOICING_LIST_ARYREF ] [ , OPTION => VALUE ... ] ]
1497
1498 Replaces the OLD_RECORD with this one in the database.  If there is an error,
1499 returns the error, otherwise returns false.
1500
1501 To change the customer's address, set the pseudo-fields C<bill_location> and
1502 C<ship_location>.  The address will still only change if at least one of the
1503 address fields differs from the existing values.
1504
1505 INVOICING_LIST_ARYREF: If you pass an arrarref to the insert method, it will
1506 be set as the invoicing list (see L<"invoicing_list">).  Errors return as
1507 expected and rollback the entire transaction; it is not necessary to call 
1508 check_invoicing_list first.  Here's an example:
1509
1510   $new_cust_main->replace( $old_cust_main, [ $email, 'POST' ] );
1511
1512 Currently available options are: I<tax_exemption>.
1513
1514 The I<tax_exemption> option can be set to an arrayref of tax names or a hashref
1515 of tax names and exemption numbers.  FS::cust_main_exemption records will be
1516 deleted and inserted as appropriate.
1517
1518 =cut
1519
1520 sub replace {
1521   my $self = shift;
1522
1523   my $old = ( blessed($_[0]) && $_[0]->isa('FS::Record') )
1524               ? shift
1525               : $self->replace_old;
1526
1527   my @param = @_;
1528
1529   warn "$me replace called\n"
1530     if $DEBUG;
1531
1532   my $curuser = $FS::CurrentUser::CurrentUser;
1533   if (    $self->payby eq 'COMP'
1534        && $self->payby ne $old->payby
1535        && ! $curuser->access_right('Complimentary customer')
1536      )
1537   {
1538     return "You are not permitted to create complimentary accounts.";
1539   }
1540
1541   local($ignore_expired_card) = 1
1542     if $old->payby  =~ /^(CARD|DCRD)$/
1543     && $self->payby =~ /^(CARD|DCRD)$/
1544     && ( $old->payinfo eq $self->payinfo || $old->paymask eq $self->paymask );
1545
1546   local($ignore_banned_card) = 1
1547     if (    $old->payby  =~ /^(CARD|DCRD)$/ && $self->payby =~ /^(CARD|DCRD)$/
1548          || $old->payby  =~ /^(CHEK|DCHK)$/ && $self->payby =~ /^(CHEK|DCHK)$/ )
1549     && ( $old->payinfo eq $self->payinfo || $old->paymask eq $self->paymask );
1550
1551   if (    $self->payby =~ /^(CARD|DCRD)$/
1552        && $old->payinfo ne $self->payinfo
1553        && $old->paymask ne $self->paymask )
1554   {
1555     my $error = $self->check_payinfo_cardtype;
1556     return $error if $error;
1557
1558     if ( $conf->exists('business-onlinepayment-verification') ) {
1559       #need to standardize paydate for this, false laziness with check
1560       my( $m, $y );
1561       if ( $self->paydate =~ /^(\d{1,2})[\/\-](\d{2}(\d{2})?)$/ ) {
1562         ( $m, $y ) = ( $1, length($2) == 4 ? $2 : "20$2" );
1563       } elsif ( $self->paydate =~ /^19(\d{2})[\/\-](\d{1,2})[\/\-]\d+$/ ) {
1564         ( $m, $y ) = ( $2, "19$1" );
1565       } elsif ( $self->paydate =~ /^(20)?(\d{2})[\/\-](\d{1,2})[\/\-]\d+$/ ) {
1566         ( $m, $y ) = ( $3, "20$2" );
1567       } else {
1568         return "Illegal expiration date: ". $self->paydate;
1569       }
1570       $m = sprintf('%02d',$m);
1571       $self->paydate("$y-$m-01");
1572
1573       $error = $self->realtime_verify_bop({ 'method'=>'CC' });
1574       return $error if $error;
1575     }
1576   }
1577
1578   return "Invoicing locale is required"
1579     if $old->locale
1580     && ! $self->locale
1581     && $conf->exists('cust_main-require_locale');
1582
1583   local $SIG{HUP} = 'IGNORE';
1584   local $SIG{INT} = 'IGNORE';
1585   local $SIG{QUIT} = 'IGNORE';
1586   local $SIG{TERM} = 'IGNORE';
1587   local $SIG{TSTP} = 'IGNORE';
1588   local $SIG{PIPE} = 'IGNORE';
1589
1590   my $oldAutoCommit = $FS::UID::AutoCommit;
1591   local $FS::UID::AutoCommit = 0;
1592   my $dbh = dbh;
1593
1594   for my $l (qw(bill_location ship_location)) {
1595     my $old_loc = $old->$l;
1596     my $new_loc = $self->$l;
1597
1598     # find the existing location if there is one
1599     $new_loc->set('custnum' => $self->custnum);
1600     my $error = $new_loc->find_or_insert;
1601     if ( $error ) {
1602       $dbh->rollback if $oldAutoCommit;
1603       return $error;
1604     }
1605     $self->set($l.'num', $new_loc->locationnum);
1606   } #for $l
1607
1608   # replace the customer record
1609   my $error = $self->SUPER::replace($old);
1610
1611   if ( $error ) {
1612     $dbh->rollback if $oldAutoCommit;
1613     return $error;
1614   }
1615
1616   # now move packages to the new service location
1617   $self->set('ship_location', ''); #flush cache
1618   if ( $old->ship_locationnum and # should only be null during upgrade...
1619        $old->ship_locationnum != $self->ship_locationnum ) {
1620     $error = $old->ship_location->move_to($self->ship_location);
1621     if ( $error ) {
1622       $dbh->rollback if $oldAutoCommit;
1623       return $error;
1624     }
1625   }
1626   # don't move packages based on the billing location, but 
1627   # disable it if it's no longer in use
1628   if ( $old->bill_locationnum and
1629        $old->bill_locationnum != $self->bill_locationnum ) {
1630     $error = $old->bill_location->disable_if_unused;
1631     if ( $error ) {
1632       $dbh->rollback if $oldAutoCommit;
1633       return $error;
1634     }
1635   }
1636
1637   if ( @param && ref($param[0]) eq 'ARRAY' ) { # INVOICING_LIST_ARYREF
1638     my $invoicing_list = shift @param;
1639     $error = $self->check_invoicing_list( $invoicing_list );
1640     if ( $error ) {
1641       $dbh->rollback if $oldAutoCommit;
1642       return $error;
1643     }
1644     $self->invoicing_list( $invoicing_list );
1645   }
1646
1647   if ( $self->exists('tagnum') ) { #so we don't delete these on edit by accident
1648
1649     #this could be more efficient than deleting and re-inserting, if it matters
1650     foreach my $cust_tag (qsearch('cust_tag', {'custnum'=>$self->custnum} )) {
1651       my $error = $cust_tag->delete;
1652       if ( $error ) {
1653         $dbh->rollback if $oldAutoCommit;
1654         return $error;
1655       }
1656     }
1657     foreach my $tagnum ( @{ $self->tagnum || [] } ) {
1658       my $cust_tag = new FS::cust_tag { 'tagnum'  => $tagnum,
1659                                         'custnum' => $self->custnum };
1660       my $error = $cust_tag->insert;
1661       if ( $error ) {
1662         $dbh->rollback if $oldAutoCommit;
1663         return $error;
1664       }
1665     }
1666
1667   }
1668
1669   my %options = @param;
1670
1671   my $tax_exemption = delete $options{'tax_exemption'};
1672   if ( $tax_exemption ) {
1673
1674     $tax_exemption = { map { $_ => '' } @$tax_exemption }
1675       if ref($tax_exemption) eq 'ARRAY';
1676
1677     my %cust_main_exemption =
1678       map { $_->taxname => $_ }
1679           qsearch('cust_main_exemption', { 'custnum' => $old->custnum } );
1680
1681     foreach my $taxname ( keys %$tax_exemption ) {
1682
1683       if ( $cust_main_exemption{$taxname} && 
1684            $cust_main_exemption{$taxname}->exempt_number eq $tax_exemption->{$taxname}
1685          )
1686       {
1687         delete $cust_main_exemption{$taxname};
1688         next;
1689       }
1690
1691       my $cust_main_exemption = new FS::cust_main_exemption {
1692         'custnum'       => $self->custnum,
1693         'taxname'       => $taxname,
1694         'exempt_number' => $tax_exemption->{$taxname},
1695       };
1696       my $error = $cust_main_exemption->insert;
1697       if ( $error ) {
1698         $dbh->rollback if $oldAutoCommit;
1699         return "inserting cust_main_exemption (transaction rolled back): $error";
1700       }
1701     }
1702
1703     foreach my $cust_main_exemption ( values %cust_main_exemption ) {
1704       my $error = $cust_main_exemption->delete;
1705       if ( $error ) {
1706         $dbh->rollback if $oldAutoCommit;
1707         return "deleting cust_main_exemption (transaction rolled back): $error";
1708       }
1709     }
1710
1711   }
1712
1713   if ( $self->payby =~ /^(CARD|CHEK|LECB)$/
1714        && ( ( $self->get('payinfo') ne $old->get('payinfo')
1715               && $self->get('payinfo') !~ /^99\d{14}$/ 
1716             )
1717             || grep { $self->get($_) ne $old->get($_) } qw(paydate payname)
1718           )
1719      )
1720   {
1721
1722     # card/check/lec info has changed, want to retry realtime_ invoice events
1723     my $error = $self->retry_realtime;
1724     if ( $error ) {
1725       $dbh->rollback if $oldAutoCommit;
1726       return $error;
1727     }
1728   }
1729
1730   unless ( $import || $skip_fuzzyfiles ) {
1731     $error = $self->queue_fuzzyfiles_update;
1732     if ( $error ) {
1733       $dbh->rollback if $oldAutoCommit;
1734       return "updating fuzzy search cache: $error";
1735     }
1736   }
1737
1738   # tax district update in cust_location
1739
1740   # cust_main exports!
1741
1742   my $export_args = $options{'export_args'} || [];
1743
1744   my @part_export =
1745     map qsearch( 'part_export', {exportnum=>$_} ),
1746       $conf->config('cust_main-exports'); #, $agentnum
1747
1748   foreach my $part_export ( @part_export ) {
1749     my $error = $part_export->export_replace( $self, $old, @$export_args);
1750     if ( $error ) {
1751       $dbh->rollback if $oldAutoCommit;
1752       return "exporting to ". $part_export->exporttype.
1753              " (transaction rolled back): $error";
1754     }
1755   }
1756
1757   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
1758   '';
1759
1760 }
1761
1762 =item queue_fuzzyfiles_update
1763
1764 Used by insert & replace to update the fuzzy search cache
1765
1766 =cut
1767
1768 use FS::cust_main::Search;
1769 sub queue_fuzzyfiles_update {
1770   my $self = shift;
1771
1772   local $SIG{HUP} = 'IGNORE';
1773   local $SIG{INT} = 'IGNORE';
1774   local $SIG{QUIT} = 'IGNORE';
1775   local $SIG{TERM} = 'IGNORE';
1776   local $SIG{TSTP} = 'IGNORE';
1777   local $SIG{PIPE} = 'IGNORE';
1778
1779   my $oldAutoCommit = $FS::UID::AutoCommit;
1780   local $FS::UID::AutoCommit = 0;
1781   my $dbh = dbh;
1782
1783   foreach my $field ( 'first', 'last', 'company', 'ship_company' ) {
1784     my $queue = new FS::queue { 
1785       'job' => 'FS::cust_main::Search::append_fuzzyfiles_fuzzyfield'
1786     };
1787     my @args = "cust_main.$field", $self->get($field);
1788     my $error = $queue->insert( @args );
1789     if ( $error ) {
1790       $dbh->rollback if $oldAutoCommit;
1791       return "queueing job (transaction rolled back): $error";
1792     }
1793   }
1794
1795   my @locations = $self->bill_location;
1796   push @locations, $self->ship_location if $self->has_ship_address;
1797   foreach my $location (@locations) {
1798     my $queue = new FS::queue { 
1799       'job' => 'FS::cust_main::Search::append_fuzzyfiles_fuzzyfield'
1800     };
1801     my @args = 'cust_location.address1', $location->address1;
1802     my $error = $queue->insert( @args );
1803     if ( $error ) {
1804       $dbh->rollback if $oldAutoCommit;
1805       return "queueing job (transaction rolled back): $error";
1806     }
1807   }
1808
1809   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
1810   '';
1811
1812 }
1813
1814 =item check
1815
1816 Checks all fields to make sure this is a valid customer record.  If there is
1817 an error, returns the error, otherwise returns false.  Called by the insert
1818 and replace methods.
1819
1820 =cut
1821
1822 sub check {
1823   my $self = shift;
1824
1825   warn "$me check BEFORE: \n". $self->_dump
1826     if $DEBUG > 2;
1827
1828   my $error =
1829     $self->ut_numbern('custnum')
1830     || $self->ut_number('agentnum')
1831     || $self->ut_textn('agent_custid')
1832     || $self->ut_number('refnum')
1833     || $self->ut_foreign_key('bill_locationnum', 'cust_location','locationnum')
1834     || $self->ut_foreign_key('ship_locationnum', 'cust_location','locationnum')
1835     || $self->ut_foreign_keyn('classnum', 'cust_class', 'classnum')
1836     || $self->ut_foreign_keyn('salesnum', 'sales', 'salesnum')
1837     || $self->ut_textn('custbatch')
1838     || $self->ut_name('last')
1839     || $self->ut_name('first')
1840     || $self->ut_snumbern('signupdate')
1841     || $self->ut_snumbern('birthdate')
1842     || $self->ut_namen('spouse_last')
1843     || $self->ut_namen('spouse_first')
1844     || $self->ut_snumbern('spouse_birthdate')
1845     || $self->ut_snumbern('anniversary_date')
1846     || $self->ut_textn('company')
1847     || $self->ut_textn('ship_company')
1848     || $self->ut_anything('comments')
1849     || $self->ut_numbern('referral_custnum')
1850     || $self->ut_textn('stateid')
1851     || $self->ut_textn('stateid_state')
1852     || $self->ut_textn('invoice_terms')
1853     || $self->ut_floatn('cdr_termination_percentage')
1854     || $self->ut_floatn('credit_limit')
1855     || $self->ut_numbern('billday')
1856     || $self->ut_numbern('prorate_day')
1857     || $self->ut_flag('force_prorate_day')
1858     || $self->ut_flag('edit_subject')
1859     || $self->ut_flag('calling_list_exempt')
1860     || $self->ut_flag('invoice_noemail')
1861     || $self->ut_flag('message_noemail')
1862     || $self->ut_enum('locale', [ '', FS::Locales->locales ])
1863     || $self->ut_flag('invoice_ship_address')
1864   ;
1865
1866   foreach (qw(company ship_company)) {
1867     my $company = $self->get($_);
1868     $company =~ s/^\s+//; 
1869     $company =~ s/\s+$//; 
1870     $company =~ s/\s+/ /g;
1871     $self->set($_, $company);
1872   }
1873
1874   #barf.  need message catalogs.  i18n.  etc.
1875   $error .= "Please select an advertising source."
1876     if $error =~ /^Illegal or empty \(numeric\) refnum: /;
1877   return $error if $error;
1878
1879   return "Unknown agent"
1880     unless qsearchs( 'agent', { 'agentnum' => $self->agentnum } );
1881
1882   return "Unknown refnum"
1883     unless qsearchs( 'part_referral', { 'refnum' => $self->refnum } );
1884
1885   return "Unknown referring custnum: ". $self->referral_custnum
1886     unless ! $self->referral_custnum 
1887            || qsearchs( 'cust_main', { 'custnum' => $self->referral_custnum } );
1888
1889   if ( $self->ss eq '' ) {
1890     $self->ss('');
1891   } else {
1892     my $ss = $self->ss;
1893     $ss =~ s/\D//g;
1894     $ss =~ /^(\d{3})(\d{2})(\d{4})$/
1895       or return "Illegal social security number: ". $self->ss;
1896     $self->ss("$1-$2-$3");
1897   }
1898
1899   #turn off invoice_ship_address if ship & bill are the same
1900   if ($self->bill_locationnum eq $self->ship_locationnum) {
1901     $self->invoice_ship_address('');
1902   }
1903
1904   # cust_main_county verification now handled by cust_location check
1905
1906   $error =
1907        $self->ut_phonen('daytime', $self->country)
1908     || $self->ut_phonen('night',   $self->country)
1909     || $self->ut_phonen('fax',     $self->country)
1910     || $self->ut_phonen('mobile',  $self->country)
1911   ;
1912   return $error if $error;
1913
1914   if ( $conf->exists('cust_main-require_phone', $self->agentnum)
1915        && ! $import
1916        && ! length($self->daytime) && ! length($self->night) && ! length($self->mobile)
1917      ) {
1918
1919     my $daytime_label = FS::Msgcat::_gettext('daytime') =~ /^(daytime)?$/
1920                           ? 'Day Phone'
1921                           : FS::Msgcat::_gettext('daytime');
1922     my $night_label = FS::Msgcat::_gettext('night') =~ /^(night)?$/
1923                         ? 'Night Phone'
1924                         : FS::Msgcat::_gettext('night');
1925
1926     my $mobile_label = FS::Msgcat::_gettext('mobile') =~ /^(mobile)?$/
1927                         ? 'Mobile Phone'
1928                         : FS::Msgcat::_gettext('mobile');
1929
1930     return "$daytime_label, $night_label or $mobile_label is required"
1931   
1932   }
1933
1934   #$self->payby =~ /^(CARD|DCRD|CHEK|DCHK|LECB|BILL|COMP|PREPAY|CASH|WEST|MCRD)$/
1935   #  or return "Illegal payby: ". $self->payby;
1936   #$self->payby($1);
1937   FS::payby->can_payby($self->table, $self->payby)
1938     or return "Illegal payby: ". $self->payby;
1939
1940   $error =    $self->ut_numbern('paystart_month')
1941            || $self->ut_numbern('paystart_year')
1942            || $self->ut_numbern('payissue')
1943            || $self->ut_textn('paytype')
1944   ;
1945   return $error if $error;
1946
1947   if ( $self->payip eq '' ) {
1948     $self->payip('');
1949   } else {
1950     $error = $self->ut_ip('payip');
1951     return $error if $error;
1952   }
1953
1954   # If it is encrypted and the private key is not availaible then we can't
1955   # check the credit card.
1956   my $check_payinfo = ! $self->is_encrypted($self->payinfo);
1957
1958   # Need some kind of global flag to accept invalid cards, for testing
1959   # on scrubbed data.
1960   if ( !$import && $check_payinfo && $self->payby =~ /^(CARD|DCRD)$/ ) {
1961
1962     my $payinfo = $self->payinfo;
1963     $payinfo =~ s/\D//g;
1964     $payinfo =~ /^(\d{13,16}|\d{8,9})$/
1965       or return gettext('invalid_card'); # . ": ". $self->payinfo;
1966     $payinfo = $1;
1967     $self->payinfo($payinfo);
1968     validate($payinfo)
1969       or return gettext('invalid_card'); # . ": ". $self->payinfo;
1970
1971     my $cardtype = $self->paycardtype;
1972     if ( $payinfo =~ /^99\d{14}$/ ) {
1973       $self->set('is_tokenized', 'Y'); #so we don't try to do it again
1974       if ( $self->paymask =~ /^\d+x/ ) {
1975         $cardtype = cardtype($self->paymask);
1976       } else {
1977         #return "paycardtype required ".
1978         #       "(can't derive from a token and no paymask w/prefix provided)"
1979         #  unless $cardtype;
1980       }
1981     } else {
1982       $cardtype = cardtype($self->payinfo);
1983     }
1984
1985     return gettext('unknown_card_type') if $cardtype eq 'Unknown';
1986
1987     $self->set('paycardtype', $cardtype);
1988
1989     unless ( $ignore_banned_card ) {
1990       my $ban = FS::banned_pay->ban_search( %{ $self->_banned_pay_hashref } );
1991       if ( $ban ) {
1992         if ( $ban->bantype eq 'warn' ) {
1993           #or others depending on value of $ban->reason ?
1994           return '_duplicate_card'.
1995                  ': disabled from'. time2str('%a %h %o at %r', $ban->_date).
1996                  ' until '.         time2str('%a %h %o at %r', $ban->_end_date).
1997                  ' (ban# '. $ban->bannum. ')'
1998             unless $self->override_ban_warn;
1999         } else {
2000           return 'Banned credit card: banned on '.
2001                  time2str('%a %h %o at %r', $ban->_date).
2002                  ' by '. $ban->otaker.
2003                  ' (ban# '. $ban->bannum. ')';
2004         }
2005       }
2006     }
2007
2008     if (length($self->paycvv) && !$self->is_encrypted($self->paycvv)) {
2009       if ( $cardtype eq 'American Express card' ) {
2010         $self->paycvv =~ /^(\d{4})$/
2011           or return "CVV2 (CID) for American Express cards is four digits.";
2012         $self->paycvv($1);
2013       } else {
2014         $self->paycvv =~ /^(\d{3})$/
2015           or return "CVV2 (CVC2/CID) is three digits.";
2016         $self->paycvv($1);
2017       }
2018     } else {
2019       $self->paycvv('');
2020     }
2021
2022     if ( $cardtype =~ /^(Switch|Solo)$/i ) {
2023
2024       return "Start date or issue number is required for $cardtype cards"
2025         unless $self->paystart_month && $self->paystart_year or $self->payissue;
2026
2027       return "Start month must be between 1 and 12"
2028         if $self->paystart_month
2029            and $self->paystart_month < 1 || $self->paystart_month > 12;
2030
2031       return "Start year must be 1990 or later"
2032         if $self->paystart_year
2033            and $self->paystart_year < 1990;
2034
2035       return "Issue number must be beween 1 and 99"
2036         if $self->payissue
2037           and $self->payissue < 1 || $self->payissue > 99;
2038
2039     } else {
2040       $self->paystart_month('');
2041       $self->paystart_year('');
2042       $self->payissue('');
2043     }
2044
2045   } elsif ( $check_payinfo && $self->payby =~ /^(CHEK|DCHK)$/ ) {
2046
2047     my $payinfo = $self->payinfo;
2048     $payinfo =~ s/[^\d\@\.]//g;
2049     if ( $conf->config('echeck-country') eq 'CA' ) {
2050       $payinfo =~ /^(\d+)\@(\d{5})\.(\d{3})$/
2051         or return 'invalid echeck account@branch.bank';
2052       $payinfo = "$1\@$2.$3";
2053     } elsif ( $conf->config('echeck-country') eq 'US' ) {
2054       $payinfo =~ /^(\d+)\@(\d{9})$/ or return 'invalid echeck account@aba';
2055       $payinfo = "$1\@$2";
2056     } else {
2057       $payinfo =~ /^(\d+)\@(\d+)$/ or return 'invalid echeck account@routing';
2058       $payinfo = "$1\@$2";
2059     }
2060     $self->payinfo($payinfo);
2061     $self->paycvv('');
2062
2063     unless ( $ignore_banned_card ) {
2064       my $ban = FS::banned_pay->ban_search( %{ $self->_banned_pay_hashref } );
2065       if ( $ban ) {
2066         if ( $ban->bantype eq 'warn' ) {
2067           #or others depending on value of $ban->reason ?
2068           return '_duplicate_ach' unless $self->override_ban_warn;
2069         } else {
2070           return 'Banned ACH account: banned on '.
2071                  time2str('%a %h %o at %r', $ban->_date).
2072                  ' by '. $ban->otaker.
2073                  ' (ban# '. $ban->bannum. ')';
2074         }
2075       }
2076     }
2077
2078   } elsif ( $self->payby eq 'LECB' ) {
2079
2080     my $payinfo = $self->payinfo;
2081     $payinfo =~ s/\D//g;
2082     $payinfo =~ /^1?(\d{10})$/ or return 'invalid btn billing telephone number';
2083     $payinfo = $1;
2084     $self->payinfo($payinfo);
2085     $self->paycvv('');
2086
2087   } elsif ( $self->payby eq 'BILL' ) {
2088
2089     $error = $self->ut_textn('payinfo');
2090     return "Illegal P.O. number: ". $self->payinfo if $error;
2091     $self->paycvv('');
2092
2093   } elsif ( $self->payby eq 'COMP' ) {
2094
2095     my $curuser = $FS::CurrentUser::CurrentUser;
2096     if (    ! $self->custnum
2097          && ! $curuser->access_right('Complimentary customer')
2098        )
2099     {
2100       return "You are not permitted to create complimentary accounts."
2101     }
2102
2103     $error = $self->ut_textn('payinfo');
2104     return "Illegal comp account issuer: ". $self->payinfo if $error;
2105     $self->paycvv('');
2106
2107   } elsif ( $self->payby eq 'PREPAY' ) {
2108
2109     my $payinfo = $self->payinfo;
2110     $payinfo =~ s/\W//g; #anything else would just confuse things
2111     $self->payinfo($payinfo);
2112     $error = $self->ut_alpha('payinfo');
2113     return "Illegal prepayment identifier: ". $self->payinfo if $error;
2114     return "Unknown prepayment identifier"
2115       unless qsearchs('prepay_credit', { 'identifier' => $self->payinfo } );
2116     $self->paycvv('');
2117
2118   } elsif ( $self->payby =~ /^CARD|DCRD$/ and $self->paymask ) {
2119     # either ignoring invalid cards, or we can't decrypt the payinfo, but
2120     # try to detect the card type anyway. this never returns failure, so
2121     # the contract of $ignore_invalid_cards is maintained.
2122     $self->set('paycardtype', cardtype($self->paymask));
2123   }
2124
2125   if ( $self->paydate eq '' || $self->paydate eq '-' ) {
2126     return "Expiration date required"
2127       # shouldn't payinfo_check do this?
2128       unless $self->payby =~ /^(BILL|PREPAY|CHEK|DCHK|LECB|CASH|WEST|MCRD|PPAL)$/;
2129     $self->paydate('');
2130   } else {
2131     my( $m, $y );
2132     if ( $self->paydate =~ /^(\d{1,2})[\/\-](\d{2}(\d{2})?)$/ ) {
2133       ( $m, $y ) = ( $1, length($2) == 4 ? $2 : "20$2" );
2134     } elsif ( $self->paydate =~ /^19(\d{2})[\/\-](\d{1,2})[\/\-]\d+$/ ) {
2135       ( $m, $y ) = ( $2, "19$1" );
2136     } elsif ( $self->paydate =~ /^(20)?(\d{2})[\/\-](\d{1,2})[\/\-]\d+$/ ) {
2137       ( $m, $y ) = ( $3, "20$2" );
2138     } else {
2139       return "Illegal expiration date: ". $self->paydate;
2140     }
2141     $m = sprintf('%02d',$m);
2142     $self->paydate("$y-$m-01");
2143     my($nowm,$nowy)=(localtime(time))[4,5]; $nowm++; $nowy+=1900;
2144     return gettext('expired_card')
2145       if !$import
2146       && !$ignore_expired_card 
2147       && ( $y<$nowy || ( $y==$nowy && $1<$nowm ) );
2148   }
2149
2150   if ( $self->payname eq '' && $self->payby !~ /^(CHEK|DCHK)$/ &&
2151        ( ! $conf->exists('require_cardname')
2152          || $self->payby !~ /^(CARD|DCRD)$/  ) 
2153   ) {
2154     $self->payname( $self->first. " ". $self->getfield('last') );
2155   } else {
2156
2157     if ( $self->payby =~ /^(CHEK|DCHK)$/ ) {
2158       $self->payname =~ /^([\w \,\.\-\']*)$/
2159         or return gettext('illegal_name'). " payname: ". $self->payname;
2160       $self->payname($1);
2161     } else {
2162       $self->payname =~ /^([\w \,\.\-\'\&]*)$/
2163         or return gettext('illegal_name'). " payname: ". $self->payname;
2164       $self->payname($1);
2165     }
2166
2167   }
2168
2169   return "Please select an invoicing locale"
2170     if ! $self->locale
2171     && ! $self->custnum
2172     && $conf->exists('cust_main-require_locale');
2173
2174   return "Please select a customer class"
2175     if ! $self->classnum
2176     && $conf->exists('cust_main-require_classnum');
2177
2178   foreach my $flag (qw( tax spool_cdr squelch_cdr archived email_csv_cdr )) {
2179     $self->$flag() =~ /^(Y?)$/ or return "Illegal $flag: ". $self->$flag();
2180     $self->$flag($1);
2181   }
2182
2183   $self->usernum($FS::CurrentUser::CurrentUser->usernum) unless $self->usernum;
2184
2185   warn "$me check AFTER: \n". $self->_dump
2186     if $DEBUG > 2;
2187
2188   $self->SUPER::check;
2189 }
2190
2191 sub check_payinfo_cardtype {
2192   my $self = shift;
2193
2194   return '' unless $self->payby =~ /^(CARD|DCRD)$/;
2195
2196   my $payinfo = $self->payinfo;
2197   $payinfo =~ s/\D//g;
2198
2199   if ( $payinfo =~ /^99\d{14}$/ ) {
2200     return '';
2201   }
2202
2203   my %bop_card_types = map { $_=>1 } values %{ card_types() };
2204   my $cardtype = cardtype($payinfo);
2205   $self->set('paycardtype', $cardtype);
2206
2207   return "$cardtype not accepted" unless $bop_card_types{$cardtype};
2208
2209   '';
2210
2211 }
2212
2213 =item replace_check
2214
2215 Additional checks for replace only.
2216
2217 =cut
2218
2219 sub replace_check {
2220   my ($new,$old) = @_;
2221   #preserve old value if global config is set
2222   if ($old && $conf->exists('invoice-ship_address')) {
2223     $new->invoice_ship_address($old->invoice_ship_address);
2224   }
2225   return '';
2226 }
2227
2228 =item addr_fields 
2229
2230 Returns a list of fields which have ship_ duplicates.
2231
2232 =cut
2233
2234 sub addr_fields {
2235   qw( last first company
2236       locationname
2237       address1 address2 city county state zip country
2238       latitude longitude
2239       daytime night fax mobile
2240     );
2241 }
2242
2243 =item has_ship_address
2244
2245 Returns true if this customer record has a separate shipping address.
2246
2247 =cut
2248
2249 sub has_ship_address {
2250   my $self = shift;
2251   $self->bill_locationnum != $self->ship_locationnum;
2252 }
2253
2254 =item location_hash
2255
2256 Returns a list of key/value pairs, with the following keys: address1, 
2257 adddress2, city, county, state, zip, country, district, and geocode.  The 
2258 shipping address is used if present.
2259
2260 =cut
2261
2262 sub location_hash {
2263   my $self = shift;
2264   $self->ship_location->location_hash;
2265 }
2266
2267 =item cust_location
2268
2269 Returns all locations (see L<FS::cust_location>) for this customer.
2270
2271 =cut
2272
2273 sub cust_location {
2274   my $self = shift;
2275   qsearch('cust_location', { 'custnum' => $self->custnum,
2276                              'prospectnum' => '' } );
2277 }
2278
2279 =item cust_contact
2280
2281 Returns all contacts (see L<FS::contact>) for this customer.
2282
2283 =cut
2284
2285 #already used :/ sub contact {
2286 sub cust_contact {
2287   my $self = shift;
2288   qsearch('contact', { 'custnum' => $self->custnum } );
2289 }
2290
2291 =item unsuspend
2292
2293 Unsuspends all unflagged suspended packages (see L</unflagged_suspended_pkgs>
2294 and L<FS::cust_pkg>) for this customer, except those on hold.
2295
2296 Returns a list: an empty list on success or a list of errors.
2297
2298 =cut
2299
2300 sub unsuspend {
2301   my $self = shift;
2302   grep { ($_->get('setup')) && $_->unsuspend } $self->suspended_pkgs;
2303 }
2304
2305 =item release_hold
2306
2307 Unsuspends all suspended packages in the on-hold state (those without setup 
2308 dates) for this customer. 
2309
2310 =cut
2311
2312 sub release_hold {
2313   my $self = shift;
2314   grep { (!$_->setup) && $_->unsuspend } $self->suspended_pkgs;
2315 }
2316
2317 =item suspend
2318
2319 Suspends all unsuspended packages (see L<FS::cust_pkg>) for this customer.
2320
2321 Returns a list: an empty list on success or a list of errors.
2322
2323 =cut
2324
2325 sub suspend {
2326   my $self = shift;
2327   grep { $_->suspend(@_) } $self->unsuspended_pkgs;
2328 }
2329
2330 =item suspend_if_pkgpart HASHREF | PKGPART [ , PKGPART ... ]
2331
2332 Suspends all unsuspended packages (see L<FS::cust_pkg>) matching the listed
2333 PKGPARTs (see L<FS::part_pkg>).  Preferred usage is to pass a hashref instead
2334 of a list of pkgparts; the hashref has the following keys:
2335
2336 =over 4
2337
2338 =item pkgparts - listref of pkgparts
2339
2340 =item (other options are passed to the suspend method)
2341
2342 =back
2343
2344
2345 Returns a list: an empty list on success or a list of errors.
2346
2347 =cut
2348
2349 sub suspend_if_pkgpart {
2350   my $self = shift;
2351   my (@pkgparts, %opt);
2352   if (ref($_[0]) eq 'HASH'){
2353     @pkgparts = @{$_[0]{pkgparts}};
2354     %opt      = %{$_[0]};
2355   }else{
2356     @pkgparts = @_;
2357   }
2358   grep { $_->suspend(%opt) }
2359     grep { my $pkgpart = $_->pkgpart; grep { $pkgpart eq $_ } @pkgparts }
2360       $self->unsuspended_pkgs;
2361 }
2362
2363 =item suspend_unless_pkgpart HASHREF | PKGPART [ , PKGPART ... ]
2364
2365 Suspends all unsuspended packages (see L<FS::cust_pkg>) unless they match the
2366 given PKGPARTs (see L<FS::part_pkg>).  Preferred usage is to pass a hashref
2367 instead of a list of pkgparts; the hashref has the following keys:
2368
2369 =over 4
2370
2371 =item pkgparts - listref of pkgparts
2372
2373 =item (other options are passed to the suspend method)
2374
2375 =back
2376
2377 Returns a list: an empty list on success or a list of errors.
2378
2379 =cut
2380
2381 sub suspend_unless_pkgpart {
2382   my $self = shift;
2383   my (@pkgparts, %opt);
2384   if (ref($_[0]) eq 'HASH'){
2385     @pkgparts = @{$_[0]{pkgparts}};
2386     %opt      = %{$_[0]};
2387   }else{
2388     @pkgparts = @_;
2389   }
2390   grep { $_->suspend(%opt) }
2391     grep { my $pkgpart = $_->pkgpart; ! grep { $pkgpart eq $_ } @pkgparts }
2392       $self->unsuspended_pkgs;
2393 }
2394
2395 =item cancel [ OPTION => VALUE ... ]
2396
2397 Cancels all uncancelled packages (see L<FS::cust_pkg>) for this customer.
2398 The cancellation time will be now.
2399
2400 =back
2401
2402 Always returns a list: an empty list on success or a list of errors.
2403
2404 =cut
2405
2406 sub cancel {
2407   my $self = shift;
2408   my %opt = @_;
2409   warn "$me cancel called on customer ". $self->custnum. " with options ".
2410        join(', ', map { "$_: $opt{$_}" } keys %opt ). "\n"
2411     if $DEBUG;
2412   my @pkgs = $self->ncancelled_pkgs;
2413
2414   $self->cancel_pkgs( %opt, 'cust_pkg' => \@pkgs );
2415 }
2416
2417 =item cancel_pkgs OPTIONS
2418
2419 Cancels a specified list of packages. OPTIONS can include:
2420
2421 =over 4
2422
2423 =item cust_pkg - an arrayref of the packages. Required.
2424
2425 =item time - the cancellation time, used to calculate final bills and
2426 unused-time credits if any. Will be passed through to the bill() and
2427 FS::cust_pkg::cancel() methods.
2428
2429 =item quiet - can be set true to supress email cancellation notices.
2430
2431 =item reason - can be set to a cancellation reason (see L<FS:reason>), either a
2432 reasonnum of an existing reason, or passing a hashref will create a new reason.
2433 The hashref should have the following keys:
2434 typenum - Reason type (see L<FS::reason_type>)
2435 reason - Text of the new reason.
2436
2437 =item cust_pkg_reason - can be an arrayref of L<FS::cust_pkg_reason> objects
2438 for the individual packages, parallel to the C<cust_pkg> argument. The
2439 reason and reason_otaker arguments will be taken from those objects.
2440
2441 =item ban - can be set true to ban this customer's credit card or ACH information, if present.
2442
2443 =item nobill - can be set true to skip billing if it might otherwise be done.
2444
2445 =cut
2446
2447 sub cancel_pkgs {
2448   my( $self, %opt ) = @_;
2449
2450   # we're going to cancel services, which is not reversible
2451   # but on 3.x, don't strictly enforce this
2452   warn "cancel_pkgs should not be run inside a transaction"
2453     if $FS::UID::AutoCommit == 0;
2454
2455   local $FS::UID::AutoCommit = 0;
2456
2457   return ( 'access denied' )
2458     unless $FS::CurrentUser::CurrentUser->access_right('Cancel customer');
2459
2460   if ( $opt{'ban'} && $self->payby =~ /^(CARD|DCRD|CHEK|DCHK)$/ ) {
2461
2462     #should try decryption (we might have the private key)
2463     # and if not maybe queue a job for the server that does?
2464     return ( "Can't (yet) ban encrypted credit cards" )
2465       if $self->is_encrypted($self->payinfo);
2466
2467     my $ban = new FS::banned_pay $self->_new_banned_pay_hashref;
2468     my $error = $ban->insert;
2469     if ($error) {
2470       dbh->rollback;
2471       return ( $error );
2472     }
2473
2474   }
2475
2476   my @pkgs = @{ delete $opt{'cust_pkg'} };
2477   my $cancel_time = $opt{'time'} || time;
2478
2479   # bill all packages first, so we don't lose usage, service counts for
2480   # bulk billing, etc.
2481   if ( !$opt{nobill} && $conf->exists('bill_usage_on_cancel') ) {
2482     $opt{nobill} = 1;
2483     my $error = $self->bill( 'pkg_list' => [ @pkgs ],
2484                              'cancel'   => 1,
2485                              'time'     => $cancel_time );
2486     if ($error) {
2487       warn "Error billing during cancel, custnum ". $self->custnum. ": $error";
2488       dbh->rollback;
2489       return ( "Error billing during cancellation: $error" );
2490     }
2491   }
2492   dbh->commit;
2493
2494   $FS::UID::AutoCommit = 1;
2495   my @errors;
2496   # now cancel all services, the same way we would for individual packages.
2497   # if any of them fail, cancel the rest anyway.
2498   my @cust_svc = map { $_->cust_svc } @pkgs;
2499   my @sorted_cust_svc =
2500     map  { $_->[0] }
2501     sort { $a->[1] <=> $b->[1] }
2502     map  { [ $_, $_->svc_x ? $_->svc_x->table_info->{'cancel_weight'} : -1 ]; } @cust_svc
2503   ;
2504   warn "$me removing ".scalar(@sorted_cust_svc)." service(s) for customer ".
2505     $self->custnum."\n"
2506     if $DEBUG;
2507   foreach my $cust_svc (@sorted_cust_svc) {
2508     my $part_svc = $cust_svc->part_svc;
2509     next if ( defined($part_svc) and $part_svc->preserve );
2510     my $error = $cust_svc->cancel; # immediate cancel, no date option
2511     push @errors, $error if $error;
2512   }
2513   if (@errors) {
2514     return @errors;
2515   }
2516
2517   warn "$me cancelling ". scalar(@pkgs) ." package(s) for customer ".
2518     $self->custnum. "\n"
2519     if $DEBUG;
2520
2521   my @cprs;
2522   if ($opt{'cust_pkg_reason'}) {
2523     @cprs = @{ delete $opt{'cust_pkg_reason'} };
2524   }
2525   my $null_reason;
2526   foreach (@pkgs) {
2527     my %lopt = %opt;
2528     if (@cprs) {
2529       my $cpr = shift @cprs;
2530       if ( $cpr ) {
2531         $lopt{'reason'}        = $cpr->reasonnum;
2532         $lopt{'reason_otaker'} = $cpr->otaker;
2533       } else {
2534         warn "no reason found when canceling package ".$_->pkgnum."\n";
2535         $lopt{'reason'} = '';
2536       }
2537     }
2538     my $error = $_->cancel(%lopt);
2539     push @errors, 'pkgnum '.$_->pkgnum.': '.$error if $error;
2540   }
2541
2542   return @errors;
2543 }
2544
2545 sub _banned_pay_hashref {
2546   my $self = shift;
2547
2548   my %payby2ban = (
2549     'CARD' => 'CARD',
2550     'DCRD' => 'CARD',
2551     'CHEK' => 'CHEK',
2552     'DCHK' => 'CHEK'
2553   );
2554
2555   {
2556     'payby'   => $payby2ban{$self->payby},
2557     'payinfo' => $self->payinfo,
2558     #don't ever *search* on reason! #'reason'  =>
2559   };
2560 }
2561
2562 sub _new_banned_pay_hashref {
2563   my $self = shift;
2564   my $hr = $self->_banned_pay_hashref;
2565   $hr->{payinfo} = md5_base64($hr->{payinfo});
2566   $hr;
2567 }
2568
2569 =item notes
2570
2571 Returns all notes (see L<FS::cust_main_note>) for this customer.
2572
2573 =cut
2574
2575 sub notes {
2576   my($self,$orderby_classnum) = (shift,shift);
2577   my $orderby = "sticky DESC, _date DESC";
2578   $orderby = "classnum ASC, $orderby" if $orderby_classnum;
2579   qsearch( 'cust_main_note',
2580            { 'custnum' => $self->custnum },
2581            '',
2582            "ORDER BY $orderby",
2583          );
2584 }
2585
2586 =item agent
2587
2588 Returns the agent (see L<FS::agent>) for this customer.
2589
2590 =cut
2591
2592 sub agent {
2593   my $self = shift;
2594   qsearchs( 'agent', { 'agentnum' => $self->agentnum } );
2595 }
2596
2597 =item agent_name
2598
2599 Returns the agent name (see L<FS::agent>) for this customer.
2600
2601 =cut
2602
2603 sub agent_name {
2604   my $self = shift;
2605   $self->agent->agent;
2606 }
2607
2608 =item cust_tag
2609
2610 Returns any tags associated with this customer, as FS::cust_tag objects,
2611 or an empty list if there are no tags.
2612
2613 =cut
2614
2615 sub cust_tag {
2616   my $self = shift;
2617   qsearch('cust_tag', { 'custnum' => $self->custnum } );
2618 }
2619
2620 =item part_tag
2621
2622 Returns any tags associated with this customer, as FS::part_tag objects,
2623 or an empty list if there are no tags.
2624
2625 =cut
2626
2627 sub part_tag {
2628   my $self = shift;
2629   map $_->part_tag, $self->cust_tag; 
2630 }
2631
2632
2633 =item cust_class
2634
2635 Returns the customer class, as an FS::cust_class object, or the empty string
2636 if there is no customer class.
2637
2638 =cut
2639
2640 sub cust_class {
2641   my $self = shift;
2642   if ( $self->classnum ) {
2643     qsearchs('cust_class', { 'classnum' => $self->classnum } );
2644   } else {
2645     return '';
2646   } 
2647 }
2648
2649 =item categoryname 
2650
2651 Returns the customer category name, or the empty string if there is no customer
2652 category.
2653
2654 =cut
2655
2656 sub categoryname {
2657   my $self = shift;
2658   my $cust_class = $self->cust_class;
2659   $cust_class
2660     ? $cust_class->categoryname
2661     : '';
2662 }
2663
2664 =item classname 
2665
2666 Returns the customer class name, or the empty string if there is no customer
2667 class.
2668
2669 =cut
2670
2671 sub classname {
2672   my $self = shift;
2673   my $cust_class = $self->cust_class;
2674   $cust_class
2675     ? $cust_class->classname
2676     : '';
2677 }
2678
2679 =item BILLING METHODS
2680
2681 Documentation on billing methods has been moved to
2682 L<FS::cust_main::Billing>.
2683
2684 =item REALTIME BILLING METHODS
2685
2686 Documentation on realtime billing methods has been moved to
2687 L<FS::cust_main::Billing_Realtime>.
2688
2689 =item remove_cvv
2690
2691 Removes the I<paycvv> field from the database directly.
2692
2693 If there is an error, returns the error, otherwise returns false.
2694
2695 =cut
2696
2697 sub remove_cvv {
2698   my $self = shift;
2699   my $sth = dbh->prepare("UPDATE cust_main SET paycvv = '' WHERE custnum = ?")
2700     or return dbh->errstr;
2701   $sth->execute($self->custnum)
2702     or return $sth->errstr;
2703   $self->paycvv('');
2704   '';
2705 }
2706
2707 =item batch_card OPTION => VALUE...
2708
2709 Adds a payment for this invoice to the pending credit card batch (see
2710 L<FS::cust_pay_batch>), or, if the B<realtime> option is set to a true value,
2711 runs the payment using a realtime gateway.
2712
2713 Options may include:
2714
2715 B<amount>: the amount to be paid; defaults to the customer's balance minus
2716 any payments in transit.
2717
2718 B<payby>: the payment method; defaults to cust_main.payby
2719
2720 B<realtime>: runs this as a realtime payment instead of adding it to a 
2721 batch.  Deprecated.
2722
2723 B<invnum>: sets cust_pay_batch.invnum.
2724
2725 B<address1>, B<address2>, B<city>, B<state>, B<zip>, B<country>: sets 
2726 the billing address for the payment; defaults to the customer's billing
2727 location.
2728
2729 B<payinfo>, B<paydate>, B<payname>: sets the payment account, expiration
2730 date, and name; defaults to those fields in cust_main.
2731
2732 =cut
2733
2734 sub batch_card {
2735   my ($self, %options) = @_;
2736
2737   my $amount;
2738   if (exists($options{amount})) {
2739     $amount = $options{amount};
2740   }else{
2741     $amount = sprintf("%.2f", $self->balance - $self->in_transit_payments);
2742   }
2743   if ($amount <= 0) {
2744     warn(sprintf("Customer balance %.2f - in transit amount %.2f is <= 0.\n",
2745         $self->balance,
2746         $self->in_transit_payments
2747     ));
2748     return;
2749   }
2750   
2751   my $invnum = delete $options{invnum};
2752   my $payby = $options{payby} || $self->payby;  #still dubious
2753
2754   if ($options{'realtime'}) {
2755     return $self->realtime_bop( FS::payby->payby2bop($self->payby),
2756                                 $amount,
2757                                 %options,
2758                               );
2759   }
2760
2761   my $oldAutoCommit = $FS::UID::AutoCommit;
2762   local $FS::UID::AutoCommit = 0;
2763   my $dbh = dbh;
2764
2765   #this needs to handle mysql as well as Pg, like svc_acct.pm
2766   #(make it into a common function if folks need to do batching with mysql)
2767   $dbh->do("LOCK TABLE pay_batch IN SHARE ROW EXCLUSIVE MODE")
2768     or return "Cannot lock pay_batch: " . $dbh->errstr;
2769
2770   my %pay_batch = (
2771     'status' => 'O',
2772     'payby'  => FS::payby->payby2payment($payby),
2773   );
2774   $pay_batch{agentnum} = $self->agentnum if $conf->exists('batch-spoolagent');
2775
2776   my $pay_batch = qsearchs( 'pay_batch', \%pay_batch );
2777
2778   unless ( $pay_batch ) {
2779     $pay_batch = new FS::pay_batch \%pay_batch;
2780     my $error = $pay_batch->insert;
2781     if ( $error ) {
2782       $dbh->rollback if $oldAutoCommit;
2783       die "error creating new batch: $error\n";
2784     }
2785   }
2786
2787   my $old_cust_pay_batch = qsearchs('cust_pay_batch', {
2788       'batchnum' => $pay_batch->batchnum,
2789       'custnum'  => $self->custnum,
2790   } );
2791
2792   foreach (qw( address1 address2 city state zip country latitude longitude
2793                payby payinfo paydate payname paycode paytype ))
2794   {
2795     $options{$_} = '' unless exists($options{$_});
2796   }
2797
2798   my $loc = $self->bill_location;
2799
2800   my $cust_pay_batch = new FS::cust_pay_batch ( {
2801     'batchnum' => $pay_batch->batchnum,
2802     'invnum'   => $invnum || 0,                    # is there a better value?
2803                                                    # this field should be
2804                                                    # removed...
2805                                                    # cust_bill_pay_batch now
2806     'custnum'  => $self->custnum,
2807     'last'     => $self->getfield('last'),
2808     'first'    => $self->getfield('first'),
2809     'address1' => $options{address1} || $loc->address1,
2810     'address2' => $options{address2} || $loc->address2,
2811     'city'     => $options{city}     || $loc->city,
2812     'state'    => $options{state}    || $loc->state,
2813     'zip'      => $options{zip}      || $loc->zip,
2814     'country'  => $options{country}  || $loc->country,
2815     'payby'    => $options{payby}    || $self->payby,
2816     'payinfo'  => $options{payinfo}  || $self->payinfo,
2817     'paymask'  => ( $options{payinfo}
2818                       ? FS::payinfo_Mixin->mask_payinfo( $options{payby},
2819                                                          $options{payinfo} )
2820                       : $self->paymask
2821                   ),
2822     'exp'      => $options{paydate}  || $self->paydate,
2823     'payname'  => $options{payname}  || $self->payname,
2824     'amount'   => $amount,                         # consolidating
2825     'paycode'  => $options{paycode}  || '',
2826   } );
2827   
2828   $cust_pay_batch->paybatchnum($old_cust_pay_batch->paybatchnum)
2829     if $old_cust_pay_batch;
2830
2831   my $error;
2832   if ($old_cust_pay_batch) {
2833     $error = $cust_pay_batch->replace($old_cust_pay_batch)
2834   } else {
2835     $error = $cust_pay_batch->insert;
2836   }
2837
2838   if ( $error ) {
2839     $dbh->rollback if $oldAutoCommit;
2840     die $error;
2841   }
2842
2843   my $unapplied =   $self->total_unapplied_credits
2844                   + $self->total_unapplied_payments
2845                   + $self->in_transit_payments;
2846   foreach my $cust_bill ($self->open_cust_bill) {
2847     #$dbh->commit or die $dbh->errstr if $oldAutoCommit;
2848     my $cust_bill_pay_batch = new FS::cust_bill_pay_batch {
2849       'invnum' => $cust_bill->invnum,
2850       'paybatchnum' => $cust_pay_batch->paybatchnum,
2851       'amount' => $cust_bill->owed,
2852       '_date' => time,
2853     };
2854     if ($unapplied >= $cust_bill_pay_batch->amount){
2855       $unapplied -= $cust_bill_pay_batch->amount;
2856       next;
2857     }else{
2858       $cust_bill_pay_batch->amount(sprintf ( "%.2f", 
2859                                    $cust_bill_pay_batch->amount - $unapplied ));      $unapplied = 0;
2860     }
2861     $error = $cust_bill_pay_batch->insert;
2862     if ( $error ) {
2863       $dbh->rollback if $oldAutoCommit;
2864       die $error;
2865     }
2866   }
2867
2868   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
2869   '';
2870 }
2871
2872 =item total_owed
2873
2874 Returns the total owed for this customer on all invoices
2875 (see L<FS::cust_bill/owed>).
2876
2877 =cut
2878
2879 sub total_owed {
2880   my $self = shift;
2881   $self->total_owed_date(2145859200); #12/31/2037
2882 }
2883
2884 =item total_owed_date TIME
2885
2886 Returns the total owed for this customer on all invoices with date earlier than
2887 TIME.  TIME is specified as a UNIX timestamp; see L<perlfunc/"time">).  Also
2888 see L<Time::Local> and L<Date::Parse> for conversion functions.
2889
2890 =cut
2891
2892 sub total_owed_date {
2893   my $self = shift;
2894   my $time = shift;
2895
2896   my $custnum = $self->custnum;
2897
2898   my $owed_sql = FS::cust_bill->owed_sql;
2899
2900   my $sql = "
2901     SELECT SUM($owed_sql) FROM cust_bill
2902       WHERE custnum = $custnum
2903         AND _date <= $time
2904   ";
2905
2906   sprintf( "%.2f", $self->scalar_sql($sql) || 0 );
2907
2908 }
2909
2910 =item total_owed_pkgnum PKGNUM
2911
2912 Returns the total owed on all invoices for this customer's specific package
2913 when using experimental package balances (see L<FS::cust_bill/owed_pkgnum>).
2914
2915 =cut
2916
2917 sub total_owed_pkgnum {
2918   my( $self, $pkgnum ) = @_;
2919   $self->total_owed_date_pkgnum(2145859200, $pkgnum); #12/31/2037
2920 }
2921
2922 =item total_owed_date_pkgnum TIME PKGNUM
2923
2924 Returns the total owed for this customer's specific package when using
2925 experimental package balances on all invoices with date earlier than
2926 TIME.  TIME is specified as a UNIX timestamp; see L<perlfunc/"time">).  Also
2927 see L<Time::Local> and L<Date::Parse> for conversion functions.
2928
2929 =cut
2930
2931 sub total_owed_date_pkgnum {
2932   my( $self, $time, $pkgnum ) = @_;
2933
2934   my $total_bill = 0;
2935   foreach my $cust_bill (
2936     grep { $_->_date <= $time }
2937       qsearch('cust_bill', { 'custnum' => $self->custnum, } )
2938   ) {
2939     $total_bill += $cust_bill->owed_pkgnum($pkgnum);
2940   }
2941   sprintf( "%.2f", $total_bill );
2942
2943 }
2944
2945 =item total_paid
2946
2947 Returns the total amount of all payments.
2948
2949 =cut
2950
2951 sub total_paid {
2952   my $self = shift;
2953   my $total = 0;
2954   $total += $_->paid foreach $self->cust_pay;
2955   sprintf( "%.2f", $total );
2956 }
2957
2958 =item total_unapplied_credits
2959
2960 Returns the total outstanding credit (see L<FS::cust_credit>) for this
2961 customer.  See L<FS::cust_credit/credited>.
2962
2963 =item total_credited
2964
2965 Old name for total_unapplied_credits.  Don't use.
2966
2967 =cut
2968
2969 sub total_credited {
2970   #carp "total_credited deprecated, use total_unapplied_credits";
2971   shift->total_unapplied_credits(@_);
2972 }
2973
2974 sub total_unapplied_credits {
2975   my $self = shift;
2976
2977   my $custnum = $self->custnum;
2978
2979   my $unapplied_sql = FS::cust_credit->unapplied_sql;
2980
2981   my $sql = "
2982     SELECT SUM($unapplied_sql) FROM cust_credit
2983       WHERE custnum = $custnum
2984   ";
2985
2986   sprintf( "%.2f", $self->scalar_sql($sql) || 0 );
2987
2988 }
2989
2990 =item total_unapplied_credits_pkgnum PKGNUM
2991
2992 Returns the total outstanding credit (see L<FS::cust_credit>) for this
2993 customer.  See L<FS::cust_credit/credited>.
2994
2995 =cut
2996
2997 sub total_unapplied_credits_pkgnum {
2998   my( $self, $pkgnum ) = @_;
2999   my $total_credit = 0;
3000   $total_credit += $_->credited foreach $self->cust_credit_pkgnum($pkgnum);
3001   sprintf( "%.2f", $total_credit );
3002 }
3003
3004
3005 =item total_unapplied_payments
3006
3007 Returns the total unapplied payments (see L<FS::cust_pay>) for this customer.
3008 See L<FS::cust_pay/unapplied>.
3009
3010 =cut
3011
3012 sub total_unapplied_payments {
3013   my $self = shift;
3014
3015   my $custnum = $self->custnum;
3016
3017   my $unapplied_sql = FS::cust_pay->unapplied_sql;
3018
3019   my $sql = "
3020     SELECT SUM($unapplied_sql) FROM cust_pay
3021       WHERE custnum = $custnum
3022   ";
3023
3024   sprintf( "%.2f", $self->scalar_sql($sql) || 0 );
3025
3026 }
3027
3028 =item total_unapplied_payments_pkgnum PKGNUM
3029
3030 Returns the total unapplied payments (see L<FS::cust_pay>) for this customer's
3031 specific package when using experimental package balances.  See
3032 L<FS::cust_pay/unapplied>.
3033
3034 =cut
3035
3036 sub total_unapplied_payments_pkgnum {
3037   my( $self, $pkgnum ) = @_;
3038   my $total_unapplied = 0;
3039   $total_unapplied += $_->unapplied foreach $self->cust_pay_pkgnum($pkgnum);
3040   sprintf( "%.2f", $total_unapplied );
3041 }
3042
3043
3044 =item total_unapplied_refunds
3045
3046 Returns the total unrefunded refunds (see L<FS::cust_refund>) for this
3047 customer.  See L<FS::cust_refund/unapplied>.
3048
3049 =cut
3050
3051 sub total_unapplied_refunds {
3052   my $self = shift;
3053   my $custnum = $self->custnum;
3054
3055   my $unapplied_sql = FS::cust_refund->unapplied_sql;
3056
3057   my $sql = "
3058     SELECT SUM($unapplied_sql) FROM cust_refund
3059       WHERE custnum = $custnum
3060   ";
3061
3062   sprintf( "%.2f", $self->scalar_sql($sql) || 0 );
3063
3064 }
3065
3066 =item balance
3067
3068 Returns the balance for this customer (total_owed plus total_unrefunded, minus
3069 total_unapplied_credits minus total_unapplied_payments).
3070
3071 =cut
3072
3073 sub balance {
3074   my $self = shift;
3075   $self->balance_date_range;
3076 }
3077
3078 =item balance_date TIME
3079
3080 Returns the balance for this customer, only considering invoices with date
3081 earlier than TIME (total_owed_date minus total_credited minus
3082 total_unapplied_payments).  TIME is specified as a UNIX timestamp; see
3083 L<perlfunc/"time">).  Also see L<Time::Local> and L<Date::Parse> for conversion
3084 functions.
3085
3086 =cut
3087
3088 sub balance_date {
3089   my $self = shift;
3090   $self->balance_date_range(shift);
3091 }
3092
3093 =item balance_date_range [ START_TIME [ END_TIME [ OPTION => VALUE ... ] ] ]
3094
3095 Returns the balance for this customer, optionally considering invoices with
3096 date earlier than START_TIME, and not later than END_TIME
3097 (total_owed_date minus total_unapplied_credits minus total_unapplied_payments).
3098
3099 Times are specified as SQL fragments or numeric
3100 UNIX timestamps; see L<perlfunc/"time">).  Also see L<Time::Local> and
3101 L<Date::Parse> for conversion functions.  The empty string can be passed
3102 to disable that time constraint completely.
3103
3104 Accepts the same options as L<balance_date_sql>:
3105
3106 =over 4
3107
3108 =item unapplied_date
3109
3110 set to true to disregard unapplied credits, payments and refunds outside the specified time period - by default the time period restriction only applies to invoices (useful for reporting, probably a bad idea for event triggering)
3111
3112 =item cutoff
3113
3114 An absolute cutoff time.  Payments, credits, and refunds I<applied> after this 
3115 time will be ignored.  Note that START_TIME and END_TIME only limit the date 
3116 range for invoices and I<unapplied> payments, credits, and refunds.
3117
3118 =back
3119
3120 =cut
3121
3122 sub balance_date_range {
3123   my $self = shift;
3124   my $sql = 'SELECT SUM('. $self->balance_date_sql(@_).
3125             ') FROM cust_main WHERE custnum='. $self->custnum;
3126   sprintf( '%.2f', $self->scalar_sql($sql) || 0 );
3127 }
3128
3129 =item balance_pkgnum PKGNUM
3130
3131 Returns the balance for this customer's specific package when using
3132 experimental package balances (total_owed plus total_unrefunded, minus
3133 total_unapplied_credits minus total_unapplied_payments)
3134
3135 =cut
3136
3137 sub balance_pkgnum {
3138   my( $self, $pkgnum ) = @_;
3139
3140   sprintf( "%.2f",
3141       $self->total_owed_pkgnum($pkgnum)
3142 # n/a - refunds aren't part of pkg-balances since they don't apply to invoices
3143 #    + $self->total_unapplied_refunds_pkgnum($pkgnum)
3144     - $self->total_unapplied_credits_pkgnum($pkgnum)
3145     - $self->total_unapplied_payments_pkgnum($pkgnum)
3146   );
3147 }
3148
3149 =item in_transit_payments
3150
3151 Returns the total of requests for payments for this customer pending in 
3152 batches in transit to the bank.  See L<FS::pay_batch> and L<FS::cust_pay_batch>
3153
3154 =cut
3155
3156 sub in_transit_payments {
3157   my $self = shift;
3158   my $in_transit_payments = 0;
3159   foreach my $pay_batch ( qsearch('pay_batch', {
3160     'status' => 'I',
3161   } ) ) {
3162     foreach my $cust_pay_batch ( qsearch('cust_pay_batch', {
3163       'batchnum' => $pay_batch->batchnum,
3164       'custnum' => $self->custnum,
3165       'status'  => '',
3166     } ) ) {
3167       $in_transit_payments += $cust_pay_batch->amount;
3168     }
3169   }
3170   sprintf( "%.2f", $in_transit_payments );
3171 }
3172
3173 =item payment_info
3174
3175 Returns a hash of useful information for making a payment.
3176
3177 =over 4
3178
3179 =item balance
3180
3181 Current balance.
3182
3183 =item payby
3184
3185 'CARD' (credit card - automatic), 'DCRD' (credit card - on-demand),
3186 'CHEK' (electronic check - automatic), 'DCHK' (electronic check - on-demand),
3187 'LECB' (Phone bill billing), 'BILL' (billing), or 'COMP' (free).
3188
3189 =back
3190
3191 For credit card transactions:
3192
3193 =over 4
3194
3195 =item card_type 1
3196
3197 =item payname
3198
3199 Exact name on card
3200
3201 =back
3202
3203 For electronic check transactions:
3204
3205 =over 4
3206
3207 =item stateid_state
3208
3209 =back
3210
3211 =cut
3212
3213 sub payment_info {
3214   my $self = shift;
3215
3216   my %return = ();
3217
3218   $return{balance} = $self->balance;
3219
3220   $return{payname} = $self->payname
3221                      || ( $self->first. ' '. $self->get('last') );
3222
3223   $return{$_} = $self->bill_location->$_
3224     for qw(address1 address2 city state zip);
3225
3226   $return{payby} = $self->payby;
3227   $return{stateid_state} = $self->stateid_state;
3228
3229   if ( $self->payby =~ /^(CARD|DCRD)$/ ) {
3230     $return{card_type} = cardtype($self->payinfo);
3231     $return{payinfo} = $self->paymask;
3232
3233     @return{'month', 'year'} = $self->paydate_monthyear;
3234
3235   }
3236
3237   if ( $self->payby =~ /^(CHEK|DCHK)$/ ) {
3238     my ($payinfo1, $payinfo2) = split '@', $self->paymask;
3239     $return{payinfo1} = $payinfo1;
3240     $return{payinfo2} = $payinfo2;
3241     $return{paytype}  = $self->paytype;
3242     $return{paystate} = $self->paystate;
3243
3244   }
3245
3246   #doubleclick protection
3247   my $_date = time;
3248   $return{paybatch} = "webui-MyAccount-$_date-$$-". rand() * 2**32;
3249
3250   %return;
3251
3252 }
3253
3254 =item paydate_monthyear
3255
3256 Returns a two-element list consisting of the month and year of this customer's
3257 paydate (credit card expiration date for CARD customers)
3258
3259 =cut
3260
3261 sub paydate_monthyear {
3262   my $self = shift;
3263   if ( $self->paydate  =~ /^(\d{4})-(\d{1,2})-\d{1,2}$/ ) { #Pg date format
3264     ( $2, $1 );
3265   } elsif ( $self->paydate =~ /^(\d{1,2})-(\d{1,2}-)?(\d{4}$)/ ) {
3266     ( $1, $3 );
3267   } else {
3268     ('', '');
3269   }
3270 }
3271
3272 =item paydate_epoch
3273
3274 Returns the exact time in seconds corresponding to the payment method 
3275 expiration date.  For CARD/DCRD customers this is the end of the month;
3276 for others (COMP is the only other payby that uses paydate) it's the start.
3277 Returns 0 if the paydate is empty or set to the far future.
3278
3279 =cut
3280
3281 sub paydate_epoch {
3282   my $self = shift;
3283   my ($month, $year) = $self->paydate_monthyear;
3284   return 0 if !$year or $year >= 2037;
3285   if ( $self->payby eq 'CARD' or $self->payby eq 'DCRD' ) {
3286     $month++;
3287     if ( $month == 13 ) {
3288       $month = 1;
3289       $year++;
3290     }
3291     return timelocal(0,0,0,1,$month-1,$year) - 1;
3292   }
3293   else {
3294     return timelocal(0,0,0,1,$month-1,$year);
3295   }
3296 }
3297
3298 =item paydate_epoch_sql
3299
3300 Class method.  Returns an SQL expression to obtain the payment expiration date
3301 as a number of seconds.
3302
3303 =cut
3304
3305 # Special expiration date behavior for non-CARD/DCRD customers has been 
3306 # carefully preserved.  Do we really use that?
3307 sub paydate_epoch_sql {
3308   my $class = shift;
3309   my $table = shift || 'cust_main';
3310   my ($case1, $case2);
3311   if ( driver_name eq 'Pg' ) {
3312     $case1 = "EXTRACT( EPOCH FROM CAST( $table.paydate AS TIMESTAMP ) + INTERVAL '1 month') - 1";
3313     $case2 = "EXTRACT( EPOCH FROM CAST( $table.paydate AS TIMESTAMP ) )";
3314   }
3315   elsif ( lc(driver_name) eq 'mysql' ) {
3316     $case1 = "UNIX_TIMESTAMP( DATE_ADD( CAST( $table.paydate AS DATETIME ), INTERVAL 1 month ) ) - 1";
3317     $case2 = "UNIX_TIMESTAMP( CAST( $table.paydate AS DATETIME ) )";
3318   }
3319   else { return '' }
3320   return "CASE WHEN $table.payby IN('CARD','DCRD') 
3321   THEN ($case1)
3322   ELSE ($case2)
3323   END"
3324 }
3325
3326 =item tax_exemption TAXNAME
3327
3328 =cut
3329
3330 sub tax_exemption {
3331   my( $self, $taxname ) = @_;
3332
3333   qsearchs( 'cust_main_exemption', { 'custnum' => $self->custnum,
3334                                      'taxname' => $taxname,
3335                                    },
3336           );
3337 }
3338
3339 =item cust_main_exemption
3340
3341 =cut
3342
3343 sub cust_main_exemption {
3344   my $self = shift;
3345   qsearch( 'cust_main_exemption', { 'custnum' => $self->custnum } );
3346 }
3347
3348 =item invoicing_list [ ARRAYREF ]
3349
3350 If an arguement is given, sets these email addresses as invoice recipients
3351 (see L<FS::cust_main_invoice>).  Errors are not fatal and are not reported
3352 (except as warnings), so use check_invoicing_list first.
3353
3354 Returns a list of email addresses (with svcnum entries expanded).
3355
3356 Note: You can clear the invoicing list by passing an empty ARRAYREF.  You can
3357 check it without disturbing anything by passing nothing.
3358
3359 This interface may change in the future.
3360
3361 =cut
3362
3363 sub invoicing_list {
3364   my( $self, $arrayref ) = @_;
3365
3366   if ( $arrayref ) {
3367     my @cust_main_invoice;
3368     if ( $self->custnum ) {
3369       @cust_main_invoice = 
3370         qsearch( 'cust_main_invoice', { 'custnum' => $self->custnum } );
3371     } else {
3372       @cust_main_invoice = ();
3373     }
3374     foreach my $cust_main_invoice ( @cust_main_invoice ) {
3375       #warn $cust_main_invoice->destnum;
3376       unless ( grep { $cust_main_invoice->address eq $_ } @{$arrayref} ) {
3377         #warn $cust_main_invoice->destnum;
3378         my $error = $cust_main_invoice->delete;
3379         warn $error if $error;
3380       }
3381     }
3382     if ( $self->custnum ) {
3383       @cust_main_invoice = 
3384         qsearch( 'cust_main_invoice', { 'custnum' => $self->custnum } );
3385     } else {
3386       @cust_main_invoice = ();
3387     }
3388     my %seen = map { $_->address => 1 } @cust_main_invoice;
3389     foreach my $address ( @{$arrayref} ) {
3390       next if exists $seen{$address} && $seen{$address};
3391       $seen{$address} = 1;
3392       my $cust_main_invoice = new FS::cust_main_invoice ( {
3393         'custnum' => $self->custnum,
3394         'dest'    => $address,
3395       } );
3396       my $error = $cust_main_invoice->insert;
3397       warn $error if $error;
3398     }
3399   }
3400   
3401   if ( $self->custnum ) {
3402     map { $_->address }
3403       qsearch( 'cust_main_invoice', { 'custnum' => $self->custnum } );
3404   } else {
3405     ();
3406   }
3407
3408 }
3409
3410 =item check_invoicing_list ARRAYREF
3411
3412 Checks these arguements as valid input for the invoicing_list method.  If there
3413 is an error, returns the error, otherwise returns false.
3414
3415 =cut
3416
3417 sub check_invoicing_list {
3418   my( $self, $arrayref ) = @_;
3419
3420   foreach my $address ( @$arrayref ) {
3421
3422     if ($address eq 'FAX' and $self->getfield('fax') eq '') {
3423       return 'Can\'t add FAX invoice destination with a blank FAX number.';
3424     }
3425
3426     my $cust_main_invoice = new FS::cust_main_invoice ( {
3427       'custnum' => $self->custnum,
3428       'dest'    => $address,
3429     } );
3430     my $error = $self->custnum
3431                 ? $cust_main_invoice->check
3432                 : $cust_main_invoice->checkdest
3433     ;
3434     return $error if $error;
3435
3436   }
3437
3438   return "Email address required"
3439     if $conf->exists('cust_main-require_invoicing_list_email', $self->agentnum)
3440     && ! grep { $_ !~ /^([A-Z]+)$/ } @$arrayref;
3441
3442   '';
3443 }
3444
3445 =item set_default_invoicing_list
3446
3447 Sets the invoicing list to all accounts associated with this customer,
3448 overwriting any previous invoicing list.
3449
3450 =cut
3451
3452 sub set_default_invoicing_list {
3453   my $self = shift;
3454   $self->invoicing_list($self->all_emails);
3455 }
3456
3457 =item all_emails
3458
3459 Returns the email addresses of all accounts provisioned for this customer.
3460
3461 =cut
3462
3463 sub all_emails {
3464   my $self = shift;
3465   my %list;
3466   foreach my $cust_pkg ( $self->all_pkgs ) {
3467     my @cust_svc = qsearch('cust_svc', { 'pkgnum' => $cust_pkg->pkgnum } );
3468     my @svc_acct =
3469       map { qsearchs('svc_acct', { 'svcnum' => $_->svcnum } ) }
3470         grep { qsearchs('svc_acct', { 'svcnum' => $_->svcnum } ) }
3471           @cust_svc;
3472     $list{$_}=1 foreach map { $_->email } @svc_acct;
3473   }
3474   keys %list;
3475 }
3476
3477 =item invoicing_list_addpost
3478
3479 Adds postal invoicing to this customer.  If this customer is already configured
3480 to receive postal invoices, does nothing.
3481
3482 =cut
3483
3484 sub invoicing_list_addpost {
3485   my $self = shift;
3486   return if grep { $_ eq 'POST' } $self->invoicing_list;
3487   my @invoicing_list = $self->invoicing_list;
3488   push @invoicing_list, 'POST';
3489   $self->invoicing_list(\@invoicing_list);
3490 }
3491
3492 =item invoicing_list_emailonly
3493
3494 Returns the list of email invoice recipients (invoicing_list without non-email
3495 destinations such as POST and FAX).
3496
3497 =cut
3498
3499 sub invoicing_list_emailonly {
3500   my $self = shift;
3501   warn "$me invoicing_list_emailonly called"
3502     if $DEBUG;
3503   grep { $_ !~ /^([A-Z]+)$/ } $self->invoicing_list;
3504 }
3505
3506 =item invoicing_list_emailonly_scalar
3507
3508 Returns the list of email invoice recipients (invoicing_list without non-email
3509 destinations such as POST and FAX) as a comma-separated scalar.
3510
3511 =cut
3512
3513 sub invoicing_list_emailonly_scalar {
3514   my $self = shift;
3515   warn "$me invoicing_list_emailonly_scalar called"
3516     if $DEBUG;
3517   join(', ', $self->invoicing_list_emailonly);
3518 }
3519
3520 =item contact_list [ CLASSNUM, ... ]
3521
3522 Returns a list of contacts (L<FS::contact> objects) for the customer. If
3523 a list of contact classnums is given, returns only contacts in those
3524 classes. If '0' is given, also returns contacts with no class.
3525
3526 If no arguments are given, returns all contacts for the customer.
3527
3528 =cut
3529
3530 sub contact_list {
3531   my $self = shift;
3532   my $search = {
3533     table       => 'contact',
3534     select      => 'contact.*',
3535     extra_sql   => ' WHERE contact.custnum = '.$self->custnum,
3536   };
3537
3538   my @orwhere;
3539   my @classnums;
3540   foreach (@_) {
3541     if ( $_ eq '0' ) {
3542       push @orwhere, 'contact.classnum is null';
3543     } elsif ( /^\d+$/ ) {
3544       push @classnums, $_;
3545     } else {
3546       die "bad classnum argument '$_'";
3547     }
3548   }
3549
3550   if (@classnums) {
3551     push @orwhere, 'contact.classnum IN ('.join(',', @classnums).')';
3552   }
3553   if (@orwhere) {
3554     $search->{extra_sql} .= ' AND (' .
3555                             join(' OR ', map "( $_ )", @orwhere) .
3556                             ')';
3557   }
3558
3559   qsearch($search);
3560 }
3561
3562 =item contact_list_email [ CLASSNUM, ... ]
3563
3564 Same as L</contact_list>, but returns email destinations instead of contact
3565 objects. Also accepts 'invoice' as an argument, in which case this will also
3566 return the invoice email address if any.
3567
3568 =cut
3569
3570 sub contact_list_email {
3571   my $self = shift;
3572   my @classnums;
3573   my $and_invoice;
3574   foreach (@_) {
3575     if (/^invoice$/) {
3576       $and_invoice = 1;
3577     } else {
3578       push @classnums, $_;
3579     }
3580   }
3581   my %emails;
3582   # if the only argument passed was 'invoice' then no classnums are
3583   # intended, so skip this.
3584   if ( @classnums ) {
3585     my @contacts = $self->contact_list(@classnums);
3586     foreach my $contact (@contacts) {
3587       foreach my $contact_email ($contact->contact_email) {
3588         # unlike on 4.x, we have a separate list of invoice email
3589         # destinations.
3590         # make sure they're not redundant with contact emails
3591         $emails{ $contact_email->emailaddress } =
3592           Email::Address->new( $contact->firstlast,
3593                                $contact_email->emailaddress
3594                              )->format;
3595       }
3596     }
3597   }
3598   if ( $and_invoice ) {
3599     foreach my $email ($self->invoicing_list_emailonly) {
3600       $emails{ $email } ||=
3601         Email::Address->new( $self->name_short, $email )->format;
3602     }
3603   }
3604   values %emails;
3605 }
3606
3607 =item referral_custnum_cust_main
3608
3609 Returns the customer who referred this customer (or the empty string, if
3610 this customer was not referred).
3611
3612 Note the difference with referral_cust_main method: This method,
3613 referral_custnum_cust_main returns the single customer (if any) who referred
3614 this customer, while referral_cust_main returns an array of customers referred
3615 BY this customer.
3616
3617 =cut
3618
3619 sub referral_custnum_cust_main {
3620   my $self = shift;
3621   return '' unless $self->referral_custnum;
3622   qsearchs('cust_main', { 'custnum' => $self->referral_custnum } );
3623 }
3624
3625 =item referral_cust_main [ DEPTH [ EXCLUDE_HASHREF ] ]
3626
3627 Returns an array of customers referred by this customer (referral_custnum set
3628 to this custnum).  If DEPTH is given, recurses up to the given depth, returning
3629 customers referred by customers referred by this customer and so on, inclusive.
3630 The default behavior is DEPTH 1 (no recursion).
3631
3632 Note the difference with referral_custnum_cust_main method: This method,
3633 referral_cust_main, returns an array of customers referred BY this customer,
3634 while referral_custnum_cust_main returns the single customer (if any) who
3635 referred this customer.
3636
3637 =cut
3638
3639 sub referral_cust_main {
3640   my $self = shift;
3641   my $depth = @_ ? shift : 1;
3642   my $exclude = @_ ? shift : {};
3643
3644   my @cust_main =
3645     map { $exclude->{$_->custnum}++; $_; }
3646       grep { ! $exclude->{ $_->custnum } }
3647         qsearch( 'cust_main', { 'referral_custnum' => $self->custnum } );
3648
3649   if ( $depth > 1 ) {
3650     push @cust_main,
3651       map { $_->referral_cust_main($depth-1, $exclude) }
3652         @cust_main;
3653   }
3654
3655   @cust_main;
3656 }
3657
3658 =item referral_cust_main_ncancelled
3659
3660 Same as referral_cust_main, except only returns customers with uncancelled
3661 packages.
3662
3663 =cut
3664
3665 sub referral_cust_main_ncancelled {
3666   my $self = shift;
3667   grep { scalar($_->ncancelled_pkgs) } $self->referral_cust_main;
3668 }
3669
3670 =item referral_cust_pkg [ DEPTH ]
3671
3672 Like referral_cust_main, except returns a flat list of all unsuspended (and
3673 uncancelled) packages for each customer.  The number of items in this list may
3674 be useful for commission calculations (perhaps after a C<grep { my $pkgpart = $_->pkgpart; grep { $_ == $pkgpart } @commission_worthy_pkgparts> } $cust_main-> ).
3675
3676 =cut
3677
3678 sub referral_cust_pkg {
3679   my $self = shift;
3680   my $depth = @_ ? shift : 1;
3681
3682   map { $_->unsuspended_pkgs }
3683     grep { $_->unsuspended_pkgs }
3684       $self->referral_cust_main($depth);
3685 }
3686
3687 =item referring_cust_main
3688
3689 Returns the single cust_main record for the customer who referred this customer
3690 (referral_custnum), or false.
3691
3692 =cut
3693
3694 sub referring_cust_main {
3695   my $self = shift;
3696   return '' unless $self->referral_custnum;
3697   qsearchs('cust_main', { 'custnum' => $self->referral_custnum } );
3698 }
3699
3700 =item credit AMOUNT, REASON [ , OPTION => VALUE ... ]
3701
3702 Applies a credit to this customer.  If there is an error, returns the error,
3703 otherwise returns false.
3704
3705 REASON can be a text string, an FS::reason object, or a scalar reference to
3706 a reasonnum.  If a text string, it will be automatically inserted as a new
3707 reason, and a 'reason_type' option must be passed to indicate the
3708 FS::reason_type for the new reason.
3709
3710 An I<addlinfo> option may be passed to set the credit's I<addlinfo> field.
3711 Likewise for I<eventnum>, I<commission_agentnum>, I<commission_salesnum> and
3712 I<commission_pkgnum>.
3713
3714 Any other options are passed to FS::cust_credit::insert.
3715
3716 =cut
3717
3718 sub credit {
3719   my( $self, $amount, $reason, %options ) = @_;
3720
3721   my $cust_credit = new FS::cust_credit {
3722     'custnum' => $self->custnum,
3723     'amount'  => $amount,
3724   };
3725
3726   if ( ref($reason) ) {
3727
3728     if ( ref($reason) eq 'SCALAR' ) {
3729       $cust_credit->reasonnum( $$reason );
3730     } else {
3731       $cust_credit->reasonnum( $reason->reasonnum );
3732     }
3733
3734   } else {
3735     $cust_credit->set('reason', $reason)
3736   }
3737
3738   $cust_credit->$_( delete $options{$_} )
3739     foreach grep exists($options{$_}),
3740               qw( addlinfo eventnum ),
3741               map "commission_$_", qw( agentnum salesnum pkgnum );
3742
3743   $cust_credit->insert(%options);
3744
3745 }
3746
3747 =item charge HASHREF || AMOUNT [ PKG [ COMMENT [ TAXCLASS ] ] ]
3748
3749 Creates a one-time charge for this customer.  If there is an error, returns
3750 the error, otherwise returns false.
3751
3752 New-style, with a hashref of options:
3753
3754   my $error = $cust_main->charge(
3755                                   {
3756                                     'amount'     => 54.32,
3757                                     'quantity'   => 1,
3758                                     'start_date' => str2time('7/4/2009'),
3759                                     'pkg'        => 'Description',
3760                                     'comment'    => 'Comment',
3761                                     'additional' => [], #extra invoice detail
3762                                     'classnum'   => 1,  #pkg_class
3763
3764                                     'setuptax'   => '', # or 'Y' for tax exempt
3765
3766                                     'locationnum'=> 1234, # optional
3767
3768                                     #internal taxation
3769                                     'taxclass'   => 'Tax class',
3770
3771                                     #vendor taxation
3772                                     'taxproduct' => 2,  #part_pkg_taxproduct
3773                                     'override'   => {}, #XXX describe
3774
3775                                     #will be filled in with the new object
3776                                     'cust_pkg_ref' => \$cust_pkg,
3777
3778                                     #generate an invoice immediately
3779                                     'bill_now' => 0,
3780                                     'invoice_terms' => '', #with these terms
3781                                   }
3782                                 );
3783
3784 Old-style:
3785
3786   my $error = $cust_main->charge( 54.32, 'Description', 'Comment', 'Tax class' );
3787
3788 =cut
3789
3790 #super false laziness w/quotation::charge
3791 sub charge {
3792   my $self = shift;
3793   my ( $amount, $setup_cost, $quantity, $start_date, $classnum );
3794   my ( $pkg, $comment, $additional );
3795   my ( $setuptax, $taxclass );   #internal taxes
3796   my ( $taxproduct, $override ); #vendor (CCH) taxes
3797   my $no_auto = '';
3798   my $separate_bill = '';
3799   my $cust_pkg_ref = '';
3800   my ( $bill_now, $invoice_terms ) = ( 0, '' );
3801   my $locationnum;
3802   if ( ref( $_[0] ) ) {
3803     $amount     = $_[0]->{amount};
3804     $setup_cost = $_[0]->{setup_cost};
3805     $quantity   = exists($_[0]->{quantity}) ? $_[0]->{quantity} : 1;
3806     $start_date = exists($_[0]->{start_date}) ? $_[0]->{start_date} : '';
3807     $no_auto    = exists($_[0]->{no_auto}) ? $_[0]->{no_auto} : '';
3808     $pkg        = exists($_[0]->{pkg}) ? $_[0]->{pkg} : 'One-time charge';
3809     $comment    = exists($_[0]->{comment}) ? $_[0]->{comment}
3810                                            : '$'. sprintf("%.2f",$amount);
3811     $setuptax   = exists($_[0]->{setuptax}) ? $_[0]->{setuptax} : '';
3812     $taxclass   = exists($_[0]->{taxclass}) ? $_[0]->{taxclass} : '';
3813     $classnum   = exists($_[0]->{classnum}) ? $_[0]->{classnum} : '';
3814     $additional = $_[0]->{additional} || [];
3815     $taxproduct = $_[0]->{taxproductnum};
3816     $override   = { '' => $_[0]->{tax_override} };
3817     $cust_pkg_ref = exists($_[0]->{cust_pkg_ref}) ? $_[0]->{cust_pkg_ref} : '';
3818     $bill_now = exists($_[0]->{bill_now}) ? $_[0]->{bill_now} : '';
3819     $invoice_terms = exists($_[0]->{invoice_terms}) ? $_[0]->{invoice_terms} : '';
3820     $locationnum = $_[0]->{locationnum} || $self->ship_locationnum;
3821     $separate_bill = $_[0]->{separate_bill} || '';
3822   } else { # yuck
3823     $amount     = shift;
3824     $setup_cost = '';
3825     $quantity   = 1;
3826     $start_date = '';
3827     $pkg        = @_ ? shift : 'One-time charge';
3828     $comment    = @_ ? shift : '$'. sprintf("%.2f",$amount);
3829     $setuptax   = '';
3830     $taxclass   = @_ ? shift : '';
3831     $additional = [];
3832   }
3833
3834   local $SIG{HUP} = 'IGNORE';
3835   local $SIG{INT} = 'IGNORE';
3836   local $SIG{QUIT} = 'IGNORE';
3837   local $SIG{TERM} = 'IGNORE';
3838   local $SIG{TSTP} = 'IGNORE';
3839   local $SIG{PIPE} = 'IGNORE';
3840
3841   my $oldAutoCommit = $FS::UID::AutoCommit;
3842   local $FS::UID::AutoCommit = 0;
3843   my $dbh = dbh;
3844
3845   my $part_pkg = new FS::part_pkg ( {
3846     'pkg'           => $pkg,
3847     'comment'       => $comment,
3848     'plan'          => 'flat',
3849     'freq'          => 0,
3850     'disabled'      => 'Y',
3851     'classnum'      => ( $classnum ? $classnum : '' ),
3852     'setuptax'      => $setuptax,
3853     'taxclass'      => $taxclass,
3854     'taxproductnum' => $taxproduct,
3855     'setup_cost'    => $setup_cost,
3856   } );
3857
3858   my %options = ( ( map { ("additional_info$_" => $additional->[$_] ) }
3859                         ( 0 .. @$additional - 1 )
3860                   ),
3861                   'additional_count' => scalar(@$additional),
3862                   'setup_fee' => $amount,
3863                 );
3864
3865   my $error = $part_pkg->insert( options       => \%options,
3866                                  tax_overrides => $override,
3867                                );
3868   if ( $error ) {
3869     $dbh->rollback if $oldAutoCommit;
3870     return $error;
3871   }
3872
3873   my $pkgpart = $part_pkg->pkgpart;
3874   my %type_pkgs = ( 'typenum' => $self->agent->typenum, 'pkgpart' => $pkgpart );
3875   unless ( qsearchs('type_pkgs', \%type_pkgs ) ) {
3876     my $type_pkgs = new FS::type_pkgs \%type_pkgs;
3877     $error = $type_pkgs->insert;
3878     if ( $error ) {
3879       $dbh->rollback if $oldAutoCommit;
3880       return $error;
3881     }
3882   }
3883
3884   my $cust_pkg = new FS::cust_pkg ( {
3885     'custnum'    => $self->custnum,
3886     'pkgpart'    => $pkgpart,
3887     'quantity'   => $quantity,
3888     'start_date' => $start_date,
3889     'no_auto'    => $no_auto,
3890     'separate_bill' => $separate_bill,
3891     'locationnum'=> $locationnum,
3892   } );
3893
3894   $error = $cust_pkg->insert;
3895   if ( $error ) {
3896     $dbh->rollback if $oldAutoCommit;
3897     return $error;
3898   } elsif ( $cust_pkg_ref ) {
3899     ${$cust_pkg_ref} = $cust_pkg;
3900   }
3901
3902   if ( $bill_now ) {
3903     my $error = $self->bill( 'invoice_terms' => $invoice_terms,
3904                              'pkg_list'      => [ $cust_pkg ],
3905                            );
3906     if ( $error ) {
3907       $dbh->rollback if $oldAutoCommit;
3908       return $error;
3909     }   
3910   }
3911
3912   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
3913   return '';
3914
3915 }
3916
3917 #=item charge_postal_fee
3918 #
3919 #Applies a one time charge this customer.  If there is an error,
3920 #returns the error, returns the cust_pkg charge object or false
3921 #if there was no charge.
3922 #
3923 #=cut
3924 #
3925 # This should be a customer event.  For that to work requires that bill
3926 # also be a customer event.
3927
3928 sub charge_postal_fee {
3929   my $self = shift;
3930
3931   my $pkgpart = $conf->config('postal_invoice-fee_pkgpart', $self->agentnum);
3932   return '' unless ($pkgpart && grep { $_ eq 'POST' } $self->invoicing_list);
3933
3934   my $cust_pkg = new FS::cust_pkg ( {
3935     'custnum'  => $self->custnum,
3936     'pkgpart'  => $pkgpart,
3937     'quantity' => 1,
3938   } );
3939
3940   my $error = $cust_pkg->insert;
3941   $error ? $error : $cust_pkg;
3942 }
3943
3944 =item cust_bill [ OPTION => VALUE... | EXTRA_QSEARCH_PARAMS_HASHREF ]
3945
3946 Returns all the invoices (see L<FS::cust_bill>) for this customer.
3947
3948 Optionally, a list or hashref of additional arguments to the qsearch call can
3949 be passed.
3950
3951 =cut
3952
3953 sub cust_bill {
3954   my $self = shift;
3955   my $opt = ref($_[0]) ? shift : { @_ };
3956
3957   #return $self->num_cust_bill unless wantarray || keys %$opt;
3958
3959   $opt->{'table'} = 'cust_bill';
3960   $opt->{'hashref'} ||= {}; #i guess it would autovivify anyway...
3961   $opt->{'hashref'}{'custnum'} = $self->custnum;
3962   $opt->{'order_by'} ||= 'ORDER BY _date ASC';
3963
3964   map { $_ } #behavior of sort undefined in scalar context
3965     sort { $a->_date <=> $b->_date }
3966       qsearch($opt);
3967 }
3968
3969 =item open_cust_bill
3970
3971 Returns all the open (owed > 0) invoices (see L<FS::cust_bill>) for this
3972 customer.
3973
3974 =cut
3975
3976 sub open_cust_bill {
3977   my $self = shift;
3978
3979   $self->cust_bill(
3980     'extra_sql' => ' AND '. FS::cust_bill->owed_sql. ' > 0',
3981     #@_
3982   );
3983
3984 }
3985
3986 =item legacy_cust_bill [ OPTION => VALUE... | EXTRA_QSEARCH_PARAMS_HASHREF ]
3987
3988 Returns all the legacy invoices (see L<FS::legacy_cust_bill>) for this customer.
3989
3990 =cut
3991
3992 sub legacy_cust_bill {
3993   my $self = shift;
3994
3995   #return $self->num_legacy_cust_bill unless wantarray;
3996
3997   map { $_ } #behavior of sort undefined in scalar context
3998     sort { $a->_date <=> $b->_date }
3999       qsearch({ 'table'    => 'legacy_cust_bill',
4000                 'hashref'  => { 'custnum' => $self->custnum, },
4001                 'order_by' => 'ORDER BY _date ASC',
4002              });
4003 }
4004
4005 =item cust_statement [ OPTION => VALUE... | EXTRA_QSEARCH_PARAMS_HASHREF ]
4006
4007 Returns all the statements (see L<FS::cust_statement>) for this customer.
4008
4009 Optionally, a list or hashref of additional arguments to the qsearch call can
4010 be passed.
4011
4012 =cut
4013
4014 =item cust_bill_void
4015
4016 Returns all the voided invoices (see L<FS::cust_bill_void>) for this customer.
4017
4018 =cut
4019
4020 sub cust_bill_void {
4021   my $self = shift;
4022
4023   map { $_ } #return $self->num_cust_bill_void unless wantarray;
4024   sort { $a->_date <=> $b->_date }
4025     qsearch( 'cust_bill_void', { 'custnum' => $self->custnum } )
4026 }
4027
4028 sub cust_statement {
4029   my $self = shift;
4030   my $opt = ref($_[0]) ? shift : { @_ };
4031
4032   #return $self->num_cust_statement unless wantarray || keys %$opt;
4033
4034   $opt->{'table'} = 'cust_statement';
4035   $opt->{'hashref'} ||= {}; #i guess it would autovivify anyway...
4036   $opt->{'hashref'}{'custnum'} = $self->custnum;
4037   $opt->{'order_by'} ||= 'ORDER BY _date ASC';
4038
4039   map { $_ } #behavior of sort undefined in scalar context
4040     sort { $a->_date <=> $b->_date }
4041       qsearch($opt);
4042 }
4043
4044 =item svc_x SVCDB [ OPTION => VALUE | EXTRA_QSEARCH_PARAMS_HASHREF ]
4045
4046 Returns all services of type SVCDB (such as 'svc_acct') for this customer.  
4047
4048 Optionally, a list or hashref of additional arguments to the qsearch call can 
4049 be passed following the SVCDB.
4050
4051 =cut
4052
4053 sub svc_x {
4054   my $self = shift;
4055   my $svcdb = shift;
4056   if ( ! $svcdb =~ /^svc_\w+$/ ) {
4057     warn "$me svc_x requires a svcdb";
4058     return;
4059   }
4060   my $opt = ref($_[0]) ? shift : { @_ };
4061
4062   $opt->{'table'} = $svcdb;
4063   $opt->{'addl_from'} = 
4064     'LEFT JOIN cust_svc USING (svcnum) LEFT JOIN cust_pkg USING (pkgnum) '.
4065     ($opt->{'addl_from'} || '');
4066
4067   my $custnum = $self->custnum;
4068   $custnum =~ /^\d+$/ or die "bad custnum '$custnum'";
4069   my $where = "cust_pkg.custnum = $custnum";
4070
4071   my $extra_sql = $opt->{'extra_sql'} || '';
4072   if ( keys %{ $opt->{'hashref'} } ) {
4073     $extra_sql = " AND $where $extra_sql";
4074   }
4075   else {
4076     if ( $opt->{'extra_sql'} =~ /^\s*where\s(.*)/si ) {
4077       $extra_sql = "WHERE $where AND $1";
4078     }
4079     else {
4080       $extra_sql = "WHERE $where $extra_sql";
4081     }
4082   }
4083   $opt->{'extra_sql'} = $extra_sql;
4084
4085   qsearch($opt);
4086 }
4087
4088 # required for use as an eventtable; 
4089 sub svc_acct {
4090   my $self = shift;
4091   $self->svc_x('svc_acct', @_);
4092 }
4093
4094 =item cust_credit
4095
4096 Returns all the credits (see L<FS::cust_credit>) for this customer.
4097
4098 =cut
4099
4100 sub cust_credit {
4101   my $self = shift;
4102   map { $_ } #return $self->num_cust_credit unless wantarray;
4103   sort { $a->_date <=> $b->_date }
4104     qsearch( 'cust_credit', { 'custnum' => $self->custnum } )
4105 }
4106
4107 =item cust_credit_pkgnum
4108
4109 Returns all the credits (see L<FS::cust_credit>) for this customer's specific
4110 package when using experimental package balances.
4111
4112 =cut
4113
4114 sub cust_credit_pkgnum {
4115   my( $self, $pkgnum ) = @_;
4116   map { $_ } #return $self->num_cust_credit_pkgnum($pkgnum) unless wantarray;
4117   sort { $a->_date <=> $b->_date }
4118     qsearch( 'cust_credit', { 'custnum' => $self->custnum,
4119                               'pkgnum'  => $pkgnum,
4120                             }
4121     );
4122 }
4123
4124 =item cust_credit_void
4125
4126 Returns all voided credits (see L<FS::cust_credit_void>) for this customer.
4127
4128 =cut
4129
4130 sub cust_credit_void {
4131   my $self = shift;
4132   map { $_ }
4133   sort { $a->_date <=> $b->_date }
4134     qsearch( 'cust_credit_void', { 'custnum' => $self->custnum } )
4135 }
4136
4137 =item cust_pay
4138
4139 Returns all the payments (see L<FS::cust_pay>) for this customer.
4140
4141 =cut
4142
4143 sub cust_pay {
4144   my $self = shift;
4145   my $opt = ref($_[0]) ? shift : { @_ };
4146
4147   return $self->num_cust_pay unless wantarray || keys %$opt;
4148
4149   $opt->{'table'} = 'cust_pay';
4150   $opt->{'hashref'}{'custnum'} = $self->custnum;
4151
4152   map { $_ } #behavior of sort undefined in scalar context
4153     sort { $a->_date <=> $b->_date }
4154       qsearch($opt);
4155
4156 }
4157
4158 =item num_cust_pay
4159
4160 Returns the number of payments (see L<FS::cust_pay>) for this customer.  Also
4161 called automatically when the cust_pay method is used in a scalar context.
4162
4163 =cut
4164
4165 sub num_cust_pay {
4166   my $self = shift;
4167   my $sql = "SELECT COUNT(*) FROM cust_pay WHERE custnum = ?";
4168   my $sth = dbh->prepare($sql) or die dbh->errstr;
4169   $sth->execute($self->custnum) or die $sth->errstr;
4170   $sth->fetchrow_arrayref->[0];
4171 }
4172
4173 =item unapplied_cust_pay
4174
4175 Returns all the unapplied payments (see L<FS::cust_pay>) for this customer.
4176
4177 =cut
4178
4179 sub unapplied_cust_pay {
4180   my $self = shift;
4181
4182   $self->cust_pay(
4183     'extra_sql' => ' AND '. FS::cust_pay->unapplied_sql. ' > 0',
4184     #@_
4185   );
4186
4187 }
4188
4189 =item cust_pay_pkgnum
4190
4191 Returns all the payments (see L<FS::cust_pay>) for this customer's specific
4192 package when using experimental package balances.
4193
4194 =cut
4195
4196 sub cust_pay_pkgnum {
4197   my( $self, $pkgnum ) = @_;
4198   map { $_ } #return $self->num_cust_pay_pkgnum($pkgnum) unless wantarray;
4199   sort { $a->_date <=> $b->_date }
4200     qsearch( 'cust_pay', { 'custnum' => $self->custnum,
4201                            'pkgnum'  => $pkgnum,
4202                          }
4203     );
4204 }
4205
4206 =item cust_pay_void
4207
4208 Returns all voided payments (see L<FS::cust_pay_void>) for this customer.
4209
4210 =cut
4211
4212 sub cust_pay_void {
4213   my $self = shift;
4214   map { $_ } #return $self->num_cust_pay_void unless wantarray;
4215   sort { $a->_date <=> $b->_date }
4216     qsearch( 'cust_pay_void', { 'custnum' => $self->custnum } )
4217 }
4218
4219 =item cust_pay_batch [ OPTION => VALUE... | EXTRA_QSEARCH_PARAMS_HASHREF ]
4220
4221 Returns all batched payments (see L<FS::cust_pay_batch>) for this customer.
4222
4223 Optionally, a list or hashref of additional arguments to the qsearch call can
4224 be passed.
4225
4226 =cut
4227
4228 sub cust_pay_batch {
4229   my $self = shift;
4230   my $opt = ref($_[0]) ? shift : { @_ };
4231
4232   #return $self->num_cust_statement unless wantarray || keys %$opt;
4233
4234   $opt->{'table'} = 'cust_pay_batch';
4235   $opt->{'hashref'} ||= {}; #i guess it would autovivify anyway...
4236   $opt->{'hashref'}{'custnum'} = $self->custnum;
4237   $opt->{'order_by'} ||= 'ORDER BY paybatchnum ASC';
4238
4239   map { $_ } #behavior of sort undefined in scalar context
4240     sort { $a->paybatchnum <=> $b->paybatchnum }
4241       qsearch($opt);
4242 }
4243
4244 =item cust_pay_pending
4245
4246 Returns all pending payments (see L<FS::cust_pay_pending>) for this customer
4247 (without status "done").
4248
4249 =cut
4250
4251 sub cust_pay_pending {
4252   my $self = shift;
4253   return $self->num_cust_pay_pending unless wantarray;
4254   sort { $a->_date <=> $b->_date }
4255     qsearch( 'cust_pay_pending', {
4256                                    'custnum' => $self->custnum,
4257                                    'status'  => { op=>'!=', value=>'done' },
4258                                  },
4259            );
4260 }
4261
4262 =item cust_pay_pending_attempt
4263
4264 Returns all payment attempts / declined payments for this customer, as pending
4265 payments objects (see L<FS::cust_pay_pending>), with status "done" but without
4266 a corresponding payment (see L<FS::cust_pay>).
4267
4268 =cut
4269
4270 sub cust_pay_pending_attempt {
4271   my $self = shift;
4272   return $self->num_cust_pay_pending_attempt unless wantarray;
4273   sort { $a->_date <=> $b->_date }
4274     qsearch( 'cust_pay_pending', {
4275                                    'custnum' => $self->custnum,
4276                                    'status'  => 'done',
4277                                    'paynum'  => '',
4278                                  },
4279            );
4280 }
4281
4282 =item num_cust_pay_pending
4283
4284 Returns the number of pending payments (see L<FS::cust_pay_pending>) for this
4285 customer (without status "done").  Also called automatically when the
4286 cust_pay_pending method is used in a scalar context.
4287
4288 =cut
4289
4290 sub num_cust_pay_pending {
4291   my $self = shift;
4292   $self->scalar_sql(
4293     " SELECT COUNT(*) FROM cust_pay_pending ".
4294       " WHERE custnum = ? AND status != 'done' ",
4295     $self->custnum
4296   );
4297 }
4298
4299 =item num_cust_pay_pending_attempt
4300
4301 Returns the number of pending payments (see L<FS::cust_pay_pending>) for this
4302 customer, with status "done" but without a corresp.  Also called automatically when the
4303 cust_pay_pending method is used in a scalar context.
4304
4305 =cut
4306
4307 sub num_cust_pay_pending_attempt {
4308   my $self = shift;
4309   $self->scalar_sql(
4310     " SELECT COUNT(*) FROM cust_pay_pending ".
4311       " WHERE custnum = ? AND status = 'done' AND paynum IS NULL",
4312     $self->custnum
4313   );
4314 }
4315
4316 =item cust_refund
4317
4318 Returns all the refunds (see L<FS::cust_refund>) for this customer.
4319
4320 =cut
4321
4322 sub cust_refund {
4323   my $self = shift;
4324   map { $_ } #return $self->num_cust_refund unless wantarray;
4325   sort { $a->_date <=> $b->_date }
4326     qsearch( 'cust_refund', { 'custnum' => $self->custnum } )
4327 }
4328
4329 =item display_custnum
4330
4331 Returns the displayed customer number for this customer: agent_custid if
4332 cust_main-default_agent_custid is set and it has a value, custnum otherwise.
4333
4334 =cut
4335
4336 sub display_custnum {
4337   my $self = shift;
4338
4339   return $self->agent_custid
4340     if $default_agent_custid && $self->agent_custid;
4341
4342   my $prefix = $conf->config('cust_main-custnum-display_prefix', $self->agentnum) || '';
4343
4344   if ( $prefix ) {
4345     return $prefix . 
4346            sprintf('%0'.($custnum_display_length||8).'d', $self->custnum)
4347   } elsif ( $custnum_display_length ) {
4348     return sprintf('%0'.$custnum_display_length.'d', $self->custnum);
4349   } else {
4350     return $self->custnum;
4351   }
4352 }
4353
4354 =item name
4355
4356 Returns a name string for this customer, either "Company (Last, First)" or
4357 "Last, First".
4358
4359 =cut
4360
4361 sub name {
4362   my $self = shift;
4363   my $name = $self->contact;
4364   $name = $self->company. " ($name)" if $self->company;
4365   $name;
4366 }
4367
4368 =item service_contact
4369
4370 Returns the L<FS::contact> object for this customer that has the 'Service'
4371 contact class, or undef if there is no such contact.  Deprecated; don't use
4372 this in new code.
4373
4374 =cut
4375
4376 sub service_contact {
4377   my $self = shift;
4378   if ( !exists($self->{service_contact}) ) {
4379     my $classnum = $self->scalar_sql(
4380       'SELECT classnum FROM contact_class WHERE classname = \'Service\''
4381     ) || 0; #if it's zero, qsearchs will return nothing
4382     $self->{service_contact} = qsearchs('contact', { 
4383         'classnum' => $classnum, 'custnum' => $self->custnum
4384       }) || undef;
4385   }
4386   $self->{service_contact};
4387 }
4388
4389 =item ship_name
4390
4391 Returns a name string for this (service/shipping) contact, either
4392 "Company (Last, First)" or "Last, First".
4393
4394 =cut
4395
4396 sub ship_name {
4397   my $self = shift;
4398
4399   my $name = $self->ship_contact;
4400   $name = $self->company. " ($name)" if $self->company;
4401   $name;
4402 }
4403
4404 =item name_short
4405
4406 Returns a name string for this customer, either "Company" or "First Last".
4407
4408 =cut
4409
4410 sub name_short {
4411   my $self = shift;
4412   $self->company !~ /^\s*$/ ? $self->company : $self->contact_firstlast;
4413 }
4414
4415 =item ship_name_short
4416
4417 Returns a name string for this (service/shipping) contact, either "Company"
4418 or "First Last".
4419
4420 =cut
4421
4422 sub ship_name_short {
4423   my $self = shift;
4424   $self->service_contact 
4425     ? $self->ship_contact_firstlast 
4426     : $self->name_short
4427 }
4428
4429 =item contact
4430
4431 Returns this customer's full (billing) contact name only, "Last, First"
4432
4433 =cut
4434
4435 sub contact {
4436   my $self = shift;
4437   $self->get('last'). ', '. $self->first;
4438 }
4439
4440 =item ship_contact
4441
4442 Returns this customer's full (shipping) contact name only, "Last, First"
4443
4444 =cut
4445
4446 sub ship_contact {
4447   my $self = shift;
4448   my $contact = $self->service_contact || $self;
4449   $contact->get('last') . ', ' . $contact->get('first');
4450 }
4451
4452 =item contact_firstlast
4453
4454 Returns this customers full (billing) contact name only, "First Last".
4455
4456 =cut
4457
4458 sub contact_firstlast {
4459   my $self = shift;
4460   $self->first. ' '. $self->get('last');
4461 }
4462
4463 =item ship_contact_firstlast
4464
4465 Returns this customer's full (shipping) contact name only, "First Last".
4466
4467 =cut
4468
4469 sub ship_contact_firstlast {
4470   my $self = shift;
4471   my $contact = $self->service_contact || $self;
4472   $contact->get('first') . ' '. $contact->get('last');
4473 }
4474
4475 sub bill_country_full {
4476   my $self = shift;
4477   $self->bill_location->country_full;
4478 }
4479
4480 sub ship_country_full {
4481   my $self = shift;
4482   $self->ship_location->country_full;
4483 }
4484
4485 =item county_state_county [ PREFIX ]
4486
4487 Returns a string consisting of just the county, state and country.
4488
4489 =cut
4490
4491 sub county_state_country {
4492   my $self = shift;
4493   my $locationnum;
4494   if ( @_ && $_[0] && $self->has_ship_address ) {
4495     $locationnum = $self->ship_locationnum;
4496   } else {
4497     $locationnum = $self->bill_locationnum;
4498   }
4499   my $cust_location = qsearchs('cust_location', { locationnum=>$locationnum });
4500   $cust_location->county_state_country;
4501 }
4502
4503 =item geocode DATA_VENDOR
4504
4505 Returns a value for the customer location as encoded by DATA_VENDOR.
4506 Currently this only makes sense for "CCH" as DATA_VENDOR.
4507
4508 =cut
4509
4510 =item cust_status
4511
4512 =item status
4513
4514 Returns a status string for this customer, currently:
4515
4516 =over 4
4517
4518 =item prospect - No packages have ever been ordered
4519
4520 =item ordered - Recurring packages all are new (not yet billed).
4521
4522 =item active - One or more recurring packages is active
4523
4524 =item inactive - No active recurring packages, but otherwise unsuspended/uncancelled (the inactive status is new - previously inactive customers were mis-identified as cancelled)
4525
4526 =item suspended - All non-cancelled recurring packages are suspended
4527
4528 =item cancelled - All recurring packages are cancelled
4529
4530 =back
4531
4532 Behavior of inactive vs. cancelled edge cases can be adjusted with the
4533 cust_main-status_module configuration option.
4534
4535 =cut
4536
4537 sub status { shift->cust_status(@_); }
4538
4539 sub cust_status {
4540   my $self = shift;
4541   return $self->hashref->{cust_status} if $self->hashref->{cust_status};
4542   for my $status ( FS::cust_main->statuses() ) {
4543     my $method = $status.'_sql';
4544     my $numnum = ( my $sql = $self->$method() ) =~ s/cust_main\.custnum/?/g;
4545     my $sth = dbh->prepare("SELECT $sql") or die dbh->errstr;
4546     $sth->execute( ($self->custnum) x $numnum )
4547       or die "Error executing 'SELECT $sql': ". $sth->errstr;
4548     if ( $sth->fetchrow_arrayref->[0] ) {
4549       $self->hashref->{cust_status} = $status;
4550       return $status;
4551     }
4552   }
4553 }
4554
4555 =item is_status_delay_cancel
4556
4557 Returns true if customer status is 'suspended'
4558 and all suspended cust_pkg return true for
4559 cust_pkg->is_status_delay_cancel.
4560
4561 This is not a real status, this only meant for hacking display 
4562 values, because otherwise treating the customer as suspended is 
4563 really the whole point of the delay_cancel option.
4564
4565 =cut
4566
4567 sub is_status_delay_cancel {
4568   my ($self) = @_;
4569   return 0 unless $self->status eq 'suspended';
4570   foreach my $cust_pkg ($self->ncancelled_pkgs) {
4571     return 0 unless $cust_pkg->is_status_delay_cancel;
4572   }
4573   return 1;
4574 }
4575
4576 =item ucfirst_cust_status
4577
4578 =item ucfirst_status
4579
4580 Returns the status with the first character capitalized.
4581
4582 =cut
4583
4584 sub ucfirst_status { shift->ucfirst_cust_status(@_); }
4585
4586 sub ucfirst_cust_status {
4587   my $self = shift;
4588   ucfirst($self->cust_status);
4589 }
4590
4591 =item statuscolor
4592
4593 Returns a hex triplet color string for this customer's status.
4594
4595 =cut
4596
4597 sub statuscolor { shift->cust_statuscolor(@_); }
4598
4599 sub cust_statuscolor {
4600   my $self = shift;
4601   __PACKAGE__->statuscolors->{$self->cust_status};
4602 }
4603
4604 =item tickets [ STATUS ]
4605
4606 Returns an array of hashes representing the customer's RT tickets.
4607
4608 An optional status (or arrayref or hashref of statuses) may be specified.
4609
4610 =cut
4611
4612 sub tickets {
4613   my $self = shift;
4614   my $status = ( @_ && $_[0] ) ? shift : '';
4615
4616   my $num = $conf->config('cust_main-max_tickets') || 10;
4617   my @tickets = ();
4618
4619   if ( $conf->config('ticket_system') ) {
4620     unless ( $conf->config('ticket_system-custom_priority_field') ) {
4621
4622       @tickets = @{ FS::TicketSystem->customer_tickets( $self->custnum,
4623                                                         $num,
4624                                                         undef,
4625                                                         $status,
4626                                                       )
4627                   };
4628
4629     } else {
4630
4631       foreach my $priority (
4632         $conf->config('ticket_system-custom_priority_field-values'), ''
4633       ) {
4634         last if scalar(@tickets) >= $num;
4635         push @tickets, 
4636           @{ FS::TicketSystem->customer_tickets( $self->custnum,
4637                                                  $num - scalar(@tickets),
4638                                                  $priority,
4639                                                  $status,
4640                                                )
4641            };
4642       }
4643     }
4644   }
4645   (@tickets);
4646 }
4647
4648 =item appointments [ STATUS ]
4649
4650 Returns an array of hashes representing the customer's RT tickets which
4651 are appointments.
4652
4653 =cut
4654
4655 sub appointments {
4656   my $self = shift;
4657   my $status = ( @_ && $_[0] ) ? shift : '';
4658
4659   return () unless $conf->config('ticket_system');
4660
4661   my $queueid = $conf->config('ticket_system-appointment-queueid');
4662
4663   @{ FS::TicketSystem->customer_tickets( $self->custnum,
4664                                          99,
4665                                          undef,
4666                                          $status,
4667                                          $queueid,
4668                                        )
4669   };
4670 }
4671
4672 # Return services representing svc_accts in customer support packages
4673 sub support_services {
4674   my $self = shift;
4675   my %packages = map { $_ => 1 } $conf->config('support_packages');
4676
4677   grep { $_->pkg_svc && $_->pkg_svc->primary_svc eq 'Y' }
4678     grep { $_->part_svc->svcdb eq 'svc_acct' }
4679     map { $_->cust_svc }
4680     grep { exists $packages{ $_->pkgpart } }
4681     $self->ncancelled_pkgs;
4682
4683 }
4684
4685 # Return a list of latitude/longitude for one of the services (if any)
4686 sub service_coordinates {
4687   my $self = shift;
4688
4689   my @svc_X = 
4690     grep { $_->latitude && $_->longitude }
4691     map { $_->svc_x }
4692     map { $_->cust_svc }
4693     $self->ncancelled_pkgs;
4694
4695   scalar(@svc_X) ? ( $svc_X[0]->latitude, $svc_X[0]->longitude ) : ()
4696 }
4697
4698 =item masked FIELD
4699
4700 Returns a masked version of the named field
4701
4702 =cut
4703
4704 sub masked {
4705 my ($self,$field) = @_;
4706
4707 # Show last four
4708
4709 'x'x(length($self->getfield($field))-4).
4710   substr($self->getfield($field), (length($self->getfield($field))-4));
4711
4712 }
4713
4714 =item payment_history
4715
4716 Returns an array of hashrefs standardizing information from cust_bill, cust_pay,
4717 cust_credit and cust_refund objects.  Each hashref has the following fields:
4718
4719 I<type> - one of 'Line item', 'Invoice', 'Payment', 'Credit', 'Refund' or 'Previous'
4720
4721 I<date> - value of _date field, unix timestamp
4722
4723 I<date_pretty> - user-friendly date
4724
4725 I<description> - user-friendly description of item
4726
4727 I<amount> - impact of item on user's balance 
4728 (positive for Invoice/Refund/Line item, negative for Payment/Credit.)
4729 Not to be confused with the native 'amount' field in cust_credit, see below.
4730
4731 I<amount_pretty> - includes money char
4732
4733 I<balance> - customer balance, chronologically as of this item
4734
4735 I<balance_pretty> - includes money char
4736
4737 I<charged> - amount charged for cust_bill (Invoice or Line item) records, undef for other types
4738
4739 I<paid> - amount paid for cust_pay records, undef for other types
4740
4741 I<credit> - amount credited for cust_credit records, undef for other types.
4742 Literally the 'amount' field from cust_credit, renamed here to avoid confusion.
4743
4744 I<refund> - amount refunded for cust_refund records, undef for other types
4745
4746 The four table-specific keys always have positive values, whether they reflect charges or payments.
4747
4748 The following options may be passed to this method:
4749
4750 I<line_items> - if true, returns charges ('Line item') rather than invoices
4751
4752 I<start_date> - unix timestamp, only include records on or after.
4753 If specified, an item of type 'Previous' will also be included.
4754 It does not have table-specific fields.
4755
4756 I<end_date> - unix timestamp, only include records before
4757
4758 I<reverse_sort> - order from newest to oldest (default is oldest to newest)
4759
4760 I<conf> - optional already-loaded FS::Conf object.
4761
4762 =cut
4763
4764 # Caution: this gets used by FS::ClientAPI::MyAccount::billing_history,
4765 # and also for sending customer statements, which should both be kept customer-friendly.
4766 # If you add anything that shouldn't be passed on through the API or exposed 
4767 # to customers, add a new option to include it, don't include it by default
4768 sub payment_history {
4769   my $self = shift;
4770   my $opt = ref($_[0]) ? $_[0] : { @_ };
4771
4772   my $conf = $$opt{'conf'} || new FS::Conf;
4773   my $money_char = $conf->config("money_char") || '$',
4774
4775   #first load entire history, 
4776   #need previous to calculate previous balance
4777   #loading after end_date shouldn't hurt too much?
4778   my @history = ();
4779   if ( $$opt{'line_items'} ) {
4780
4781     foreach my $cust_bill ( $self->cust_bill ) {
4782
4783       push @history, {
4784         'type'        => 'Line item',
4785         'description' => $_->desc( $self->locale ).
4786                            ( $_->sdate && $_->edate
4787                                ? ' '. time2str('%d-%b-%Y', $_->sdate).
4788                                  ' To '. time2str('%d-%b-%Y', $_->edate)
4789                                : ''
4790                            ),
4791         'amount'      => sprintf('%.2f', $_->setup + $_->recur ),
4792         'charged'     => sprintf('%.2f', $_->setup + $_->recur ),
4793         'date'        => $cust_bill->_date,
4794         'date_pretty' => $self->time2str_local('short', $cust_bill->_date ),
4795       }
4796         foreach $cust_bill->cust_bill_pkg;
4797
4798     }
4799
4800   } else {
4801
4802     push @history, {
4803                      'type'        => 'Invoice',
4804                      'description' => 'Invoice #'. $_->display_invnum,
4805                      'amount'      => sprintf('%.2f', $_->charged ),
4806                      'charged'     => sprintf('%.2f', $_->charged ),
4807                      'date'        => $_->_date,
4808                      'date_pretty' => $self->time2str_local('short', $_->_date ),
4809                    }
4810       foreach $self->cust_bill;
4811
4812   }
4813
4814   push @history, {
4815                    'type'        => 'Payment',
4816                    'description' => 'Payment', #XXX type
4817                    'amount'      => sprintf('%.2f', 0 - $_->paid ),
4818                    'paid'        => sprintf('%.2f', $_->paid ),
4819                    'date'        => $_->_date,
4820                    'date_pretty' => $self->time2str_local('short', $_->_date ),
4821                  }
4822     foreach $self->cust_pay;
4823
4824   push @history, {
4825                    'type'        => 'Credit',
4826                    'description' => 'Credit', #more info?
4827                    'amount'      => sprintf('%.2f', 0 -$_->amount ),
4828                    'credit'      => sprintf('%.2f', $_->amount ),
4829                    'date'        => $_->_date,
4830                    'date_pretty' => $self->time2str_local('short', $_->_date ),
4831                  }
4832     foreach $self->cust_credit;
4833
4834   push @history, {
4835                    'type'        => 'Refund',
4836                    'description' => 'Refund', #more info?  type, like payment?
4837                    'amount'      => $_->refund,
4838                    'refund'      => $_->refund,
4839                    'date'        => $_->_date,
4840                    'date_pretty' => $self->time2str_local('short', $_->_date ),
4841                  }
4842     foreach $self->cust_refund;
4843
4844   #put it all in chronological order
4845   @history = sort { $a->{'date'} <=> $b->{'date'} } @history;
4846
4847   #calculate balance, filter items outside date range
4848   my $previous = 0;
4849   my $balance = 0;
4850   my @out = ();
4851   foreach my $item (@history) {
4852     last if $$opt{'end_date'} && ($$item{'date'} >= $$opt{'end_date'});
4853     $balance += $$item{'amount'};
4854     if ($$opt{'start_date'} && ($$item{'date'} < $$opt{'start_date'})) {
4855       $previous += $$item{'amount'};
4856       next;
4857     }
4858     $$item{'balance'} = sprintf("%.2f",$balance);
4859     foreach my $key ( qw(amount balance) ) {
4860       $$item{$key.'_pretty'} = money_pretty($$item{$key});
4861     }
4862     push(@out,$item);
4863   }
4864
4865   # start with previous balance, if there was one
4866   if ($previous) {
4867     my $item = {
4868       'type'        => 'Previous',
4869       'description' => 'Previous balance',
4870       'amount'      => sprintf("%.2f",$previous),
4871       'balance'     => sprintf("%.2f",$previous),
4872       'date'        => $$opt{'start_date'},
4873       'date_pretty' => $self->time2str_local('short', $$opt{'start_date'} ),
4874     };
4875     #false laziness with above
4876     foreach my $key ( qw(amount balance) ) {
4877       $$item{$key.'_pretty'} = $$item{$key};
4878       $$item{$key.'_pretty'} =~ s/^(-?)/$1$money_char/;
4879     }
4880     unshift(@out,$item);
4881   }
4882
4883   @out = reverse @history if $$opt{'reverse_sort'};
4884
4885   return @out;
4886 }
4887
4888 =back
4889
4890 =head1 CLASS METHODS
4891
4892 =over 4
4893
4894 =item statuses
4895
4896 Class method that returns the list of possible status strings for customers
4897 (see L<the status method|/status>).  For example:
4898
4899   @statuses = FS::cust_main->statuses();
4900
4901 =cut
4902
4903 sub statuses {
4904   my $self = shift;
4905   keys %{ $self->statuscolors };
4906 }
4907
4908 =item cust_status_sql
4909
4910 Returns an SQL fragment to determine the status of a cust_main record, as a 
4911 string.
4912
4913 =cut
4914
4915 sub cust_status_sql {
4916   my $sql = 'CASE';
4917   for my $status ( FS::cust_main->statuses() ) {
4918     my $method = $status.'_sql';
4919     $sql .= ' WHEN ('.FS::cust_main->$method.") THEN '$status'";
4920   }
4921   $sql .= ' END';
4922   return $sql;
4923 }
4924
4925
4926 =item prospect_sql
4927
4928 Returns an SQL expression identifying prospective cust_main records (customers
4929 with no packages ever ordered)
4930
4931 =cut
4932
4933 use vars qw($select_count_pkgs);
4934 $select_count_pkgs =
4935   "SELECT COUNT(*) FROM cust_pkg
4936     WHERE cust_pkg.custnum = cust_main.custnum";
4937
4938 sub select_count_pkgs_sql {
4939   $select_count_pkgs;
4940 }
4941
4942 sub prospect_sql {
4943   " 0 = ( $select_count_pkgs ) ";
4944 }
4945
4946 =item ordered_sql
4947
4948 Returns an SQL expression identifying ordered cust_main records (customers with
4949 no active packages, but recurring packages not yet setup or one time charges
4950 not yet billed).
4951
4952 =cut
4953
4954 sub ordered_sql {
4955   FS::cust_main->none_active_sql.
4956   " AND 0 < ( $select_count_pkgs AND ". FS::cust_pkg->not_yet_billed_sql. " ) ";
4957 }
4958
4959 =item active_sql
4960
4961 Returns an SQL expression identifying active cust_main records (customers with
4962 active recurring packages).
4963
4964 =cut
4965
4966 sub active_sql {
4967   " 0 < ( $select_count_pkgs AND ". FS::cust_pkg->active_sql. " ) ";
4968 }
4969
4970 =item none_active_sql
4971
4972 Returns an SQL expression identifying cust_main records with no active
4973 recurring packages.  This includes customers of status prospect, ordered,
4974 inactive, and suspended.
4975
4976 =cut
4977
4978 sub none_active_sql {
4979   " 0 = ( $select_count_pkgs AND ". FS::cust_pkg->active_sql. " ) ";
4980 }
4981
4982 =item inactive_sql
4983
4984 Returns an SQL expression identifying inactive cust_main records (customers with
4985 no active recurring packages, but otherwise unsuspended/uncancelled).
4986
4987 =cut
4988
4989 sub inactive_sql {
4990   FS::cust_main->none_active_sql.
4991   " AND 0 < ( $select_count_pkgs AND ". FS::cust_pkg->inactive_sql. " ) ";
4992 }
4993
4994 =item susp_sql
4995 =item suspended_sql
4996
4997 Returns an SQL expression identifying suspended cust_main records.
4998
4999 =cut
5000
5001
5002 sub suspended_sql { susp_sql(@_); }
5003 sub susp_sql {
5004   FS::cust_main->none_active_sql.
5005   " AND 0 < ( $select_count_pkgs AND ". FS::cust_pkg->suspended_sql. " ) ";
5006 }
5007
5008 =item cancel_sql
5009 =item cancelled_sql
5010
5011 Returns an SQL expression identifying cancelled cust_main records.
5012
5013 =cut
5014
5015 sub cancel_sql { shift->cancelled_sql(@_); }
5016
5017 =item uncancel_sql
5018 =item uncancelled_sql
5019
5020 Returns an SQL expression identifying un-cancelled cust_main records.
5021
5022 =cut
5023
5024 sub uncancelled_sql { uncancel_sql(@_); }
5025 sub uncancel_sql {
5026   my $self = shift;
5027   "( NOT (".$self->cancelled_sql.") )"; #sensitive to cust_main-status_module
5028 }
5029
5030 =item balance_sql
5031
5032 Returns an SQL fragment to retreive the balance.
5033
5034 =cut
5035
5036 sub balance_sql { "
5037     ( SELECT COALESCE( SUM(charged), 0 ) FROM cust_bill
5038         WHERE cust_bill.custnum   = cust_main.custnum     )
5039   - ( SELECT COALESCE( SUM(paid),    0 ) FROM cust_pay
5040         WHERE cust_pay.custnum    = cust_main.custnum     )
5041   - ( SELECT COALESCE( SUM(amount),  0 ) FROM cust_credit
5042         WHERE cust_credit.custnum = cust_main.custnum     )
5043   + ( SELECT COALESCE( SUM(refund),  0 ) FROM cust_refund
5044         WHERE cust_refund.custnum = cust_main.custnum     )
5045 "; }
5046
5047 =item balance_date_sql [ START_TIME [ END_TIME [ OPTION => VALUE ... ] ] ]
5048
5049 Returns an SQL fragment to retreive the balance for this customer, optionally
5050 considering invoices with date earlier than START_TIME, and not
5051 later than END_TIME (total_owed_date minus total_unapplied_credits minus
5052 total_unapplied_payments).
5053
5054 Times are specified as SQL fragments or numeric
5055 UNIX timestamps; see L<perlfunc/"time">).  Also see L<Time::Local> and
5056 L<Date::Parse> for conversion functions.  The empty string can be passed
5057 to disable that time constraint completely.
5058
5059 Available options are:
5060
5061 =over 4
5062
5063 =item unapplied_date
5064
5065 set to true to disregard unapplied credits, payments and refunds outside the specified time period - by default the time period restriction only applies to invoices (useful for reporting, probably a bad idea for event triggering)
5066
5067 =item total
5068
5069 (unused.  obsolete?)
5070 set to true to remove all customer comparison clauses, for totals
5071
5072 =item where
5073
5074 (unused.  obsolete?)
5075 WHERE clause hashref (elements "AND"ed together) (typically used with the total option)
5076
5077 =item join
5078
5079 (unused.  obsolete?)
5080 JOIN clause (typically used with the total option)
5081
5082 =item cutoff
5083
5084 An absolute cutoff time.  Payments, credits, and refunds I<applied> after this 
5085 time will be ignored.  Note that START_TIME and END_TIME only limit the date 
5086 range for invoices and I<unapplied> payments, credits, and refunds.
5087
5088 =back
5089
5090 =cut
5091
5092 sub balance_date_sql {
5093   my( $class, $start, $end, %opt ) = @_;
5094
5095   my $cutoff = $opt{'cutoff'};
5096
5097   my $owed         = FS::cust_bill->owed_sql($cutoff);
5098   my $unapp_refund = FS::cust_refund->unapplied_sql($cutoff);
5099   my $unapp_credit = FS::cust_credit->unapplied_sql($cutoff);
5100   my $unapp_pay    = FS::cust_pay->unapplied_sql($cutoff);
5101
5102   my $j = $opt{'join'} || '';
5103
5104   my $owed_wh   = $class->_money_table_where( 'cust_bill',   $start,$end,%opt );
5105   my $refund_wh = $class->_money_table_where( 'cust_refund', $start,$end,%opt );
5106   my $credit_wh = $class->_money_table_where( 'cust_credit', $start,$end,%opt );
5107   my $pay_wh    = $class->_money_table_where( 'cust_pay',    $start,$end,%opt );
5108
5109   "   ( SELECT COALESCE(SUM($owed),         0) FROM cust_bill   $j $owed_wh   )
5110     + ( SELECT COALESCE(SUM($unapp_refund), 0) FROM cust_refund $j $refund_wh )
5111     - ( SELECT COALESCE(SUM($unapp_credit), 0) FROM cust_credit $j $credit_wh )
5112     - ( SELECT COALESCE(SUM($unapp_pay),    0) FROM cust_pay    $j $pay_wh    )
5113   ";
5114
5115 }
5116
5117 =item unapplied_payments_date_sql START_TIME [ END_TIME ]
5118
5119 Returns an SQL fragment to retreive the total unapplied payments for this
5120 customer, only considering payments with date earlier than START_TIME, and
5121 optionally not later than END_TIME.
5122
5123 Times are specified as SQL fragments or numeric
5124 UNIX timestamps; see L<perlfunc/"time">).  Also see L<Time::Local> and
5125 L<Date::Parse> for conversion functions.  The empty string can be passed
5126 to disable that time constraint completely.
5127
5128 Available options are:
5129
5130 =cut
5131
5132 sub unapplied_payments_date_sql {
5133   my( $class, $start, $end, %opt ) = @_;
5134
5135   my $cutoff = $opt{'cutoff'};
5136
5137   my $unapp_pay    = FS::cust_pay->unapplied_sql($cutoff);
5138
5139   my $pay_where = $class->_money_table_where( 'cust_pay', $start, $end,
5140                                                           'unapplied_date'=>1 );
5141
5142   " ( SELECT COALESCE(SUM($unapp_pay), 0) FROM cust_pay $pay_where ) ";
5143 }
5144
5145 =item _money_table_where TABLE START_TIME [ END_TIME [ OPTION => VALUE ... ] ]
5146
5147 Helper method for balance_date_sql; name (and usage) subject to change
5148 (suggestions welcome).
5149
5150 Returns a WHERE clause for the specified monetary TABLE (cust_bill,
5151 cust_refund, cust_credit or cust_pay).
5152
5153 If TABLE is "cust_bill" or the unapplied_date option is true, only
5154 considers records with date earlier than START_TIME, and optionally not
5155 later than END_TIME .
5156
5157 =cut
5158
5159 sub _money_table_where {
5160   my( $class, $table, $start, $end, %opt ) = @_;
5161
5162   my @where = ();
5163   push @where, "cust_main.custnum = $table.custnum" unless $opt{'total'};
5164   if ( $table eq 'cust_bill' || $opt{'unapplied_date'} ) {
5165     push @where, "$table._date <= $start" if defined($start) && length($start);
5166     push @where, "$table._date >  $end"   if defined($end)   && length($end);
5167   }
5168   push @where, @{$opt{'where'}} if $opt{'where'};
5169   my $where = scalar(@where) ? 'WHERE '. join(' AND ', @where ) : '';
5170
5171   $where;
5172
5173 }
5174
5175 #for dyanmic FS::$table->search in httemplate/misc/email_customers.html
5176 use FS::cust_main::Search;
5177 sub search {
5178   my $class = shift;
5179   FS::cust_main::Search->search(@_);
5180 }
5181
5182 =back
5183
5184 =head1 SUBROUTINES
5185
5186 =over 4
5187
5188 =item notify CUSTOMER_OBJECT TEMPLATE_NAME OPTIONS
5189
5190 Deprecated.  Use event notification and message templates 
5191 (L<FS::msg_template>) instead.
5192
5193 Sends a templated email notification to the customer (see L<Text::Template>).
5194
5195 OPTIONS is a hash and may include
5196
5197 I<from> - the email sender (default is invoice_from)
5198
5199 I<to> - comma-separated scalar or arrayref of recipients 
5200    (default is invoicing_list)
5201
5202 I<subject> - The subject line of the sent email notification
5203    (default is "Notice from company_name")
5204
5205 I<extra_fields> - a hashref of name/value pairs which will be substituted
5206    into the template
5207
5208 The following variables are vavailable in the template.
5209
5210 I<$first> - the customer first name
5211 I<$last> - the customer last name
5212 I<$company> - the customer company
5213 I<$payby> - a description of the method of payment for the customer
5214             # would be nice to use FS::payby::shortname
5215 I<$payinfo> - the account information used to collect for this customer
5216 I<$expdate> - the expiration of the customer payment in seconds from epoch
5217
5218 =cut
5219
5220 sub notify {
5221   my ($self, $template, %options) = @_;
5222
5223   return unless $conf->exists($template);
5224
5225   my $from = $conf->invoice_from_full($self->agentnum)
5226     if $conf->exists('invoice_from', $self->agentnum);
5227   $from = $options{from} if exists($options{from});
5228
5229   my $to = join(',', $self->invoicing_list_emailonly);
5230   $to = $options{to} if exists($options{to});
5231   
5232   my $subject = "Notice from " . $conf->config('company_name', $self->agentnum)
5233     if $conf->exists('company_name', $self->agentnum);
5234   $subject = $options{subject} if exists($options{subject});
5235
5236   my $notify_template = new Text::Template (TYPE => 'ARRAY',
5237                                             SOURCE => [ map "$_\n",
5238                                               $conf->config($template)]
5239                                            )
5240     or die "can't create new Text::Template object: Text::Template::ERROR";
5241   $notify_template->compile()
5242     or die "can't compile template: Text::Template::ERROR";
5243
5244   $FS::notify_template::_template::company_name =
5245     $conf->config('company_name', $self->agentnum);
5246   $FS::notify_template::_template::company_address =
5247     join("\n", $conf->config('company_address', $self->agentnum) ). "\n";
5248
5249   my $paydate = $self->paydate || '2037-12-31';
5250   $FS::notify_template::_template::first = $self->first;
5251   $FS::notify_template::_template::last = $self->last;
5252   $FS::notify_template::_template::company = $self->company;
5253   $FS::notify_template::_template::payinfo = $self->mask_payinfo;
5254   my $payby = $self->payby;
5255   my ($payyear,$paymonth,$payday) = split (/-/,$paydate);
5256   my $expire_time = timelocal(0,0,0,$payday,--$paymonth,$payyear);
5257
5258   #credit cards expire at the end of the month/year of their exp date
5259   if ($payby eq 'CARD' || $payby eq 'DCRD') {
5260     $FS::notify_template::_template::payby = 'credit card';
5261     ($paymonth < 11) ? $paymonth++ : ($paymonth=0, $payyear++);
5262     $expire_time = timelocal(0,0,0,$payday,$paymonth,$payyear);
5263     $expire_time--;
5264   }elsif ($payby eq 'COMP') {
5265     $FS::notify_template::_template::payby = 'complimentary account';
5266   }else{
5267     $FS::notify_template::_template::payby = 'current method';
5268   }
5269   $FS::notify_template::_template::expdate = $expire_time;
5270
5271   for (keys %{$options{extra_fields}}){
5272     no strict "refs";
5273     ${"FS::notify_template::_template::$_"} = $options{extra_fields}->{$_};
5274   }
5275
5276   send_email(from => $from,
5277              to => $to,
5278              subject => $subject,
5279              body => $notify_template->fill_in( PACKAGE =>
5280                                                 'FS::notify_template::_template'                                              ),
5281             );
5282
5283 }
5284
5285 =item generate_letter CUSTOMER_OBJECT TEMPLATE_NAME OPTIONS
5286
5287 Generates a templated notification to the customer (see L<Text::Template>).
5288
5289 OPTIONS is a hash and may include
5290
5291 I<extra_fields> - a hashref of name/value pairs which will be substituted
5292    into the template.  These values may override values mentioned below
5293    and those from the customer record.
5294
5295 I<template_text> - if present, ignores TEMPLATE_NAME and uses the provided text
5296
5297 The following variables are available in the template instead of or in addition
5298 to the fields of the customer record.
5299
5300 I<$payby> - a description of the method of payment for the customer
5301             # would be nice to use FS::payby::shortname
5302 I<$payinfo> - the masked account information used to collect for this customer
5303 I<$expdate> - the expiration of the customer payment method in seconds from epoch
5304 I<$returnaddress> - the return address defaults to invoice_latexreturnaddress or company_address
5305
5306 =cut
5307
5308 # a lot like cust_bill::print_latex
5309 sub generate_letter {
5310   my ($self, $template, %options) = @_;
5311
5312   warn "Template $template does not exist" && return
5313     unless $conf->exists($template) || $options{'template_text'};
5314
5315   my $template_source = $options{'template_text'} 
5316                         ? [ $options{'template_text'} ] 
5317                         : [ map "$_\n", $conf->config($template) ];
5318
5319   my $letter_template = new Text::Template
5320                         ( TYPE       => 'ARRAY',
5321                           SOURCE     => $template_source,
5322                           DELIMITERS => [ '[@--', '--@]' ],
5323                         )
5324     or die "can't create new Text::Template object: Text::Template::ERROR";
5325
5326   $letter_template->compile()
5327     or die "can't compile template: Text::Template::ERROR";
5328
5329   my %letter_data = map { $_ => $self->$_ } $self->fields;
5330   $letter_data{payinfo} = $self->mask_payinfo;
5331
5332   #my $paydate = $self->paydate || '2037-12-31';
5333   my $paydate = $self->paydate =~ /^\S+$/ ? $self->paydate : '2037-12-31';
5334
5335   my $payby = $self->payby;
5336   my ($payyear,$paymonth,$payday) = split (/-/,$paydate);
5337   my $expire_time = timelocal(0,0,0,$payday,--$paymonth,$payyear);
5338
5339   #credit cards expire at the end of the month/year of their exp date
5340   if ($payby eq 'CARD' || $payby eq 'DCRD') {
5341     $letter_data{payby} = 'credit card';
5342     ($paymonth < 11) ? $paymonth++ : ($paymonth=0, $payyear++);
5343     $expire_time = timelocal(0,0,0,$payday,$paymonth,$payyear);
5344     $expire_time--;
5345   }elsif ($payby eq 'COMP') {
5346     $letter_data{payby} = 'complimentary account';
5347   }else{
5348     $letter_data{payby} = 'current method';
5349   }
5350   $letter_data{expdate} = $expire_time;
5351
5352   for (keys %{$options{extra_fields}}){
5353     $letter_data{$_} = $options{extra_fields}->{$_};
5354   }
5355
5356   unless(exists($letter_data{returnaddress})){
5357     my $retadd = join("\n", $conf->config_orbase( 'invoice_latexreturnaddress',
5358                                                   $self->agent_template)
5359                      );
5360     if ( length($retadd) ) {
5361       $letter_data{returnaddress} = $retadd;
5362     } elsif ( grep /\S/, $conf->config('company_address', $self->agentnum) ) {
5363       $letter_data{returnaddress} =
5364         join( "\n", map { s/( {2,})/'~' x length($1)/eg;
5365                           s/$/\\\\\*/;
5366                           $_;
5367                         }
5368                     ( $conf->config('company_name', $self->agentnum),
5369                       $conf->config('company_address', $self->agentnum),
5370                     )
5371         );
5372     } else {
5373       $letter_data{returnaddress} = '~';
5374     }
5375   }
5376
5377   $letter_data{conf_dir} = "$FS::UID::conf_dir/conf.$FS::UID::datasrc";
5378
5379   $letter_data{company_name} = $conf->config('company_name', $self->agentnum);
5380
5381   my $dir = $FS::UID::conf_dir."/cache.". $FS::UID::datasrc;
5382
5383   my $lh = new File::Temp( TEMPLATE => 'letter.'. $self->custnum. '.XXXXXXXX',
5384                            DIR      => $dir,
5385                            SUFFIX   => '.eps',
5386                            UNLINK   => 0,
5387                          ) or die "can't open temp file: $!\n";
5388   print $lh $conf->config_binary('logo.eps', $self->agentnum)
5389     or die "can't write temp file: $!\n";
5390   close $lh;
5391   $letter_data{'logo_file'} = $lh->filename;
5392
5393   my $fh = new File::Temp( TEMPLATE => 'letter.'. $self->custnum. '.XXXXXXXX',
5394                            DIR      => $dir,
5395                            SUFFIX   => '.tex',
5396                            UNLINK   => 0,
5397                          ) or die "can't open temp file: $!\n";
5398
5399   $letter_template->fill_in( OUTPUT => $fh, HASH => \%letter_data );
5400   close $fh;
5401   $fh->filename =~ /^(.*).tex$/ or die "unparsable filename: ". $fh->filename;
5402   return ($1, $letter_data{'logo_file'});
5403
5404 }
5405
5406 =item print_ps TEMPLATE 
5407
5408 Returns an postscript letter filled in from TEMPLATE, as a scalar.
5409
5410 =cut
5411
5412 sub print_ps {
5413   my $self = shift;
5414   my($file, $lfile) = $self->generate_letter(@_);
5415   my $ps = FS::Misc::generate_ps($file);
5416   unlink($file.'.tex');
5417   unlink($lfile);
5418
5419   $ps;
5420 }
5421
5422 =item print TEMPLATE
5423
5424 Prints the filled in template.
5425
5426 TEMPLATE is the name of a L<Text::Template> to fill in and print.
5427
5428 =cut
5429
5430 sub queueable_print {
5431   my %opt = @_;
5432
5433   my $self = qsearchs('cust_main', { 'custnum' => $opt{custnum} } )
5434     or die "invalid customer number: " . $opt{custnum};
5435
5436   my $error = $self->print( { 'template' => $opt{template} } );
5437   die $error if $error;
5438 }
5439
5440 sub print {
5441   my ($self, $template) = (shift, shift);
5442   do_print(
5443     [ $self->print_ps($template) ],
5444     'agentnum' => $self->agentnum,
5445   );
5446 }
5447
5448 #these three subs should just go away once agent stuff is all config overrides
5449
5450 sub agent_template {
5451   my $self = shift;
5452   $self->_agent_plandata('agent_templatename');
5453 }
5454
5455 sub agent_invoice_from {
5456   my $self = shift;
5457   $self->_agent_plandata('agent_invoice_from');
5458 }
5459
5460 sub _agent_plandata {
5461   my( $self, $option ) = @_;
5462
5463   #yuck.  this whole thing needs to be reconciled better with 1.9's idea of
5464   #agent-specific Conf
5465
5466   use FS::part_event::Condition;
5467   
5468   my $agentnum = $self->agentnum;
5469
5470   my $regexp = regexp_sql();
5471
5472   my $part_event_option =
5473     qsearchs({
5474       'select'    => 'part_event_option.*',
5475       'table'     => 'part_event_option',
5476       'addl_from' => q{
5477         LEFT JOIN part_event USING ( eventpart )
5478         LEFT JOIN part_event_option AS peo_agentnum
5479           ON ( part_event.eventpart = peo_agentnum.eventpart
5480                AND peo_agentnum.optionname = 'agentnum'
5481                AND peo_agentnum.optionvalue }. $regexp. q{ '(^|,)}. $agentnum. q{(,|$)'
5482              )
5483         LEFT JOIN part_event_condition
5484           ON ( part_event.eventpart = part_event_condition.eventpart
5485                AND part_event_condition.conditionname = 'cust_bill_age'
5486              )
5487         LEFT JOIN part_event_condition_option
5488           ON ( part_event_condition.eventconditionnum = part_event_condition_option.eventconditionnum
5489                AND part_event_condition_option.optionname = 'age'
5490              )
5491       },
5492       #'hashref'   => { 'optionname' => $option },
5493       #'hashref'   => { 'part_event_option.optionname' => $option },
5494       'extra_sql' =>
5495         " WHERE part_event_option.optionname = ". dbh->quote($option).
5496         " AND action = 'cust_bill_send_agent' ".
5497         " AND ( disabled IS NULL OR disabled != 'Y' ) ".
5498         " AND peo_agentnum.optionname = 'agentnum' ".
5499         " AND ( agentnum IS NULL OR agentnum = $agentnum ) ".
5500         " ORDER BY
5501            CASE WHEN part_event_condition_option.optionname IS NULL
5502            THEN -1
5503            ELSE ". FS::part_event::Condition->age2seconds_sql('part_event_condition_option.optionvalue').
5504         " END
5505           , part_event.weight".
5506         " LIMIT 1"
5507     });
5508     
5509   unless ( $part_event_option ) {
5510     return $self->agent->invoice_template || ''
5511       if $option eq 'agent_templatename';
5512     return '';
5513   }
5514
5515   $part_event_option->optionvalue;
5516
5517 }
5518
5519 =item queued_bill 'custnum' => CUSTNUM [ , OPTION => VALUE ... ]
5520
5521 Subroutine (not a method), designed to be called from the queue.
5522
5523 Takes a list of options and values.
5524
5525 Pulls up the customer record via the custnum option and calls bill_and_collect.
5526
5527 =cut
5528
5529 sub queued_bill {
5530   my (%args) = @_; #, ($time, $invoice_time, $check_freq, $resetup) = @_;
5531
5532   my $cust_main = qsearchs( 'cust_main', { custnum => $args{'custnum'} } );
5533   warn 'bill_and_collect custnum#'. $cust_main->custnum. "\n";#log custnum w/pid
5534
5535   #without this errors don't get rolled back
5536   $args{'fatal'} = 1; # runs from job queue, will be caught
5537
5538   $cust_main->bill_and_collect( %args );
5539 }
5540
5541 sub process_bill_and_collect {
5542   my $job = shift;
5543   my $param = thaw(decode_base64(shift));
5544   my $cust_main = qsearchs( 'cust_main', { custnum => $param->{'custnum'} } )
5545       or die "custnum '$param->{custnum}' not found!\n";
5546   $param->{'job'}   = $job;
5547   $param->{'fatal'} = 1; # runs from job queue, will be caught
5548   $param->{'retry'} = 1;
5549
5550   $cust_main->bill_and_collect( %$param );
5551 }
5552
5553 #starting to take quite a while for big dbs
5554 #   (JRNL: journaled so it only happens once per database)
5555 # - seq scan of h_cust_main (yuck), but not going to index paycvv, so
5556 # JRNL seq scan of cust_main on signupdate... index signupdate?  will that help?
5557 # JRNL seq scan of cust_main on paydate... index on substrings?  maybe set an
5558 # JRNL seq scan of cust_main on payinfo.. certainly not going toi ndex that...
5559 # JRNL leading/trailing spaces in first, last, company
5560 # - otaker upgrade?  journal and call it good?  (double check to make sure
5561 #    we're not still setting otaker here)
5562 #
5563 #only going to get worse with new location stuff...
5564
5565 sub _upgrade_data { #class method
5566   my ($class, %opts) = @_;
5567
5568   my @statements = (
5569     'UPDATE h_cust_main SET paycvv = NULL WHERE paycvv IS NOT NULL',
5570   );
5571
5572   #this seems to be the only expensive one.. why does it take so long?
5573   unless ( FS::upgrade_journal->is_done('cust_main__signupdate') ) {
5574     push @statements,
5575       'UPDATE cust_main SET signupdate = (SELECT signupdate FROM h_cust_main WHERE signupdate IS NOT NULL AND h_cust_main.custnum = cust_main.custnum ORDER BY historynum DESC LIMIT 1) WHERE signupdate IS NULL';
5576     FS::upgrade_journal->set_done('cust_main__signupdate');
5577   }
5578
5579   unless ( FS::upgrade_journal->is_done('cust_main__paydate') ) {
5580
5581     # fix yyyy-m-dd formatted paydates
5582     if ( driver_name =~ /^mysql/i ) {
5583       push @statements,
5584       "UPDATE cust_main SET paydate = CONCAT( SUBSTRING(paydate FROM 1 FOR 5), '0', SUBSTRING(paydate FROM 6) ) WHERE SUBSTRING(paydate FROM 7 FOR 1) = '-'";
5585     } else { # the SQL standard
5586       push @statements, 
5587       "UPDATE cust_main SET paydate = SUBSTRING(paydate FROM 1 FOR 5) || '0' || SUBSTRING(paydate FROM 6) WHERE SUBSTRING(paydate FROM 7 FOR 1) = '-'";
5588     }
5589     FS::upgrade_journal->set_done('cust_main__paydate');
5590   }
5591
5592   unless ( FS::upgrade_journal->is_done('cust_main__payinfo') ) {
5593
5594     push @statements, #fix the weird BILL with a cc# in payinfo problem
5595       #DCRD to be safe
5596       "UPDATE cust_main SET payby = 'DCRD' WHERE payby = 'BILL' and length(payinfo) = 16 and payinfo ". regexp_sql. q( '^[0-9]*$' );
5597
5598     FS::upgrade_journal->set_done('cust_main__payinfo');
5599     
5600   }
5601
5602   my $t = time;
5603   foreach my $sql ( @statements ) {
5604     my $sth = dbh->prepare($sql) or die dbh->errstr;
5605     $sth->execute or die $sth->errstr;
5606     #warn ( (time - $t). " seconds\n" );
5607     #$t = time;
5608   }
5609
5610   local($ignore_expired_card) = 1;
5611   local($ignore_banned_card) = 1;
5612   local($skip_fuzzyfiles) = 1;
5613   local($import) = 1; #prevent automatic geocoding (need its own variable?)
5614
5615   FS::cust_main::Location->_upgrade_data(%opts);
5616
5617   unless ( FS::upgrade_journal->is_done('cust_main__trimspaces') ) {
5618
5619     foreach my $cust_main ( qsearch({
5620       'table'     => 'cust_main', 
5621       'hashref'   => {},
5622       'extra_sql' => 'WHERE '.
5623                        join(' OR ',
5624                          map "$_ LIKE ' %' OR $_ LIKE '% ' OR $_ LIKE '%  %'",
5625                            qw( first last company )
5626                        ),
5627     }) ) {
5628       my $error = $cust_main->replace;
5629       die $error if $error;
5630     }
5631
5632     FS::upgrade_journal->set_done('cust_main__trimspaces');
5633
5634   }
5635
5636   $class->_upgrade_otaker(%opts);
5637
5638   # turn on encryption as part of regular upgrade, so all new records are immediately encrypted
5639   # existing records will be encrypted in queueable_upgrade (below)
5640   unless ($conf->exists('encryptionpublickey') || $conf->exists('encryptionprivatekey')) {
5641     eval "use FS::Setup";
5642     die $@ if $@;
5643     FS::Setup::enable_encryption();
5644   }
5645
5646 }
5647
5648 sub queueable_upgrade {
5649   my $class = shift;
5650
5651   ### encryption gets turned on in _upgrade_data, above
5652
5653   eval "use FS::upgrade_journal";
5654   die $@ if $@;
5655
5656   # prior to 2013 (commit f16665c9) payinfo was stored in history if not encrypted,
5657   # clear that out before encrypting/tokenizing anything else
5658   if (!FS::upgrade_journal->is_done('clear_payinfo_history')) {
5659     foreach my $table ('cust_main','cust_pay_pending','cust_pay','cust_pay_void','cust_refund') {
5660       my $sql = 'UPDATE h_'.$table.' SET payinfo = NULL WHERE payinfo IS NOT NULL';
5661       my $sth = dbh->prepare($sql) or die dbh->errstr;
5662       $sth->execute or die $sth->errstr;
5663     }
5664     FS::upgrade_journal->set_done('clear_payinfo_history');
5665   }
5666
5667   # fix Tokenized paycardtype and encrypt old records
5668   if (    ! FS::upgrade_journal->is_done('paycardtype_Tokenized')
5669        || ! FS::upgrade_journal->is_done('encryption_check')
5670      )
5671   {
5672
5673     # allow replacement of closed cust_pay/cust_refund records
5674     local $FS::payinfo_Mixin::allow_closed_replace = 1;
5675
5676     # because it looks like nothing's changing
5677     local $FS::Record::no_update_diff = 1;
5678
5679     # commit everything immediately
5680     local $FS::UID::AutoCommit = 1;
5681
5682     # encrypt what's there
5683     foreach my $table ('cust_main','cust_pay_pending','cust_pay','cust_pay_void','cust_refund') {
5684       my $tclass = 'FS::'.$table;
5685       my $lastrecnum = 0;
5686       my @recnums = ();
5687       while (my $recnum = _upgrade_next_recnum(dbh,$table,\$lastrecnum,\@recnums)) {
5688         my $record = $tclass->by_key($recnum);
5689         next unless $record; # small chance it's been deleted, that's ok
5690         next unless grep { $record->payby eq $_ } @FS::Record::encrypt_payby;
5691         # window for possible conflict is practically nonexistant,
5692         #   but just in case...
5693         $record = $record->select_for_update;
5694         if (!$record->custnum && $table eq 'cust_pay_pending') {
5695           $record->set('custnum_pending',1);
5696         }
5697         $record->paycardtype('') if $record->paycardtype eq 'Tokenized';
5698
5699         local($ignore_expired_card) = 1;
5700         local($ignore_banned_card) = 1;
5701         local($skip_fuzzyfiles) = 1;
5702         local($import) = 1;#prevent automatic geocoding (need its own variable?)
5703
5704         my $error = $record->replace;
5705         die "Error replacing $table ".$record->get($record->primary_key).": $error" if $error;
5706       }
5707     }
5708
5709     FS::upgrade_journal->set_done('paycardtype_Tokenized');
5710     FS::upgrade_journal->set_done('encryption_check') if $conf->exists('encryption');
5711   }
5712
5713 }
5714
5715 # not entirely false laziness w/ Billing_Realtime::_token_check_next_recnum
5716 # cust_payby might get deleted while this runs
5717 # not a method!
5718 sub _upgrade_next_recnum {
5719   my ($dbh,$table,$lastrecnum,$recnums) = @_;
5720   my $recnum = shift @$recnums;
5721   return $recnum if $recnum;
5722   my $tclass = 'FS::'.$table;
5723   my $paycardtypecheck = ($table ne 'cust_pay_pending') ? q( OR paycardtype = 'Tokenized') : '';
5724   my $sql = 'SELECT '.$tclass->primary_key.
5725             ' FROM '.$table.
5726             ' WHERE '.$tclass->primary_key.' > '.$$lastrecnum.
5727             "   AND payby IN ( 'CARD', 'DCRD', 'CHEK', 'DCHK' ) ".
5728             "   AND ( length(payinfo) < 80$paycardtypecheck ) ".
5729             ' ORDER BY '.$tclass->primary_key.' LIMIT 500';
5730   my $sth = $dbh->prepare($sql) or die $dbh->errstr;
5731   $sth->execute() or die $sth->errstr;
5732   my @recnums;
5733   while (my $rec = $sth->fetchrow_hashref) {
5734     push @$recnums, $rec->{$tclass->primary_key};
5735   }
5736   $sth->finish();
5737   $$lastrecnum = $$recnums[-1];
5738   return shift @$recnums;
5739 }
5740
5741 =back
5742
5743 =head1 BUGS
5744
5745 The delete method.
5746
5747 The delete method should possibly take an FS::cust_main object reference
5748 instead of a scalar customer number.
5749
5750 Bill and collect options should probably be passed as references instead of a
5751 list.
5752
5753 There should probably be a configuration file with a list of allowed credit
5754 card types.
5755
5756 No multiple currency support (probably a larger project than just this module).
5757
5758 payinfo_masked false laziness with cust_pay.pm and cust_refund.pm
5759
5760 Birthdates rely on negative epoch values.
5761
5762 The payby for card/check batches is broken.  With mixed batching, bad
5763 things will happen.
5764
5765 B<collect> I<invoice_time> should be renamed I<time>, like B<bill>.
5766
5767 =head1 SEE ALSO
5768
5769 L<FS::Record>, L<FS::cust_pkg>, L<FS::cust_bill>, L<FS::cust_credit>
5770 L<FS::agent>, L<FS::part_referral>, L<FS::cust_main_county>,
5771 L<FS::cust_main_invoice>, L<FS::UID>, schema.html from the base documentation.
5772
5773 =cut
5774
5775 1;
5776