FS/FS/cust_main.pm

   1 package FS::cust_main;
   2
   3 require 5.006;
   4 use strict;
   5 use vars qw( @ISA @EXPORT_OK $DEBUG $me $conf
   6              @encrypted_fields
   7              $import $ignore_expired_card
   8              $skip_fuzzyfiles @fuzzyfields
   9              @paytypes
  10            );
  11 use vars qw( $realtime_bop_decline_quiet ); #ugh
  12 use Safe;
  13 use Carp;
  14 use Exporter;
  15 use Scalar::Util qw( blessed );
  16 use List::Util qw( min );
  17 use Time::Local qw(timelocal);
  18 use Data::Dumper;
  19 use Tie::IxHash;
  20 use Digest::MD5 qw(md5_base64);
  21 use Date::Format;
  22 #use Date::Manip;
  23 use File::Temp qw( tempfile );
  24 use String::Approx qw(amatch);
  25 use Business::CreditCard 0.28;
  26 use Locale::Country;
  27 use FS::UID qw( getotaker dbh driver_name );
  28 use FS::Record qw( qsearchs qsearch dbdef );
  29 use FS::Misc qw( generate_email send_email generate_ps do_print );
  30 use FS::Msgcat qw(gettext);
  31 use FS::payby;
  32 use FS::cust_pkg;
  33 use FS::cust_svc;
  34 use FS::cust_bill;
  35 use FS::cust_bill_pkg;
  36 use FS::cust_bill_pkg_display;
  37 use FS::cust_bill_pkg_tax_location;
  38 use FS::cust_bill_pkg_tax_rate_location;
  39 use FS::cust_pay;
  40 use FS::cust_pay_pending;
  41 use FS::cust_pay_void;
  42 use FS::cust_pay_batch;
  43 use FS::cust_credit;
  44 use FS::cust_refund;
  45 use FS::part_referral;
  46 use FS::cust_main_county;
  47 use FS::cust_location;
  48 use FS::cust_class;
  49 use FS::cust_main_exemption;
  50 use FS::cust_tax_adjustment;
  51 use FS::tax_rate;
  52 use FS::tax_rate_location;
  53 use FS::cust_tax_location;
  54 use FS::part_pkg_taxrate;
  55 use FS::agent;
  56 use FS::cust_main_invoice;
  57 use FS::cust_credit_bill;
  58 use FS::cust_bill_pay;
  59 use FS::prepay_credit;
  60 use FS::queue;
  61 use FS::part_pkg;
  62 use FS::part_event;
  63 use FS::part_event_condition;
  64 #use FS::cust_event;
  65 use FS::type_pkgs;
  66 use FS::payment_gateway;
  67 use FS::agent_payment_gateway;
  68 use FS::banned_pay;
  69 use FS::payinfo_Mixin;
  70 use FS::TicketSystem;
  71
  72 @ISA = qw( FS::payinfo_Mixin FS::Record );
  73
  74 @EXPORT_OK = qw( smart_search );
  75
  76 $realtime_bop_decline_quiet = 0;
  77
  78 # 1 is mostly method/subroutine entry and options
  79 # 2 traces progress of some operations
  80 # 3 is even more information including possibly sensitive data
  81 $DEBUG = 0;
  82 $me = '[FS::cust_main]';
  83
  84 $import = 0;
  85 $ignore_expired_card = 0;
  86
  87 $skip_fuzzyfiles = 0;
  88 @fuzzyfields = ( 'first', 'last', 'company', 'address1' );
  89
  90 @encrypted_fields = ('payinfo', 'paycvv');
  91 sub nohistory_fields { ('paycvv'); }
  92
  93 @paytypes = ('', 'Personal checking', 'Personal savings', 'Business checking', 'Business savings');
  94
  95 #ask FS::UID to run this stuff for us later
  96 #$FS::UID::callback{'FS::cust_main'} = sub {
  97 install_callback FS::UID sub {
  98   $conf = new FS::Conf;
  99   #yes, need it for stuff below (prolly should be cached)
 100 };
 101
 102 sub _cache {
 103   my $self = shift;
 104   my ( $hashref, $cache ) = @_;
 105   if ( exists $hashref->{'pkgnum'} ) {
 106     #@{ $self->{'_pkgnum'} } = ();
 107     my $subcache = $cache->subcache( 'pkgnum', 'cust_pkg', $hashref->{custnum});
 108     $self->{'_pkgnum'} = $subcache;
 109     #push @{ $self->{'_pkgnum'} },
 110     FS::cust_pkg->new_or_cached($hashref, $subcache) if $hashref->{pkgnum};
 111   }
 112 }
 113
 114 =head1 NAME
 115
 116 FS::cust_main - Object methods for cust_main records
 117
 118 =head1 SYNOPSIS
 119
 120   use FS::cust_main;
 121
 122   $record = new FS::cust_main \%hash;
 123   $record = new FS::cust_main { 'column' => 'value' };
 124
 125   $error = $record->insert;
 126
 127   $error = $new_record->replace($old_record);
 128
 129   $error = $record->delete;
 130
 131   $error = $record->check;
 132
 133   @cust_pkg = $record->all_pkgs;
 134
 135   @cust_pkg = $record->ncancelled_pkgs;
 136
 137   @cust_pkg = $record->suspended_pkgs;
 138
 139   $error = $record->bill;
 140   $error = $record->bill %options;
 141   $error = $record->bill 'time' => $time;
 142
 143   $error = $record->collect;
 144   $error = $record->collect %options;
 145   $error = $record->collect 'invoice_time'   => $time,
 146                           ;
 147
 148 =head1 DESCRIPTION
 149
 150 An FS::cust_main object represents a customer.  FS::cust_main inherits from
 151 FS::Record.  The following fields are currently supported:
 152
 153 =over 4
 154
 155 =item custnum
 156
 157 Primary key (assigned automatically for new customers)
 158
 159 =item agentnum
 160
 161 Agent (see L<FS::agent>)
 162
 163 =item refnum
 164
 165 Advertising source (see L<FS::part_referral>)
 166
 167 =item first
 168
 169 First name
 170
 171 =item last
 172
 173 Last name
 174
 175 =item ss
 176
 177 Cocial security number (optional)
 178
 179 =item company
 180
 181 (optional)
 182
 183 =item address1
 184
 185 =item address2
 186
 187 (optional)
 188
 189 =item city
 190
 191 =item county
 192
 193 (optional, see L<FS::cust_main_county>)
 194
 195 =item state
 196
 197 (see L<FS::cust_main_county>)
 198
 199 =item zip
 200
 201 =item country
 202
 203 (see L<FS::cust_main_county>)
 204
 205 =item daytime
 206
 207 phone (optional)
 208
 209 =item night
 210
 211 phone (optional)
 212
 213 =item fax
 214
 215 phone (optional)
 216
 217 =item ship_first
 218
 219 Shipping first name
 220
 221 =item ship_last
 222
 223 Shipping last name
 224
 225 =item ship_company
 226
 227 (optional)
 228
 229 =item ship_address1
 230
 231 =item ship_address2
 232
 233 (optional)
 234
 235 =item ship_city
 236
 237 =item ship_county
 238
 239 (optional, see L<FS::cust_main_county>)
 240
 241 =item ship_state
 242
 243 (see L<FS::cust_main_county>)
 244
 245 =item ship_zip
 246
 247 =item ship_country
 248
 249 (see L<FS::cust_main_county>)
 250
 251 =item ship_daytime
 252
 253 phone (optional)
 254
 255 =item ship_night
 256
 257 phone (optional)
 258
 259 =item ship_fax
 260
 261 phone (optional)
 262
 263 =item payby
 264
 265 Payment Type (See L<FS::payinfo_Mixin> for valid payby values)
 266
 267 =item payinfo
 268
 269 Payment Information (See L<FS::payinfo_Mixin> for data format)
 270
 271 =item paymask
 272
 273 Masked payinfo (See L<FS::payinfo_Mixin> for how this works)
 274
 275 =item paycvv
 276
 277 Card Verification Value, "CVV2" (also known as CVC2 or CID), the 3 or 4 digit number on the back (or front, for American Express) of the credit card
 278
 279 =item paydate
 280
 281 Expiration date, mm/yyyy, m/yyyy, mm/yy or m/yy
 282
 283 =item paystart_month
 284
 285 Start date month (maestro/solo cards only)
 286
 287 =item paystart_year
 288
 289 Start date year (maestro/solo cards only)
 290
 291 =item payissue
 292
 293 Issue number (maestro/solo cards only)
 294
 295 =item payname
 296
 297 Name on card or billing name
 298
 299 =item payip
 300
 301 IP address from which payment information was received
 302
 303 =item tax
 304
 305 Tax exempt, empty or `Y'
 306
 307 =item otaker
 308
 309 Order taker (assigned automatically, see L<FS::UID>)
 310
 311 =item comments
 312
 313 Comments (optional)
 314
 315 =item referral_custnum
 316
 317 Referring customer number
 318
 319 =item spool_cdr
 320
 321 Enable individual CDR spooling, empty or `Y'
 322
 323 =item dundate
 324
 325 A suggestion to events (see L<FS::part_bill_event">) to delay until this unix timestamp
 326
 327 =item squelch_cdr
 328
 329 Discourage individual CDR printing, empty or `Y'
 330
 331 =back
 332
 333 =head1 METHODS
 334
 335 =over 4
 336
 337 =item new HASHREF
 338
 339 Creates a new customer.  To add the customer to the database, see L<"insert">.
 340
 341 Note that this stores the hash reference, not a distinct copy of the hash it
 342 points to.  You can ask the object for a copy with the I<hash> method.
 343
 344 =cut
 345
 346 sub table { 'cust_main'; }
 347
 348 =item insert [ CUST_PKG_HASHREF [ , INVOICING_LIST_ARYREF ] [ , OPTION => VALUE ... ] ]
 349
 350 Adds this customer to the database.  If there is an error, returns the error,
 351 otherwise returns false.
 352
 353 CUST_PKG_HASHREF: If you pass a Tie::RefHash data structure to the insert
 354 method containing FS::cust_pkg and FS::svc_I<tablename> objects, all records
 355 are inserted atomicly, or the transaction is rolled back.  Passing an empty
 356 hash reference is equivalent to not supplying this parameter.  There should be
 357 a better explanation of this, but until then, here's an example:
 358
 359   use Tie::RefHash;
 360   tie %hash, 'Tie::RefHash'; #this part is important
 361   %hash = (
 362     $cust_pkg => [ $svc_acct ],
 363     ...
 364   );
 365   $cust_main->insert( \%hash );
 366
 367 INVOICING_LIST_ARYREF: If you pass an arrarref to the insert method, it will
 368 be set as the invoicing list (see L<"invoicing_list">).  Errors return as
 369 expected and rollback the entire transaction; it is not necessary to call
 370 check_invoicing_list first.  The invoicing_list is set after the records in the
 371 CUST_PKG_HASHREF above are inserted, so it is now possible to set an
 372 invoicing_list destination to the newly-created svc_acct.  Here's an example:
 373
 374   $cust_main->insert( {}, [ $email, 'POST' ] );
 375
 376 Currently available options are: I<depend_jobnum>, I<noexport> and I<tax_exemption>.
 377
 378 If I<depend_jobnum> is set, all provisioning jobs will have a dependancy
 379 on the supplied jobnum (they will not run until the specific job completes).
 380 This can be used to defer provisioning until some action completes (such
 381 as running the customer's credit card successfully).
 382
 383 The I<noexport> option is deprecated.  If I<noexport> is set true, no
 384 provisioning jobs (exports) are scheduled.  (You can schedule them later with
 385 the B<reexport> method.)
 386
 387 The I<tax_exemption> option can be set to an arrayref of tax names.
 388 FS::cust_main_exemption records will be created and inserted.
 389
 390 =cut
 391
 392 sub insert {
 393   my $self = shift;
 394   my $cust_pkgs = @_ ? shift : {};
 395   my $invoicing_list = @_ ? shift : '';
 396   my %options = @_;
 397   warn "$me insert called with options ".
 398        join(', ', map { "$_: $options{$_}" } keys %options ). "\n"
 399     if $DEBUG;
 400
 401   local $SIG{HUP} = 'IGNORE';
 402   local $SIG{INT} = 'IGNORE';
 403   local $SIG{QUIT} = 'IGNORE';
 404   local $SIG{TERM} = 'IGNORE';
 405   local $SIG{TSTP} = 'IGNORE';
 406   local $SIG{PIPE} = 'IGNORE';
 407
 408   my $oldAutoCommit = $FS::UID::AutoCommit;
 409   local $FS::UID::AutoCommit = 0;
 410   my $dbh = dbh;
 411
 412   my $prepay_identifier = '';
 413   my( $amount, $seconds, $upbytes, $downbytes, $totalbytes ) = (0, 0, 0, 0, 0);
 414   my $payby = '';
 415   if ( $self->payby eq 'PREPAY' ) {
 416
 417     $self->payby('BILL');
 418     $prepay_identifier = $self->payinfo;
 419     $self->payinfo('');
 420
 421     warn "  looking up prepaid card $prepay_identifier\n"
 422       if $DEBUG > 1;
 423
 424     my $error = $self->get_prepay( $prepay_identifier,
 425                                    'amount_ref'     => \$amount,
 426                                    'seconds_ref'    => \$seconds,
 427                                    'upbytes_ref'    => \$upbytes,
 428                                    'downbytes_ref'  => \$downbytes,
 429                                    'totalbytes_ref' => \$totalbytes,
 430                                  );
 431     if ( $error ) {
 432       $dbh->rollback if $oldAutoCommit;
 433       #return "error applying prepaid card (transaction rolled back): $error";
 434       return $error;
 435     }
 436
 437     $payby = 'PREP' if $amount;
 438
 439   } elsif ( $self->payby =~ /^(CASH|WEST|MCRD)$/ ) {
 440
 441     $payby = $1;
 442     $self->payby('BILL');
 443     $amount = $self->paid;
 444
 445   }
 446
 447   warn "  inserting $self\n"
 448     if $DEBUG > 1;
 449
 450   $self->signupdate(time) unless $self->signupdate;
 451
 452   $self->auto_agent_custid()
 453     if $conf->config('cust_main-auto_agent_custid') && ! $self->agent_custid;
 454
 455   my $error = $self->SUPER::insert;
 456   if ( $error ) {
 457     $dbh->rollback if $oldAutoCommit;
 458     #return "inserting cust_main record (transaction rolled back): $error";
 459     return $error;
 460   }
 461
 462   warn "  setting invoicing list\n"
 463     if $DEBUG > 1;
 464
 465   if ( $invoicing_list ) {
 466     $error = $self->check_invoicing_list( $invoicing_list );
 467     if ( $error ) {
 468       $dbh->rollback if $oldAutoCommit;
 469       #return "checking invoicing_list (transaction rolled back): $error";
 470       return $error;
 471     }
 472     $self->invoicing_list( $invoicing_list );
 473   }
 474
 475   warn "  setting cust_main_exemption\n"
 476     if $DEBUG > 1;
 477
 478   my $tax_exemption = delete $options{'tax_exemption'};
 479   if ( $tax_exemption ) {
 480     foreach my $taxname ( @$tax_exemption ) {
 481       my $cust_main_exemption = new FS::cust_main_exemption {
 482         'custnum' => $self->custnum,
 483         'taxname' => $taxname,
 484       };
 485       my $error = $cust_main_exemption->insert;
 486       if ( $error ) {
 487         $dbh->rollback if $oldAutoCommit;
 488         return "inserting cust_main_exemption (transaction rolled back): $error";
 489       }
 490     }
 491   }
 492
 493   if (    $conf->config('cust_main-skeleton_tables')
 494        && $conf->config('cust_main-skeleton_custnum') ) {
 495
 496     warn "  inserting skeleton records\n"
 497       if $DEBUG > 1;
 498
 499     my $error = $self->start_copy_skel;
 500     if ( $error ) {
 501       $dbh->rollback if $oldAutoCommit;
 502       return $error;
 503     }
 504
 505   }
 506
 507   warn "  ordering packages\n"
 508     if $DEBUG > 1;
 509
 510   $error = $self->order_pkgs( $cust_pkgs,
 511                               %options,
 512                               'seconds_ref'    => \$seconds,
 513                               'upbytes_ref'    => \$upbytes,
 514                               'downbytes_ref'  => \$downbytes,
 515                               'totalbytes_ref' => \$totalbytes,
 516                             );
 517   if ( $error ) {
 518     $dbh->rollback if $oldAutoCommit;
 519     return $error;
 520   }
 521
 522   if ( $seconds ) {
 523     $dbh->rollback if $oldAutoCommit;
 524     return "No svc_acct record to apply pre-paid time";
 525   }
 526   if ( $upbytes || $downbytes || $totalbytes ) {
 527     $dbh->rollback if $oldAutoCommit;
 528     return "No svc_acct record to apply pre-paid data";
 529   }
 530
 531   if ( $amount ) {
 532     warn "  inserting initial $payby payment of $amount\n"
 533       if $DEBUG > 1;
 534     $error = $self->insert_cust_pay($payby, $amount, $prepay_identifier);
 535     if ( $error ) {
 536       $dbh->rollback if $oldAutoCommit;
 537       return "inserting payment (transaction rolled back): $error";
 538     }
 539   }
 540
 541   unless ( $import || $skip_fuzzyfiles ) {
 542     warn "  queueing fuzzyfiles update\n"
 543       if $DEBUG > 1;
 544     $error = $self->queue_fuzzyfiles_update;
 545     if ( $error ) {
 546       $dbh->rollback if $oldAutoCommit;
 547       return "updating fuzzy search cache: $error";
 548     }
 549   }
 550
 551   warn "  insert complete; committing transaction\n"
 552     if $DEBUG > 1;
 553
 554   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
 555   '';
 556
 557 }
 558
 559 use File::CounterFile;
 560 sub auto_agent_custid {
 561   my $self = shift;
 562
 563   my $format = $conf->config('cust_main-auto_agent_custid');
 564   my $agent_custid;
 565   if ( $format eq '1YMMXXXXXXXX' ) {
 566
 567     my $counter = new File::CounterFile 'cust_main.agent_custid';
 568     $counter->lock;
 569
 570     my $ym = 100000000000 + time2str('%y%m00000000', time);
 571     if ( $ym > $counter->value ) {
 572       $counter->{'value'} = $agent_custid = $ym;
 573       $counter->{'updated'} = 1;
 574     } else {
 575       $agent_custid = $counter->inc;
 576     }
 577
 578     $counter->unlock;
 579
 580   } else {
 581     die "Unknown cust_main-auto_agent_custid format: $format";
 582   }
 583
 584   $self->agent_custid($agent_custid);
 585
 586 }
 587
 588 sub start_copy_skel {
 589   my $self = shift;
 590
 591   #'mg_user_preference' => {},
 592   #'mg_user_indicator_profile.user_indicator_profile_id' => { 'mg_profile_indicator.profile_indicator_id' => { 'mg_profile_details.profile_detail_id' }, },
 593   #'mg_watchlist_header.watchlist_header_id' => { 'mg_watchlist_details.watchlist_details_id' },
 594   #'mg_user_grid_header.grid_header_id' => { 'mg_user_grid_details.user_grid_details_id' },
 595   #'mg_portfolio_header.portfolio_header_id' => { 'mg_portfolio_trades.portfolio_trades_id' => { 'mg_portfolio_trades_positions.portfolio_trades_positions_id' } },
 596   my @tables = eval(join('\n',$conf->config('cust_main-skeleton_tables')));
 597   die $@ if $@;
 598
 599   _copy_skel( 'cust_main',                                 #tablename
 600               $conf->config('cust_main-skeleton_custnum'), #sourceid
 601               $self->custnum,                              #destid
 602               @tables,                                     #child tables
 603             );
 604 }
 605
 606 #recursive subroutine, not a method
 607 sub _copy_skel {
 608   my( $table, $sourceid, $destid, %child_tables ) = @_;
 609
 610   my $primary_key;
 611   if ( $table =~ /^(\w+)\.(\w+)$/ ) {
 612     ( $table, $primary_key ) = ( $1, $2 );
 613   } else {
 614     my $dbdef_table = dbdef->table($table);
 615     $primary_key = $dbdef_table->primary_key
 616       or return "$table has no primary key".
 617                 " (or do you need to run dbdef-create?)";
 618   }
 619
 620   warn "  _copy_skel: $table.$primary_key $sourceid to $destid for ".
 621        join (', ', keys %child_tables). "\n"
 622     if $DEBUG > 2;
 623
 624   foreach my $child_table_def ( keys %child_tables ) {
 625
 626     my $child_table;
 627     my $child_pkey = '';
 628     if ( $child_table_def =~ /^(\w+)\.(\w+)$/ ) {
 629       ( $child_table, $child_pkey ) = ( $1, $2 );
 630     } else {
 631       $child_table = $child_table_def;
 632
 633       $child_pkey = dbdef->table($child_table)->primary_key;
 634       #  or return "$table has no primary key".
 635       #            " (or do you need to run dbdef-create?)\n";
 636     }
 637
 638     my $sequence = '';
 639     if ( keys %{ $child_tables{$child_table_def} } ) {
 640
 641       return "$child_table has no primary key".
 642              " (run dbdef-create or try specifying it?)\n"
 643         unless $child_pkey;
 644
 645       #false laziness w/Record::insert and only works on Pg
 646       #refactor the proper last-inserted-id stuff out of Record::insert if this
 647       # ever gets use for anything besides a quick kludge for one customer
 648       my $default = dbdef->table($child_table)->column($child_pkey)->default;
 649       $default =~ /^nextval\(\(?'"?([\w\.]+)"?'/i
 650         or return "can't parse $child_table.$child_pkey default value ".
 651                   " for sequence name: $default";
 652       $sequence = $1;
 653
 654     }
 655
 656     my @sel_columns = grep { $_ ne $primary_key }
 657                            dbdef->table($child_table)->columns;
 658     my $sel_columns = join(', ', @sel_columns );
 659
 660     my @ins_columns = grep { $_ ne $child_pkey } @sel_columns;
 661     my $ins_columns = ' ( '. join(', ', $primary_key, @ins_columns ). ' ) ';
 662     my $placeholders = ' ( ?, '. join(', ', map '?', @ins_columns ). ' ) ';
 663
 664     my $sel_st = "SELECT $sel_columns FROM $child_table".
 665                  " WHERE $primary_key = $sourceid";
 666     warn "    $sel_st\n"
 667       if $DEBUG > 2;
 668     my $sel_sth = dbh->prepare( $sel_st )
 669       or return dbh->errstr;
 670
 671     $sel_sth->execute or return $sel_sth->errstr;
 672
 673     while ( my $row = $sel_sth->fetchrow_hashref ) {
 674
 675       warn "    selected row: ".
 676            join(', ', map { "$_=".$row->{$_} } keys %$row ). "\n"
 677         if $DEBUG > 2;
 678
 679       my $statement =
 680         "INSERT INTO $child_table $ins_columns VALUES $placeholders";
 681       my $ins_sth =dbh->prepare($statement)
 682           or return dbh->errstr;
 683       my @param = ( $destid, map $row->{$_}, @ins_columns );
 684       warn "    $statement: [ ". join(', ', @param). " ]\n"
 685         if $DEBUG > 2;
 686       $ins_sth->execute( @param )
 687         or return $ins_sth->errstr;
 688
 689       #next unless keys %{ $child_tables{$child_table} };
 690       next unless $sequence;
 691
 692       #another section of that laziness
 693       my $seq_sql = "SELECT currval('$sequence')";
 694       my $seq_sth = dbh->prepare($seq_sql) or return dbh->errstr;
 695       $seq_sth->execute or return $seq_sth->errstr;
 696       my $insertid = $seq_sth->fetchrow_arrayref->[0];
 697
 698       # don't drink soap!  recurse!  recurse!  okay!
 699       my $error =
 700         _copy_skel( $child_table_def,
 701                     $row->{$child_pkey}, #sourceid
 702                     $insertid, #destid
 703                     %{ $child_tables{$child_table_def} },
 704                   );
 705       return $error if $error;
 706
 707     }
 708
 709   }
 710
 711   return '';
 712
 713 }
 714
 715 =item order_pkg HASHREF | OPTION => VALUE ...
 716
 717 Orders a single package.
 718
 719 Options may be passed as a list of key/value pairs or as a hash reference.
 720 Options are:
 721
 722 =over 4
 723
 724 =item cust_pkg
 725
 726 FS::cust_pkg object
 727
 728 =item cust_location
 729
 730 Optional FS::cust_location object
 731
 732 =item svcs
 733
 734 Optional arryaref of FS::svc_* service objects.
 735
 736 =item depend_jobnum
 737
 738 If this option is set to a job queue jobnum (see L<FS::queue>), all provisioning
 739 jobs will have a dependancy on the supplied job (they will not run until the
 740 specific job completes).  This can be used to defer provisioning until some
 741 action completes (such as running the customer's credit card successfully).
 742
 743 =item ticket_subject
 744
 745 Optional subject for a ticket created and attached to this customer
 746
 747 =item ticket_subject
 748
 749 Optional queue name for ticket additions
 750
 751 =back
 752
 753 =cut
 754
 755 sub order_pkg {
 756   my $self = shift;
 757   my $opt = ref($_[0]) ? shift : { @_ };
 758
 759   warn "$me order_pkg called with options ".
 760        join(', ', map { "$_: $opt->{$_}" } keys %$opt ). "\n"
 761     if $DEBUG;
 762
 763   my $cust_pkg = $opt->{'cust_pkg'};
 764   my $svcs     = $opt->{'svcs'} || [];
 765
 766   my %svc_options = ();
 767   $svc_options{'depend_jobnum'} = $opt->{'depend_jobnum'}
 768     if exists($opt->{'depend_jobnum'}) && $opt->{'depend_jobnum'};
 769
 770   my %insert_params = map { $opt->{$_} ? ( $_ => $opt->{$_} ) : () }
 771                           qw( ticket_subject ticket_queue );
 772
 773   local $SIG{HUP} = 'IGNORE';
 774   local $SIG{INT} = 'IGNORE';
 775   local $SIG{QUIT} = 'IGNORE';
 776   local $SIG{TERM} = 'IGNORE';
 777   local $SIG{TSTP} = 'IGNORE';
 778   local $SIG{PIPE} = 'IGNORE';
 779
 780   my $oldAutoCommit = $FS::UID::AutoCommit;
 781   local $FS::UID::AutoCommit = 0;
 782   my $dbh = dbh;
 783
 784   if ( $opt->{'cust_location'} &&
 785        ( ! $cust_pkg->locationnum || $cust_pkg->locationnum == -1 ) ) {
 786     my $error = $opt->{'cust_location'}->insert;
 787     if ( $error ) {
 788       $dbh->rollback if $oldAutoCommit;
 789       return "inserting cust_location (transaction rolled back): $error";
 790     }
 791     $cust_pkg->locationnum($opt->{'cust_location'}->locationnum);
 792   }
 793
 794   $cust_pkg->custnum( $self->custnum );
 795
 796   my $error = $cust_pkg->insert( %insert_params );
 797   if ( $error ) {
 798     $dbh->rollback if $oldAutoCommit;
 799     return "inserting cust_pkg (transaction rolled back): $error";
 800   }
 801
 802   foreach my $svc_something ( @{ $opt->{'svcs'} } ) {
 803     if ( $svc_something->svcnum ) {
 804       my $old_cust_svc = $svc_something->cust_svc;
 805       my $new_cust_svc = new FS::cust_svc { $old_cust_svc->hash };
 806       $new_cust_svc->pkgnum( $cust_pkg->pkgnum);
 807       $error = $new_cust_svc->replace($old_cust_svc);
 808     } else {
 809       $svc_something->pkgnum( $cust_pkg->pkgnum );
 810       if ( $svc_something->isa('FS::svc_acct') ) {
 811         foreach ( grep { $opt->{$_.'_ref'} && ${ $opt->{$_.'_ref'} } }
 812                        qw( seconds upbytes downbytes totalbytes )      ) {
 813           $svc_something->$_( $svc_something->$_() + ${ $opt->{$_.'_ref'} } );
 814           ${ $opt->{$_.'_ref'} } = 0;
 815         }
 816       }
 817       $error = $svc_something->insert(%svc_options);
 818     }
 819     if ( $error ) {
 820       $dbh->rollback if $oldAutoCommit;
 821       return "inserting svc_ (transaction rolled back): $error";
 822     }
 823   }
 824
 825   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
 826   ''; #no error
 827
 828 }
 829
 830 #deprecated #=item order_pkgs HASHREF [ , SECONDSREF ] [ , OPTION => VALUE ... ]
 831 =item order_pkgs HASHREF [ , OPTION => VALUE ... ]
 832
 833 Like the insert method on an existing record, this method orders multiple
 834 packages and included services atomicaly.  Pass a Tie::RefHash data structure
 835 to this method containing FS::cust_pkg and FS::svc_I<tablename> objects.
 836 There should be a better explanation of this, but until then, here's an
 837 example:
 838
 839   use Tie::RefHash;
 840   tie %hash, 'Tie::RefHash'; #this part is important
 841   %hash = (
 842     $cust_pkg => [ $svc_acct ],
 843     ...
 844   );
 845   $cust_main->order_pkgs( \%hash, 'noexport'=>1 );
 846
 847 Services can be new, in which case they are inserted, or existing unaudited
 848 services, in which case they are linked to the newly-created package.
 849
 850 Currently available options are: I<depend_jobnum>, I<noexport>, I<seconds_ref>,
 851 I<upbytes_ref>, I<downbytes_ref>, and I<totalbytes_ref>.
 852
 853 If I<depend_jobnum> is set, all provisioning jobs will have a dependancy
 854 on the supplied jobnum (they will not run until the specific job completes).
 855 This can be used to defer provisioning until some action completes (such
 856 as running the customer's credit card successfully).
 857
 858 The I<noexport> option is deprecated.  If I<noexport> is set true, no
 859 provisioning jobs (exports) are scheduled.  (You can schedule them later with
 860 the B<reexport> method for each cust_pkg object.  Using the B<reexport> method
 861 on the cust_main object is not recommended, as existing services will also be
 862 reexported.)
 863
 864 If I<seconds_ref>, I<upbytes_ref>, I<downbytes_ref>, or I<totalbytes_ref> is
 865 provided, the scalars (provided by references) will be incremented by the
 866 values of the prepaid card.`
 867
 868 =cut
 869
 870 sub order_pkgs {
 871   my $self = shift;
 872   my $cust_pkgs = shift;
 873   my $seconds_ref = ref($_[0]) ? shift : ''; #deprecated
 874   my %options = @_;
 875   $seconds_ref ||= $options{'seconds_ref'};
 876
 877   warn "$me order_pkgs called with options ".
 878        join(', ', map { "$_: $options{$_}" } keys %options ). "\n"
 879     if $DEBUG;
 880
 881   local $SIG{HUP} = 'IGNORE';
 882   local $SIG{INT} = 'IGNORE';
 883   local $SIG{QUIT} = 'IGNORE';
 884   local $SIG{TERM} = 'IGNORE';
 885   local $SIG{TSTP} = 'IGNORE';
 886   local $SIG{PIPE} = 'IGNORE';
 887
 888   my $oldAutoCommit = $FS::UID::AutoCommit;
 889   local $FS::UID::AutoCommit = 0;
 890   my $dbh = dbh;
 891
 892   local $FS::svc_Common::noexport_hack = 1 if $options{'noexport'};
 893
 894   foreach my $cust_pkg ( keys %$cust_pkgs ) {
 895
 896     my $error = $self->order_pkg(
 897       'cust_pkg'     => $cust_pkg,
 898       'svcs'         => $cust_pkgs->{$cust_pkg},
 899       'seconds_ref'  => $seconds_ref,
 900       map { $_ => $options{$_} } qw( upbytes_ref downbytes_ref totalbytes_ref
 901                                      depend_jobnum
 902                                    )
 903     );
 904     if ( $error ) {
 905       $dbh->rollback if $oldAutoCommit;
 906       return $error;
 907     }
 908
 909   }
 910
 911   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
 912   ''; #no error
 913 }
 914
 915 =item recharge_prepay IDENTIFIER | PREPAY_CREDIT_OBJ [ , AMOUNTREF, SECONDSREF, UPBYTEREF, DOWNBYTEREF ]
 916
 917 Recharges this (existing) customer with the specified prepaid card (see
 918 L<FS::prepay_credit>), specified either by I<identifier> or as an
 919 FS::prepay_credit object.  If there is an error, returns the error, otherwise
 920 returns false.
 921
 922 Optionally, five scalar references can be passed as well.  They will have their
 923 values filled in with the amount, number of seconds, and number of upload,
 924 download, and total bytes applied by this prepaid card.
 925
 926 =cut
 927
 928 #the ref bullshit here should be refactored like get_prepay.  MyAccount.pm is
 929 #the only place that uses these args
 930 sub recharge_prepay {
 931   my( $self, $prepay_credit, $amountref, $secondsref,
 932       $upbytesref, $downbytesref, $totalbytesref ) = @_;
 933
 934   local $SIG{HUP} = 'IGNORE';
 935   local $SIG{INT} = 'IGNORE';
 936   local $SIG{QUIT} = 'IGNORE';
 937   local $SIG{TERM} = 'IGNORE';
 938   local $SIG{TSTP} = 'IGNORE';
 939   local $SIG{PIPE} = 'IGNORE';
 940
 941   my $oldAutoCommit = $FS::UID::AutoCommit;
 942   local $FS::UID::AutoCommit = 0;
 943   my $dbh = dbh;
 944
 945   my( $amount, $seconds, $upbytes, $downbytes, $totalbytes) = ( 0, 0, 0, 0, 0 );
 946
 947   my $error = $self->get_prepay( $prepay_credit,
 948                                  'amount_ref'     => \$amount,
 949                                  'seconds_ref'    => \$seconds,
 950                                  'upbytes_ref'    => \$upbytes,
 951                                  'downbytes_ref'  => \$downbytes,
 952                                  'totalbytes_ref' => \$totalbytes,
 953                                )
 954            || $self->increment_seconds($seconds)
 955            || $self->increment_upbytes($upbytes)
 956            || $self->increment_downbytes($downbytes)
 957            || $self->increment_totalbytes($totalbytes)
 958            || $self->insert_cust_pay_prepay( $amount,
 959                                              ref($prepay_credit)
 960                                                ? $prepay_credit->identifier
 961                                                : $prepay_credit
 962                                            );
 963
 964   if ( $error ) {
 965     $dbh->rollback if $oldAutoCommit;
 966     return $error;
 967   }
 968
 969   if ( defined($amountref)  ) { $$amountref  = $amount;  }
 970   if ( defined($secondsref) ) { $$secondsref = $seconds; }
 971   if ( defined($upbytesref) ) { $$upbytesref = $upbytes; }
 972   if ( defined($downbytesref) ) { $$downbytesref = $downbytes; }
 973   if ( defined($totalbytesref) ) { $$totalbytesref = $totalbytes; }
 974
 975   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
 976   '';
 977
 978 }
 979
 980 =item get_prepay IDENTIFIER | PREPAY_CREDIT_OBJ [ , OPTION => VALUE ... ]
 981
 982 Looks up and deletes a prepaid card (see L<FS::prepay_credit>),
 983 specified either by I<identifier> or as an FS::prepay_credit object.
 984
 985 Available options are: I<amount_ref>, I<seconds_ref>, I<upbytes_ref>, I<downbytes_ref>, and I<totalbytes_ref>.  The scalars (provided by references) will be
 986 incremented by the values of the prepaid card.
 987
 988 If the prepaid card specifies an I<agentnum> (see L<FS::agent>), it is used to
 989 check or set this customer's I<agentnum>.
 990
 991 If there is an error, returns the error, otherwise returns false.
 992
 993 =cut
 994
 995
 996 sub get_prepay {
 997   my( $self, $prepay_credit, %opt ) = @_;
 998
 999   local $SIG{HUP} = 'IGNORE';
1000   local $SIG{INT} = 'IGNORE';
1001   local $SIG{QUIT} = 'IGNORE';
1002   local $SIG{TERM} = 'IGNORE';
1003   local $SIG{TSTP} = 'IGNORE';
1004   local $SIG{PIPE} = 'IGNORE';
1005
1006   my $oldAutoCommit = $FS::UID::AutoCommit;
1007   local $FS::UID::AutoCommit = 0;
1008   my $dbh = dbh;
1009
1010   unless ( ref($prepay_credit) ) {
1011
1012     my $identifier = $prepay_credit;
1013
1014     $prepay_credit = qsearchs(
1015       'prepay_credit',
1016       { 'identifier' => $prepay_credit },
1017       '',
1018       'FOR UPDATE'
1019     );
1020
1021     unless ( $prepay_credit ) {
1022       $dbh->rollback if $oldAutoCommit;
1023       return "Invalid prepaid card: ". $identifier;
1024     }
1025
1026   }
1027
1028   if ( $prepay_credit->agentnum ) {
1029     if ( $self->agentnum && $self->agentnum != $prepay_credit->agentnum ) {
1030       $dbh->rollback if $oldAutoCommit;
1031       return "prepaid card not valid for agent ". $self->agentnum;
1032     }
1033     $self->agentnum($prepay_credit->agentnum);
1034   }
1035
1036   my $error = $prepay_credit->delete;
1037   if ( $error ) {
1038     $dbh->rollback if $oldAutoCommit;
1039     return "removing prepay_credit (transaction rolled back): $error";
1040   }
1041
1042   ${ $opt{$_.'_ref'} } += $prepay_credit->$_()
1043     for grep $opt{$_.'_ref'}, qw( amount seconds upbytes downbytes totalbytes );
1044
1045   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
1046   '';
1047
1048 }
1049
1050 =item increment_upbytes SECONDS
1051
1052 Updates this customer's single or primary account (see L<FS::svc_acct>) by
1053 the specified number of upbytes.  If there is an error, returns the error,
1054 otherwise returns false.
1055
1056 =cut
1057
1058 sub increment_upbytes {
1059   _increment_column( shift, 'upbytes', @_);
1060 }
1061
1062 =item increment_downbytes SECONDS
1063
1064 Updates this customer's single or primary account (see L<FS::svc_acct>) by
1065 the specified number of downbytes.  If there is an error, returns the error,
1066 otherwise returns false.
1067
1068 =cut
1069
1070 sub increment_downbytes {
1071   _increment_column( shift, 'downbytes', @_);
1072 }
1073
1074 =item increment_totalbytes SECONDS
1075
1076 Updates this customer's single or primary account (see L<FS::svc_acct>) by
1077 the specified number of totalbytes.  If there is an error, returns the error,
1078 otherwise returns false.
1079
1080 =cut
1081
1082 sub increment_totalbytes {
1083   _increment_column( shift, 'totalbytes', @_);
1084 }
1085
1086 =item increment_seconds SECONDS
1087
1088 Updates this customer's single or primary account (see L<FS::svc_acct>) by
1089 the specified number of seconds.  If there is an error, returns the error,
1090 otherwise returns false.
1091
1092 =cut
1093
1094 sub increment_seconds {
1095   _increment_column( shift, 'seconds', @_);
1096 }
1097
1098 =item _increment_column AMOUNT
1099
1100 Updates this customer's single or primary account (see L<FS::svc_acct>) by
1101 the specified number of seconds or bytes.  If there is an error, returns
1102 the error, otherwise returns false.
1103
1104 =cut
1105
1106 sub _increment_column {
1107   my( $self, $column, $amount ) = @_;
1108   warn "$me increment_column called: $column, $amount\n"
1109     if $DEBUG;
1110
1111   return '' unless $amount;
1112
1113   my @cust_pkg = grep { $_->part_pkg->svcpart('svc_acct') }
1114                       $self->ncancelled_pkgs;
1115
1116   if ( ! @cust_pkg ) {
1117     return 'No packages with primary or single services found'.
1118            ' to apply pre-paid time';
1119   } elsif ( scalar(@cust_pkg) > 1 ) {
1120     #maybe have a way to specify the package/account?
1121     return 'Multiple packages found to apply pre-paid time';
1122   }
1123
1124   my $cust_pkg = $cust_pkg[0];
1125   warn "  found package pkgnum ". $cust_pkg->pkgnum. "\n"
1126     if $DEBUG > 1;
1127
1128   my @cust_svc =
1129     $cust_pkg->cust_svc( $cust_pkg->part_pkg->svcpart('svc_acct') );
1130
1131   if ( ! @cust_svc ) {
1132     return 'No account found to apply pre-paid time';
1133   } elsif ( scalar(@cust_svc) > 1 ) {
1134     return 'Multiple accounts found to apply pre-paid time';
1135   }
1136
1137   my $svc_acct = $cust_svc[0]->svc_x;
1138   warn "  found service svcnum ". $svc_acct->pkgnum.
1139        ' ('. $svc_acct->email. ")\n"
1140     if $DEBUG > 1;
1141
1142   $column = "increment_$column";
1143   $svc_acct->$column($amount);
1144
1145 }
1146
1147 =item insert_cust_pay_prepay AMOUNT [ PAYINFO ]
1148
1149 Inserts a prepayment in the specified amount for this customer.  An optional
1150 second argument can specify the prepayment identifier for tracking purposes.
1151 If there is an error, returns the error, otherwise returns false.
1152
1153 =cut
1154
1155 sub insert_cust_pay_prepay {
1156   shift->insert_cust_pay('PREP', @_);
1157 }
1158
1159 =item insert_cust_pay_cash AMOUNT [ PAYINFO ]
1160
1161 Inserts a cash payment in the specified amount for this customer.  An optional
1162 second argument can specify the payment identifier for tracking purposes.
1163 If there is an error, returns the error, otherwise returns false.
1164
1165 =cut
1166
1167 sub insert_cust_pay_cash {
1168   shift->insert_cust_pay('CASH', @_);
1169 }
1170
1171 =item insert_cust_pay_west AMOUNT [ PAYINFO ]
1172
1173 Inserts a Western Union payment in the specified amount for this customer.  An
1174 optional second argument can specify the prepayment identifier for tracking
1175 purposes.  If there is an error, returns the error, otherwise returns false.
1176
1177 =cut
1178
1179 sub insert_cust_pay_west {
1180   shift->insert_cust_pay('WEST', @_);
1181 }
1182
1183 sub insert_cust_pay {
1184   my( $self, $payby, $amount ) = splice(@_, 0, 3);
1185   my $payinfo = scalar(@_) ? shift : '';
1186
1187   my $cust_pay = new FS::cust_pay {
1188     'custnum' => $self->custnum,
1189     'paid'    => sprintf('%.2f', $amount),
1190     #'_date'   => #date the prepaid card was purchased???
1191     'payby'   => $payby,
1192     'payinfo' => $payinfo,
1193   };
1194   $cust_pay->insert;
1195
1196 }
1197
1198 =item reexport
1199
1200 This method is deprecated.  See the I<depend_jobnum> option to the insert and
1201 order_pkgs methods for a better way to defer provisioning.
1202
1203 Re-schedules all exports by calling the B<reexport> method of all associated
1204 packages (see L<FS::cust_pkg>).  If there is an error, returns the error;
1205 otherwise returns false.
1206
1207 =cut
1208
1209 sub reexport {
1210   my $self = shift;
1211
1212   carp "WARNING: FS::cust_main::reexport is deprectated; ".
1213        "use the depend_jobnum option to insert or order_pkgs to delay export";
1214
1215   local $SIG{HUP} = 'IGNORE';
1216   local $SIG{INT} = 'IGNORE';
1217   local $SIG{QUIT} = 'IGNORE';
1218   local $SIG{TERM} = 'IGNORE';
1219   local $SIG{TSTP} = 'IGNORE';
1220   local $SIG{PIPE} = 'IGNORE';
1221
1222   my $oldAutoCommit = $FS::UID::AutoCommit;
1223   local $FS::UID::AutoCommit = 0;
1224   my $dbh = dbh;
1225
1226   foreach my $cust_pkg ( $self->ncancelled_pkgs ) {
1227     my $error = $cust_pkg->reexport;
1228     if ( $error ) {
1229       $dbh->rollback if $oldAutoCommit;
1230       return $error;
1231     }
1232   }
1233
1234   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
1235   '';
1236
1237 }
1238
1239 =item delete NEW_CUSTNUM
1240
1241 This deletes the customer.  If there is an error, returns the error, otherwise
1242 returns false.
1243
1244 This will completely remove all traces of the customer record.  This is not
1245 what you want when a customer cancels service; for that, cancel all of the
1246 customer's packages (see L</cancel>).
1247
1248 If the customer has any uncancelled packages, you need to pass a new (valid)
1249 customer number for those packages to be transferred to.  Cancelled packages
1250 will be deleted.  Did I mention that this is NOT what you want when a customer
1251 cancels service and that you really should be looking see L<FS::cust_pkg/cancel>?
1252
1253 You can't delete a customer with invoices (see L<FS::cust_bill>),
1254 or credits (see L<FS::cust_credit>), payments (see L<FS::cust_pay>) or
1255 refunds (see L<FS::cust_refund>).
1256
1257 =cut
1258
1259 sub delete {
1260   my $self = shift;
1261
1262   local $SIG{HUP} = 'IGNORE';
1263   local $SIG{INT} = 'IGNORE';
1264   local $SIG{QUIT} = 'IGNORE';
1265   local $SIG{TERM} = 'IGNORE';
1266   local $SIG{TSTP} = 'IGNORE';
1267   local $SIG{PIPE} = 'IGNORE';
1268
1269   my $oldAutoCommit = $FS::UID::AutoCommit;
1270   local $FS::UID::AutoCommit = 0;
1271   my $dbh = dbh;
1272
1273   if ( $self->cust_bill ) {
1274     $dbh->rollback if $oldAutoCommit;
1275     return "Can't delete a customer with invoices";
1276   }
1277   if ( $self->cust_credit ) {
1278     $dbh->rollback if $oldAutoCommit;
1279     return "Can't delete a customer with credits";
1280   }
1281   if ( $self->cust_pay ) {
1282     $dbh->rollback if $oldAutoCommit;
1283     return "Can't delete a customer with payments";
1284   }
1285   if ( $self->cust_refund ) {
1286     $dbh->rollback if $oldAutoCommit;
1287     return "Can't delete a customer with refunds";
1288   }
1289
1290   my @cust_pkg = $self->ncancelled_pkgs;
1291   if ( @cust_pkg ) {
1292     my $new_custnum = shift;
1293     unless ( qsearchs( 'cust_main', { 'custnum' => $new_custnum } ) ) {
1294       $dbh->rollback if $oldAutoCommit;
1295       return "Invalid new customer number: $new_custnum";
1296     }
1297     foreach my $cust_pkg ( @cust_pkg ) {
1298       my %hash = $cust_pkg->hash;
1299       $hash{'custnum'} = $new_custnum;
1300       my $new_cust_pkg = new FS::cust_pkg ( \%hash );
1301       my $error = $new_cust_pkg->replace($cust_pkg,
1302                                          options => { $cust_pkg->options },
1303                                         );
1304       if ( $error ) {
1305         $dbh->rollback if $oldAutoCommit;
1306         return $error;
1307       }
1308     }
1309   }
1310   my @cancelled_cust_pkg = $self->all_pkgs;
1311   foreach my $cust_pkg ( @cancelled_cust_pkg ) {
1312     my $error = $cust_pkg->delete;
1313     if ( $error ) {
1314       $dbh->rollback if $oldAutoCommit;
1315       return $error;
1316     }
1317   }
1318
1319   foreach my $cust_main_invoice ( #(email invoice destinations, not invoices)
1320     qsearch( 'cust_main_invoice', { 'custnum' => $self->custnum } )
1321   ) {
1322     my $error = $cust_main_invoice->delete;
1323     if ( $error ) {
1324       $dbh->rollback if $oldAutoCommit;
1325       return $error;
1326     }
1327   }
1328
1329   foreach my $cust_main_exemption (
1330     qsearch( 'cust_main_exemption', { 'custnum' => $self->custnum } )
1331   ) {
1332     my $error = $cust_main_exemption->delete;
1333     if ( $error ) {
1334       $dbh->rollback if $oldAutoCommit;
1335       return $error;
1336     }
1337   }
1338
1339   my $error = $self->SUPER::delete;
1340   if ( $error ) {
1341     $dbh->rollback if $oldAutoCommit;
1342     return $error;
1343   }
1344
1345   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
1346   '';
1347
1348 }
1349
1350 =item replace [ OLD_RECORD ] [ INVOICING_LIST_ARYREF ] [ , OPTION => VALUE ... ] ]
1351
1352
1353 Replaces the OLD_RECORD with this one in the database.  If there is an error,
1354 returns the error, otherwise returns false.
1355
1356 INVOICING_LIST_ARYREF: If you pass an arrarref to the insert method, it will
1357 be set as the invoicing list (see L<"invoicing_list">).  Errors return as
1358 expected and rollback the entire transaction; it is not necessary to call
1359 check_invoicing_list first.  Here's an example:
1360
1361   $new_cust_main->replace( $old_cust_main, [ $email, 'POST' ] );
1362
1363 Currently available options are: I<tax_exemption>.
1364
1365 The I<tax_exemption> option can be set to an arrayref of tax names.
1366 FS::cust_main_exemption records will be deleted and inserted as appropriate.
1367
1368 =cut
1369
1370 sub replace {
1371   my $self = shift;
1372
1373   my $old = ( blessed($_[0]) && $_[0]->isa('FS::Record') )
1374               ? shift
1375               : $self->replace_old;
1376
1377   my @param = @_;
1378
1379   warn "$me replace called\n"
1380     if $DEBUG;
1381
1382   my $curuser = $FS::CurrentUser::CurrentUser;
1383   if (    $self->payby eq 'COMP'
1384        && $self->payby ne $old->payby
1385        && ! $curuser->access_right('Complimentary customer')
1386      )
1387   {
1388     return "You are not permitted to create complimentary accounts.";
1389   }
1390
1391   local($ignore_expired_card) = 1
1392     if $old->payby  =~ /^(CARD|DCRD)$/
1393     && $self->payby =~ /^(CARD|DCRD)$/
1394     && ( $old->payinfo eq $self->payinfo || $old->paymask eq $self->paymask );
1395
1396   local $SIG{HUP} = 'IGNORE';
1397   local $SIG{INT} = 'IGNORE';
1398   local $SIG{QUIT} = 'IGNORE';
1399   local $SIG{TERM} = 'IGNORE';
1400   local $SIG{TSTP} = 'IGNORE';
1401   local $SIG{PIPE} = 'IGNORE';
1402
1403   my $oldAutoCommit = $FS::UID::AutoCommit;
1404   local $FS::UID::AutoCommit = 0;
1405   my $dbh = dbh;
1406
1407   my $error = $self->SUPER::replace($old);
1408
1409   if ( $error ) {
1410     $dbh->rollback if $oldAutoCommit;
1411     return $error;
1412   }
1413
1414   if ( @param && ref($param[0]) eq 'ARRAY' ) { # INVOICING_LIST_ARYREF
1415     my $invoicing_list = shift @param;
1416     $error = $self->check_invoicing_list( $invoicing_list );
1417     if ( $error ) {
1418       $dbh->rollback if $oldAutoCommit;
1419       return $error;
1420     }
1421     $self->invoicing_list( $invoicing_list );
1422   }
1423
1424   my %options = @param;
1425
1426   my $tax_exemption = delete $options{'tax_exemption'};
1427   if ( $tax_exemption ) {
1428
1429     my %cust_main_exemption =
1430       map { $_->taxname => $_ }
1431           qsearch('cust_main_exemption', { 'custnum' => $old->custnum } );
1432
1433     foreach my $taxname ( @$tax_exemption ) {
1434
1435       next if delete $cust_main_exemption{$taxname};
1436
1437       my $cust_main_exemption = new FS::cust_main_exemption {
1438         'custnum' => $self->custnum,
1439         'taxname' => $taxname,
1440       };
1441       my $error = $cust_main_exemption->insert;
1442       if ( $error ) {
1443         $dbh->rollback if $oldAutoCommit;
1444         return "inserting cust_main_exemption (transaction rolled back): $error";
1445       }
1446     }
1447
1448     foreach my $cust_main_exemption ( values %cust_main_exemption ) {
1449       my $error = $cust_main_exemption->delete;
1450       if ( $error ) {
1451         $dbh->rollback if $oldAutoCommit;
1452         return "deleting cust_main_exemption (transaction rolled back): $error";
1453       }
1454     }
1455
1456   }
1457
1458   if ( $self->payby =~ /^(CARD|CHEK|LECB)$/ &&
1459        grep { $self->get($_) ne $old->get($_) } qw(payinfo paydate payname) ) {
1460     # card/check/lec info has changed, want to retry realtime_ invoice events
1461     my $error = $self->retry_realtime;
1462     if ( $error ) {
1463       $dbh->rollback if $oldAutoCommit;
1464       return $error;
1465     }
1466   }
1467
1468   unless ( $import || $skip_fuzzyfiles ) {
1469     $error = $self->queue_fuzzyfiles_update;
1470     if ( $error ) {
1471       $dbh->rollback if $oldAutoCommit;
1472       return "updating fuzzy search cache: $error";
1473     }
1474   }
1475
1476   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
1477   '';
1478
1479 }
1480
1481 =item queue_fuzzyfiles_update
1482
1483 Used by insert & replace to update the fuzzy search cache
1484
1485 =cut
1486
1487 sub queue_fuzzyfiles_update {
1488   my $self = shift;
1489
1490   local $SIG{HUP} = 'IGNORE';
1491   local $SIG{INT} = 'IGNORE';
1492   local $SIG{QUIT} = 'IGNORE';
1493   local $SIG{TERM} = 'IGNORE';
1494   local $SIG{TSTP} = 'IGNORE';
1495   local $SIG{PIPE} = 'IGNORE';
1496
1497   my $oldAutoCommit = $FS::UID::AutoCommit;
1498   local $FS::UID::AutoCommit = 0;
1499   my $dbh = dbh;
1500
1501   my $queue = new FS::queue { 'job' => 'FS::cust_main::append_fuzzyfiles' };
1502   my $error = $queue->insert( map $self->getfield($_), @fuzzyfields );
1503   if ( $error ) {
1504     $dbh->rollback if $oldAutoCommit;
1505     return "queueing job (transaction rolled back): $error";
1506   }
1507
1508   if ( $self->ship_last ) {
1509     $queue = new FS::queue { 'job' => 'FS::cust_main::append_fuzzyfiles' };
1510     $error = $queue->insert( map $self->getfield("ship_$_"), @fuzzyfields );
1511     if ( $error ) {
1512       $dbh->rollback if $oldAutoCommit;
1513       return "queueing job (transaction rolled back): $error";
1514     }
1515   }
1516
1517   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
1518   '';
1519
1520 }
1521
1522 =item check
1523
1524 Checks all fields to make sure this is a valid customer record.  If there is
1525 an error, returns the error, otherwise returns false.  Called by the insert
1526 and replace methods.
1527
1528 =cut
1529
1530 sub check {
1531   my $self = shift;
1532
1533   warn "$me check BEFORE: \n". $self->_dump
1534     if $DEBUG > 2;
1535
1536   my $error =
1537     $self->ut_numbern('custnum')
1538     || $self->ut_number('agentnum')
1539     || $self->ut_textn('agent_custid')
1540     || $self->ut_number('refnum')
1541     || $self->ut_foreign_keyn('classnum', 'cust_class', 'classnum')
1542     || $self->ut_textn('custbatch')
1543     || $self->ut_name('last')
1544     || $self->ut_name('first')
1545     || $self->ut_snumbern('birthdate')
1546     || $self->ut_snumbern('signupdate')
1547     || $self->ut_textn('company')
1548     || $self->ut_text('address1')
1549     || $self->ut_textn('address2')
1550     || $self->ut_text('city')
1551     || $self->ut_textn('county')
1552     || $self->ut_textn('state')
1553     || $self->ut_country('country')
1554     || $self->ut_anything('comments')
1555     || $self->ut_numbern('referral_custnum')
1556     || $self->ut_textn('stateid')
1557     || $self->ut_textn('stateid_state')
1558     || $self->ut_textn('invoice_terms')
1559     || $self->ut_alphan('geocode')
1560     || $self->ut_floatn('cdr_termination_percentage')
1561   ;
1562
1563   #barf.  need message catalogs.  i18n.  etc.
1564   $error .= "Please select an advertising source."
1565     if $error =~ /^Illegal or empty \(numeric\) refnum: /;
1566   return $error if $error;
1567
1568   return "Unknown agent"
1569     unless qsearchs( 'agent', { 'agentnum' => $self->agentnum } );
1570
1571   return "Unknown refnum"
1572     unless qsearchs( 'part_referral', { 'refnum' => $self->refnum } );
1573
1574   return "Unknown referring custnum: ". $self->referral_custnum
1575     unless ! $self->referral_custnum
1576            || qsearchs( 'cust_main', { 'custnum' => $self->referral_custnum } );
1577
1578   if ( $self->censustract ne '' ) {
1579     $self->censustract =~ /^\s*(\d{9})\.?(\d{2})\s*$/
1580       or return "Illegal census tract: ". $self->censustract;
1581
1582     $self->censustract("$1.$2");
1583   }
1584
1585   if ( $self->ss eq '' ) {
1586     $self->ss('');
1587   } else {
1588     my $ss = $self->ss;
1589     $ss =~ s/\D//g;
1590     $ss =~ /^(\d{3})(\d{2})(\d{4})$/
1591       or return "Illegal social security number: ". $self->ss;
1592     $self->ss("$1-$2-$3");
1593   }
1594
1595
1596 # bad idea to disable, causes billing to fail because of no tax rates later
1597 #  unless ( $import ) {
1598     unless ( qsearch('cust_main_county', {
1599       'country' => $self->country,
1600       'state'   => '',
1601      } ) ) {
1602       return "Unknown state/county/country: ".
1603         $self->state. "/". $self->county. "/". $self->country
1604         unless qsearch('cust_main_county',{
1605           'state'   => $self->state,
1606           'county'  => $self->county,
1607           'country' => $self->country,
1608         } );
1609     }
1610 #  }
1611
1612   $error =
1613     $self->ut_phonen('daytime', $self->country)
1614     || $self->ut_phonen('night', $self->country)
1615     || $self->ut_phonen('fax', $self->country)
1616     || $self->ut_zip('zip', $self->country)
1617   ;
1618   return $error if $error;
1619
1620   if ( $conf->exists('cust_main-require_phone')
1621        && ! length($self->daytime) && ! length($self->night)
1622      ) {
1623
1624     my $daytime_label = FS::Msgcat::_gettext('daytime') =~ /^(daytime)?$/
1625                           ? 'Day Phone'
1626                           : FS::Msgcat::_gettext('daytime');
1627     my $night_label = FS::Msgcat::_gettext('night') =~ /^(night)?$/
1628                         ? 'Night Phone'
1629                         : FS::Msgcat::_gettext('night');
1630
1631     return "$daytime_label or $night_label is required"
1632
1633   }
1634
1635   if ( $self->has_ship_address
1636        && scalar ( grep { $self->getfield($_) ne $self->getfield("ship_$_") }
1637                         $self->addr_fields )
1638      )
1639   {
1640     my $error =
1641       $self->ut_name('ship_last')
1642       || $self->ut_name('ship_first')
1643       || $self->ut_textn('ship_company')
1644       || $self->ut_text('ship_address1')
1645       || $self->ut_textn('ship_address2')
1646       || $self->ut_text('ship_city')
1647       || $self->ut_textn('ship_county')
1648       || $self->ut_textn('ship_state')
1649       || $self->ut_country('ship_country')
1650     ;
1651     return $error if $error;
1652
1653     #false laziness with above
1654     unless ( qsearchs('cust_main_county', {
1655       'country' => $self->ship_country,
1656       'state'   => '',
1657      } ) ) {
1658       return "Unknown ship_state/ship_county/ship_country: ".
1659         $self->ship_state. "/". $self->ship_county. "/". $self->ship_country
1660         unless qsearch('cust_main_county',{
1661           'state'   => $self->ship_state,
1662           'county'  => $self->ship_county,
1663           'country' => $self->ship_country,
1664         } );
1665     }
1666     #eofalse
1667
1668     $error =
1669       $self->ut_phonen('ship_daytime', $self->ship_country)
1670       || $self->ut_phonen('ship_night', $self->ship_country)
1671       || $self->ut_phonen('ship_fax', $self->ship_country)
1672       || $self->ut_zip('ship_zip', $self->ship_country)
1673     ;
1674     return $error if $error;
1675
1676     return "Unit # is required."
1677       if $self->ship_address2 =~ /^\s*$/
1678       && $conf->exists('cust_main-require_address2');
1679
1680   } else { # ship_ info eq billing info, so don't store dup info in database
1681
1682     $self->setfield("ship_$_", '')
1683       foreach $self->addr_fields;
1684
1685     return "Unit # is required."
1686       if $self->address2 =~ /^\s*$/
1687       && $conf->exists('cust_main-require_address2');
1688
1689   }
1690
1691   #$self->payby =~ /^(CARD|DCRD|CHEK|DCHK|LECB|BILL|COMP|PREPAY|CASH|WEST|MCRD)$/
1692   #  or return "Illegal payby: ". $self->payby;
1693   #$self->payby($1);
1694   FS::payby->can_payby($self->table, $self->payby)
1695     or return "Illegal payby: ". $self->payby;
1696
1697   $error =    $self->ut_numbern('paystart_month')
1698            || $self->ut_numbern('paystart_year')
1699            || $self->ut_numbern('payissue')
1700            || $self->ut_textn('paytype')
1701   ;
1702   return $error if $error;
1703
1704   if ( $self->payip eq '' ) {
1705     $self->payip('');
1706   } else {
1707     $error = $self->ut_ip('payip');
1708     return $error if $error;
1709   }
1710
1711   # If it is encrypted and the private key is not availaible then we can't
1712   # check the credit card.
1713
1714   my $check_payinfo = 1;
1715
1716   if ($self->is_encrypted($self->payinfo)) {
1717     $check_payinfo = 0;
1718   }
1719
1720   if ( $check_payinfo && $self->payby =~ /^(CARD|DCRD)$/ ) {
1721
1722     my $payinfo = $self->payinfo;
1723     $payinfo =~ s/\D//g;
1724     $payinfo =~ /^(\d{13,16})$/
1725       or return gettext('invalid_card'); # . ": ". $self->payinfo;
1726     $payinfo = $1;
1727     $self->payinfo($payinfo);
1728     validate($payinfo)
1729       or return gettext('invalid_card'); # . ": ". $self->payinfo;
1730
1731     return gettext('unknown_card_type')
1732       if cardtype($self->payinfo) eq "Unknown";
1733
1734     my $ban = qsearchs('banned_pay', $self->_banned_pay_hashref);
1735     if ( $ban ) {
1736       return 'Banned credit card: banned on '.
1737              time2str('%a %h %o at %r', $ban->_date).
1738              ' by '. $ban->otaker.
1739              ' (ban# '. $ban->bannum. ')';
1740     }
1741
1742     if (length($self->paycvv) && !$self->is_encrypted($self->paycvv)) {
1743       if ( cardtype($self->payinfo) eq 'American Express card' ) {
1744         $self->paycvv =~ /^(\d{4})$/
1745           or return "CVV2 (CID) for American Express cards is four digits.";
1746         $self->paycvv($1);
1747       } else {
1748         $self->paycvv =~ /^(\d{3})$/
1749           or return "CVV2 (CVC2/CID) is three digits.";
1750         $self->paycvv($1);
1751       }
1752     } else {
1753       $self->paycvv('');
1754     }
1755
1756     my $cardtype = cardtype($payinfo);
1757     if ( $cardtype =~ /^(Switch|Solo)$/i ) {
1758
1759       return "Start date or issue number is required for $cardtype cards"
1760         unless $self->paystart_month && $self->paystart_year or $self->payissue;
1761
1762       return "Start month must be between 1 and 12"
1763         if $self->paystart_month
1764            and $self->paystart_month < 1 || $self->paystart_month > 12;
1765
1766       return "Start year must be 1990 or later"
1767         if $self->paystart_year
1768            and $self->paystart_year < 1990;
1769
1770       return "Issue number must be beween 1 and 99"
1771         if $self->payissue
1772           and $self->payissue < 1 || $self->payissue > 99;
1773
1774     } else {
1775       $self->paystart_month('');
1776       $self->paystart_year('');
1777       $self->payissue('');
1778     }
1779
1780   } elsif ( $check_payinfo && $self->payby =~ /^(CHEK|DCHK)$/ ) {
1781
1782     my $payinfo = $self->payinfo;
1783     $payinfo =~ s/[^\d\@]//g;
1784     if ( $conf->exists('echeck-nonus') ) {
1785       $payinfo =~ /^(\d+)\@(\d+)$/ or return 'invalid echeck account@aba';
1786       $payinfo = "$1\@$2";
1787     } else {
1788       $payinfo =~ /^(\d+)\@(\d{9})$/ or return 'invalid echeck account@aba';
1789       $payinfo = "$1\@$2";
1790     }
1791     $self->payinfo($payinfo);
1792     $self->paycvv('');
1793
1794     my $ban = qsearchs('banned_pay', $self->_banned_pay_hashref);
1795     if ( $ban ) {
1796       return 'Banned ACH account: banned on '.
1797              time2str('%a %h %o at %r', $ban->_date).
1798              ' by '. $ban->otaker.
1799              ' (ban# '. $ban->bannum. ')';
1800     }
1801
1802   } elsif ( $self->payby eq 'LECB' ) {
1803
1804     my $payinfo = $self->payinfo;
1805     $payinfo =~ s/\D//g;
1806     $payinfo =~ /^1?(\d{10})$/ or return 'invalid btn billing telephone number';
1807     $payinfo = $1;
1808     $self->payinfo($payinfo);
1809     $self->paycvv('');
1810
1811   } elsif ( $self->payby eq 'BILL' ) {
1812
1813     $error = $self->ut_textn('payinfo');
1814     return "Illegal P.O. number: ". $self->payinfo if $error;
1815     $self->paycvv('');
1816
1817   } elsif ( $self->payby eq 'COMP' ) {
1818
1819     my $curuser = $FS::CurrentUser::CurrentUser;
1820     if (    ! $self->custnum
1821          && ! $curuser->access_right('Complimentary customer')
1822        )
1823     {
1824       return "You are not permitted to create complimentary accounts."
1825     }
1826
1827     $error = $self->ut_textn('payinfo');
1828     return "Illegal comp account issuer: ". $self->payinfo if $error;
1829     $self->paycvv('');
1830
1831   } elsif ( $self->payby eq 'PREPAY' ) {
1832
1833     my $payinfo = $self->payinfo;
1834     $payinfo =~ s/\W//g; #anything else would just confuse things
1835     $self->payinfo($payinfo);
1836     $error = $self->ut_alpha('payinfo');
1837     return "Illegal prepayment identifier: ". $self->payinfo if $error;
1838     return "Unknown prepayment identifier"
1839       unless qsearchs('prepay_credit', { 'identifier' => $self->payinfo } );
1840     $self->paycvv('');
1841
1842   }
1843
1844   if ( $self->paydate eq '' || $self->paydate eq '-' ) {
1845     return "Expiration date required"
1846       unless $self->payby =~ /^(BILL|PREPAY|CHEK|DCHK|LECB|CASH|WEST|MCRD)$/;
1847     $self->paydate('');
1848   } else {
1849     my( $m, $y );
1850     if ( $self->paydate =~ /^(\d{1,2})[\/\-](\d{2}(\d{2})?)$/ ) {
1851       ( $m, $y ) = ( $1, length($2) == 4 ? $2 : "20$2" );
1852     } elsif ( $self->paydate =~ /^19(\d{2})[\/\-](\d{1,2})[\/\-]\d+$/ ) {
1853       ( $m, $y ) = ( $2, "19$1" );
1854     } elsif ( $self->paydate =~ /^(20)?(\d{2})[\/\-](\d{1,2})[\/\-]\d+$/ ) {
1855       ( $m, $y ) = ( $3, "20$2" );
1856     } else {
1857       return "Illegal expiration date: ". $self->paydate;
1858     }
1859     $self->paydate("$y-$m-01");
1860     my($nowm,$nowy)=(localtime(time))[4,5]; $nowm++; $nowy+=1900;
1861     return gettext('expired_card')
1862       if !$import
1863       && !$ignore_expired_card
1864       && ( $y<$nowy || ( $y==$nowy && $1<$nowm ) );
1865   }
1866
1867   if ( $self->payname eq '' && $self->payby !~ /^(CHEK|DCHK)$/ &&
1868        ( ! $conf->exists('require_cardname')
1869          || $self->payby !~ /^(CARD|DCRD)$/  )
1870   ) {
1871     $self->payname( $self->first. " ". $self->getfield('last') );
1872   } else {
1873     $self->payname =~ /^([\w \,\.\-\'\&]+)$/
1874       or return gettext('illegal_name'). " payname: ". $self->payname;
1875     $self->payname($1);
1876   }
1877
1878   foreach my $flag (qw( tax spool_cdr squelch_cdr archived email_csv_cdr )) {
1879     $self->$flag() =~ /^(Y?)$/ or return "Illegal $flag: ". $self->$flag();
1880     $self->$flag($1);
1881   }
1882
1883   $self->otaker(getotaker) unless $self->otaker;
1884
1885   warn "$me check AFTER: \n". $self->_dump
1886     if $DEBUG > 2;
1887
1888   $self->SUPER::check;
1889 }
1890
1891 =item addr_fields
1892
1893 Returns a list of fields which have ship_ duplicates.
1894
1895 =cut
1896
1897 sub addr_fields {
1898   qw( last first company
1899       address1 address2 city county state zip country
1900       daytime night fax
1901     );
1902 }
1903
1904 =item has_ship_address
1905
1906 Returns true if this customer record has a separate shipping address.
1907
1908 =cut
1909
1910 sub has_ship_address {
1911   my $self = shift;
1912   scalar( grep { $self->getfield("ship_$_") ne '' } $self->addr_fields );
1913 }
1914
1915 =item all_pkgs [ EXTRA_QSEARCH_PARAMS_HASHREF ]
1916
1917 Returns all packages (see L<FS::cust_pkg>) for this customer.
1918
1919 =cut
1920
1921 sub all_pkgs {
1922   my $self = shift;
1923   my $extra_qsearch = ref($_[0]) ? shift : {};
1924
1925   return $self->num_pkgs unless wantarray || keys(%$extra_qsearch);
1926
1927   my @cust_pkg = ();
1928   if ( $self->{'_pkgnum'} ) {
1929     @cust_pkg = values %{ $self->{'_pkgnum'}->cache };
1930   } else {
1931     @cust_pkg = $self->_cust_pkg($extra_qsearch);
1932   }
1933
1934   sort sort_packages @cust_pkg;
1935 }
1936
1937 =item cust_pkg
1938
1939 Synonym for B<all_pkgs>.
1940
1941 =cut
1942
1943 sub cust_pkg {
1944   shift->all_pkgs(@_);
1945 }
1946
1947 =item cust_location
1948
1949 Returns all locations (see L<FS::cust_location>) for this customer.
1950
1951 =cut
1952
1953 sub cust_location {
1954   my $self = shift;
1955   qsearch('cust_location', { 'custnum' => $self->custnum } );
1956 }
1957
1958 =item location_label [ OPTION => VALUE ... ]
1959
1960 Returns the label of the service location (see analog in L<FS::cust_location>) for this customer.
1961
1962 Options are
1963
1964 =over 4
1965
1966 =item join_string
1967
1968 used to separate the address elements (defaults to ', ')
1969
1970 =item escape_function
1971
1972 a callback used for escaping the text of the address elements
1973
1974 =back
1975
1976 =cut
1977
1978 # false laziness with FS::cust_location::line
1979
1980 sub location_label {
1981   my $self = shift;
1982   my %opt = @_;
1983
1984   my $separator = $opt{join_string} || ', ';
1985   my $escape = $opt{escape_function} || sub{ shift };
1986   my $line = '';
1987   my $cydefault = FS::conf->new->config('countrydefault') || 'US';
1988   my $prefix = length($self->ship_last) ? 'ship_' : '';
1989
1990   my $notfirst = 0;
1991   foreach (qw ( address1 address2 ) ) {
1992     my $method = "$prefix$_";
1993     $line .= ($notfirst ? $separator : ''). &$escape($self->$method)
1994       if $self->$method;
1995     $notfirst++;
1996   }
1997   $notfirst = 0;
1998   foreach (qw ( city county state zip ) ) {
1999     my $method = "$prefix$_";
2000     if ( $self->$method ) {
2001       $line .= ' (' if $method eq 'county';
2002       $line .= ($notfirst ? ' ' : $separator). &$escape($self->$method);
2003       $line .= ' )' if $method eq 'county';
2004       $notfirst++;
2005     }
2006   }
2007   $line .= $separator. &$escape(code2country($self->country))
2008     if $self->country ne $cydefault;
2009
2010   $line;
2011 }
2012
2013 =item ncancelled_pkgs [ EXTRA_QSEARCH_PARAMS_HASHREF ]
2014
2015 Returns all non-cancelled packages (see L<FS::cust_pkg>) for this customer.
2016
2017 =cut
2018
2019 sub ncancelled_pkgs {
2020   my $self = shift;
2021   my $extra_qsearch = ref($_[0]) ? shift : {};
2022
2023   return $self->num_ncancelled_pkgs unless wantarray;
2024
2025   my @cust_pkg = ();
2026   if ( $self->{'_pkgnum'} ) {
2027
2028     warn "$me ncancelled_pkgs: returning cached objects"
2029       if $DEBUG > 1;
2030
2031     @cust_pkg = grep { ! $_->getfield('cancel') }
2032                 values %{ $self->{'_pkgnum'}->cache };
2033
2034   } else {
2035
2036     warn "$me ncancelled_pkgs: searching for packages with custnum ".
2037          $self->custnum. "\n"
2038       if $DEBUG > 1;
2039
2040     $extra_qsearch->{'extra_sql'} .= ' AND ( cancel IS NULL OR cancel = 0 ) ';
2041
2042     @cust_pkg = $self->_cust_pkg($extra_qsearch);
2043
2044   }
2045
2046   sort sort_packages @cust_pkg;
2047
2048 }
2049
2050 sub _cust_pkg {
2051   my $self = shift;
2052   my $extra_qsearch = ref($_[0]) ? shift : {};
2053
2054   $extra_qsearch->{'select'} ||= '*';
2055   $extra_qsearch->{'select'} .=
2056    ',( SELECT COUNT(*) FROM cust_svc WHERE cust_pkg.pkgnum = cust_svc.pkgnum )
2057      AS _num_cust_svc';
2058
2059   map {
2060         $_->{'_num_cust_svc'} = $_->get('_num_cust_svc');
2061         $_;
2062       }
2063   qsearch({
2064     %$extra_qsearch,
2065     'table'   => 'cust_pkg',
2066     'hashref' => { 'custnum' => $self->custnum },
2067   });
2068
2069 }
2070
2071 # This should be generalized to use config options to determine order.
2072 sub sort_packages {
2073
2074   my $locationsort = ( $a->locationnum || 0 ) <=> ( $b->locationnum || 0 );
2075   return $locationsort if $locationsort;
2076
2077   if ( $a->get('cancel') xor $b->get('cancel') ) {
2078     return -1 if $b->get('cancel');
2079     return  1 if $a->get('cancel');
2080     #shouldn't get here...
2081     return 0;
2082   } else {
2083     my $a_num_cust_svc = $a->num_cust_svc;
2084     my $b_num_cust_svc = $b->num_cust_svc;
2085     return 0  if !$a_num_cust_svc && !$b_num_cust_svc;
2086     return -1 if  $a_num_cust_svc && !$b_num_cust_svc;
2087     return 1  if !$a_num_cust_svc &&  $b_num_cust_svc;
2088     my @a_cust_svc = $a->cust_svc;
2089     my @b_cust_svc = $b->cust_svc;
2090     $a_cust_svc[0]->svc_x->label cmp $b_cust_svc[0]->svc_x->label;
2091   }
2092
2093 }
2094
2095 =item suspended_pkgs
2096
2097 Returns all suspended packages (see L<FS::cust_pkg>) for this customer.
2098
2099 =cut
2100
2101 sub suspended_pkgs {
2102   my $self = shift;
2103   grep { $_->susp } $self->ncancelled_pkgs;
2104 }
2105
2106 =item unflagged_suspended_pkgs
2107
2108 Returns all unflagged suspended packages (see L<FS::cust_pkg>) for this
2109 customer (thouse packages without the `manual_flag' set).
2110
2111 =cut
2112
2113 sub unflagged_suspended_pkgs {
2114   my $self = shift;
2115   return $self->suspended_pkgs
2116     unless dbdef->table('cust_pkg')->column('manual_flag');
2117   grep { ! $_->manual_flag } $self->suspended_pkgs;
2118 }
2119
2120 =item unsuspended_pkgs
2121
2122 Returns all unsuspended (and uncancelled) packages (see L<FS::cust_pkg>) for
2123 this customer.
2124
2125 =cut
2126
2127 sub unsuspended_pkgs {
2128   my $self = shift;
2129   grep { ! $_->susp } $self->ncancelled_pkgs;
2130 }
2131
2132 =item next_bill_date
2133
2134 Returns the next date this customer will be billed, as a UNIX timestamp, or
2135 undef if no active package has a next bill date.
2136
2137 =cut
2138
2139 sub next_bill_date {
2140   my $self = shift;
2141   min( map $_->get('bill'), grep $_->get('bill'), $self->unsuspended_pkgs );
2142 }
2143
2144 =item num_cancelled_pkgs
2145
2146 Returns the number of cancelled packages (see L<FS::cust_pkg>) for this
2147 customer.
2148
2149 =cut
2150
2151 sub num_cancelled_pkgs {
2152   shift->num_pkgs("cust_pkg.cancel IS NOT NULL AND cust_pkg.cancel != 0");
2153 }
2154
2155 sub num_ncancelled_pkgs {
2156   shift->num_pkgs("( cust_pkg.cancel IS NULL OR cust_pkg.cancel = 0 )");
2157 }
2158
2159 sub num_pkgs {
2160   my( $self ) = shift;
2161   my $sql = scalar(@_) ? shift : '';
2162   $sql = "AND $sql" if $sql && $sql !~ /^\s*$/ && $sql !~ /^\s*AND/i;
2163   my $sth = dbh->prepare(
2164     "SELECT COUNT(*) FROM cust_pkg WHERE custnum = ? $sql"
2165   ) or die dbh->errstr;
2166   $sth->execute($self->custnum) or die $sth->errstr;
2167   $sth->fetchrow_arrayref->[0];
2168 }
2169
2170 =item unsuspend
2171
2172 Unsuspends all unflagged suspended packages (see L</unflagged_suspended_pkgs>
2173 and L<FS::cust_pkg>) for this customer.  Always returns a list: an empty list
2174 on success or a list of errors.
2175
2176 =cut
2177
2178 sub unsuspend {
2179   my $self = shift;
2180   grep { $_->unsuspend } $self->suspended_pkgs;
2181 }
2182
2183 =item suspend
2184
2185 Suspends all unsuspended packages (see L<FS::cust_pkg>) for this customer.
2186
2187 Returns a list: an empty list on success or a list of errors.
2188
2189 =cut
2190
2191 sub suspend {
2192   my $self = shift;
2193   grep { $_->suspend(@_) } $self->unsuspended_pkgs;
2194 }
2195
2196 =item suspend_if_pkgpart HASHREF | PKGPART [ , PKGPART ... ]
2197
2198 Suspends all unsuspended packages (see L<FS::cust_pkg>) matching the listed
2199 PKGPARTs (see L<FS::part_pkg>).  Preferred usage is to pass a hashref instead
2200 of a list of pkgparts; the hashref has the following keys:
2201
2202 =over 4
2203
2204 =item pkgparts - listref of pkgparts
2205
2206 =item (other options are passed to the suspend method)
2207
2208 =back
2209
2210
2211 Returns a list: an empty list on success or a list of errors.
2212
2213 =cut
2214
2215 sub suspend_if_pkgpart {
2216   my $self = shift;
2217   my (@pkgparts, %opt);
2218   if (ref($_[0]) eq 'HASH'){
2219     @pkgparts = @{$_[0]{pkgparts}};
2220     %opt      = %{$_[0]};
2221   }else{
2222     @pkgparts = @_;
2223   }
2224   grep { $_->suspend(%opt) }
2225     grep { my $pkgpart = $_->pkgpart; grep { $pkgpart eq $_ } @pkgparts }
2226       $self->unsuspended_pkgs;
2227 }
2228
2229 =item suspend_unless_pkgpart HASHREF | PKGPART [ , PKGPART ... ]
2230
2231 Suspends all unsuspended packages (see L<FS::cust_pkg>) unless they match the
2232 given PKGPARTs (see L<FS::part_pkg>).  Preferred usage is to pass a hashref
2233 instead of a list of pkgparts; the hashref has the following keys:
2234
2235 =over 4
2236
2237 =item pkgparts - listref of pkgparts
2238
2239 =item (other options are passed to the suspend method)
2240
2241 =back
2242
2243 Returns a list: an empty list on success or a list of errors.
2244
2245 =cut
2246
2247 sub suspend_unless_pkgpart {
2248   my $self = shift;
2249   my (@pkgparts, %opt);
2250   if (ref($_[0]) eq 'HASH'){
2251     @pkgparts = @{$_[0]{pkgparts}};
2252     %opt      = %{$_[0]};
2253   }else{
2254     @pkgparts = @_;
2255   }
2256   grep { $_->suspend(%opt) }
2257     grep { my $pkgpart = $_->pkgpart; ! grep { $pkgpart eq $_ } @pkgparts }
2258       $self->unsuspended_pkgs;
2259 }
2260
2261 =item cancel [ OPTION => VALUE ... ]
2262
2263 Cancels all uncancelled packages (see L<FS::cust_pkg>) for this customer.
2264
2265 Available options are:
2266
2267 =over 4
2268
2269 =item quiet - can be set true to supress email cancellation notices.
2270
2271 =item reason - can be set to a cancellation reason (see L<FS:reason>), either a reasonnum of an existing reason, or passing a hashref will create a new reason.  The hashref should have the following keys: typenum - Reason type (see L<FS::reason_type>, reason - Text of the new reason.
2272
2273 =item ban - can be set true to ban this customer's credit card or ACH information, if present.
2274
2275 =item nobill - can be set true to skip billing if it might otherwise be done.
2276
2277 =back
2278
2279 Always returns a list: an empty list on success or a list of errors.
2280
2281 =cut
2282
2283 # nb that dates are not specified as valid options to this method
2284
2285 sub cancel {
2286   my( $self, %opt ) = @_;
2287
2288   warn "$me cancel called on customer ". $self->custnum. " with options ".
2289        join(', ', map { "$_: $opt{$_}" } keys %opt ). "\n"
2290     if $DEBUG;
2291
2292   return ( 'access denied' )
2293     unless $FS::CurrentUser::CurrentUser->access_right('Cancel customer');
2294
2295   if ( $opt{'ban'} && $self->payby =~ /^(CARD|DCRD|CHEK|DCHK)$/ ) {
2296
2297     #should try decryption (we might have the private key)
2298     # and if not maybe queue a job for the server that does?
2299     return ( "Can't (yet) ban encrypted credit cards" )
2300       if $self->is_encrypted($self->payinfo);
2301
2302     my $ban = new FS::banned_pay $self->_banned_pay_hashref;
2303     my $error = $ban->insert;
2304     return ( $error ) if $error;
2305
2306   }
2307
2308   my @pkgs = $self->ncancelled_pkgs;
2309
2310   if ( !$opt{nobill} && $conf->exists('bill_usage_on_cancel') ) {
2311     $opt{nobill} = 1;
2312     my $error = $self->bill( pkg_list => [ @pkgs ], cancel => 1 );
2313     warn "Error billing during cancel, custnum ". $self->custnum. ": $error"
2314       if $error;
2315   }
2316
2317   warn "$me cancelling ". scalar($self->ncancelled_pkgs). "/".
2318        scalar(@pkgs). " packages for customer ". $self->custnum. "\n"
2319     if $DEBUG;
2320
2321   grep { $_ } map { $_->cancel(%opt) } $self->ncancelled_pkgs;
2322 }
2323
2324 sub _banned_pay_hashref {
2325   my $self = shift;
2326
2327   my %payby2ban = (
2328     'CARD' => 'CARD',
2329     'DCRD' => 'CARD',
2330     'CHEK' => 'CHEK',
2331     'DCHK' => 'CHEK'
2332   );
2333
2334   {
2335     'payby'   => $payby2ban{$self->payby},
2336     'payinfo' => md5_base64($self->payinfo),
2337     #don't ever *search* on reason! #'reason'  =>
2338   };
2339 }
2340
2341 =item notes
2342
2343 Returns all notes (see L<FS::cust_main_note>) for this customer.
2344
2345 =cut
2346
2347 sub notes {
2348   my $self = shift;
2349   #order by?
2350   qsearch( 'cust_main_note',
2351            { 'custnum' => $self->custnum },
2352            '',
2353            'ORDER BY _DATE DESC'
2354          );
2355 }
2356
2357 =item agent
2358
2359 Returns the agent (see L<FS::agent>) for this customer.
2360
2361 =cut
2362
2363 sub agent {
2364   my $self = shift;
2365   qsearchs( 'agent', { 'agentnum' => $self->agentnum } );
2366 }
2367
2368 =item cust_class
2369
2370 Returns the customer class, as an FS::cust_class object, or the empty string
2371 if there is no customer class.
2372
2373 =cut
2374
2375 sub cust_class {
2376   my $self = shift;
2377   if ( $self->classnum ) {
2378     qsearchs('cust_class', { 'classnum' => $self->classnum } );
2379   } else {
2380     return '';
2381   }
2382 }
2383
2384 =item categoryname
2385
2386 Returns the customer category name, or the empty string if there is no customer
2387 category.
2388
2389 =cut
2390
2391 sub categoryname {
2392   my $self = shift;
2393   my $cust_class = $self->cust_class;
2394   $cust_class
2395     ? $cust_class->categoryname
2396     : '';
2397 }
2398
2399 =item classname
2400
2401 Returns the customer class name, or the empty string if there is no customer
2402 class.
2403
2404 =cut
2405
2406 sub classname {
2407   my $self = shift;
2408   my $cust_class = $self->cust_class;
2409   $cust_class
2410     ? $cust_class->classname
2411     : '';
2412 }
2413
2414
2415 =item bill_and_collect
2416
2417 Cancels and suspends any packages due, generates bills, applies payments and
2418 credits, and applies collection events to run cards, send bills and notices,
2419 etc.
2420
2421 By default, warns on errors and continues with the next operation (but see the
2422 "fatal" flag below).
2423
2424 Options are passed as name-value pairs.  Currently available options are:
2425
2426 =over 4
2427
2428 =item time
2429
2430 Bills the customer as if it were that time.  Specified as a UNIX timestamp; see L<perlfunc/"time">).  Also see L<Time::Local> and L<Date::Parse> for conversion functions.  For example:
2431
2432  use Date::Parse;
2433  ...
2434  $cust_main->bill( 'time' => str2time('April 20th, 2001') );
2435
2436 =item invoice_time
2437
2438 Used in conjunction with the I<time> option, this option specifies the date of for the generated invoices.  Other calculations, such as whether or not to generate the invoice in the first place, are not affected.
2439
2440 =item check_freq
2441
2442 "1d" for the traditional, daily events (the default), or "1m" for the new monthly events (part_event.check_freq)
2443
2444 =item resetup
2445
2446 If set true, re-charges setup fees.
2447
2448 =item fatal
2449
2450 If set any errors prevent subsequent operations from continusing.  If set
2451 specifically to "return", returns the error (or false, if there is no error).
2452 Any other true value causes errors to die.
2453
2454 =item debug
2455
2456 Debugging level.  Default is 0 (no debugging), or can be set to 1 (passed-in options), 2 (traces progress), 3 (more information), or 4 (include full search queries)
2457
2458 =back
2459
2460 Options are passed to the B<bill> and B<collect> methods verbatim, so all
2461 options of those methods are also available.
2462
2463 =cut
2464
2465 sub bill_and_collect {
2466   my( $self, %options ) = @_;
2467
2468   my $error;
2469
2470   #$options{actual_time} not $options{time} because freeside-daily -d is for
2471   #pre-printing invoices
2472
2473   $options{'actual_time'} ||= time;
2474
2475   $error = $self->cancel_expired_pkgs( $options{actual_time} );
2476   if ( $error ) {
2477     $error = "Error expiring custnum ". $self->custnum. ": $error";
2478     if    ( $options{'fatal'} eq 'return' ) { return $error; }
2479     elsif ( $options{'fatal'}             ) { die    $error; }
2480     else                                    { warn   $error; }
2481   }
2482
2483   $error = $self->suspend_adjourned_pkgs( $options{actual_time} );
2484   if ( $error ) {
2485     $error = "Error adjourning custnum ". $self->custnum. ": $error";
2486     if    ( $options{'fatal'} eq 'return' ) { return $error; }
2487     elsif ( $options{'fatal'}             ) { die    $error; }
2488     else                                    { warn   $error; }
2489   }
2490
2491   $error = $self->bill( %options );
2492   if ( $error ) {
2493     $error = "Error billing custnum ". $self->custnum. ": $error";
2494     if    ( $options{'fatal'} eq 'return' ) { return $error; }
2495     elsif ( $options{'fatal'}             ) { die    $error; }
2496     else                                    { warn   $error; }
2497   }
2498
2499   $error = $self->apply_payments_and_credits;
2500   if ( $error ) {
2501     $error = "Error applying custnum ". $self->custnum. ": $error";
2502     if    ( $options{'fatal'} eq 'return' ) { return $error; }
2503     elsif ( $options{'fatal'}             ) { die    $error; }
2504     else                                    { warn   $error; }
2505   }
2506
2507   unless ( $conf->exists('cancelled_cust-noevents')
2508            && ! $self->num_ncancelled_pkgs
2509   ) {
2510     $error = $self->collect( %options );
2511     if ( $error ) {
2512       $error = "Error collecting custnum ". $self->custnum. ": $error";
2513       if    ( $options{'fatal'} eq 'return' ) { return $error; }
2514       elsif ( $options{'fatal'}             ) { die    $error; }
2515       else                                    { warn   $error; }
2516     }
2517   }
2518
2519   '';
2520
2521 }
2522
2523 sub cancel_expired_pkgs {
2524   my ( $self, $time, %options ) = @_;
2525
2526   my @cancel_pkgs = $self->ncancelled_pkgs( {
2527     'extra_sql' => " AND expire IS NOT NULL AND expire > 0 AND expire <= $time "
2528   } );
2529
2530   my @errors = ();
2531
2532   foreach my $cust_pkg ( @cancel_pkgs ) {
2533     my $cpr = $cust_pkg->last_cust_pkg_reason('expire');
2534     my $error = $cust_pkg->cancel($cpr ? ( 'reason'        => $cpr->reasonnum,
2535                                            'reason_otaker' => $cpr->otaker
2536                                          )
2537                                        : ()
2538                                  );
2539     push @errors, 'pkgnum '.$cust_pkg->pkgnum.": $error" if $error;
2540   }
2541
2542   scalar(@errors) ? join(' / ', @errors) : '';
2543
2544 }
2545
2546 sub suspend_adjourned_pkgs {
2547   my ( $self, $time, %options ) = @_;
2548
2549   my @susp_pkgs = $self->ncancelled_pkgs( {
2550     'extra_sql' =>
2551       " AND ( susp IS NULL OR susp = 0 )
2552         AND (    ( bill    IS NOT NULL AND bill    != 0 AND bill    <  $time )
2553               OR ( adjourn IS NOT NULL AND adjourn != 0 AND adjourn <= $time )
2554             )
2555       ",
2556   } );
2557
2558   #only because there's no SQL test for is_prepaid :/
2559   @susp_pkgs =
2560     grep {     (    $_->part_pkg->is_prepaid
2561                  && $_->bill
2562                  && $_->bill < $time
2563                )
2564             || (    $_->adjourn
2565                  && $_->adjourn <= $time
2566                )
2567
2568          }
2569          @susp_pkgs;
2570
2571   my @errors = ();
2572
2573   foreach my $cust_pkg ( @susp_pkgs ) {
2574     my $cpr = $cust_pkg->last_cust_pkg_reason('adjourn')
2575       if ($cust_pkg->adjourn && $cust_pkg->adjourn < $^T);
2576     my $error = $cust_pkg->suspend($cpr ? ( 'reason' => $cpr->reasonnum,
2577                                             'reason_otaker' => $cpr->otaker
2578                                           )
2579                                         : ()
2580                                   );
2581     push @errors, 'pkgnum '.$cust_pkg->pkgnum.": $error" if $error;
2582   }
2583
2584   scalar(@errors) ? join(' / ', @errors) : '';
2585
2586 }
2587
2588 =item bill OPTIONS
2589
2590 Generates invoices (see L<FS::cust_bill>) for this customer.  Usually used in
2591 conjunction with the collect method by calling B<bill_and_collect>.
2592
2593 If there is an error, returns the error, otherwise returns false.
2594
2595 Options are passed as name-value pairs.  Currently available options are:
2596
2597 =over 4
2598
2599 =item resetup
2600
2601 If set true, re-charges setup fees.
2602
2603 =item time
2604
2605 Bills the customer as if it were that time.  Specified as a UNIX timestamp; see L<perlfunc/"time">).  Also see L<Time::Local> and L<Date::Parse> for conversion functions.  For example:
2606
2607  use Date::Parse;
2608  ...
2609  $cust_main->bill( 'time' => str2time('April 20th, 2001') );
2610
2611 =item pkg_list
2612
2613 An array ref of specific packages (objects) to attempt billing, instead trying all of them.
2614
2615  $cust_main->bill( pkg_list => [$pkg1, $pkg2] );
2616
2617 =item not_pkgpart
2618
2619 A hashref of pkgparts to exclude from this billing run (can also be specified as a comma-separated scalar).
2620
2621 =item invoice_time
2622
2623 Used in conjunction with the I<time> option, this option specifies the date of for the generated invoices.  Other calculations, such as whether or not to generate the invoice in the first place, are not affected.
2624
2625 =item cancel
2626
2627 This boolean value informs the us that the package is being cancelled.  This
2628 typically might mean not charging the normal recurring fee but only usage
2629 fees since the last billing. Setup charges may be charged.  Not all package
2630 plans support this feature (they tend to charge 0).
2631
2632 =item invoice_terms
2633
2634 Optional terms to be printed on this invoice.  Otherwise, customer-specific
2635 terms or the default terms are used.
2636
2637 =back
2638
2639 =cut
2640
2641 sub bill {
2642   my( $self, %options ) = @_;
2643   return '' if $self->payby eq 'COMP';
2644   warn "$me bill customer ". $self->custnum. "\n"
2645     if $DEBUG;
2646
2647   my $time = $options{'time'} || time;
2648   my $invoice_time = $options{'invoice_time'} || $time;
2649
2650   $options{'not_pkgpart'} ||= {};
2651   $options{'not_pkgpart'} = { map { $_ => 1 }
2652                                   split(/\s*,\s*/, $options{'not_pkgpart'})
2653                             }
2654     unless ref($options{'not_pkgpart'});
2655
2656   local $SIG{HUP} = 'IGNORE';
2657   local $SIG{INT} = 'IGNORE';
2658   local $SIG{QUIT} = 'IGNORE';
2659   local $SIG{TERM} = 'IGNORE';
2660   local $SIG{TSTP} = 'IGNORE';
2661   local $SIG{PIPE} = 'IGNORE';
2662
2663   my $oldAutoCommit = $FS::UID::AutoCommit;
2664   local $FS::UID::AutoCommit = 0;
2665   my $dbh = dbh;
2666
2667   $self->select_for_update; #mutex
2668
2669   my $error = $self->do_cust_event(
2670     'debug'      => ( $options{'debug'} || 0 ),
2671     'time'       => $invoice_time,
2672     'check_freq' => $options{'check_freq'},
2673     'stage'      => 'pre-bill',
2674   );
2675   if ( $error ) {
2676     $dbh->rollback if $oldAutoCommit;
2677     return $error;
2678   }
2679
2680   my @cust_bill_pkg = ();
2681
2682   ###
2683   # find the packages which are due for billing, find out how much they are
2684   # & generate invoice database.
2685   ###
2686
2687   my( $total_setup, $total_recur, $postal_charge ) = ( 0, 0, 0 );
2688   my %taxlisthash;
2689   my @precommit_hooks = ();
2690
2691   $options{'pkg_list'} ||= [ $self->ncancelled_pkgs ];  #param checks?
2692   foreach my $cust_pkg ( @{ $options{'pkg_list'} } ) {
2693
2694     next if $options{'not_pkgpart'}->{$cust_pkg->pkgpart};
2695
2696     warn "  bill package ". $cust_pkg->pkgnum. "\n" if $DEBUG > 1;
2697
2698     #? to avoid use of uninitialized value errors... ?
2699     $cust_pkg->setfield('bill', '')
2700       unless defined($cust_pkg->bill);
2701
2702     #my $part_pkg = $cust_pkg->part_pkg;
2703
2704     my $real_pkgpart = $cust_pkg->pkgpart;
2705     my %hash = $cust_pkg->hash;
2706
2707     foreach my $part_pkg ( $cust_pkg->part_pkg->self_and_bill_linked ) {
2708
2709       $cust_pkg->set($_, $hash{$_}) foreach qw ( setup last_bill bill );
2710
2711       my $error =
2712         $self->_make_lines( 'part_pkg'            => $part_pkg,
2713                             'cust_pkg'            => $cust_pkg,
2714                             'precommit_hooks'     => \@precommit_hooks,
2715                             'line_items'          => \@cust_bill_pkg,
2716                             'setup'               => \$total_setup,
2717                             'recur'               => \$total_recur,
2718                             'tax_matrix'          => \%taxlisthash,
2719                             'time'                => $time,
2720                             'real_pkgpart'        => $real_pkgpart,
2721                             'options'             => \%options,
2722                           );
2723       if ($error) {
2724         $dbh->rollback if $oldAutoCommit;
2725         return $error;
2726       }
2727
2728     } #foreach my $part_pkg
2729
2730   } #foreach my $cust_pkg
2731
2732   unless ( @cust_bill_pkg ) { #don't create an invoice w/o line items
2733     #but do commit any package date cycling that happened
2734     $dbh->commit or die $dbh->errstr if $oldAutoCommit;
2735     return '';
2736   }
2737
2738   if ( scalar( grep { $_->recur && $_->recur > 0 } @cust_bill_pkg) ||
2739          !$conf->exists('postal_invoice-recurring_only')
2740      )
2741   {
2742
2743     my $postal_pkg = $self->charge_postal_fee();
2744     if ( $postal_pkg && !ref( $postal_pkg ) ) {
2745
2746       $dbh->rollback if $oldAutoCommit;
2747       return "can't charge postal invoice fee for customer ".
2748         $self->custnum. ": $postal_pkg";
2749
2750     } elsif ( $postal_pkg ) {
2751
2752       my $real_pkgpart = $postal_pkg->pkgpart;
2753       foreach my $part_pkg ( $postal_pkg->part_pkg->self_and_bill_linked ) {
2754         my %postal_options = %options;
2755         delete $postal_options{cancel};
2756         my $error =
2757           $self->_make_lines( 'part_pkg'            => $part_pkg,
2758                               'cust_pkg'            => $postal_pkg,
2759                               'precommit_hooks'     => \@precommit_hooks,
2760                               'line_items'          => \@cust_bill_pkg,
2761                               'setup'               => \$total_setup,
2762                               'recur'               => \$total_recur,
2763                               'tax_matrix'          => \%taxlisthash,
2764                               'time'                => $time,
2765                               'real_pkgpart'        => $real_pkgpart,
2766                               'options'             => \%postal_options,
2767                             );
2768         if ($error) {
2769           $dbh->rollback if $oldAutoCommit;
2770           return $error;
2771         }
2772       }
2773
2774     }
2775
2776   }
2777
2778   my $listref_or_error =
2779     $self->calculate_taxes( \@cust_bill_pkg, \%taxlisthash, $invoice_time);
2780
2781   unless ( ref( $listref_or_error ) ) {
2782     $dbh->rollback if $oldAutoCommit;
2783     return $listref_or_error;
2784   }
2785
2786   foreach my $taxline ( @$listref_or_error ) {
2787     $total_setup = sprintf('%.2f', $total_setup+$taxline->setup );
2788     push @cust_bill_pkg, $taxline;
2789   }
2790
2791   #add tax adjustments
2792   warn "adding tax adjustments...\n" if $DEBUG > 2;
2793   foreach my $cust_tax_adjustment (
2794     qsearch('cust_tax_adjustment', { 'custnum'    => $self->custnum,
2795                                      'billpkgnum' => '',
2796                                    }
2797            )
2798   ) {
2799
2800     my $tax = sprintf('%.2f', $cust_tax_adjustment->amount );
2801
2802     my $itemdesc = $cust_tax_adjustment->taxname;
2803     $itemdesc = '' if $itemdesc eq 'Tax';
2804
2805     push @cust_bill_pkg, new FS::cust_bill_pkg {
2806       'pkgnum'      => 0,
2807       'setup'       => $tax,
2808       'recur'       => 0,
2809       'sdate'       => '',
2810       'edate'       => '',
2811       'itemdesc'    => $itemdesc,
2812       'itemcomment' => $cust_tax_adjustment->comment,
2813       'cust_tax_adjustment' => $cust_tax_adjustment,
2814       #'cust_bill_pkg_tax_location' => \@cust_bill_pkg_tax_location,
2815     };
2816
2817   }
2818
2819   my $charged = sprintf('%.2f', $total_setup + $total_recur );
2820
2821   my @cust_bill = $self->cust_bill;
2822   my $balance = $self->balance;
2823   my $previous_balance = scalar(@cust_bill)
2824                            ? ( $cust_bill[$#cust_bill]->billing_balance || 0 )
2825                            : 0;
2826
2827   $previous_balance += $cust_bill[$#cust_bill]->charged
2828     if scalar(@cust_bill);
2829   #my $balance_adjustments =
2830   #  sprintf('%.2f', $balance - $prior_prior_balance - $prior_charged);
2831
2832   #create the new invoice
2833   my $cust_bill = new FS::cust_bill ( {
2834     'custnum'             => $self->custnum,
2835     '_date'               => ( $invoice_time ),
2836     'charged'             => $charged,
2837     'billing_balance'     => $balance,
2838     'previous_balance'    => $previous_balance,
2839     'invoice_terms'       => $options{'invoice_terms'},
2840   } );
2841   $error = $cust_bill->insert;
2842   if ( $error ) {
2843     $dbh->rollback if $oldAutoCommit;
2844     return "can't create invoice for customer #". $self->custnum. ": $error";
2845   }
2846
2847   foreach my $cust_bill_pkg ( @cust_bill_pkg ) {
2848     $cust_bill_pkg->invnum($cust_bill->invnum);
2849     my $error = $cust_bill_pkg->insert;
2850     if ( $error ) {
2851       $dbh->rollback if $oldAutoCommit;
2852       return "can't create invoice line item: $error";
2853     }
2854   }
2855
2856
2857   foreach my $hook ( @precommit_hooks ) {
2858     eval {
2859       &{$hook}; #($self) ?
2860     };
2861     if ( $@ ) {
2862       $dbh->rollback if $oldAutoCommit;
2863       return "$@ running precommit hook $hook\n";
2864     }
2865   }
2866
2867   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
2868   ''; #no error
2869 }
2870
2871 =item calculate_taxes LINEITEMREF TAXHASHREF INVOICE_TIME
2872
2873 This is a weird one.  Perhaps it should not even be exposed.
2874
2875 Generates tax line items (see L<FS::cust_bill_pkg>) for this customer.
2876 Usually used internally by bill method B<bill>.
2877
2878 If there is an error, returns the error, otherwise returns reference to a
2879 list of line items suitable for insertion.
2880
2881 =over 4
2882
2883 =item LINEITEMREF
2884
2885 An array ref of the line items being billed.
2886
2887 =item TAXHASHREF
2888
2889 A strange beast.  The keys to this hash are internal identifiers consisting
2890 of the name of the tax object type, a space, and its unique identifier ( e.g.
2891  'cust_main_county 23' ).  The values of the hash are listrefs.  The first
2892 item in the list is the tax object.  The remaining items are either line
2893 items or floating point values (currency amounts).
2894
2895 The taxes are calculated on this entity.  Calculated exemption records are
2896 transferred to the LINEITEMREF items on the assumption that they are related.
2897
2898 Read the source.
2899
2900 =item INVOICE_TIME
2901
2902 This specifies the date appearing on the associated invoice.  Some
2903 jurisdictions (i.e. Texas) have tax exemptions which are date sensitive.
2904
2905 =back
2906
2907 =cut
2908 sub calculate_taxes {
2909   my ($self, $cust_bill_pkg, $taxlisthash, $invoice_time) = @_;
2910
2911   my @tax_line_items = ();
2912
2913   warn "having a look at the taxes we found...\n" if $DEBUG > 2;
2914
2915   # keys are tax names (as printed on invoices / itemdesc )
2916   # values are listrefs of taxlisthash keys (internal identifiers)
2917   my %taxname = ();
2918
2919   # keys are taxlisthash keys (internal identifiers)
2920   # values are (cumulative) amounts
2921   my %tax = ();
2922
2923   # keys are taxlisthash keys (internal identifiers)
2924   # values are listrefs of cust_bill_pkg_tax_location hashrefs
2925   my %tax_location = ();
2926
2927   # keys are taxlisthash keys (internal identifiers)
2928   # values are listrefs of cust_bill_pkg_tax_rate_location hashrefs
2929   my %tax_rate_location = ();
2930
2931   foreach my $tax ( keys %$taxlisthash ) {
2932     my $tax_object = shift @{ $taxlisthash->{$tax} };
2933     warn "found ". $tax_object->taxname. " as $tax\n" if $DEBUG > 2;
2934     warn " ". join('/', @{ $taxlisthash->{$tax} } ). "\n" if $DEBUG > 2;
2935     my $hashref_or_error =
2936       $tax_object->taxline( $taxlisthash->{$tax},
2937                             'custnum'      => $self->custnum,
2938                             'invoice_time' => $invoice_time
2939                           );
2940     return $hashref_or_error unless ref($hashref_or_error);
2941
2942     unshift @{ $taxlisthash->{$tax} }, $tax_object;
2943
2944     my $name   = $hashref_or_error->{'name'};
2945     my $amount = $hashref_or_error->{'amount'};
2946
2947     #warn "adding $amount as $name\n";
2948     $taxname{ $name } ||= [];
2949     push @{ $taxname{ $name } }, $tax;
2950
2951     $tax{ $tax } += $amount;
2952
2953     $tax_location{ $tax } ||= [];
2954     if ( $tax_object->get('pkgnum') || $tax_object->get('locationnum') ) {
2955       push @{ $tax_location{ $tax }  },
2956         {
2957           'taxnum'      => $tax_object->taxnum,
2958           'taxtype'     => ref($tax_object),
2959           'pkgnum'      => $tax_object->get('pkgnum'),
2960           'locationnum' => $tax_object->get('locationnum'),
2961           'amount'      => sprintf('%.2f', $amount ),
2962         };
2963     }
2964
2965     $tax_rate_location{ $tax } ||= [];
2966     if ( ref($tax_object) eq 'FS::tax_rate' ) {
2967       my $taxratelocationnum =
2968         $tax_object->tax_rate_location->taxratelocationnum;
2969       push @{ $tax_rate_location{ $tax }  },
2970         {
2971           'taxnum'             => $tax_object->taxnum,
2972           'taxtype'            => ref($tax_object),
2973           'amount'             => sprintf('%.2f', $amount ),
2974           'locationtaxid'      => $tax_object->location,
2975           'taxratelocationnum' => $taxratelocationnum,
2976         };
2977     }
2978
2979   }
2980
2981   #move the cust_tax_exempt_pkg records to the cust_bill_pkgs we will commit
2982   my %packagemap = map { $_->pkgnum => $_ } @$cust_bill_pkg;
2983   foreach my $tax ( keys %$taxlisthash ) {
2984     foreach ( @{ $taxlisthash->{$tax} }[1 ... scalar(@{ $taxlisthash->{$tax} })] ) {
2985       next unless ref($_) eq 'FS::cust_bill_pkg';
2986
2987       push @{ $packagemap{$_->pkgnum}->_cust_tax_exempt_pkg },
2988         splice( @{ $_->_cust_tax_exempt_pkg } );
2989     }
2990   }
2991
2992   #consolidate and create tax line items
2993   warn "consolidating and generating...\n" if $DEBUG > 2;
2994   foreach my $taxname ( keys %taxname ) {
2995     my $tax = 0;
2996     my %seen = ();
2997     my @cust_bill_pkg_tax_location = ();
2998     my @cust_bill_pkg_tax_rate_location = ();
2999     warn "adding $taxname\n" if $DEBUG > 1;
3000     foreach my $taxitem ( @{ $taxname{$taxname} } ) {
3001       next if $seen{$taxitem}++;
3002       warn "adding $tax{$taxitem}\n" if $DEBUG > 1;
3003       $tax += $tax{$taxitem};
3004       push @cust_bill_pkg_tax_location,
3005         map { new FS::cust_bill_pkg_tax_location $_ }
3006             @{ $tax_location{ $taxitem } };
3007       push @cust_bill_pkg_tax_rate_location,
3008         map { new FS::cust_bill_pkg_tax_rate_location $_ }
3009             @{ $tax_rate_location{ $taxitem } };
3010     }
3011     next unless $tax;
3012
3013     $tax = sprintf('%.2f', $tax );
3014
3015     my $pkg_category = qsearchs( 'pkg_category', { 'categoryname' => $taxname,
3016                                                    'disabled'     => '',
3017                                                  },
3018                                );
3019
3020     my @display = ();
3021     if ( $pkg_category and
3022          $conf->config('invoice_latexsummary') ||
3023          $conf->config('invoice_htmlsummary')
3024        )
3025     {
3026
3027       my %hash = (  'section' => $pkg_category->categoryname );
3028       push @display, new FS::cust_bill_pkg_display { type => 'S', %hash };
3029
3030     }
3031
3032     push @tax_line_items, new FS::cust_bill_pkg {
3033       'pkgnum'   => 0,
3034       'setup'    => $tax,
3035       'recur'    => 0,
3036       'sdate'    => '',
3037       'edate'    => '',
3038       'itemdesc' => $taxname,
3039       'display'  => \@display,
3040       'cust_bill_pkg_tax_location' => \@cust_bill_pkg_tax_location,
3041       'cust_bill_pkg_tax_rate_location' => \@cust_bill_pkg_tax_rate_location,
3042     };
3043
3044   }
3045
3046   \@tax_line_items;
3047 }
3048
3049 sub _make_lines {
3050   my ($self, %params) = @_;
3051
3052   my $part_pkg = $params{part_pkg} or die "no part_pkg specified";
3053   my $cust_pkg = $params{cust_pkg} or die "no cust_pkg specified";
3054   my $precommit_hooks = $params{precommit_hooks} or die "no package specified";
3055   my $cust_bill_pkgs = $params{line_items} or die "no line buffer specified";
3056   my $total_setup = $params{setup} or die "no setup accumulator specified";
3057   my $total_recur = $params{recur} or die "no recur accumulator specified";
3058   my $taxlisthash = $params{tax_matrix} or die "no tax accumulator specified";
3059   my $time = $params{'time'} or die "no time specified";
3060   my (%options) = %{$params{options}};
3061
3062   my $dbh = dbh;
3063   my $real_pkgpart = $params{real_pkgpart};
3064   my %hash = $cust_pkg->hash;
3065   my $old_cust_pkg = new FS::cust_pkg \%hash;
3066
3067   my @details = ();
3068
3069   my $lineitems = 0;
3070
3071   $cust_pkg->pkgpart($part_pkg->pkgpart);
3072
3073   ###
3074   # bill setup
3075   ###
3076
3077   my $setup = 0;
3078   my $unitsetup = 0;
3079   if ( $options{'resetup'}
3080        || ( ! $cust_pkg->setup
3081             && ( ! $cust_pkg->start_date
3082                  || $cust_pkg->start_date <= $time
3083                )
3084             && ( ! $conf->exists('disable_setup_suspended_pkgs')
3085                  || ( $conf->exists('disable_setup_suspended_pkgs') &&
3086                       ! $cust_pkg->getfield('susp')
3087                     )
3088                )
3089           )
3090     )
3091   {
3092
3093     warn "    bill setup\n" if $DEBUG > 1;
3094     $lineitems++;
3095
3096     $setup = eval { $cust_pkg->calc_setup( $time, \@details ) };
3097     return "$@ running calc_setup for $cust_pkg\n"
3098       if $@;
3099
3100     $unitsetup = $cust_pkg->part_pkg->unit_setup || $setup; #XXX uuh
3101
3102     $cust_pkg->setfield('setup', $time)
3103       unless $cust_pkg->setup;
3104           #do need it, but it won't get written to the db
3105           #|| $cust_pkg->pkgpart != $real_pkgpart;
3106
3107     $cust_pkg->setfield('start_date', '')
3108       if $cust_pkg->start_date;
3109
3110   }
3111
3112   ###
3113   # bill recurring fee
3114   ###
3115
3116   #XXX unit stuff here too
3117   my $recur = 0;
3118   my $unitrecur = 0;
3119   my $sdate;
3120   if (     ! $cust_pkg->get('susp')
3121        and ! $cust_pkg->get('start_date')
3122        and ( $part_pkg->getfield('freq') ne '0'
3123              && ( $cust_pkg->getfield('bill') || 0 ) <= $time
3124            )
3125         || ( $part_pkg->plan eq 'voip_cdr'
3126               && $part_pkg->option('bill_every_call')
3127            )
3128         || ( $options{cancel} )
3129   ) {
3130
3131     # XXX should this be a package event?  probably.  events are called
3132     # at collection time at the moment, though...
3133     $part_pkg->reset_usage($cust_pkg, 'debug'=>$DEBUG)
3134       if $part_pkg->can('reset_usage');
3135       #don't want to reset usage just cause we want a line item??
3136       #&& $part_pkg->pkgpart == $real_pkgpart;
3137
3138     warn "    bill recur\n" if $DEBUG > 1;
3139     $lineitems++;
3140
3141     # XXX shared with $recur_prog
3142     $sdate = ( $options{cancel} ? $cust_pkg->last_bill : $cust_pkg->bill )
3143              || $cust_pkg->setup
3144              || $time;
3145
3146     #over two params!  lets at least switch to a hashref for the rest...
3147     my $increment_next_bill = ( $part_pkg->freq ne '0'
3148                                 && ( $cust_pkg->getfield('bill') || 0 ) <= $time
3149                                 && !$options{cancel}
3150                               );
3151     my %param = ( 'precommit_hooks'     => $precommit_hooks,
3152                   'increment_next_bill' => $increment_next_bill,
3153                 );
3154
3155     my $method = $options{cancel} ? 'calc_cancel' : 'calc_recur';
3156     $recur = eval { $cust_pkg->$method( \$sdate, \@details, \%param ) };
3157     return "$@ running $method for $cust_pkg\n"
3158       if ( $@ );
3159
3160     if ( $increment_next_bill ) {
3161
3162       my $next_bill = $part_pkg->add_freq($sdate);
3163       return "unparsable frequency: ". $part_pkg->freq
3164         if $next_bill == -1;
3165
3166       #pro-rating magic - if $recur_prog fiddled $sdate, want to use that
3167       # only for figuring next bill date, nothing else, so, reset $sdate again
3168       # here
3169       $sdate = $cust_pkg->bill || $cust_pkg->setup || $time;
3170       #no need, its in $hash{last_bill}# my $last_bill = $cust_pkg->last_bill;
3171       $cust_pkg->last_bill($sdate);
3172
3173       $cust_pkg->setfield('bill', $next_bill );
3174
3175     }
3176
3177   }
3178
3179   warn "\$setup is undefined" unless defined($setup);
3180   warn "\$recur is undefined" unless defined($recur);
3181   warn "\$cust_pkg->bill is undefined" unless defined($cust_pkg->bill);
3182
3183   ###
3184   # If there's line items, create em cust_bill_pkg records
3185   # If $cust_pkg has been modified, update it (if we're a real pkgpart)
3186   ###
3187
3188   if ( $lineitems ) {
3189
3190     if ( $cust_pkg->modified && $cust_pkg->pkgpart == $real_pkgpart ) {
3191       # hmm.. and if just the options are modified in some weird price plan?
3192
3193       warn "  package ". $cust_pkg->pkgnum. " modified; updating\n"
3194         if $DEBUG >1;
3195
3196       my $error = $cust_pkg->replace( $old_cust_pkg,
3197                                       'options' => { $cust_pkg->options },
3198                                     );
3199       return "Error modifying pkgnum ". $cust_pkg->pkgnum. ": $error"
3200         if $error; #just in case
3201     }
3202
3203     $setup = sprintf( "%.2f", $setup );
3204     $recur = sprintf( "%.2f", $recur );
3205     if ( $setup < 0 && ! $conf->exists('allow_negative_charges') ) {
3206       return "negative setup $setup for pkgnum ". $cust_pkg->pkgnum;
3207     }
3208     if ( $recur < 0 && ! $conf->exists('allow_negative_charges') ) {
3209       return "negative recur $recur for pkgnum ". $cust_pkg->pkgnum;
3210     }
3211
3212     if ( $setup != 0 || $recur != 0 ) {
3213
3214       warn "    charges (setup=$setup, recur=$recur); adding line items\n"
3215         if $DEBUG > 1;
3216
3217       my @cust_pkg_detail = map { $_->detail } $cust_pkg->cust_pkg_detail('I');
3218       if ( $DEBUG > 1 ) {
3219         warn "      adding customer package invoice detail: $_\n"
3220           foreach @cust_pkg_detail;
3221       }
3222       push @details, @cust_pkg_detail;
3223
3224       my $cust_bill_pkg = new FS::cust_bill_pkg {
3225         'pkgnum'    => $cust_pkg->pkgnum,
3226         'setup'     => $setup,
3227         'unitsetup' => $unitsetup,
3228         'recur'     => $recur,
3229         'unitrecur' => $unitrecur,
3230         'quantity'  => $cust_pkg->quantity,
3231         'details'   => \@details,
3232         'hidden'    => $part_pkg->hidden,
3233       };
3234
3235       if ( $part_pkg->option('recur_temporality', 1) eq 'preceding' ) {
3236         $cust_bill_pkg->sdate( $hash{last_bill} );
3237         $cust_bill_pkg->edate( $sdate - 86399   ); #60s*60m*24h-1
3238         $cust_bill_pkg->edate( $time ) if $options{cancel};
3239       } else { #if ( $part_pkg->option('recur_temporality', 1) eq 'upcoming' ) {
3240         $cust_bill_pkg->sdate( $sdate );
3241         $cust_bill_pkg->edate( $cust_pkg->bill );
3242         #$cust_bill_pkg->edate( $time ) if $options{cancel};
3243       }
3244
3245       $cust_bill_pkg->pkgpart_override($part_pkg->pkgpart)
3246         unless $part_pkg->pkgpart == $real_pkgpart;
3247
3248       $$total_setup += $setup;
3249       $$total_recur += $recur;
3250
3251       ###
3252       # handle taxes
3253       ###
3254
3255       my $error =
3256         $self->_handle_taxes($part_pkg, $taxlisthash, $cust_bill_pkg, $cust_pkg, $options{invoice_time}, $real_pkgpart, \%options);
3257       return $error if $error;
3258
3259       push @$cust_bill_pkgs, $cust_bill_pkg;
3260
3261     } #if $setup != 0 || $recur != 0
3262
3263   } #if $line_items
3264
3265   '';
3266
3267 }
3268
3269 sub _handle_taxes {
3270   my $self = shift;
3271   my $part_pkg = shift;
3272   my $taxlisthash = shift;
3273   my $cust_bill_pkg = shift;
3274   my $cust_pkg = shift;
3275   my $invoice_time = shift;
3276   my $real_pkgpart = shift;
3277   my $options = shift;
3278
3279   my %cust_bill_pkg = ();
3280   my %taxes = ();
3281
3282   my @classes;
3283   #push @classes, $cust_bill_pkg->usage_classes if $cust_bill_pkg->type eq 'U';
3284   push @classes, $cust_bill_pkg->usage_classes if $cust_bill_pkg->usage;
3285   push @classes, 'setup' if ($cust_bill_pkg->setup && !$options->{cancel});
3286   push @classes, 'recur' if ($cust_bill_pkg->recur && !$options->{cancel});
3287
3288   if ( $self->tax !~ /Y/i && $self->payby ne 'COMP' ) {
3289
3290     if ( $conf->exists('enable_taxproducts')
3291          && ( scalar($part_pkg->part_pkg_taxoverride)
3292               || $part_pkg->has_taxproduct
3293             )
3294        )
3295     {
3296
3297       if ( $conf->exists('tax-pkg_address') && $cust_pkg->locationnum ) {
3298         return "fatal: Can't (yet) use tax-pkg_address with taxproducts";
3299       }
3300
3301       foreach my $class (@classes) {
3302         my $err_or_ref = $self->_gather_taxes( $part_pkg, $class );
3303         return $err_or_ref unless ref($err_or_ref);
3304         $taxes{$class} = $err_or_ref;
3305       }
3306
3307       unless (exists $taxes{''}) {
3308         my $err_or_ref = $self->_gather_taxes( $part_pkg, '' );
3309         return $err_or_ref unless ref($err_or_ref);
3310         $taxes{''} = $err_or_ref;
3311       }
3312
3313     } else {
3314
3315       my @loc_keys = qw( city county state country );
3316       my %taxhash;
3317       if ( $conf->exists('tax-pkg_address') && $cust_pkg->locationnum ) {
3318         my $cust_location = $cust_pkg->cust_location;
3319         %taxhash = map { $_ => $cust_location->$_()    } @loc_keys;
3320       } else {
3321         my $prefix =
3322           ( $conf->exists('tax-ship_address') && length($self->ship_last) )
3323           ? 'ship_'
3324           : '';
3325         %taxhash = map { $_ => $self->get("$prefix$_") } @loc_keys;
3326       }
3327
3328       $taxhash{'taxclass'} = $part_pkg->taxclass;
3329
3330       my @taxes = ();
3331       my %taxhash_elim = %taxhash;
3332       my @elim = qw( city county state );
3333       do {
3334
3335         #first try a match with taxclass
3336         @taxes = qsearch( 'cust_main_county', \%taxhash_elim );
3337
3338         if ( !scalar(@taxes) && $taxhash_elim{'taxclass'} ) {
3339           #then try a match without taxclass
3340           my %no_taxclass = %taxhash_elim;
3341           $no_taxclass{ 'taxclass' } = '';
3342           @taxes = qsearch( 'cust_main_county', \%no_taxclass );
3343         }
3344
3345         $taxhash_elim{ shift(@elim) } = '';
3346
3347       } while ( !scalar(@taxes) && scalar(@elim) );
3348
3349       @taxes = grep { ! $_->taxname or ! $self->tax_exemption($_->taxname) }
3350                     @taxes
3351         if $self->cust_main_exemption; #just to be safe
3352
3353       if ( $conf->exists('tax-pkg_address') && $cust_pkg->locationnum ) {
3354         foreach (@taxes) {
3355           $_->set('pkgnum',      $cust_pkg->pkgnum );
3356           $_->set('locationnum', $cust_pkg->locationnum );
3357         }
3358       }
3359
3360       $taxes{''} = [ @taxes ];
3361       $taxes{'setup'} = [ @taxes ];
3362       $taxes{'recur'} = [ @taxes ];
3363       $taxes{$_} = [ @taxes ] foreach (@classes);
3364
3365       # # maybe eliminate this entirely, along with all the 0% records
3366       # unless ( @taxes ) {
3367       #   return
3368       #     "fatal: can't find tax rate for state/county/country/taxclass ".
3369       #     join('/', map $taxhash{$_}, qw(state county country taxclass) );
3370       # }
3371
3372     } #if $conf->exists('enable_taxproducts') ...
3373
3374   }
3375
3376   my @display = ();
3377   my $separate = $conf->exists('separate_usage');
3378   my $usage_mandate = $cust_pkg->part_pkg->option('usage_mandate', 'Hush!');
3379   if ( $separate || $cust_bill_pkg->hidden || $usage_mandate ) {
3380
3381     my $temp_pkg = new FS::cust_pkg { pkgpart => $real_pkgpart };
3382     my %hash = $cust_bill_pkg->hidden  # maybe for all bill linked?
3383                ? (  'section' => $temp_pkg->part_pkg->categoryname )
3384                : ();
3385
3386     my $section = $cust_pkg->part_pkg->option('usage_section', 'Hush!');
3387     my $summary = $cust_pkg->part_pkg->option('summarize_usage', 'Hush!');
3388     if ( $separate ) {
3389       push @display, new FS::cust_bill_pkg_display { type => 'S', %hash };
3390       push @display, new FS::cust_bill_pkg_display { type => 'R', %hash };
3391     } else {
3392       push @display, new FS::cust_bill_pkg_display
3393                        { type => '',
3394                          %hash,
3395                          ( ( $usage_mandate ) ? ( 'summary' => 'Y' ) : () ),
3396                        };
3397     }
3398
3399     if ($separate && $section && $summary) {
3400       push @display, new FS::cust_bill_pkg_display { type    => 'U',
3401                                                      summary => 'Y',
3402                                                      %hash,
3403                                                    };
3404     }
3405     if ($usage_mandate || $section && $summary) {
3406       $hash{post_total} = 'Y';
3407     }
3408
3409     $hash{section} = $section if ($separate || $usage_mandate);
3410     push @display, new FS::cust_bill_pkg_display { type => 'U', %hash };
3411
3412   }
3413   $cust_bill_pkg->set('display', \@display);
3414
3415   my %tax_cust_bill_pkg = $cust_bill_pkg->disintegrate;
3416   foreach my $key (keys %tax_cust_bill_pkg) {
3417     my @taxes = @{ $taxes{$key} || [] };
3418     my $tax_cust_bill_pkg = $tax_cust_bill_pkg{$key};
3419
3420     my %localtaxlisthash = ();
3421     foreach my $tax ( @taxes ) {
3422
3423       my $taxname = ref( $tax ). ' '. $tax->taxnum;
3424 #      $taxname .= ' pkgnum'. $cust_pkg->pkgnum.
3425 #                  ' locationnum'. $cust_pkg->locationnum
3426 #        if $conf->exists('tax-pkg_address') && $cust_pkg->locationnum;
3427
3428       $taxlisthash->{ $taxname } ||= [ $tax ];
3429       push @{ $taxlisthash->{ $taxname  } }, $tax_cust_bill_pkg;
3430
3431       $localtaxlisthash{ $taxname } ||= [ $tax ];
3432       push @{ $localtaxlisthash{ $taxname  } }, $tax_cust_bill_pkg;
3433
3434     }
3435
3436     warn "finding taxed taxes...\n" if $DEBUG > 2;
3437     foreach my $tax ( keys %localtaxlisthash ) {
3438       my $tax_object = shift @{ $localtaxlisthash{$tax} };
3439       warn "found possible taxed tax ". $tax_object->taxname. " we call $tax\n"
3440         if $DEBUG > 2;
3441       next unless $tax_object->can('tax_on_tax');
3442
3443       foreach my $tot ( $tax_object->tax_on_tax( $self ) ) {
3444         my $totname = ref( $tot ). ' '. $tot->taxnum;
3445
3446         warn "checking $totname which we call ". $tot->taxname. " as applicable\n"
3447           if $DEBUG > 2;
3448         next unless exists( $localtaxlisthash{ $totname } ); # only increase
3449                                                              # existing taxes
3450         warn "adding $totname to taxed taxes\n" if $DEBUG > 2;
3451         my $hashref_or_error =
3452           $tax_object->taxline( $localtaxlisthash{$tax},
3453                                 'custnum'      => $self->custnum,
3454                                 'invoice_time' => $invoice_time,
3455                               );
3456         return $hashref_or_error
3457           unless ref($hashref_or_error);
3458
3459         $taxlisthash->{ $totname } ||= [ $tot ];
3460         push @{ $taxlisthash->{ $totname  } }, $hashref_or_error->{amount};
3461
3462       }
3463     }
3464
3465   }
3466
3467   '';
3468 }
3469
3470 sub _gather_taxes {
3471   my $self = shift;
3472   my $part_pkg = shift;
3473   my $class = shift;
3474
3475   my @taxes = ();
3476   my $geocode = $self->geocode('cch');
3477
3478   my @taxclassnums = map { $_->taxclassnum }
3479                      $part_pkg->part_pkg_taxoverride($class);
3480
3481   unless (@taxclassnums) {
3482     @taxclassnums = map { $_->taxclassnum }
3483                     grep { $_->taxable eq 'Y' }
3484                     $part_pkg->part_pkg_taxrate('cch', $geocode, $class);
3485   }
3486   warn "Found taxclassnum values of ". join(',', @taxclassnums)
3487     if $DEBUG;
3488
3489   my $extra_sql =
3490     "AND (".
3491     join(' OR ', map { "taxclassnum = $_" } @taxclassnums ). ")";
3492
3493   @taxes = qsearch({ 'table' => 'tax_rate',
3494                      'hashref' => { 'geocode' => $geocode, },
3495                      'extra_sql' => $extra_sql,
3496                   })
3497     if scalar(@taxclassnums);
3498
3499   warn "Found taxes ".
3500        join(',', map{ ref($_). " ". $_->get($_->primary_key) } @taxes). "\n"
3501    if $DEBUG;
3502
3503   [ @taxes ];
3504
3505 }
3506
3507 =item collect [ HASHREF | OPTION => VALUE ... ]
3508
3509 (Attempt to) collect money for this customer's outstanding invoices (see
3510 L<FS::cust_bill>).  Usually used after the bill method.
3511
3512 Actions are now triggered by billing events; see L<FS::part_event> and the
3513 billing events web interface.  Old-style invoice events (see
3514 L<FS::part_bill_event>) have been deprecated.
3515
3516 If there is an error, returns the error, otherwise returns false.
3517
3518 Options are passed as name-value pairs.
3519
3520 Currently available options are:
3521
3522 =over 4
3523
3524 =item invoice_time
3525
3526 Use this time when deciding when to print invoices and late notices on those invoices.  The default is now.  It is specified as a UNIX timestamp; see L<perlfunc/"time">).  Also see L<Time::Local> and L<Date::Parse> for conversion functions.
3527
3528 =item retry
3529
3530 Retry card/echeck/LEC transactions even when not scheduled by invoice events.
3531
3532 =item check_freq
3533
3534 "1d" for the traditional, daily events (the default), or "1m" for the new monthly events (part_event.check_freq)
3535
3536 =item quiet
3537
3538 set true to surpress email card/ACH decline notices.
3539
3540 =item debug
3541
3542 Debugging level.  Default is 0 (no debugging), or can be set to 1 (passed-in options), 2 (traces progress), 3 (more information), or 4 (include full search queries)
3543
3544 =back
3545
3546 # =item payby
3547 #
3548 # allows for one time override of normal customer billing method
3549
3550 =cut
3551
3552 sub collect {
3553   my( $self, %options ) = @_;
3554   my $invoice_time = $options{'invoice_time'} || time;
3555
3556   #put below somehow?
3557   local $SIG{HUP} = 'IGNORE';
3558   local $SIG{INT} = 'IGNORE';
3559   local $SIG{QUIT} = 'IGNORE';
3560   local $SIG{TERM} = 'IGNORE';
3561   local $SIG{TSTP} = 'IGNORE';
3562   local $SIG{PIPE} = 'IGNORE';
3563
3564   my $oldAutoCommit = $FS::UID::AutoCommit;
3565   local $FS::UID::AutoCommit = 0;
3566   my $dbh = dbh;
3567
3568   $self->select_for_update; #mutex
3569
3570   if ( $DEBUG ) {
3571     my $balance = $self->balance;
3572     warn "$me collect customer ". $self->custnum. ": balance $balance\n"
3573   }
3574
3575   if ( exists($options{'retry_card'}) ) {
3576     carp 'retry_card option passed to collect is deprecated; use retry';
3577     $options{'retry'} ||= $options{'retry_card'};
3578   }
3579   if ( exists($options{'retry'}) && $options{'retry'} ) {
3580     my $error = $self->retry_realtime;
3581     if ( $error ) {
3582       $dbh->rollback if $oldAutoCommit;
3583       return $error;
3584     }
3585   }
3586
3587   my $error = $self->do_cust_event(
3588     'debug'      => ( $options{'debug'} || 0 ),
3589     'time'       => $invoice_time,
3590     'check_freq' => $options{'check_freq'},
3591     'stage'      => 'collect',
3592   );
3593   if ( $error ) {
3594     $dbh->rollback if $oldAutoCommit;
3595     return $error;
3596   }
3597
3598   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
3599   '';
3600
3601 }
3602
3603 =item do_cust_event [ HASHREF | OPTION => VALUE ... ]
3604
3605 Runs billing events; see L<FS::part_event> and the billing events web
3606 interface.
3607
3608 If there is an error, returns the error, otherwise returns false.
3609
3610 Options are passed as name-value pairs.
3611
3612 Currently available options are:
3613
3614 =over 4
3615
3616 =item time
3617
3618 Use this time when deciding when to print invoices and late notices on those invoices.  The default is now.  It is specified as a UNIX timestamp; see L<perlfunc/"time">).  Also see L<Time::Local> and L<Date::Parse> for conversion functions.
3619
3620 =item check_freq
3621
3622 "1d" for the traditional, daily events (the default), or "1m" for the new monthly events (part_event.check_freq)
3623
3624 =item stage
3625
3626 "collect" (the default) or "pre-bill"
3627
3628 =item quiet
3629
3630 set true to surpress email card/ACH decline notices.
3631
3632 =item debug
3633
3634 Debugging level.  Default is 0 (no debugging), or can be set to 1 (passed-in options), 2 (traces progress), 3 (more information), or 4 (include full search queries)
3635
3636 =cut
3637
3638 # =item payby
3639 #
3640 # allows for one time override of normal customer billing method
3641
3642 # =item retry
3643 #
3644 # Retry card/echeck/LEC transactions even when not scheduled by invoice events.
3645
3646 sub do_cust_event {
3647   my( $self, %options ) = @_;
3648   my $time = $options{'time'} || time;
3649
3650   #put below somehow?
3651   local $SIG{HUP} = 'IGNORE';
3652   local $SIG{INT} = 'IGNORE';
3653   local $SIG{QUIT} = 'IGNORE';
3654   local $SIG{TERM} = 'IGNORE';
3655   local $SIG{TSTP} = 'IGNORE';
3656   local $SIG{PIPE} = 'IGNORE';
3657
3658   my $oldAutoCommit = $FS::UID::AutoCommit;
3659   local $FS::UID::AutoCommit = 0;
3660   my $dbh = dbh;
3661
3662   $self->select_for_update; #mutex
3663
3664   if ( $DEBUG ) {
3665     my $balance = $self->balance;
3666     warn "$me do_cust_event customer ". $self->custnum. ": balance $balance\n"
3667   }
3668
3669 #  if ( exists($options{'retry_card'}) ) {
3670 #    carp 'retry_card option passed to collect is deprecated; use retry';
3671 #    $options{'retry'} ||= $options{'retry_card'};
3672 #  }
3673 #  if ( exists($options{'retry'}) && $options{'retry'} ) {
3674 #    my $error = $self->retry_realtime;
3675 #    if ( $error ) {
3676 #      $dbh->rollback if $oldAutoCommit;
3677 #      return $error;
3678 #    }
3679 #  }
3680
3681   # false laziness w/pay_batch::import_results
3682
3683   my $due_cust_event = $self->due_cust_event(
3684     'debug'      => ( $options{'debug'} || 0 ),
3685     'time'       => $time,
3686     'check_freq' => $options{'check_freq'},
3687     'stage'      => ( $options{'stage'} || 'collect' ),
3688   );
3689   unless( ref($due_cust_event) ) {
3690     $dbh->rollback if $oldAutoCommit;
3691     return $due_cust_event;
3692   }
3693
3694   foreach my $cust_event ( @$due_cust_event ) {
3695
3696     #XXX lock event
3697
3698     #re-eval event conditions (a previous event could have changed things)
3699     unless ( $cust_event->test_conditions( 'time' => $time ) ) {
3700       #don't leave stray "new/locked" records around
3701       my $error = $cust_event->delete;
3702       if ( $error ) {
3703         #gah, even with transactions
3704         $dbh->commit if $oldAutoCommit; #well.
3705         return $error;
3706       }
3707       next;
3708     }
3709
3710     {
3711       local $realtime_bop_decline_quiet = 1 if $options{'quiet'};
3712       warn "  running cust_event ". $cust_event->eventnum. "\n"
3713         if $DEBUG > 1;
3714
3715
3716       #if ( my $error = $cust_event->do_event(%options) ) { #XXX %options?
3717       if ( my $error = $cust_event->do_event() ) {
3718         #XXX wtf is this?  figure out a proper dealio with return value
3719         #from do_event
3720           # gah, even with transactions.
3721           $dbh->commit if $oldAutoCommit; #well.
3722           return $error;
3723         }
3724     }
3725
3726   }
3727
3728   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
3729   '';
3730
3731 }
3732
3733 =item due_cust_event [ HASHREF | OPTION => VALUE ... ]
3734
3735 Inserts database records for and returns an ordered listref of new events due
3736 for this customer, as FS::cust_event objects (see L<FS::cust_event>).  If no
3737 events are due, an empty listref is returned.  If there is an error, returns a
3738 scalar error message.
3739
3740 To actually run the events, call each event's test_condition method, and if
3741 still true, call the event's do_event method.
3742
3743 Options are passed as a hashref or as a list of name-value pairs.  Available
3744 options are:
3745
3746 =over 4
3747
3748 =item check_freq
3749
3750 Search only for events of this check frequency (how often events of this type are checked); currently "1d" (daily, the default) and "1m" (monthly) are recognized.
3751
3752 =item stage
3753
3754 "collect" (the default) or "pre-bill"
3755
3756 =item time
3757
3758 "Current time" for the events.
3759
3760 =item debug
3761
3762 Debugging level.  Default is 0 (no debugging), or can be set to 1 (passed-in options), 2 (traces progress), 3 (more information), or 4 (include full search queries)
3763
3764 =item eventtable
3765
3766 Only return events for the specified eventtable (by default, events of all eventtables are returned)
3767
3768 =item objects
3769
3770 Explicitly pass the objects to be tested (typically used with eventtable).
3771
3772 =item testonly
3773
3774 Set to true to return the objects, but not actually insert them into the
3775 database.
3776
3777 =back
3778
3779 =cut
3780
3781 sub due_cust_event {
3782   my $self = shift;
3783   my %opt = ref($_[0]) ? %{ $_[0] } : @_;
3784
3785   #???
3786   #my $DEBUG = $opt{'debug'}
3787   local($DEBUG) = $opt{'debug'}
3788     if defined($opt{'debug'}) && $opt{'debug'} > $DEBUG;
3789
3790   warn "$me due_cust_event called with options ".
3791        join(', ', map { "$_: $opt{$_}" } keys %opt). "\n"
3792     if $DEBUG;
3793
3794   $opt{'time'} ||= time;
3795
3796   local $SIG{HUP} = 'IGNORE';
3797   local $SIG{INT} = 'IGNORE';
3798   local $SIG{QUIT} = 'IGNORE';
3799   local $SIG{TERM} = 'IGNORE';
3800   local $SIG{TSTP} = 'IGNORE';
3801   local $SIG{PIPE} = 'IGNORE';
3802
3803   my $oldAutoCommit = $FS::UID::AutoCommit;
3804   local $FS::UID::AutoCommit = 0;
3805   my $dbh = dbh;
3806
3807   $self->select_for_update #mutex
3808     unless $opt{testonly};
3809
3810   ###
3811   # find possible events (initial search)
3812   ###
3813
3814   my @cust_event = ();
3815
3816   my @eventtable = $opt{'eventtable'}
3817                      ? ( $opt{'eventtable'} )
3818                      : FS::part_event->eventtables_runorder;
3819
3820   foreach my $eventtable ( @eventtable ) {
3821
3822     my @objects;
3823     if ( $opt{'objects'} ) {
3824
3825       @objects = @{ $opt{'objects'} };
3826
3827     } else {
3828
3829       #my @objects = $self->eventtable(); # sub cust_main { @{ [ $self ] }; }
3830       @objects = ( $eventtable eq 'cust_main' )
3831                    ? ( $self )
3832                    : ( $self->$eventtable() );
3833
3834     }
3835
3836     my @e_cust_event = ();
3837
3838     my $cross = "CROSS JOIN $eventtable";
3839     $cross .= ' LEFT JOIN cust_main USING ( custnum )'
3840       unless $eventtable eq 'cust_main';
3841
3842     foreach my $object ( @objects ) {
3843
3844       #this first search uses the condition_sql magic for optimization.
3845       #the more possible events we can eliminate in this step the better
3846
3847       my $cross_where = '';
3848       my $pkey = $object->primary_key;
3849       $cross_where = "$eventtable.$pkey = ". $object->$pkey();
3850
3851       my $join = FS::part_event_condition->join_conditions_sql( $eventtable );
3852       my $extra_sql =
3853         FS::part_event_condition->where_conditions_sql( $eventtable,
3854                                                         'time'=>$opt{'time'}
3855                                                       );
3856       my $order = FS::part_event_condition->order_conditions_sql( $eventtable );
3857
3858       $extra_sql = "AND $extra_sql" if $extra_sql;
3859
3860       #here is the agent virtualization
3861       $extra_sql .= " AND (    part_event.agentnum IS NULL
3862                             OR part_event.agentnum = ". $self->agentnum. ' )';
3863
3864       $extra_sql .= " $order";
3865
3866       warn "searching for events for $eventtable ". $object->$pkey. "\n"
3867         if $opt{'debug'} > 2;
3868       my @part_event = qsearch( {
3869         'debug'     => ( $opt{'debug'} > 3 ? 1 : 0 ),
3870         'select'    => 'part_event.*',
3871         'table'     => 'part_event',
3872         'addl_from' => "$cross $join",
3873         'hashref'   => { 'check_freq' => ( $opt{'check_freq'} || '1d' ),
3874                          'eventtable' => $eventtable,
3875                          'disabled'   => '',
3876                        },
3877         'extra_sql' => "AND $cross_where $extra_sql",
3878       } );
3879
3880       if ( $DEBUG > 2 ) {
3881         my $pkey = $object->primary_key;
3882         warn "      ". scalar(@part_event).
3883              " possible events found for $eventtable ". $object->$pkey(). "\n";
3884       }
3885
3886       push @e_cust_event, map { $_->new_cust_event($object) } @part_event;
3887
3888     }
3889
3890     warn "    ". scalar(@e_cust_event).
3891          " subtotal possible cust events found for $eventtable\n"
3892       if $DEBUG > 1;
3893
3894     push @cust_event, @e_cust_event;
3895
3896   }
3897
3898   warn "  ". scalar(@cust_event).
3899        " total possible cust events found in initial search\n"
3900     if $DEBUG; # > 1;
3901
3902
3903   ##
3904   # test stage
3905   ##
3906
3907   $opt{stage} ||= 'collect';
3908   @cust_event =
3909     grep { my $stage = $_->part_event->event_stage;
3910            $opt{stage} eq $stage or ( ! $stage && $opt{stage} eq 'collect' )
3911          }
3912          @cust_event;
3913
3914   ##
3915   # test conditions
3916   ##
3917
3918   my %unsat = ();
3919
3920   @cust_event = grep $_->test_conditions( 'time'          => $opt{'time'},
3921                                           'stats_hashref' => \%unsat ),
3922                      @cust_event;
3923
3924   warn "  ". scalar(@cust_event). " cust events left satisfying conditions\n"
3925     if $DEBUG; # > 1;
3926
3927   warn "    invalid conditions not eliminated with condition_sql:\n".
3928        join('', map "      $_: ".$unsat{$_}."\n", keys %unsat )
3929     if $DEBUG; # > 1;
3930
3931   ##
3932   # insert
3933   ##
3934
3935   unless( $opt{testonly} ) {
3936     foreach my $cust_event ( @cust_event ) {
3937
3938       my $error = $cust_event->insert();
3939       if ( $error ) {
3940         $dbh->rollback if $oldAutoCommit;
3941         return $error;
3942       }
3943
3944     }
3945   }
3946
3947   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
3948
3949   ##
3950   # return
3951   ##
3952
3953   warn "  returning events: ". Dumper(@cust_event). "\n"
3954     if $DEBUG > 2;
3955
3956   \@cust_event;
3957
3958 }
3959
3960 =item retry_realtime
3961
3962 Schedules realtime / batch  credit card / electronic check / LEC billing
3963 events for for retry.  Useful if card information has changed or manual
3964 retry is desired.  The 'collect' method must be called to actually retry
3965 the transaction.
3966
3967 Implementation details: For either this customer, or for each of this
3968 customer's open invoices, changes the status of the first "done" (with
3969 statustext error) realtime processing event to "failed".
3970
3971 =cut
3972
3973 sub retry_realtime {
3974   my $self = shift;
3975
3976   local $SIG{HUP} = 'IGNORE';
3977   local $SIG{INT} = 'IGNORE';
3978   local $SIG{QUIT} = 'IGNORE';
3979   local $SIG{TERM} = 'IGNORE';
3980   local $SIG{TSTP} = 'IGNORE';
3981   local $SIG{PIPE} = 'IGNORE';
3982
3983   my $oldAutoCommit = $FS::UID::AutoCommit;
3984   local $FS::UID::AutoCommit = 0;
3985   my $dbh = dbh;
3986
3987   #a little false laziness w/due_cust_event (not too bad, really)
3988
3989   my $join = FS::part_event_condition->join_conditions_sql;
3990   my $order = FS::part_event_condition->order_conditions_sql;
3991   my $mine =
3992   '( '
3993    . join ( ' OR ' , map {
3994     "( part_event.eventtable = " . dbh->quote($_)
3995     . " AND tablenum IN( SELECT " . dbdef->table($_)->primary_key . " from $_ where custnum = " . dbh->quote( $self->custnum ) . "))" ;
3996    } FS::part_event->eventtables)
3997    . ') ';
3998
3999   #here is the agent virtualization
4000   my $agent_virt = " (    part_event.agentnum IS NULL
4001                        OR part_event.agentnum = ". $self->agentnum. ' )';
4002
4003   #XXX this shouldn't be hardcoded, actions should declare it...
4004   my @realtime_events = qw(
4005     cust_bill_realtime_card
4006     cust_bill_realtime_check
4007     cust_bill_realtime_lec
4008     cust_bill_batch
4009   );
4010
4011   my $is_realtime_event = ' ( '. join(' OR ', map "part_event.action = '$_'",
4012                                                   @realtime_events
4013                                      ).
4014                           ' ) ';
4015
4016   my @cust_event = qsearchs({
4017     'table'     => 'cust_event',
4018     'select'    => 'cust_event.*',
4019     'addl_from' => "LEFT JOIN part_event USING ( eventpart ) $join",
4020     'hashref'   => { 'status' => 'done' },
4021     'extra_sql' => " AND statustext IS NOT NULL AND statustext != '' ".
4022                    " AND $mine AND $is_realtime_event AND $agent_virt $order" # LIMIT 1"
4023   });
4024
4025   my %seen_invnum = ();
4026   foreach my $cust_event (@cust_event) {
4027
4028     #max one for the customer, one for each open invoice
4029     my $cust_X = $cust_event->cust_X;
4030     next if $seen_invnum{ $cust_event->part_event->eventtable eq 'cust_bill'
4031                           ? $cust_X->invnum
4032                           : 0
4033                         }++
4034          or $cust_event->part_event->eventtable eq 'cust_bill'
4035             && ! $cust_X->owed;
4036
4037     my $error = $cust_event->retry;
4038     if ( $error ) {
4039       $dbh->rollback if $oldAutoCommit;
4040       return "error scheduling event for retry: $error";
4041     }
4042
4043   }
4044
4045   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
4046   '';
4047
4048 }
4049
4050 # some horrid false laziness here to avoid refactor fallout
4051 # eventually realtime realtime_bop and realtime_refund_bop should go
4052 # away and be replaced by _new_realtime_bop and _new_realtime_refund_bop
4053
4054 =item realtime_bop METHOD AMOUNT [ OPTION => VALUE ... ]
4055
4056 Runs a realtime credit card, ACH (electronic check) or phone bill transaction
4057 via a Business::OnlinePayment realtime gateway.  See
4058 L<http://420.am/business-onlinepayment> for supported gateways.
4059
4060 Available methods are: I<CC>, I<ECHECK> and I<LEC>
4061
4062 Available options are: I<description>, I<invnum>, I<quiet>, I<paynum_ref>, I<payunique>
4063
4064 The additional options I<payname>, I<address1>, I<address2>, I<city>, I<state>,
4065 I<zip>, I<payinfo> and I<paydate> are also available.  Any of these options,
4066 if set, will override the value from the customer record.
4067
4068 I<description> is a free-text field passed to the gateway.  It defaults to
4069 the value defined by the business-onlinepayment-description configuration
4070 option, or "Internet services" if that is unset.
4071
4072 If an I<invnum> is specified, this payment (if successful) is applied to the
4073 specified invoice.  If you don't specify an I<invnum> you might want to
4074 call the B<apply_payments> method or set the I<apply> option.
4075
4076 I<apply> can be set to true to apply a resulting payment.
4077
4078 I<quiet> can be set true to surpress email decline notices.
4079
4080 I<paynum_ref> can be set to a scalar reference.  It will be filled in with the
4081 resulting paynum, if any.
4082
4083 I<payunique> is a unique identifier for this payment.
4084
4085 (moved from cust_bill) (probably should get realtime_{card,ach,lec} here too)
4086
4087 =cut
4088
4089 sub realtime_bop {
4090   my $self = shift;
4091
4092   return $self->_new_realtime_bop(@_)
4093     if $self->_new_bop_required();
4094
4095   my($method, $amount);
4096   my %options = ();
4097   if (ref($_[0]) eq 'HASH') {
4098     %options = %{$_[0]};
4099     $method = $options{method};
4100     $amount = $options{amount};
4101   } else {
4102     ( $method, $amount ) = ( shift, shift );
4103     %options = @_;
4104   }
4105   if ( $DEBUG ) {
4106     warn "$me realtime_bop: $method $amount\n";
4107     warn "  $_ => $options{$_}\n" foreach keys %options;
4108   }
4109
4110   unless ( $options{'description'} ) {
4111     if ( $conf->exists('business-onlinepayment-description') ) {
4112       my $dtempl = $conf->config('business-onlinepayment-description');
4113
4114       my $agent = $self->agent->agent;
4115       #$pkgs... not here
4116       $options{'description'} = eval qq("$dtempl");
4117     } else {
4118       $options{'description'} = 'Internet services';
4119     }
4120   }
4121
4122   return $self->fake_bop($method, $amount, %options) if $options{'fake'};
4123
4124   eval "use Business::OnlinePayment";
4125   die $@ if $@;
4126
4127   my $payinfo = exists($options{'payinfo'})
4128                   ? $options{'payinfo'}
4129                   : $self->payinfo;
4130
4131   my %method2payby = (
4132     'CC'     => 'CARD',
4133     'ECHECK' => 'CHEK',
4134     'LEC'    => 'LECB',
4135   );
4136
4137   ###
4138   # check for banned credit card/ACH
4139   ###
4140
4141   my $ban = qsearchs('banned_pay', {
4142     'payby'   => $method2payby{$method},
4143     'payinfo' => md5_base64($payinfo),
4144   } );
4145   return "Banned credit card" if $ban;
4146
4147   ###
4148   # set taxclass and trans_is_recur based on invnum if there is one
4149   ###
4150
4151   my $taxclass = '';
4152   my $trans_is_recur = 0;
4153   if ( $options{'invnum'} ) {
4154
4155     my $cust_bill = qsearchs('cust_bill', { 'invnum' => $options{'invnum'} } );
4156     die "invnum ". $options{'invnum'}. " not found" unless $cust_bill;
4157
4158     my @part_pkg =
4159       map  { $_->part_pkg }
4160       grep { $_ }
4161       map  { $_->cust_pkg }
4162       $cust_bill->cust_bill_pkg;
4163
4164     my @taxclasses = map $_->taxclass, @part_pkg;
4165     $taxclass = $taxclasses[0]
4166       unless grep { $taxclasses[0] ne $_ } @taxclasses; #unless there are
4167                                                         #different taxclasses
4168     $trans_is_recur = 1
4169       if grep { $_->freq ne '0' } @part_pkg;
4170
4171   }
4172
4173   ###
4174   # select a gateway
4175   ###
4176
4177   #look for an agent gateway override first
4178   my $cardtype;
4179   if ( $method eq 'CC' ) {
4180     $cardtype = cardtype($payinfo);
4181   } elsif ( $method eq 'ECHECK' ) {
4182     $cardtype = 'ACH';
4183   } else {
4184     $cardtype = $method;
4185   }
4186
4187   my $override =
4188        qsearchs('agent_payment_gateway', { agentnum => $self->agentnum,
4189                                            cardtype => $cardtype,
4190                                            taxclass => $taxclass,       } )
4191     || qsearchs('agent_payment_gateway', { agentnum => $self->agentnum,
4192                                            cardtype => '',
4193                                            taxclass => $taxclass,       } )
4194     || qsearchs('agent_payment_gateway', { agentnum => $self->agentnum,
4195                                            cardtype => $cardtype,
4196                                            taxclass => '',              } )
4197     || qsearchs('agent_payment_gateway', { agentnum => $self->agentnum,
4198                                            cardtype => '',
4199                                            taxclass => '',              } );
4200
4201   my $payment_gateway = '';
4202   my( $processor, $login, $password, $action, @bop_options );
4203   if ( $override ) { #use a payment gateway override
4204
4205     $payment_gateway = $override->payment_gateway;
4206
4207     $processor   = $payment_gateway->gateway_module;
4208     $login       = $payment_gateway->gateway_username;
4209     $password    = $payment_gateway->gateway_password;
4210     $action      = $payment_gateway->gateway_action;
4211     @bop_options = $payment_gateway->options;
4212
4213   } else { #use the standard settings from the config
4214
4215     ( $processor, $login, $password, $action, @bop_options ) =
4216       $self->default_payment_gateway($method);
4217
4218   }
4219
4220   ###
4221   # massage data
4222   ###
4223
4224   my $address = exists($options{'address1'})
4225                     ? $options{'address1'}
4226                     : $self->address1;
4227   my $address2 = exists($options{'address2'})
4228                     ? $options{'address2'}
4229                     : $self->address2;
4230   $address .= ", ". $address2 if length($address2);
4231
4232   my $o_payname = exists($options{'payname'})
4233                     ? $options{'payname'}
4234                     : $self->payname;
4235   my($payname, $payfirst, $paylast);
4236   if ( $o_payname && $method ne 'ECHECK' ) {
4237     ($payname = $o_payname) =~ /^\s*([\w \,\.\-\']*)?\s+([\w\,\.\-\']+)\s*$/
4238       or return "Illegal payname $payname";
4239     ($payfirst, $paylast) = ($1, $2);
4240   } else {
4241     $payfirst = $self->getfield('first');
4242     $paylast = $self->getfield('last');
4243     $payname =  "$payfirst $paylast";
4244   }
4245
4246   my @invoicing_list = $self->invoicing_list_emailonly;
4247   if ( $conf->exists('emailinvoiceautoalways')
4248        || $conf->exists('emailinvoiceauto') && ! @invoicing_list
4249        || ( $conf->exists('emailinvoiceonly') && ! @invoicing_list ) ) {
4250     push @invoicing_list, $self->all_emails;
4251   }
4252
4253   my $email = ($conf->exists('business-onlinepayment-email-override'))
4254               ? $conf->config('business-onlinepayment-email-override')
4255               : $invoicing_list[0];
4256
4257   my %content = ();
4258
4259   my $payip = exists($options{'payip'})
4260                 ? $options{'payip'}
4261                 : $self->payip;
4262   $content{customer_ip} = $payip
4263     if length($payip);
4264
4265   $content{invoice_number} = $options{'invnum'}
4266     if exists($options{'invnum'}) && length($options{'invnum'});
4267
4268   $content{email_customer} =
4269     (    $conf->exists('business-onlinepayment-email_customer')
4270       || $conf->exists('business-onlinepayment-email-override') );
4271
4272   my $paydate = '';
4273   if ( $method eq 'CC' ) {
4274
4275     $content{card_number} = $payinfo;
4276     $paydate = exists($options{'paydate'})
4277                     ? $options{'paydate'}
4278                     : $self->paydate;
4279     $paydate =~ /^\d{2}(\d{2})[\/\-](\d+)[\/\-]\d+$/;
4280     $content{expiration} = "$2/$1";
4281
4282     my $paycvv = exists($options{'paycvv'})
4283                    ? $options{'paycvv'}
4284                    : $self->paycvv;
4285     $content{cvv2} = $paycvv
4286       if length($paycvv);
4287
4288     my $paystart_month = exists($options{'paystart_month'})
4289                            ? $options{'paystart_month'}
4290                            : $self->paystart_month;
4291
4292     my $paystart_year  = exists($options{'paystart_year'})
4293                            ? $options{'paystart_year'}
4294                            : $self->paystart_year;
4295
4296     $content{card_start} = "$paystart_month/$paystart_year"
4297       if $paystart_month && $paystart_year;
4298
4299     my $payissue       = exists($options{'payissue'})
4300                            ? $options{'payissue'}
4301                            : $self->payissue;
4302     $content{issue_number} = $payissue if $payissue;
4303
4304     if ( $self->_bop_recurring_billing( 'payinfo'        => $payinfo,
4305                                         'trans_is_recur' => $trans_is_recur,
4306                                       )
4307        )
4308     {
4309       $content{recurring_billing} = 'YES';
4310       $content{acct_code} = 'rebill'
4311         if $conf->exists('credit_card-recurring_billing_acct_code');
4312     }
4313
4314   } elsif ( $method eq 'ECHECK' ) {
4315     ( $content{account_number}, $content{routing_code} ) =
4316       split('@', $payinfo);
4317     $content{bank_name} = $o_payname;
4318     $content{bank_state} = exists($options{'paystate'})
4319                              ? $options{'paystate'}
4320                              : $self->getfield('paystate');
4321     $content{account_type} = exists($options{'paytype'})
4322                                ? uc($options{'paytype'}) || 'CHECKING'
4323                                : uc($self->getfield('paytype')) || 'CHECKING';
4324     $content{account_name} = $payname;
4325     $content{customer_org} = $self->company ? 'B' : 'I';
4326     $content{state_id}       = exists($options{'stateid'})
4327                                  ? $options{'stateid'}
4328                                  : $self->getfield('stateid');
4329     $content{state_id_state} = exists($options{'stateid_state'})
4330                                  ? $options{'stateid_state'}
4331                                  : $self->getfield('stateid_state');
4332     $content{customer_ssn} = exists($options{'ss'})
4333                                ? $options{'ss'}
4334                                : $self->ss;
4335   } elsif ( $method eq 'LEC' ) {
4336     $content{phone} = $payinfo;
4337   }
4338
4339   ###
4340   # run transaction(s)
4341   ###
4342
4343   my $balance = exists( $options{'balance'} )
4344                   ? $options{'balance'}
4345                   : $self->balance;
4346
4347   $self->select_for_update; #mutex ... just until we get our pending record in
4348
4349   #the checks here are intended to catch concurrent payments
4350   #double-form-submission prevention is taken care of in cust_pay_pending::check
4351
4352   #check the balance
4353   return "The customer's balance has changed; $method transaction aborted."
4354     if $self->balance < $balance;
4355     #&& $self->balance < $amount; #might as well anyway?
4356
4357   #also check and make sure there aren't *other* pending payments for this cust
4358
4359   my @pending = qsearch('cust_pay_pending', {
4360     'custnum' => $self->custnum,
4361     'status'  => { op=>'!=', value=>'done' }
4362   });
4363   return "A payment is already being processed for this customer (".
4364          join(', ', map 'paypendingnum '. $_->paypendingnum, @pending ).
4365          "); $method transaction aborted."
4366     if scalar(@pending);
4367
4368   #okay, good to go, if we're a duplicate, cust_pay_pending will kick us out
4369
4370   my $cust_pay_pending = new FS::cust_pay_pending {
4371     'custnum'           => $self->custnum,
4372     #'invnum'            => $options{'invnum'},
4373     'paid'              => $amount,
4374     '_date'             => '',
4375     'payby'             => $method2payby{$method},
4376     'payinfo'           => $payinfo,
4377     'paydate'           => $paydate,
4378     'recurring_billing' => $content{recurring_billing},
4379     'pkgnum'            => $options{'pkgnum'},
4380     'status'            => 'new',
4381     'gatewaynum'        => ( $payment_gateway ? $payment_gateway->gatewaynum : '' ),
4382   };
4383   $cust_pay_pending->payunique( $options{payunique} )
4384     if defined($options{payunique}) && length($options{payunique});
4385   my $cpp_new_err = $cust_pay_pending->insert; #mutex lost when this is inserted
4386   return $cpp_new_err if $cpp_new_err;
4387
4388   my( $action1, $action2 ) = split(/\s*\,\s*/, $action );
4389
4390   my $transaction = new Business::OnlinePayment( $processor, @bop_options );
4391   $transaction->content(
4392     'type'           => $method,
4393     'login'          => $login,
4394     'password'       => $password,
4395     'action'         => $action1,
4396     'description'    => $options{'description'},
4397     'amount'         => $amount,
4398     #'invoice_number' => $options{'invnum'},
4399     'customer_id'    => $self->custnum,
4400     'last_name'      => $paylast,
4401     'first_name'     => $payfirst,
4402     'name'           => $payname,
4403     'address'        => $address,
4404     'city'           => ( exists($options{'city'})
4405                             ? $options{'city'}
4406                             : $self->city          ),
4407     'state'          => ( exists($options{'state'})
4408                             ? $options{'state'}
4409                             : $self->state          ),
4410     'zip'            => ( exists($options{'zip'})
4411                             ? $options{'zip'}
4412                             : $self->zip          ),
4413     'country'        => ( exists($options{'country'})
4414                             ? $options{'country'}
4415                             : $self->country          ),
4416     'referer'        => 'http://cleanwhisker.420.am/', #XXX fix referer :/
4417     'email'          => $email,
4418     'phone'          => $self->daytime || $self->night,
4419     %content, #after
4420   );
4421
4422   $cust_pay_pending->status('pending');
4423   my $cpp_pending_err = $cust_pay_pending->replace;
4424   return $cpp_pending_err if $cpp_pending_err;
4425
4426   #config?
4427   my $BOP_TESTING = 0;
4428   my $BOP_TESTING_SUCCESS = 1;
4429
4430   unless ( $BOP_TESTING ) {
4431     $transaction->submit();
4432   } else {
4433     if ( $BOP_TESTING_SUCCESS ) {
4434       $transaction->is_success(1);
4435       $transaction->authorization('fake auth');
4436     } else {
4437       $transaction->is_success(0);
4438       $transaction->error_message('fake failure');
4439     }
4440   }
4441
4442   if ( $transaction->is_success() && $action2 ) {
4443
4444     $cust_pay_pending->status('authorized');
4445     my $cpp_authorized_err = $cust_pay_pending->replace;
4446     return $cpp_authorized_err if $cpp_authorized_err;
4447
4448     my $auth = $transaction->authorization;
4449     my $ordernum = $transaction->can('order_number')
4450                    ? $transaction->order_number
4451                    : '';
4452
4453     my $capture =
4454       new Business::OnlinePayment( $processor, @bop_options );
4455
4456     my %capture = (
4457       %content,
4458       type           => $method,
4459       action         => $action2,
4460       login          => $login,
4461       password       => $password,
4462       order_number   => $ordernum,
4463       amount         => $amount,
4464       authorization  => $auth,
4465       description    => $options{'description'},
4466     );
4467
4468     foreach my $field (qw( authorization_source_code returned_ACI
4469                            transaction_identifier validation_code
4470                            transaction_sequence_num local_transaction_date
4471                            local_transaction_time AVS_result_code          )) {
4472       $capture{$field} = $transaction->$field() if $transaction->can($field);
4473     }
4474
4475     $capture->content( %capture );
4476
4477     $capture->submit();
4478
4479     unless ( $capture->is_success ) {
4480       my $e = "Authorization successful but capture failed, custnum #".
4481               $self->custnum. ': '.  $capture->result_code.
4482               ": ". $capture->error_message;
4483       warn $e;
4484       return $e;
4485     }
4486
4487   }
4488
4489   $cust_pay_pending->status($transaction->is_success() ? 'captured' : 'declined');
4490   my $cpp_captured_err = $cust_pay_pending->replace;
4491   return $cpp_captured_err if $cpp_captured_err;
4492
4493   ###
4494   # remove paycvv after initial transaction
4495   ###
4496
4497   #false laziness w/misc/process/payment.cgi - check both to make sure working
4498   # correctly
4499   if ( defined $self->dbdef_table->column('paycvv')
4500        && length($self->paycvv)
4501        && ! grep { $_ eq cardtype($payinfo) } $conf->config('cvv-save')
4502   ) {
4503     my $error = $self->remove_cvv;
4504     if ( $error ) {
4505       warn "WARNING: error removing cvv: $error\n";
4506     }
4507   }
4508
4509   ###
4510   # result handling
4511   ###
4512
4513   if ( $transaction->is_success() ) {
4514
4515     my $paybatch = '';
4516     if ( $payment_gateway ) { # agent override
4517       $paybatch = $payment_gateway->gatewaynum. '-';
4518     }
4519
4520     $paybatch .= "$processor:". $transaction->authorization;
4521
4522     $paybatch .= ':'. $transaction->order_number
4523       if $transaction->can('order_number')
4524       && length($transaction->order_number);
4525
4526     my $cust_pay = new FS::cust_pay ( {
4527        'custnum'  => $self->custnum,
4528        'invnum'   => $options{'invnum'},
4529        'paid'     => $amount,
4530        '_date'    => '',
4531        'payby'    => $method2payby{$method},
4532        'payinfo'  => $payinfo,
4533        'paybatch' => $paybatch,
4534        'paydate'  => $paydate,
4535        'pkgnum'   => $options{'pkgnum'},
4536     } );
4537     #doesn't hurt to know, even though the dup check is in cust_pay_pending now
4538     $cust_pay->payunique( $options{payunique} )
4539       if defined($options{payunique}) && length($options{payunique});
4540
4541     my $oldAutoCommit = $FS::UID::AutoCommit;
4542     local $FS::UID::AutoCommit = 0;
4543     my $dbh = dbh;
4544
4545     #start a transaction, insert the cust_pay and set cust_pay_pending.status to done in a single transction
4546
4547     my $error = $cust_pay->insert($options{'manual'} ? ( 'manual' => 1 ) : () );
4548
4549     if ( $error ) {
4550       $cust_pay->invnum(''); #try again with no specific invnum
4551       my $error2 = $cust_pay->insert( $options{'manual'} ?
4552                                       ( 'manual' => 1 ) : ()
4553                                     );
4554       if ( $error2 ) {
4555         # gah.  but at least we have a record of the state we had to abort in
4556         # from cust_pay_pending now.
4557         my $e = "WARNING: $method captured but payment not recorded - ".
4558                 "error inserting payment ($processor): $error2".
4559                 " (previously tried insert with invnum #$options{'invnum'}" .
4560                 ": $error ) - pending payment saved as paypendingnum ".
4561                 $cust_pay_pending->paypendingnum. "\n";
4562         warn $e;
4563         return $e;
4564       }
4565     }
4566
4567     if ( $options{'paynum_ref'} ) {
4568       ${ $options{'paynum_ref'} } = $cust_pay->paynum;
4569     }
4570
4571     $cust_pay_pending->status('done');
4572     $cust_pay_pending->statustext('captured');
4573     $cust_pay_pending->paynum($cust_pay->paynum);
4574     my $cpp_done_err = $cust_pay_pending->replace;
4575
4576     if ( $cpp_done_err ) {
4577
4578       $dbh->rollback or die $dbh->errstr if $oldAutoCommit;
4579       my $e = "WARNING: $method captured but payment not recorded - ".
4580               "error updating status for paypendingnum ".
4581               $cust_pay_pending->paypendingnum. ": $cpp_done_err \n";
4582       warn $e;
4583       return $e;
4584
4585     } else {
4586
4587       $dbh->commit or die $dbh->errstr if $oldAutoCommit;
4588
4589       if ( $options{'apply'} ) {
4590         my $apply_error = $self->apply_payments_and_credits;
4591         if ( $apply_error ) {
4592           warn "WARNING: error applying payment: $apply_error\n";
4593           #but we still should return no error cause the payment otherwise went
4594           #through...
4595         }
4596       }
4597
4598       return ''; #no error
4599
4600     }
4601
4602   } else {
4603
4604     my $perror = "$processor error: ". $transaction->error_message;
4605
4606     unless ( $transaction->error_message ) {
4607
4608       my $t_response;
4609       if ( $transaction->can('response_page') ) {
4610         $t_response = {
4611                         'page'    => ( $transaction->can('response_page')
4612                                          ? $transaction->response_page
4613                                          : ''
4614                                      ),
4615                         'code'    => ( $transaction->can('response_code')
4616                                          ? $transaction->response_code
4617                                          : ''
4618                                      ),
4619                         'headers' => ( $transaction->can('response_headers')
4620                                          ? $transaction->response_headers
4621                                          : ''
4622                                      ),
4623                       };
4624       } else {
4625         $t_response .=
4626           "No additional debugging information available for $processor";
4627       }
4628
4629       $perror .= "No error_message returned from $processor -- ".
4630                  ( ref($t_response) ? Dumper($t_response) : $t_response );
4631
4632     }
4633
4634     if ( !$options{'quiet'} && !$realtime_bop_decline_quiet
4635          && $conf->exists('emaildecline')
4636          && grep { $_ ne 'POST' } $self->invoicing_list
4637          && ! grep { $transaction->error_message =~ /$_/ }
4638                    $conf->config('emaildecline-exclude')
4639     ) {
4640       my @templ = $conf->config('declinetemplate');
4641       my $template = new Text::Template (
4642         TYPE   => 'ARRAY',
4643         SOURCE => [ map "$_\n", @templ ],
4644       ) or return "($perror) can't create template: $Text::Template::ERROR";
4645       $template->compile()
4646         or return "($perror) can't compile template: $Text::Template::ERROR";
4647
4648       my $templ_hash = {
4649         'company_name'    =>
4650           scalar( $conf->config('company_name', $self->agentnum ) ),
4651         'company_address' =>
4652           join("\n", $conf->config('company_address', $self->agentnum ) ),
4653         'error'           => $transaction->error_message,
4654       };
4655
4656       my $error = send_email(
4657         'from'    => $conf->config('invoice_from', $self->agentnum ),
4658         'to'      => [ grep { $_ ne 'POST' } $self->invoicing_list ],
4659         'subject' => 'Your payment could not be processed',
4660         'body'    => [ $template->fill_in(HASH => $templ_hash) ],
4661       );
4662
4663       $perror .= " (also received error sending decline notification: $error)"
4664         if $error;
4665
4666     }
4667
4668     $cust_pay_pending->status('done');
4669     $cust_pay_pending->statustext("declined: $perror");
4670     my $cpp_done_err = $cust_pay_pending->replace;
4671     if ( $cpp_done_err ) {
4672       my $e = "WARNING: $method declined but pending payment not resolved - ".
4673               "error updating status for paypendingnum ".
4674               $cust_pay_pending->paypendingnum. ": $cpp_done_err \n";
4675       warn $e;
4676       $perror = "$e ($perror)";
4677     }
4678
4679     return $perror;
4680   }
4681
4682 }
4683
4684 sub _bop_recurring_billing {
4685   my( $self, %opt ) = @_;
4686
4687   my $method = scalar($conf->config('credit_card-recurring_billing_flag'));
4688
4689   if ( defined($method) && $method eq 'transaction_is_recur' ) {
4690
4691     return 1 if $opt{'trans_is_recur'};
4692
4693   } else {
4694
4695     my %hash = ( 'custnum' => $self->custnum,
4696                  'payby'   => 'CARD',
4697                );
4698
4699     return 1
4700       if qsearch('cust_pay', { %hash, 'payinfo' => $opt{'payinfo'} } )
4701       || qsearch('cust_pay', { %hash, 'paymask' => $self->mask_payinfo('CARD',
4702                                                                $opt{'payinfo'} )
4703                              } );
4704
4705   }
4706
4707   return 0;
4708
4709 }
4710
4711
4712 =item realtime_refund_bop METHOD [ OPTION => VALUE ... ]
4713
4714 Refunds a realtime credit card, ACH (electronic check) or phone bill transaction
4715 via a Business::OnlinePayment realtime gateway.  See
4716 L<http://420.am/business-onlinepayment> for supported gateways.
4717
4718 Available methods are: I<CC>, I<ECHECK> and I<LEC>
4719
4720 Available options are: I<amount>, I<reason>, I<paynum>, I<paydate>
4721
4722 Most gateways require a reference to an original payment transaction to refund,
4723 so you probably need to specify a I<paynum>.
4724
4725 I<amount> defaults to the original amount of the payment if not specified.
4726
4727 I<reason> specifies a reason for the refund.
4728
4729 I<paydate> specifies the expiration date for a credit card overriding the
4730 value from the customer record or the payment record. Specified as yyyy-mm-dd
4731
4732 Implementation note: If I<amount> is unspecified or equal to the amount of the
4733 orignal payment, first an attempt is made to "void" the transaction via
4734 the gateway (to cancel a not-yet settled transaction) and then if that fails,
4735 the normal attempt is made to "refund" ("credit") the transaction via the
4736 gateway is attempted.
4737
4738 #The additional options I<payname>, I<address1>, I<address2>, I<city>, I<state>,
4739 #I<zip>, I<payinfo> and I<paydate> are also available.  Any of these options,
4740 #if set, will override the value from the customer record.
4741
4742 #If an I<invnum> is specified, this payment (if successful) is applied to the
4743 #specified invoice.  If you don't specify an I<invnum> you might want to
4744 #call the B<apply_payments> method.
4745
4746 =cut
4747
4748 #some false laziness w/realtime_bop, not enough to make it worth merging
4749 #but some useful small subs should be pulled out
4750 sub realtime_refund_bop {
4751   my $self = shift;
4752
4753   return $self->_new_realtime_refund_bop(@_)
4754     if $self->_new_bop_required();
4755
4756   my( $method, %options ) = @_;
4757   if ( $DEBUG ) {
4758     warn "$me realtime_refund_bop: $method refund\n";
4759     warn "  $_ => $options{$_}\n" foreach keys %options;
4760   }
4761
4762   eval "use Business::OnlinePayment";
4763   die $@ if $@;
4764
4765   ###
4766   # look up the original payment and optionally a gateway for that payment
4767   ###
4768
4769   my $cust_pay = '';
4770   my $amount = $options{'amount'};
4771
4772   my( $processor, $login, $password, @bop_options ) ;
4773   my( $auth, $order_number ) = ( '', '', '' );
4774
4775   if ( $options{'paynum'} ) {
4776
4777     warn "  paynum: $options{paynum}\n" if $DEBUG > 1;
4778     $cust_pay = qsearchs('cust_pay', { paynum=>$options{'paynum'} } )
4779       or return "Unknown paynum $options{'paynum'}";
4780     $amount ||= $cust_pay->paid;
4781
4782     $cust_pay->paybatch =~ /^((\d+)\-)?(\w+):\s*([\w\-\/ ]*)(:([\w\-]+))?$/
4783       or return "Can't parse paybatch for paynum $options{'paynum'}: ".
4784                 $cust_pay->paybatch;
4785     my $gatewaynum = '';
4786     ( $gatewaynum, $processor, $auth, $order_number ) = ( $2, $3, $4, $6 );
4787
4788     if ( $gatewaynum ) { #gateway for the payment to be refunded
4789
4790       my $payment_gateway =
4791         qsearchs('payment_gateway', { 'gatewaynum' => $gatewaynum } );
4792       die "payment gateway $gatewaynum not found"
4793         unless $payment_gateway;
4794
4795       $processor   = $payment_gateway->gateway_module;
4796       $login       = $payment_gateway->gateway_username;
4797       $password    = $payment_gateway->gateway_password;
4798       @bop_options = $payment_gateway->options;
4799
4800     } else { #try the default gateway
4801
4802       my( $conf_processor, $unused_action );
4803       ( $conf_processor, $login, $password, $unused_action, @bop_options ) =
4804         $self->default_payment_gateway($method);
4805
4806       return "processor of payment $options{'paynum'} $processor does not".
4807              " match default processor $conf_processor"
4808         unless $processor eq $conf_processor;
4809
4810     }
4811
4812
4813   } else { # didn't specify a paynum, so look for agent gateway overrides
4814            # like a normal transaction
4815
4816     my $cardtype;
4817     if ( $method eq 'CC' ) {
4818       $cardtype = cardtype($self->payinfo);
4819     } elsif ( $method eq 'ECHECK' ) {
4820       $cardtype = 'ACH';
4821     } else {
4822       $cardtype = $method;
4823     }
4824     my $override =
4825            qsearchs('agent_payment_gateway', { agentnum => $self->agentnum,
4826                                                cardtype => $cardtype,
4827                                                taxclass => '',              } )
4828         || qsearchs('agent_payment_gateway', { agentnum => $self->agentnum,
4829                                                cardtype => '',
4830                                                taxclass => '',              } );
4831
4832     if ( $override ) { #use a payment gateway override
4833
4834       my $payment_gateway = $override->payment_gateway;
4835
4836       $processor   = $payment_gateway->gateway_module;
4837       $login       = $payment_gateway->gateway_username;
4838       $password    = $payment_gateway->gateway_password;
4839       #$action      = $payment_gateway->gateway_action;
4840       @bop_options = $payment_gateway->options;
4841
4842     } else { #use the standard settings from the config
4843
4844       my $unused_action;
4845       ( $processor, $login, $password, $unused_action, @bop_options ) =
4846         $self->default_payment_gateway($method);
4847
4848     }
4849
4850   }
4851   return "neither amount nor paynum specified" unless $amount;
4852
4853   my %content = (
4854     'type'           => $method,
4855     'login'          => $login,
4856     'password'       => $password,
4857     'order_number'   => $order_number,
4858     'amount'         => $amount,
4859     'referer'        => 'http://cleanwhisker.420.am/', #XXX fix referer :/
4860   );
4861   $content{authorization} = $auth
4862     if length($auth); #echeck/ACH transactions have an order # but no auth
4863                       #(at least with authorize.net)
4864
4865   my $disable_void_after;
4866   if ($conf->exists('disable_void_after')
4867       && $conf->config('disable_void_after') =~ /^(\d+)$/) {
4868     $disable_void_after = $1;
4869   }
4870
4871   #first try void if applicable
4872   if ( $cust_pay && $cust_pay->paid == $amount
4873     && (
4874       ( not defined($disable_void_after) )
4875       || ( time < ($cust_pay->_date + $disable_void_after ) )
4876     )
4877   ) {
4878     warn "  attempting void\n" if $DEBUG > 1;
4879     my $void = new Business::OnlinePayment( $processor, @bop_options );
4880     $content{'card_number'} = $cust_pay->payinfo
4881       if $cust_pay->payby eq 'CARD'
4882       && $void->can('info') && $void->info('CC_void_requires_card');
4883     $void->content( 'action' => 'void', %content );
4884     $void->submit();
4885     if ( $void->is_success ) {
4886       my $error = $cust_pay->void($options{'reason'});
4887       if ( $error ) {
4888         # gah, even with transactions.
4889         my $e = 'WARNING: Card/ACH voided but database not updated - '.
4890                 "error voiding payment: $error";
4891         warn $e;
4892         return $e;
4893       }
4894       warn "  void successful\n" if $DEBUG > 1;
4895       return '';
4896     }
4897   }
4898
4899   warn "  void unsuccessful, trying refund\n"
4900     if $DEBUG > 1;
4901
4902   #massage data
4903   my $address = $self->address1;
4904   $address .= ", ". $self->address2 if $self->address2;
4905
4906   my($payname, $payfirst, $paylast);
4907   if ( $self->payname && $method ne 'ECHECK' ) {
4908     $payname = $self->payname;
4909     $payname =~ /^\s*([\w \,\.\-\']*)?\s+([\w\,\.\-\']+)\s*$/
4910       or return "Illegal payname $payname";
4911     ($payfirst, $paylast) = ($1, $2);
4912   } else {
4913     $payfirst = $self->getfield('first');
4914     $paylast = $self->getfield('last');
4915     $payname =  "$payfirst $paylast";
4916   }
4917
4918   my @invoicing_list = $self->invoicing_list_emailonly;
4919   if ( $conf->exists('emailinvoiceautoalways')
4920        || $conf->exists('emailinvoiceauto') && ! @invoicing_list
4921        || ( $conf->exists('emailinvoiceonly') && ! @invoicing_list ) ) {
4922     push @invoicing_list, $self->all_emails;
4923   }
4924
4925   my $email = ($conf->exists('business-onlinepayment-email-override'))
4926               ? $conf->config('business-onlinepayment-email-override')
4927               : $invoicing_list[0];
4928
4929   my $payip = exists($options{'payip'})
4930                 ? $options{'payip'}
4931                 : $self->payip;
4932   $content{customer_ip} = $payip
4933     if length($payip);
4934
4935   my $payinfo = '';
4936   if ( $method eq 'CC' ) {
4937
4938     if ( $cust_pay ) {
4939       $content{card_number} = $payinfo = $cust_pay->payinfo;
4940       (exists($options{'paydate'}) ? $options{'paydate'} : $cust_pay->paydate)
4941         =~ /^\d{2}(\d{2})[\/\-](\d+)[\/\-]\d+$/ &&
4942         ($content{expiration} = "$2/$1");  # where available
4943     } else {
4944       $content{card_number} = $payinfo = $self->payinfo;
4945       (exists($options{'paydate'}) ? $options{'paydate'} : $self->paydate)
4946         =~ /^\d{2}(\d{2})[\/\-](\d+)[\/\-]\d+$/;
4947       $content{expiration} = "$2/$1";
4948     }
4949
4950   } elsif ( $method eq 'ECHECK' ) {
4951
4952     if ( $cust_pay ) {
4953       $payinfo = $cust_pay->payinfo;
4954     } else {
4955       $payinfo = $self->payinfo;
4956     }
4957     ( $content{account_number}, $content{routing_code} )= split('@', $payinfo );
4958     $content{bank_name} = $self->payname;
4959     $content{account_type} = 'CHECKING';
4960     $content{account_name} = $payname;
4961     $content{customer_org} = $self->company ? 'B' : 'I';
4962     $content{customer_ssn} = $self->ss;
4963   } elsif ( $method eq 'LEC' ) {
4964     $content{phone} = $payinfo = $self->payinfo;
4965   }
4966
4967   #then try refund
4968   my $refund = new Business::OnlinePayment( $processor, @bop_options );
4969   my %sub_content = $refund->content(
4970     'action'         => 'credit',
4971     'customer_id'    => $self->custnum,
4972     'last_name'      => $paylast,
4973     'first_name'     => $payfirst,
4974     'name'           => $payname,
4975     'address'        => $address,
4976     'city'           => $self->city,
4977     'state'          => $self->state,
4978     'zip'            => $self->zip,
4979     'country'        => $self->country,
4980     'email'          => $email,
4981     'phone'          => $self->daytime || $self->night,
4982     %content, #after
4983   );
4984   warn join('', map { "  $_ => $sub_content{$_}\n" } keys %sub_content )
4985     if $DEBUG > 1;
4986   $refund->submit();
4987
4988   return "$processor error: ". $refund->error_message
4989     unless $refund->is_success();
4990
4991   my %method2payby = (
4992     'CC'     => 'CARD',
4993     'ECHECK' => 'CHEK',
4994     'LEC'    => 'LECB',
4995   );
4996
4997   my $paybatch = "$processor:". $refund->authorization;
4998   $paybatch .= ':'. $refund->order_number
4999     if $refund->can('order_number') && $refund->order_number;
5000
5001   while ( $cust_pay && $cust_pay->unapplied < $amount ) {
5002     my @cust_bill_pay = $cust_pay->cust_bill_pay;
5003     last unless @cust_bill_pay;
5004     my $cust_bill_pay = pop @cust_bill_pay;
5005     my $error = $cust_bill_pay->delete;
5006     last if $error;
5007   }
5008
5009   my $cust_refund = new FS::cust_refund ( {
5010     'custnum'  => $self->custnum,
5011     'paynum'   => $options{'paynum'},
5012     'refund'   => $amount,
5013     '_date'    => '',
5014     'payby'    => $method2payby{$method},
5015     'payinfo'  => $payinfo,
5016     'paybatch' => $paybatch,
5017     'reason'   => $options{'reason'} || 'card or ACH refund',
5018   } );
5019   my $error = $cust_refund->insert;
5020   if ( $error ) {
5021     $cust_refund->paynum(''); #try again with no specific paynum
5022     my $error2 = $cust_refund->insert;
5023     if ( $error2 ) {
5024       # gah, even with transactions.
5025       my $e = 'WARNING: Card/ACH refunded but database not updated - '.
5026               "error inserting refund ($processor): $error2".
5027               " (previously tried insert with paynum #$options{'paynum'}" .
5028               ": $error )";
5029       warn $e;
5030       return $e;
5031     }
5032   }
5033
5034   ''; #no error
5035
5036 }
5037
5038 # does the configuration indicate the new bop routines are required?
5039
5040 sub _new_bop_required {
5041   my $self = shift;
5042
5043   my $botpp = 'Business::OnlineThirdPartyPayment';
5044
5045   return 1
5046     if ( $conf->config('business-onlinepayment-namespace') eq $botpp ||
5047          scalar( grep { $_->gateway_namespace eq $botpp }
5048                  qsearch( 'payment_gateway', { 'disabled' => '' } )
5049                )
5050        )
5051   ;
5052
5053   '';
5054 }
5055
5056 =item realtime_collect [ OPTION => VALUE ... ]
5057
5058 Runs a realtime credit card, ACH (electronic check) or phone bill transaction
5059 via a Business::OnlinePayment or Business::OnlineThirdPartyPayment realtime
5060 gateway.  See L<http://420.am/business-onlinepayment> and
5061 L<http://420.am/business-onlinethirdpartypayment> for supported gateways.
5062
5063 On failure returns an error message.
5064
5065 Returns false or a hashref upon success.  The hashref contains keys popup_url reference, and collectitems.  The first is a URL to which a browser should be redirected for completion of collection.  The second is a reference id for the transaction suitable for the end user.  The collectitems is a reference to a list of name value pairs suitable for assigning to a html form and posted to popup_url.
5066
5067 Available options are: I<method>, I<amount>, I<description>, I<invnum>, I<quiet>, I<paynum_ref>, I<payunique>, I<session_id>, I<pkgnum>
5068
5069 I<method> is one of: I<CC>, I<ECHECK> and I<LEC>.  If none is specified
5070 then it is deduced from the customer record.
5071
5072 If no I<amount> is specified, then the customer balance is used.
5073
5074 The additional options I<payname>, I<address1>, I<address2>, I<city>, I<state>,
5075 I<zip>, I<payinfo> and I<paydate> are also available.  Any of these options,
5076 if set, will override the value from the customer record.
5077
5078 I<description> is a free-text field passed to the gateway.  It defaults to
5079 the value defined by the business-onlinepayment-description configuration
5080 option, or "Internet services" if that is unset.
5081
5082 If an I<invnum> is specified, this payment (if successful) is applied to the
5083 specified invoice.  If you don't specify an I<invnum> you might want to
5084 call the B<apply_payments> method or set the I<apply> option.
5085
5086 I<apply> can be set to true to apply a resulting payment.
5087
5088 I<quiet> can be set true to surpress email decline notices.
5089
5090 I<paynum_ref> can be set to a scalar reference.  It will be filled in with the
5091 resulting paynum, if any.
5092
5093 I<payunique> is a unique identifier for this payment.
5094
5095 I<session_id> is a session identifier associated with this payment.
5096
5097 I<depend_jobnum> allows payment capture to unlock export jobs
5098
5099 =cut
5100
5101 sub realtime_collect {
5102   my( $self, %options ) = @_;
5103
5104   if ( $DEBUG ) {
5105     warn "$me realtime_collect:\n";
5106     warn "  $_ => $options{$_}\n" foreach keys %options;
5107   }
5108
5109   $options{amount} = $self->balance unless exists( $options{amount} );
5110   $options{method} = FS::payby->payby2bop($self->payby)
5111     unless exists( $options{method} );
5112
5113   return $self->realtime_bop({%options});
5114
5115 }
5116
5117 =item _realtime_bop { [ ARG => VALUE ... ] }
5118
5119 Runs a realtime credit card, ACH (electronic check) or phone bill transaction
5120 via a Business::OnlinePayment realtime gateway.  See
5121 L<http://420.am/business-onlinepayment> for supported gateways.
5122
5123 Required arguments in the hashref are I<method>, and I<amount>
5124
5125 Available methods are: I<CC>, I<ECHECK> and I<LEC>
5126
5127 Available optional arguments are: I<description>, I<invnum>, I<quiet>, I<paynum_ref>, I<payunique>, I<session_id>
5128
5129 The additional options I<payname>, I<address1>, I<address2>, I<city>, I<state>,
5130 I<zip>, I<payinfo> and I<paydate> are also available.  Any of these options,
5131 if set, will override the value from the customer record.
5132
5133 I<description> is a free-text field passed to the gateway.  It defaults to
5134 the value defined by the business-onlinepayment-description configuration
5135 option, or "Internet services" if that is unset.
5136
5137 If an I<invnum> is specified, this payment (if successful) is applied to the
5138 specified invoice.  If you don't specify an I<invnum> you might want to
5139 call the B<apply_payments> method.
5140
5141 I<quiet> can be set true to surpress email decline notices.
5142
5143 I<paynum_ref> can be set to a scalar reference.  It will be filled in with the
5144 resulting paynum, if any.
5145
5146 I<payunique> is a unique identifier for this payment.
5147
5148 I<session_id> is a session identifier associated with this payment.
5149
5150 I<depend_jobnum> allows payment capture to unlock export jobs
5151
5152 (moved from cust_bill) (probably should get realtime_{card,ach,lec} here too)
5153
5154 =cut
5155
5156 # some helper routines
5157 sub _payment_gateway {
5158   my ($self, $options) = @_;
5159
5160   $options->{payment_gateway} = $self->agent->payment_gateway( %$options )
5161     unless exists($options->{payment_gateway});
5162
5163   $options->{payment_gateway};
5164 }
5165
5166 sub _bop_auth {
5167   my ($self, $options) = @_;
5168
5169   (
5170     'login'    => $options->{payment_gateway}->gateway_username,
5171     'password' => $options->{payment_gateway}->gateway_password,
5172   );
5173 }
5174
5175 sub _bop_options {
5176   my ($self, $options) = @_;
5177
5178   $options->{payment_gateway}->gatewaynum
5179     ? $options->{payment_gateway}->options
5180     : @{ $options->{payment_gateway}->get('options') };
5181 }
5182
5183 sub _bop_defaults {
5184   my ($self, $options) = @_;
5185
5186   unless ( $options->{'description'} ) {
5187     if ( $conf->exists('business-onlinepayment-description') ) {
5188       my $dtempl = $conf->config('business-onlinepayment-description');
5189
5190       my $agent = $self->agent->agent;
5191       #$pkgs... not here
5192       $options->{'description'} = eval qq("$dtempl");
5193     } else {
5194       $options->{'description'} = 'Internet services';
5195     }
5196   }
5197
5198   $options->{payinfo} = $self->payinfo unless exists( $options->{payinfo} );
5199   $options->{invnum} ||= '';
5200   $options->{payname} = $self->payname unless exists( $options->{payname} );
5201 }
5202
5203 sub _bop_content {
5204   my ($self, $options) = @_;
5205   my %content = ();
5206
5207   $content{address} = exists($options->{'address1'})
5208                         ? $options->{'address1'}
5209                         : $self->address1;
5210   my $address2 = exists($options->{'address2'})
5211                    ? $options->{'address2'}
5212                    : $self->address2;
5213   $content{address} .= ", ". $address2 if length($address2);
5214
5215   my $payip = exists($options->{'payip'}) ? $options->{'payip'} : $self->payip;
5216   $content{customer_ip} = $payip if length($payip);
5217
5218   $content{invoice_number} = $options->{'invnum'}
5219     if exists($options->{'invnum'}) && length($options->{'invnum'});
5220
5221   $content{email_customer} =
5222     (    $conf->exists('business-onlinepayment-email_customer')
5223       || $conf->exists('business-onlinepayment-email-override') );
5224
5225   $content{payfirst} = $self->getfield('first');
5226   $content{paylast} = $self->getfield('last');
5227
5228   $content{account_name} = "$content{payfirst} $content{paylast}"
5229     if $options->{method} eq 'ECHECK';
5230
5231   $content{name} = $options->{payname};
5232   $content{name} = $content{account_name} if exists($content{account_name});
5233
5234   $content{city} = exists($options->{city})
5235                      ? $options->{city}
5236                      : $self->city;
5237   $content{state} = exists($options->{state})
5238                       ? $options->{state}
5239                       : $self->state;
5240   $content{zip} = exists($options->{zip})
5241                     ? $options->{'zip'}
5242                     : $self->zip;
5243   $content{country} = exists($options->{country})
5244                         ? $options->{country}
5245                         : $self->country;
5246   $content{referer} = 'http://cleanwhisker.420.am/'; #XXX fix referer :/
5247   $content{phone} = $self->daytime || $self->night;
5248
5249   (%content);
5250 }
5251
5252 my %bop_method2payby = (
5253   'CC'     => 'CARD',
5254   'ECHECK' => 'CHEK',
5255   'LEC'    => 'LECB',
5256 );
5257
5258 sub _new_realtime_bop {
5259   my $self = shift;
5260
5261   my %options = ();
5262   if (ref($_[0]) eq 'HASH') {
5263     %options = %{$_[0]};
5264   } else {
5265     my ( $method, $amount ) = ( shift, shift );
5266     %options = @_;
5267     $options{method} = $method;
5268     $options{amount} = $amount;
5269   }
5270
5271   if ( $DEBUG ) {
5272     warn "$me realtime_bop (new): $options{method} $options{amount}\n";
5273     warn "  $_ => $options{$_}\n" foreach keys %options;
5274   }
5275
5276   return $self->fake_bop(%options) if $options{'fake'};
5277
5278   $self->_bop_defaults(\%options);
5279
5280   ###
5281   # set trans_is_recur based on invnum if there is one
5282   ###
5283
5284   my $trans_is_recur = 0;
5285   if ( $options{'invnum'} ) {
5286
5287     my $cust_bill = qsearchs('cust_bill', { 'invnum' => $options{'invnum'} } );
5288     die "invnum ". $options{'invnum'}. " not found" unless $cust_bill;
5289
5290     my @part_pkg =
5291       map  { $_->part_pkg }
5292       grep { $_ }
5293       map  { $_->cust_pkg }
5294       $cust_bill->cust_bill_pkg;
5295
5296     $trans_is_recur = 1
5297       if grep { $_->freq ne '0' } @part_pkg;
5298
5299   }
5300
5301   ###
5302   # select a gateway
5303   ###
5304
5305   my $payment_gateway =  $self->_payment_gateway( \%options );
5306   my $namespace = $payment_gateway->gateway_namespace;
5307
5308   eval "use $namespace";
5309   die $@ if $@;
5310
5311   ###
5312   # check for banned credit card/ACH
5313   ###
5314
5315   my $ban = qsearchs('banned_pay', {
5316     'payby'   => $bop_method2payby{$options{method}},
5317     'payinfo' => md5_base64($options{payinfo}),
5318   } );
5319   return "Banned credit card" if $ban;
5320
5321   ###
5322   # massage data
5323   ###
5324
5325   my (%bop_content) = $self->_bop_content(\%options);
5326
5327   if ( $options{method} ne 'ECHECK' ) {
5328     $options{payname} =~ /^\s*([\w \,\.\-\']*)?\s+([\w\,\.\-\']+)\s*$/
5329       or return "Illegal payname $options{payname}";
5330     ($bop_content{payfirst}, $bop_content{paylast}) = ($1, $2);
5331   }
5332
5333   my @invoicing_list = $self->invoicing_list_emailonly;
5334   if ( $conf->exists('emailinvoiceautoalways')
5335        || $conf->exists('emailinvoiceauto') && ! @invoicing_list
5336        || ( $conf->exists('emailinvoiceonly') && ! @invoicing_list ) ) {
5337     push @invoicing_list, $self->all_emails;
5338   }
5339
5340   my $email = ($conf->exists('business-onlinepayment-email-override'))
5341               ? $conf->config('business-onlinepayment-email-override')
5342               : $invoicing_list[0];
5343
5344   my $paydate = '';
5345   my %content = ();
5346   if ( $namespace eq 'Business::OnlinePayment' && $options{method} eq 'CC' ) {
5347
5348     $content{card_number} = $options{payinfo};
5349     $paydate = exists($options{'paydate'})
5350                     ? $options{'paydate'}
5351                     : $self->paydate;
5352     $paydate =~ /^\d{2}(\d{2})[\/\-](\d+)[\/\-]\d+$/;
5353     $content{expiration} = "$2/$1";
5354
5355     my $paycvv = exists($options{'paycvv'})
5356                    ? $options{'paycvv'}
5357                    : $self->paycvv;
5358     $content{cvv2} = $paycvv
5359       if length($paycvv);
5360
5361     my $paystart_month = exists($options{'paystart_month'})
5362                            ? $options{'paystart_month'}
5363                            : $self->paystart_month;
5364
5365     my $paystart_year  = exists($options{'paystart_year'})
5366                            ? $options{'paystart_year'}
5367                            : $self->paystart_year;
5368
5369     $content{card_start} = "$paystart_month/$paystart_year"
5370       if $paystart_month && $paystart_year;
5371
5372     my $payissue       = exists($options{'payissue'})
5373                            ? $options{'payissue'}
5374                            : $self->payissue;
5375     $content{issue_number} = $payissue if $payissue;
5376
5377     if ( $self->_bop_recurring_billing( 'payinfo'        => $options{'payinfo'},
5378                                         'trans_is_recur' => $trans_is_recur,
5379                                       )
5380        )
5381     {
5382       $content{recurring_billing} = 'YES';
5383       $content{acct_code} = 'rebill'
5384         if $conf->exists('credit_card-recurring_billing_acct_code');
5385     }
5386
5387   } elsif ( $namespace eq 'Business::OnlinePayment' && $options{method} eq 'ECHECK' ){
5388     ( $content{account_number}, $content{routing_code} ) =
5389       split('@', $options{payinfo});
5390     $content{bank_name} = $options{payname};
5391     $content{bank_state} = exists($options{'paystate'})
5392                              ? $options{'paystate'}
5393                              : $self->getfield('paystate');
5394     $content{account_type} = exists($options{'paytype'})
5395                                ? uc($options{'paytype'}) || 'CHECKING'
5396                                : uc($self->getfield('paytype')) || 'CHECKING';
5397     $content{customer_org} = $self->company ? 'B' : 'I';
5398     $content{state_id}       = exists($options{'stateid'})
5399                                  ? $options{'stateid'}
5400                                  : $self->getfield('stateid');
5401     $content{state_id_state} = exists($options{'stateid_state'})
5402                                  ? $options{'stateid_state'}
5403                                  : $self->getfield('stateid_state');
5404     $content{customer_ssn} = exists($options{'ss'})
5405                                ? $options{'ss'}
5406                                : $self->ss;
5407   } elsif ( $namespace eq 'Business::OnlinePayment' && $options{method} eq 'LEC' ) {
5408     $content{phone} = $options{payinfo};
5409   } elsif ( $namespace eq 'Business::OnlineThirdPartyPayment' ) {
5410     #move along
5411   } else {
5412     #die an evil death
5413   }
5414
5415   ###
5416   # run transaction(s)
5417   ###
5418
5419   my $balance = exists( $options{'balance'} )
5420                   ? $options{'balance'}
5421                   : $self->balance;
5422
5423   $self->select_for_update; #mutex ... just until we get our pending record in
5424
5425   #the checks here are intended to catch concurrent payments
5426   #double-form-submission prevention is taken care of in cust_pay_pending::check
5427
5428   #check the balance
5429   return "The customer's balance has changed; $options{method} transaction aborted."
5430     if $self->balance < $balance;
5431     #&& $self->balance < $options{amount}; #might as well anyway?
5432
5433   #also check and make sure there aren't *other* pending payments for this cust
5434
5435   my @pending = qsearch('cust_pay_pending', {
5436     'custnum' => $self->custnum,
5437     'status'  => { op=>'!=', value=>'done' }
5438   });
5439   return "A payment is already being processed for this customer (".
5440          join(', ', map 'paypendingnum '. $_->paypendingnum, @pending ).
5441          "); $options{method} transaction aborted."
5442     if scalar(@pending);
5443
5444   #okay, good to go, if we're a duplicate, cust_pay_pending will kick us out
5445
5446   my $cust_pay_pending = new FS::cust_pay_pending {
5447     'custnum'           => $self->custnum,
5448     #'invnum'            => $options{'invnum'},
5449     'paid'              => $options{amount},
5450     '_date'             => '',
5451     'payby'             => $bop_method2payby{$options{method}},
5452     'payinfo'           => $options{payinfo},
5453     'paydate'           => $paydate,
5454     'recurring_billing' => $content{recurring_billing},
5455     'pkgnum'            => $options{'pkgnum'},
5456     'status'            => 'new',
5457     'gatewaynum'        => $payment_gateway->gatewaynum || '',
5458     'session_id'        => $options{session_id} || '',
5459     'jobnum'            => $options{depend_jobnum} || '',
5460   };
5461   $cust_pay_pending->payunique( $options{payunique} )
5462     if defined($options{payunique}) && length($options{payunique});
5463   my $cpp_new_err = $cust_pay_pending->insert; #mutex lost when this is inserted
5464   return $cpp_new_err if $cpp_new_err;
5465
5466   my( $action1, $action2 ) =
5467     split( /\s*\,\s*/, $payment_gateway->gateway_action );
5468
5469   my $transaction = new $namespace( $payment_gateway->gateway_module,
5470                                     $self->_bop_options(\%options),
5471                                   );
5472
5473   $transaction->content(
5474     'type'           => $options{method},
5475     $self->_bop_auth(\%options),
5476     'action'         => $action1,
5477     'description'    => $options{'description'},
5478     'amount'         => $options{amount},
5479     #'invoice_number' => $options{'invnum'},
5480     'customer_id'    => $self->custnum,
5481     %bop_content,
5482     'reference'      => $cust_pay_pending->paypendingnum, #for now
5483     'email'          => $email,
5484     %content, #after
5485   );
5486
5487   $cust_pay_pending->status('pending');
5488   my $cpp_pending_err = $cust_pay_pending->replace;
5489   return $cpp_pending_err if $cpp_pending_err;
5490
5491   #config?
5492   my $BOP_TESTING = 0;
5493   my $BOP_TESTING_SUCCESS = 1;
5494
5495   unless ( $BOP_TESTING ) {
5496     $transaction->submit();
5497   } else {
5498     if ( $BOP_TESTING_SUCCESS ) {
5499       $transaction->is_success(1);
5500       $transaction->authorization('fake auth');
5501     } else {
5502       $transaction->is_success(0);
5503       $transaction->error_message('fake failure');
5504     }
5505   }
5506
5507   if ( $transaction->is_success() && $namespace eq 'Business::OnlineThirdPartyPayment' ) {
5508
5509     return { reference => $cust_pay_pending->paypendingnum,
5510              map { $_ => $transaction->$_ } qw ( popup_url collectitems ) };
5511
5512   } elsif ( $transaction->is_success() && $action2 ) {
5513
5514     $cust_pay_pending->status('authorized');
5515     my $cpp_authorized_err = $cust_pay_pending->replace;
5516     return $cpp_authorized_err if $cpp_authorized_err;
5517
5518     my $auth = $transaction->authorization;
5519     my $ordernum = $transaction->can('order_number')
5520                    ? $transaction->order_number
5521                    : '';
5522
5523     my $capture =
5524       new Business::OnlinePayment( $payment_gateway->gateway_module,
5525                                    $self->_bop_options(\%options),
5526                                  );
5527
5528     my %capture = (
5529       %content,
5530       type           => $options{method},
5531       action         => $action2,
5532       $self->_bop_auth(\%options),
5533       order_number   => $ordernum,
5534       amount         => $options{amount},
5535       authorization  => $auth,
5536       description    => $options{'description'},
5537     );
5538
5539     foreach my $field (qw( authorization_source_code returned_ACI
5540                            transaction_identifier validation_code
5541                            transaction_sequence_num local_transaction_date
5542                            local_transaction_time AVS_result_code          )) {
5543       $capture{$field} = $transaction->$field() if $transaction->can($field);
5544     }
5545
5546     $capture->content( %capture );
5547
5548     $capture->submit();
5549
5550     unless ( $capture->is_success ) {
5551       my $e = "Authorization successful but capture failed, custnum #".
5552               $self->custnum. ': '.  $capture->result_code.
5553               ": ". $capture->error_message;
5554       warn $e;
5555       return $e;
5556     }
5557
5558   }
5559
5560   ###
5561   # remove paycvv after initial transaction
5562   ###
5563
5564   #false laziness w/misc/process/payment.cgi - check both to make sure working
5565   # correctly
5566   if ( defined $self->dbdef_table->column('paycvv')
5567        && length($self->paycvv)
5568        && ! grep { $_ eq cardtype($options{payinfo}) } $conf->config('cvv-save')
5569   ) {
5570     my $error = $self->remove_cvv;
5571     if ( $error ) {
5572       warn "WARNING: error removing cvv: $error\n";
5573     }
5574   }
5575
5576   ###
5577   # result handling
5578   ###
5579
5580   $self->_realtime_bop_result( $cust_pay_pending, $transaction, %options );
5581
5582 }
5583
5584 =item fake_bop
5585
5586 =cut
5587
5588 sub fake_bop {
5589   my $self = shift;
5590
5591   my %options = ();
5592   if (ref($_[0]) eq 'HASH') {
5593     %options = %{$_[0]};
5594   } else {
5595     my ( $method, $amount ) = ( shift, shift );
5596     %options = @_;
5597     $options{method} = $method;
5598     $options{amount} = $amount;
5599   }
5600
5601   if ( $options{'fake_failure'} ) {
5602      return "Error: No error; test failure requested with fake_failure";
5603   }
5604
5605   #my $paybatch = '';
5606   #if ( $payment_gateway->gatewaynum ) { # agent override
5607   #  $paybatch = $payment_gateway->gatewaynum. '-';
5608   #}
5609   #
5610   #$paybatch .= "$processor:". $transaction->authorization;
5611   #
5612   #$paybatch .= ':'. $transaction->order_number
5613   #  if $transaction->can('order_number')
5614   #  && length($transaction->order_number);
5615
5616   my $paybatch = 'FakeProcessor:54:32';
5617
5618   my $cust_pay = new FS::cust_pay ( {
5619      'custnum'  => $self->custnum,
5620      'invnum'   => $options{'invnum'},
5621      'paid'     => $options{amount},
5622      '_date'    => '',
5623      'payby'    => $bop_method2payby{$options{method}},
5624      #'payinfo'  => $payinfo,
5625      'payinfo'  => '4111111111111111',
5626      'paybatch' => $paybatch,
5627      #'paydate'  => $paydate,
5628      'paydate'  => '2012-05-01',
5629   } );
5630   $cust_pay->payunique( $options{payunique} ) if length($options{payunique});
5631
5632   my $error = $cust_pay->insert($options{'manual'} ? ( 'manual' => 1 ) : () );
5633
5634   if ( $error ) {
5635     $cust_pay->invnum(''); #try again with no specific invnum
5636     my $error2 = $cust_pay->insert( $options{'manual'} ?
5637                                     ( 'manual' => 1 ) : ()
5638                                   );
5639     if ( $error2 ) {
5640       # gah, even with transactions.
5641       my $e = 'WARNING: Card/ACH debited but database not updated - '.
5642               "error inserting (fake!) payment: $error2".
5643               " (previously tried insert with invnum #$options{'invnum'}" .
5644               ": $error )";
5645       warn $e;
5646       return $e;
5647     }
5648   }
5649
5650   if ( $options{'paynum_ref'} ) {
5651     ${ $options{'paynum_ref'} } = $cust_pay->paynum;
5652   }
5653
5654   return ''; #no error
5655
5656 }
5657
5658
5659 # item _realtime_bop_result CUST_PAY_PENDING, BOP_OBJECT [ OPTION => VALUE ... ]
5660 #
5661 # Wraps up processing of a realtime credit card, ACH (electronic check) or
5662 # phone bill transaction.
5663
5664 sub _realtime_bop_result {
5665   my( $self, $cust_pay_pending, $transaction, %options ) = @_;
5666   if ( $DEBUG ) {
5667     warn "$me _realtime_bop_result: pending transaction ".
5668       $cust_pay_pending->paypendingnum. "\n";
5669     warn "  $_ => $options{$_}\n" foreach keys %options;
5670   }
5671
5672   my $payment_gateway = $options{payment_gateway}
5673     or return "no payment gateway in arguments to _realtime_bop_result";
5674
5675   $cust_pay_pending->status($transaction->is_success() ? 'captured' : 'declined');
5676   my $cpp_captured_err = $cust_pay_pending->replace;
5677   return $cpp_captured_err if $cpp_captured_err;
5678
5679   if ( $transaction->is_success() ) {
5680
5681     my $paybatch = '';
5682     if ( $payment_gateway->gatewaynum ) { # agent override
5683       $paybatch = $payment_gateway->gatewaynum. '-';
5684     }
5685
5686     $paybatch .= $payment_gateway->gateway_module. ":".
5687       $transaction->authorization;
5688
5689     $paybatch .= ':'. $transaction->order_number
5690       if $transaction->can('order_number')
5691       && length($transaction->order_number);
5692
5693     my $cust_pay = new FS::cust_pay ( {
5694        'custnum'  => $self->custnum,
5695        'invnum'   => $options{'invnum'},
5696        'paid'     => $cust_pay_pending->paid,
5697        '_date'    => '',
5698        'payby'    => $cust_pay_pending->payby,
5699        #'payinfo'  => $payinfo,
5700        'paybatch' => $paybatch,
5701        'paydate'  => $cust_pay_pending->paydate,
5702        'pkgnum'   => $cust_pay_pending->pkgnum,
5703     } );
5704     #doesn't hurt to know, even though the dup check is in cust_pay_pending now
5705     $cust_pay->payunique( $options{payunique} )
5706       if defined($options{payunique}) && length($options{payunique});
5707
5708     my $oldAutoCommit = $FS::UID::AutoCommit;
5709     local $FS::UID::AutoCommit = 0;
5710     my $dbh = dbh;
5711
5712     #start a transaction, insert the cust_pay and set cust_pay_pending.status to done in a single transction
5713
5714     my $error = $cust_pay->insert($options{'manual'} ? ( 'manual' => 1 ) : () );
5715
5716     if ( $error ) {
5717       $cust_pay->invnum(''); #try again with no specific invnum
5718       my $error2 = $cust_pay->insert( $options{'manual'} ?
5719                                       ( 'manual' => 1 ) : ()
5720                                     );
5721       if ( $error2 ) {
5722         # gah.  but at least we have a record of the state we had to abort in
5723         # from cust_pay_pending now.
5724         my $e = "WARNING: $options{method} captured but payment not recorded -".
5725                 " error inserting payment (". $payment_gateway->gateway_module.
5726                 "): $error2".
5727                 " (previously tried insert with invnum #$options{'invnum'}" .
5728                 ": $error ) - pending payment saved as paypendingnum ".
5729                 $cust_pay_pending->paypendingnum. "\n";
5730         warn $e;
5731         return $e;
5732       }
5733     }
5734
5735     my $jobnum = $cust_pay_pending->jobnum;
5736     if ( $jobnum ) {
5737        my $placeholder = qsearchs( 'queue', { 'jobnum' => $jobnum } );
5738
5739        unless ( $placeholder ) {
5740          $dbh->rollback or die $dbh->errstr if $oldAutoCommit;
5741          my $e = "WARNING: $options{method} captured but job $jobnum not ".
5742              "found for paypendingnum ". $cust_pay_pending->paypendingnum. "\n";
5743          warn $e;
5744          return $e;
5745        }
5746
5747        $error = $placeholder->delete;
5748
5749        if ( $error ) {
5750          $dbh->rollback or die $dbh->errstr if $oldAutoCommit;
5751          my $e = "WARNING: $options{method} captured but could not delete ".
5752               "job $jobnum for paypendingnum ".
5753               $cust_pay_pending->paypendingnum. ": $error\n";
5754          warn $e;
5755          return $e;
5756        }
5757
5758     }
5759
5760     if ( $options{'paynum_ref'} ) {
5761       ${ $options{'paynum_ref'} } = $cust_pay->paynum;
5762     }
5763
5764     $cust_pay_pending->status('done');
5765     $cust_pay_pending->statustext('captured');
5766     $cust_pay_pending->paynum($cust_pay->paynum);
5767     my $cpp_done_err = $cust_pay_pending->replace;
5768
5769     if ( $cpp_done_err ) {
5770
5771       $dbh->rollback or die $dbh->errstr if $oldAutoCommit;
5772       my $e = "WARNING: $options{method} captured but payment not recorded - ".
5773               "error updating status for paypendingnum ".
5774               $cust_pay_pending->paypendingnum. ": $cpp_done_err \n";
5775       warn $e;
5776       return $e;
5777
5778     } else {
5779
5780       $dbh->commit or die $dbh->errstr if $oldAutoCommit;
5781
5782       if ( $options{'apply'} ) {
5783         my $apply_error = $self->apply_payments_and_credits;
5784         if ( $apply_error ) {
5785           warn "WARNING: error applying payment: $apply_error\n";
5786           #but we still should return no error cause the payment otherwise went
5787           #through...
5788         }
5789       }
5790
5791       return ''; #no error
5792
5793     }
5794
5795   } else {
5796
5797     my $perror = $payment_gateway->gateway_module. " error: ".
5798       $transaction->error_message;
5799
5800     my $jobnum = $cust_pay_pending->jobnum;
5801     if ( $jobnum ) {
5802        my $placeholder = qsearchs( 'queue', { 'jobnum' => $jobnum } );
5803
5804        if ( $placeholder ) {
5805          my $error = $placeholder->depended_delete;
5806          $error ||= $placeholder->delete;
5807          warn "error removing provisioning jobs after declined paypendingnum ".
5808            $cust_pay_pending->paypendingnum. "\n";
5809        } else {
5810          my $e = "error finding job $jobnum for declined paypendingnum ".
5811               $cust_pay_pending->paypendingnum. "\n";
5812          warn $e;
5813        }
5814
5815     }
5816
5817     unless ( $transaction->error_message ) {
5818
5819       my $t_response;
5820       if ( $transaction->can('response_page') ) {
5821         $t_response = {
5822                         'page'    => ( $transaction->can('response_page')
5823                                          ? $transaction->response_page
5824                                          : ''
5825                                      ),
5826                         'code'    => ( $transaction->can('response_code')
5827                                          ? $transaction->response_code
5828                                          : ''
5829                                      ),
5830                         'headers' => ( $transaction->can('response_headers')
5831                                          ? $transaction->response_headers
5832                                          : ''
5833                                      ),
5834                       };
5835       } else {
5836         $t_response .=
5837           "No additional debugging information available for ".
5838             $payment_gateway->gateway_module;
5839       }
5840
5841       $perror .= "No error_message returned from ".
5842                    $payment_gateway->gateway_module. " -- ".
5843                  ( ref($t_response) ? Dumper($t_response) : $t_response );
5844
5845     }
5846
5847     if ( !$options{'quiet'} && !$realtime_bop_decline_quiet
5848          && $conf->exists('emaildecline')
5849          && grep { $_ ne 'POST' } $self->invoicing_list
5850          && ! grep { $transaction->error_message =~ /$_/ }
5851                    $conf->config('emaildecline-exclude')
5852     ) {
5853       my @templ = $conf->config('declinetemplate');
5854       my $template = new Text::Template (
5855         TYPE   => 'ARRAY',
5856         SOURCE => [ map "$_\n", @templ ],
5857       ) or return "($perror) can't create template: $Text::Template::ERROR";
5858       $template->compile()
5859         or return "($perror) can't compile template: $Text::Template::ERROR";
5860
5861       my $templ_hash = {
5862         'company_name'    =>
5863           scalar( $conf->config('company_name', $self->agentnum ) ),
5864         'company_address' =>
5865           join("\n", $conf->config('company_address', $self->agentnum ) ),
5866         'error'           => $transaction->error_message,
5867       };
5868
5869       my $error = send_email(
5870         'from'    => $conf->config('invoice_from', $self->agentnum ),
5871         'to'      => [ grep { $_ ne 'POST' } $self->invoicing_list ],
5872         'subject' => 'Your payment could not be processed',
5873         'body'    => [ $template->fill_in(HASH => $templ_hash) ],
5874       );
5875
5876       $perror .= " (also received error sending decline notification: $error)"
5877         if $error;
5878
5879     }
5880
5881     $cust_pay_pending->status('done');
5882     $cust_pay_pending->statustext("declined: $perror");
5883     my $cpp_done_err = $cust_pay_pending->replace;
5884     if ( $cpp_done_err ) {
5885       my $e = "WARNING: $options{method} declined but pending payment not ".
5886               "resolved - error updating status for paypendingnum ".
5887               $cust_pay_pending->paypendingnum. ": $cpp_done_err \n";
5888       warn $e;
5889       $perror = "$e ($perror)";
5890     }
5891
5892     return $perror;
5893   }
5894
5895 }
5896
5897 =item realtime_botpp_capture CUST_PAY_PENDING [ OPTION => VALUE ... ]
5898
5899 Verifies successful third party processing of a realtime credit card,
5900 ACH (electronic check) or phone bill transaction via a
5901 Business::OnlineThirdPartyPayment realtime gateway.  See
5902 L<http://420.am/business-onlinethirdpartypayment> for supported gateways.
5903
5904 Available options are: I<description>, I<invnum>, I<quiet>, I<paynum_ref>, I<payunique>
5905
5906 The additional options I<payname>, I<city>, I<state>,
5907 I<zip>, I<payinfo> and I<paydate> are also available.  Any of these options,
5908 if set, will override the value from the customer record.
5909
5910 I<description> is a free-text field passed to the gateway.  It defaults to
5911 "Internet services".
5912
5913 If an I<invnum> is specified, this payment (if successful) is applied to the
5914 specified invoice.  If you don't specify an I<invnum> you might want to
5915 call the B<apply_payments> method.
5916
5917 I<quiet> can be set true to surpress email decline notices.
5918
5919 I<paynum_ref> can be set to a scalar reference.  It will be filled in with the
5920 resulting paynum, if any.
5921
5922 I<payunique> is a unique identifier for this payment.
5923
5924 Returns a hashref containing elements bill_error (which will be undefined
5925 upon success) and session_id of any associated session.
5926
5927 =cut
5928
5929 sub realtime_botpp_capture {
5930   my( $self, $cust_pay_pending, %options ) = @_;
5931   if ( $DEBUG ) {
5932     warn "$me realtime_botpp_capture: pending transaction $cust_pay_pending\n";
5933     warn "  $_ => $options{$_}\n" foreach keys %options;
5934   }
5935
5936   eval "use Business::OnlineThirdPartyPayment";
5937   die $@ if $@;
5938
5939   ###
5940   # select the gateway
5941   ###
5942
5943   my $method = FS::payby->payby2bop($cust_pay_pending->payby);
5944
5945   my $payment_gateway = $cust_pay_pending->gatewaynum
5946     ? qsearchs( 'payment_gateway',
5947                 { gatewaynum => $cust_pay_pending->gatewaynum }
5948               )
5949     : $self->agent->payment_gateway( 'method' => $method,
5950                                      # 'invnum'  => $cust_pay_pending->invnum,
5951                                      # 'payinfo' => $cust_pay_pending->payinfo,
5952                                    );
5953
5954   $options{payment_gateway} = $payment_gateway; # for the helper subs
5955
5956   ###
5957   # massage data
5958   ###
5959
5960   my @invoicing_list = $self->invoicing_list_emailonly;
5961   if ( $conf->exists('emailinvoiceautoalways')
5962        || $conf->exists('emailinvoiceauto') && ! @invoicing_list
5963        || ( $conf->exists('emailinvoiceonly') && ! @invoicing_list ) ) {
5964     push @invoicing_list, $self->all_emails;
5965   }
5966
5967   my $email = ($conf->exists('business-onlinepayment-email-override'))
5968               ? $conf->config('business-onlinepayment-email-override')
5969               : $invoicing_list[0];
5970
5971   my %content = ();
5972
5973   $content{email_customer} =
5974     (    $conf->exists('business-onlinepayment-email_customer')
5975       || $conf->exists('business-onlinepayment-email-override') );
5976
5977   ###
5978   # run transaction(s)
5979   ###
5980
5981   my $transaction =
5982     new Business::OnlineThirdPartyPayment( $payment_gateway->gateway_module,
5983                                            $self->_bop_options(\%options),
5984                                          );
5985
5986   $transaction->reference({ %options });
5987
5988   $transaction->content(
5989     'type'           => $method,
5990     $self->_bop_auth(\%options),
5991     'action'         => 'Post Authorization',
5992     'description'    => $options{'description'},
5993     'amount'         => $cust_pay_pending->paid,
5994     #'invoice_number' => $options{'invnum'},
5995     'customer_id'    => $self->custnum,
5996     'referer'        => 'http://cleanwhisker.420.am/',
5997     'reference'      => $cust_pay_pending->paypendingnum,
5998     'email'          => $email,
5999     'phone'          => $self->daytime || $self->night,
6000     %content, #after
6001     # plus whatever is required for bogus capture avoidance
6002   );
6003
6004   $transaction->submit();
6005
6006   my $error =
6007     $self->_realtime_bop_result( $cust_pay_pending, $transaction, %options );
6008
6009   {
6010     bill_error => $error,
6011     session_id => $cust_pay_pending->session_id,
6012   }
6013
6014 }
6015
6016 =item default_payment_gateway DEPRECATED -- use agent->payment_gateway
6017
6018 =cut
6019
6020 sub default_payment_gateway {
6021   my( $self, $method ) = @_;
6022
6023   die "Real-time processing not enabled\n"
6024     unless $conf->exists('business-onlinepayment');
6025
6026   #warn "default_payment_gateway deprecated -- use agent->payment_gateway\n";
6027
6028   #load up config
6029   my $bop_config = 'business-onlinepayment';
6030   $bop_config .= '-ach'
6031     if $method =~ /^(ECHECK|CHEK)$/ && $conf->exists($bop_config. '-ach');
6032   my ( $processor, $login, $password, $action, @bop_options ) =
6033     $conf->config($bop_config);
6034   $action ||= 'normal authorization';
6035   pop @bop_options if scalar(@bop_options) % 2 && $bop_options[-1] =~ /^\s*$/;
6036   die "No real-time processor is enabled - ".
6037       "did you set the business-onlinepayment configuration value?\n"
6038     unless $processor;
6039
6040   ( $processor, $login, $password, $action, @bop_options )
6041 }
6042
6043 =item remove_cvv
6044
6045 Removes the I<paycvv> field from the database directly.
6046
6047 If there is an error, returns the error, otherwise returns false.
6048
6049 =cut
6050
6051 sub remove_cvv {
6052   my $self = shift;
6053   my $sth = dbh->prepare("UPDATE cust_main SET paycvv = '' WHERE custnum = ?")
6054     or return dbh->errstr;
6055   $sth->execute($self->custnum)
6056     or return $sth->errstr;
6057   $self->paycvv('');
6058   '';
6059 }
6060
6061 =item _new_realtime_refund_bop METHOD [ OPTION => VALUE ... ]
6062
6063 Refunds a realtime credit card, ACH (electronic check) or phone bill transaction
6064 via a Business::OnlinePayment realtime gateway.  See
6065 L<http://420.am/business-onlinepayment> for supported gateways.
6066
6067 Available methods are: I<CC>, I<ECHECK> and I<LEC>
6068
6069 Available options are: I<amount>, I<reason>, I<paynum>, I<paydate>
6070
6071 Most gateways require a reference to an original payment transaction to refund,
6072 so you probably need to specify a I<paynum>.
6073
6074 I<amount> defaults to the original amount of the payment if not specified.
6075
6076 I<reason> specifies a reason for the refund.
6077
6078 I<paydate> specifies the expiration date for a credit card overriding the
6079 value from the customer record or the payment record. Specified as yyyy-mm-dd
6080
6081 Implementation note: If I<amount> is unspecified or equal to the amount of the
6082 orignal payment, first an attempt is made to "void" the transaction via
6083 the gateway (to cancel a not-yet settled transaction) and then if that fails,
6084 the normal attempt is made to "refund" ("credit") the transaction via the
6085 gateway is attempted.
6086
6087 #The additional options I<payname>, I<address1>, I<address2>, I<city>, I<state>,
6088 #I<zip>, I<payinfo> and I<paydate> are also available.  Any of these options,
6089 #if set, will override the value from the customer record.
6090
6091 #If an I<invnum> is specified, this payment (if successful) is applied to the
6092 #specified invoice.  If you don't specify an I<invnum> you might want to
6093 #call the B<apply_payments> method.
6094
6095 =cut
6096
6097 #some false laziness w/realtime_bop, not enough to make it worth merging
6098 #but some useful small subs should be pulled out
6099 sub _new_realtime_refund_bop {
6100   my $self = shift;
6101
6102   my %options = ();
6103   if (ref($_[0]) ne 'HASH') {
6104     %options = %{$_[0]};
6105   } else {
6106     my $method = shift;
6107     %options = @_;
6108     $options{method} = $method;
6109   }
6110
6111   if ( $DEBUG ) {
6112     warn "$me realtime_refund_bop (new): $options{method} refund\n";
6113     warn "  $_ => $options{$_}\n" foreach keys %options;
6114   }
6115
6116   ###
6117   # look up the original payment and optionally a gateway for that payment
6118   ###
6119
6120   my $cust_pay = '';
6121   my $amount = $options{'amount'};
6122
6123   my( $processor, $login, $password, @bop_options, $namespace ) ;
6124   my( $auth, $order_number ) = ( '', '', '' );
6125
6126   if ( $options{'paynum'} ) {
6127
6128     warn "  paynum: $options{paynum}\n" if $DEBUG > 1;
6129     $cust_pay = qsearchs('cust_pay', { paynum=>$options{'paynum'} } )
6130       or return "Unknown paynum $options{'paynum'}";
6131     $amount ||= $cust_pay->paid;
6132
6133     $cust_pay->paybatch =~ /^((\d+)\-)?(\w+):\s*([\w\-\/ ]*)(:([\w\-]+))?$/
6134       or return "Can't parse paybatch for paynum $options{'paynum'}: ".
6135                 $cust_pay->paybatch;
6136     my $gatewaynum = '';
6137     ( $gatewaynum, $processor, $auth, $order_number ) = ( $2, $3, $4, $6 );
6138
6139     if ( $gatewaynum ) { #gateway for the payment to be refunded
6140
6141       my $payment_gateway =
6142         qsearchs('payment_gateway', { 'gatewaynum' => $gatewaynum } );
6143       die "payment gateway $gatewaynum not found"
6144         unless $payment_gateway;
6145
6146       $processor   = $payment_gateway->gateway_module;
6147       $login       = $payment_gateway->gateway_username;
6148       $password    = $payment_gateway->gateway_password;
6149       $namespace   = $payment_gateway->gateway_namespace;
6150       @bop_options = $payment_gateway->options;
6151
6152     } else { #try the default gateway
6153
6154       my $conf_processor;
6155       my $payment_gateway =
6156         $self->agent->payment_gateway('method' => $options{method});
6157
6158       ( $conf_processor, $login, $password, $namespace ) =
6159         map { my $method = "gateway_$_"; $payment_gateway->$method }
6160           qw( module username password namespace );
6161
6162       @bop_options = $payment_gateway->gatewaynum
6163                        ? $payment_gateway->options
6164                        : @{ $payment_gateway->get('options') };
6165
6166       return "processor of payment $options{'paynum'} $processor does not".
6167              " match default processor $conf_processor"
6168         unless $processor eq $conf_processor;
6169
6170     }
6171
6172
6173   } else { # didn't specify a paynum, so look for agent gateway overrides
6174            # like a normal transaction
6175
6176     my $payment_gateway =
6177       $self->agent->payment_gateway( 'method'  => $options{method},
6178                                      #'payinfo' => $payinfo,
6179                                    );
6180     my( $processor, $login, $password, $namespace ) =
6181       map { my $method = "gateway_$_"; $payment_gateway->$method }
6182         qw( module username password namespace );
6183
6184     my @bop_options = $payment_gateway->gatewaynum
6185                         ? $payment_gateway->options
6186                         : @{ $payment_gateway->get('options') };
6187
6188   }
6189   return "neither amount nor paynum specified" unless $amount;
6190
6191   eval "use $namespace";
6192   die $@ if $@;
6193
6194   my %content = (
6195     'type'           => $options{method},
6196     'login'          => $login,
6197     'password'       => $password,
6198     'order_number'   => $order_number,
6199     'amount'         => $amount,
6200     'referer'        => 'http://cleanwhisker.420.am/', #XXX fix referer :/
6201   );
6202   $content{authorization} = $auth
6203     if length($auth); #echeck/ACH transactions have an order # but no auth
6204                       #(at least with authorize.net)
6205
6206   my $disable_void_after;
6207   if ($conf->exists('disable_void_after')
6208       && $conf->config('disable_void_after') =~ /^(\d+)$/) {
6209     $disable_void_after = $1;
6210   }
6211
6212   #first try void if applicable
6213   if ( $cust_pay && $cust_pay->paid == $amount
6214     && (
6215       ( not defined($disable_void_after) )
6216       || ( time < ($cust_pay->_date + $disable_void_after ) )
6217     )
6218   ) {
6219     warn "  attempting void\n" if $DEBUG > 1;
6220     my $void = new Business::OnlinePayment( $processor, @bop_options );
6221     $content{'card_number'} = $cust_pay->payinfo
6222       if $cust_pay->payby eq 'CARD'
6223       && $void->can('info') && $void->info('CC_void_requires_card');
6224     $void->content( 'action' => 'void', %content );
6225     $void->submit();
6226     if ( $void->is_success ) {
6227       my $error = $cust_pay->void($options{'reason'});
6228       if ( $error ) {
6229         # gah, even with transactions.
6230         my $e = 'WARNING: Card/ACH voided but database not updated - '.
6231                 "error voiding payment: $error";
6232         warn $e;
6233         return $e;
6234       }
6235       warn "  void successful\n" if $DEBUG > 1;
6236       return '';
6237     }
6238   }
6239
6240   warn "  void unsuccessful, trying refund\n"
6241     if $DEBUG > 1;
6242
6243   #massage data
6244   my $address = $self->address1;
6245   $address .= ", ". $self->address2 if $self->address2;
6246
6247   my($payname, $payfirst, $paylast);
6248   if ( $self->payname && $options{method} ne 'ECHECK' ) {
6249     $payname = $self->payname;
6250     $payname =~ /^\s*([\w \,\.\-\']*)?\s+([\w\,\.\-\']+)\s*$/
6251       or return "Illegal payname $payname";
6252     ($payfirst, $paylast) = ($1, $2);
6253   } else {
6254     $payfirst = $self->getfield('first');
6255     $paylast = $self->getfield('last');
6256     $payname =  "$payfirst $paylast";
6257   }
6258
6259   my @invoicing_list = $self->invoicing_list_emailonly;
6260   if ( $conf->exists('emailinvoiceautoalways')
6261        || $conf->exists('emailinvoiceauto') && ! @invoicing_list
6262        || ( $conf->exists('emailinvoiceonly') && ! @invoicing_list ) ) {
6263     push @invoicing_list, $self->all_emails;
6264   }
6265
6266   my $email = ($conf->exists('business-onlinepayment-email-override'))
6267               ? $conf->config('business-onlinepayment-email-override')
6268               : $invoicing_list[0];
6269
6270   my $payip = exists($options{'payip'})
6271                 ? $options{'payip'}
6272                 : $self->payip;
6273   $content{customer_ip} = $payip
6274     if length($payip);
6275
6276   my $payinfo = '';
6277   if ( $options{method} eq 'CC' ) {
6278
6279     if ( $cust_pay ) {
6280       $content{card_number} = $payinfo = $cust_pay->payinfo;
6281       (exists($options{'paydate'}) ? $options{'paydate'} : $cust_pay->paydate)
6282         =~ /^\d{2}(\d{2})[\/\-](\d+)[\/\-]\d+$/ &&
6283         ($content{expiration} = "$2/$1");  # where available
6284     } else {
6285       $content{card_number} = $payinfo = $self->payinfo;
6286       (exists($options{'paydate'}) ? $options{'paydate'} : $self->paydate)
6287         =~ /^\d{2}(\d{2})[\/\-](\d+)[\/\-]\d+$/;
6288       $content{expiration} = "$2/$1";
6289     }
6290
6291   } elsif ( $options{method} eq 'ECHECK' ) {
6292
6293     if ( $cust_pay ) {
6294       $payinfo = $cust_pay->payinfo;
6295     } else {
6296       $payinfo = $self->payinfo;
6297     }
6298     ( $content{account_number}, $content{routing_code} )= split('@', $payinfo );
6299     $content{bank_name} = $self->payname;
6300     $content{account_type} = 'CHECKING';
6301     $content{account_name} = $payname;
6302     $content{customer_org} = $self->company ? 'B' : 'I';
6303     $content{customer_ssn} = $self->ss;
6304   } elsif ( $options{method} eq 'LEC' ) {
6305     $content{phone} = $payinfo = $self->payinfo;
6306   }
6307
6308   #then try refund
6309   my $refund = new Business::OnlinePayment( $processor, @bop_options );
6310   my %sub_content = $refund->content(
6311     'action'         => 'credit',
6312     'customer_id'    => $self->custnum,
6313     'last_name'      => $paylast,
6314     'first_name'     => $payfirst,
6315     'name'           => $payname,
6316     'address'        => $address,
6317     'city'           => $self->city,
6318     'state'          => $self->state,
6319     'zip'            => $self->zip,
6320     'country'        => $self->country,
6321     'email'          => $email,
6322     'phone'          => $self->daytime || $self->night,
6323     %content, #after
6324   );
6325   warn join('', map { "  $_ => $sub_content{$_}\n" } keys %sub_content )
6326     if $DEBUG > 1;
6327   $refund->submit();
6328
6329   return "$processor error: ". $refund->error_message
6330     unless $refund->is_success();
6331
6332   my $paybatch = "$processor:". $refund->authorization;
6333   $paybatch .= ':'. $refund->order_number
6334     if $refund->can('order_number') && $refund->order_number;
6335
6336   while ( $cust_pay && $cust_pay->unapplied < $amount ) {
6337     my @cust_bill_pay = $cust_pay->cust_bill_pay;
6338     last unless @cust_bill_pay;
6339     my $cust_bill_pay = pop @cust_bill_pay;
6340     my $error = $cust_bill_pay->delete;
6341     last if $error;
6342   }
6343
6344   my $cust_refund = new FS::cust_refund ( {
6345     'custnum'  => $self->custnum,
6346     'paynum'   => $options{'paynum'},
6347     'refund'   => $amount,
6348     '_date'    => '',
6349     'payby'    => $bop_method2payby{$options{method}},
6350     'payinfo'  => $payinfo,
6351     'paybatch' => $paybatch,
6352     'reason'   => $options{'reason'} || 'card or ACH refund',
6353   } );
6354   my $error = $cust_refund->insert;
6355   if ( $error ) {
6356     $cust_refund->paynum(''); #try again with no specific paynum
6357     my $error2 = $cust_refund->insert;
6358     if ( $error2 ) {
6359       # gah, even with transactions.
6360       my $e = 'WARNING: Card/ACH refunded but database not updated - '.
6361               "error inserting refund ($processor): $error2".
6362               " (previously tried insert with paynum #$options{'paynum'}" .
6363               ": $error )";
6364       warn $e;
6365       return $e;
6366     }
6367   }
6368
6369   ''; #no error
6370
6371 }
6372
6373 =item batch_card OPTION => VALUE...
6374
6375 Adds a payment for this invoice to the pending credit card batch (see
6376 L<FS::cust_pay_batch>), or, if the B<realtime> option is set to a true value,
6377 runs the payment using a realtime gateway.
6378
6379 =cut
6380
6381 sub batch_card {
6382   my ($self, %options) = @_;
6383
6384   my $amount;
6385   if (exists($options{amount})) {
6386     $amount = $options{amount};
6387   }else{
6388     $amount = sprintf("%.2f", $self->balance - $self->in_transit_payments);
6389   }
6390   return '' unless $amount > 0;
6391
6392   my $invnum = delete $options{invnum};
6393   my $payby = $options{invnum} || $self->payby;  #dubious
6394
6395   if ($options{'realtime'}) {
6396     return $self->realtime_bop( FS::payby->payby2bop($self->payby),
6397                                 $amount,
6398                                 %options,
6399                               );
6400   }
6401
6402   my $oldAutoCommit = $FS::UID::AutoCommit;
6403   local $FS::UID::AutoCommit = 0;
6404   my $dbh = dbh;
6405
6406   #this needs to handle mysql as well as Pg, like svc_acct.pm
6407   #(make it into a common function if folks need to do batching with mysql)
6408   $dbh->do("LOCK TABLE pay_batch IN SHARE ROW EXCLUSIVE MODE")
6409     or return "Cannot lock pay_batch: " . $dbh->errstr;
6410
6411   my %pay_batch = (
6412     'status' => 'O',
6413     'payby'  => FS::payby->payby2payment($payby),
6414   );
6415
6416   my $pay_batch = qsearchs( 'pay_batch', \%pay_batch );
6417
6418   unless ( $pay_batch ) {
6419     $pay_batch = new FS::pay_batch \%pay_batch;
6420     my $error = $pay_batch->insert;
6421     if ( $error ) {
6422       $dbh->rollback if $oldAutoCommit;
6423       die "error creating new batch: $error\n";
6424     }
6425   }
6426
6427   my $old_cust_pay_batch = qsearchs('cust_pay_batch', {
6428       'batchnum' => $pay_batch->batchnum,
6429       'custnum'  => $self->custnum,
6430   } );
6431
6432   foreach (qw( address1 address2 city state zip country payby payinfo paydate
6433                payname )) {
6434     $options{$_} = '' unless exists($options{$_});
6435   }
6436
6437   my $cust_pay_batch = new FS::cust_pay_batch ( {
6438     'batchnum' => $pay_batch->batchnum,
6439     'invnum'   => $invnum || 0,                    # is there a better value?
6440                                                    # this field should be
6441                                                    # removed...
6442                                                    # cust_bill_pay_batch now
6443     'custnum'  => $self->custnum,
6444     'last'     => $self->getfield('last'),
6445     'first'    => $self->getfield('first'),
6446     'address1' => $options{address1} || $self->address1,
6447     'address2' => $options{address2} || $self->address2,
6448     'city'     => $options{city}     || $self->city,
6449     'state'    => $options{state}    || $self->state,
6450     'zip'      => $options{zip}      || $self->zip,
6451     'country'  => $options{country}  || $self->country,
6452     'payby'    => $options{payby}    || $self->payby,
6453     'payinfo'  => $options{payinfo}  || $self->payinfo,
6454     'exp'      => $options{paydate}  || $self->paydate,
6455     'payname'  => $options{payname}  || $self->payname,
6456     'amount'   => $amount,                         # consolidating
6457   } );
6458
6459   $cust_pay_batch->paybatchnum($old_cust_pay_batch->paybatchnum)
6460     if $old_cust_pay_batch;
6461
6462   my $error;
6463   if ($old_cust_pay_batch) {
6464     $error = $cust_pay_batch->replace($old_cust_pay_batch)
6465   } else {
6466     $error = $cust_pay_batch->insert;
6467   }
6468
6469   if ( $error ) {
6470     $dbh->rollback if $oldAutoCommit;
6471     die $error;
6472   }
6473
6474   my $unapplied =   $self->total_unapplied_credits
6475                   + $self->total_unapplied_payments
6476                   + $self->in_transit_payments;
6477   foreach my $cust_bill ($self->open_cust_bill) {
6478     #$dbh->commit or die $dbh->errstr if $oldAutoCommit;
6479     my $cust_bill_pay_batch = new FS::cust_bill_pay_batch {
6480       'invnum' => $cust_bill->invnum,
6481       'paybatchnum' => $cust_pay_batch->paybatchnum,
6482       'amount' => $cust_bill->owed,
6483       '_date' => time,
6484     };
6485     if ($unapplied >= $cust_bill_pay_batch->amount){
6486       $unapplied -= $cust_bill_pay_batch->amount;
6487       next;
6488     }else{
6489       $cust_bill_pay_batch->amount(sprintf ( "%.2f",
6490                                    $cust_bill_pay_batch->amount - $unapplied ));      $unapplied = 0;
6491     }
6492     $error = $cust_bill_pay_batch->insert;
6493     if ( $error ) {
6494       $dbh->rollback if $oldAutoCommit;
6495       die $error;
6496     }
6497   }
6498
6499   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
6500   '';
6501 }
6502
6503 =item apply_payments_and_credits [ OPTION => VALUE ... ]
6504
6505 Applies unapplied payments and credits.
6506
6507 In most cases, this new method should be used in place of sequential
6508 apply_payments and apply_credits methods.
6509
6510 A hash of optional arguments may be passed.  Currently "manual" is supported.
6511 If true, a payment receipt is sent instead of a statement when
6512 'payment_receipt_email' configuration option is set.
6513
6514 If there is an error, returns the error, otherwise returns false.
6515
6516 =cut
6517
6518 sub apply_payments_and_credits {
6519   my( $self, %options ) = @_;
6520
6521   local $SIG{HUP} = 'IGNORE';
6522   local $SIG{INT} = 'IGNORE';
6523   local $SIG{QUIT} = 'IGNORE';
6524   local $SIG{TERM} = 'IGNORE';
6525   local $SIG{TSTP} = 'IGNORE';
6526   local $SIG{PIPE} = 'IGNORE';
6527
6528   my $oldAutoCommit = $FS::UID::AutoCommit;
6529   local $FS::UID::AutoCommit = 0;
6530   my $dbh = dbh;
6531
6532   $self->select_for_update; #mutex
6533
6534   foreach my $cust_bill ( $self->open_cust_bill ) {
6535     my $error = $cust_bill->apply_payments_and_credits(%options);
6536     if ( $error ) {
6537       $dbh->rollback if $oldAutoCommit;
6538       return "Error applying: $error";
6539     }
6540   }
6541
6542   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
6543   ''; #no error
6544
6545 }
6546
6547 =item apply_credits OPTION => VALUE ...
6548
6549 Applies (see L<FS::cust_credit_bill>) unapplied credits (see L<FS::cust_credit>)
6550 to outstanding invoice balances in chronological order (or reverse
6551 chronological order if the I<order> option is set to B<newest>) and returns the
6552 value of any remaining unapplied credits available for refund (see
6553 L<FS::cust_refund>).
6554
6555 Dies if there is an error.
6556
6557 =cut
6558
6559 sub apply_credits {
6560   my $self = shift;
6561   my %opt = @_;
6562
6563   local $SIG{HUP} = 'IGNORE';
6564   local $SIG{INT} = 'IGNORE';
6565   local $SIG{QUIT} = 'IGNORE';
6566   local $SIG{TERM} = 'IGNORE';
6567   local $SIG{TSTP} = 'IGNORE';
6568   local $SIG{PIPE} = 'IGNORE';
6569
6570   my $oldAutoCommit = $FS::UID::AutoCommit;
6571   local $FS::UID::AutoCommit = 0;
6572   my $dbh = dbh;
6573
6574   $self->select_for_update; #mutex
6575
6576   unless ( $self->total_unapplied_credits ) {
6577     $dbh->commit or die $dbh->errstr if $oldAutoCommit;
6578     return 0;
6579   }
6580
6581   my @credits = sort { $b->_date <=> $a->_date} (grep { $_->credited > 0 }
6582       qsearch('cust_credit', { 'custnum' => $self->custnum } ) );
6583
6584   my @invoices = $self->open_cust_bill;
6585   @invoices = sort { $b->_date <=> $a->_date } @invoices
6586     if defined($opt{'order'}) && $opt{'order'} eq 'newest';
6587
6588   if ( $conf->exists('pkg-balances') ) {
6589     # limit @credits to those w/ a pkgnum grepped from $self
6590     my %pkgnums = ();
6591     foreach my $i (@invoices) {
6592       foreach my $li ( $i->cust_bill_pkg ) {
6593         $pkgnums{$li->pkgnum} = 1;
6594       }
6595     }
6596     @credits = grep { ! $_->pkgnum || $pkgnums{$_->pkgnum} } @credits;
6597   }
6598
6599   my $credit;
6600
6601   foreach my $cust_bill ( @invoices ) {
6602
6603     if ( !defined($credit) || $credit->credited == 0) {
6604       $credit = pop @credits or last;
6605     }
6606
6607     my $owed;
6608     if ( $conf->exists('pkg-balances') && $credit->pkgnum ) {
6609       $owed = $cust_bill->owed_pkgnum($credit->pkgnum);
6610     } else {
6611       $owed = $cust_bill->owed;
6612     }
6613     unless ( $owed > 0 ) {
6614       push @credits, $credit;
6615       next;
6616     }
6617
6618     my $amount = min( $credit->credited, $owed );
6619
6620     my $cust_credit_bill = new FS::cust_credit_bill ( {
6621       'crednum' => $credit->crednum,
6622       'invnum'  => $cust_bill->invnum,
6623       'amount'  => $amount,
6624     } );
6625     $cust_credit_bill->pkgnum( $credit->pkgnum )
6626       if $conf->exists('pkg-balances') && $credit->pkgnum;
6627     my $error = $cust_credit_bill->insert;
6628     if ( $error ) {
6629       $dbh->rollback or die $dbh->errstr if $oldAutoCommit;
6630       die $error;
6631     }
6632
6633     redo if ($cust_bill->owed > 0) && ! $conf->exists('pkg-balances');
6634
6635   }
6636
6637   my $total_unapplied_credits = $self->total_unapplied_credits;
6638
6639   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
6640
6641   return $total_unapplied_credits;
6642 }
6643
6644 =item apply_payments  [ OPTION => VALUE ... ]
6645
6646 Applies (see L<FS::cust_bill_pay>) unapplied payments (see L<FS::cust_pay>)
6647 to outstanding invoice balances in chronological order.
6648
6649  #and returns the value of any remaining unapplied payments.
6650
6651 A hash of optional arguments may be passed.  Currently "manual" is supported.
6652 If true, a payment receipt is sent instead of a statement when
6653 'payment_receipt_email' configuration option is set.
6654
6655 Dies if there is an error.
6656
6657 =cut
6658
6659 sub apply_payments {
6660   my( $self, %options ) = @_;
6661
6662   local $SIG{HUP} = 'IGNORE';
6663   local $SIG{INT} = 'IGNORE';
6664   local $SIG{QUIT} = 'IGNORE';
6665   local $SIG{TERM} = 'IGNORE';
6666   local $SIG{TSTP} = 'IGNORE';
6667   local $SIG{PIPE} = 'IGNORE';
6668
6669   my $oldAutoCommit = $FS::UID::AutoCommit;
6670   local $FS::UID::AutoCommit = 0;
6671   my $dbh = dbh;
6672
6673   $self->select_for_update; #mutex
6674
6675   #return 0 unless
6676
6677   my @payments = sort { $b->_date <=> $a->_date }
6678                  grep { $_->unapplied > 0 }
6679                  $self->cust_pay;
6680
6681   my @invoices = sort { $a->_date <=> $b->_date}
6682                  grep { $_->owed > 0 }
6683                  $self->cust_bill;
6684
6685   if ( $conf->exists('pkg-balances') ) {
6686     # limit @payments to those w/ a pkgnum grepped from $self
6687     my %pkgnums = ();
6688     foreach my $i (@invoices) {
6689       foreach my $li ( $i->cust_bill_pkg ) {
6690         $pkgnums{$li->pkgnum} = 1;
6691       }
6692     }
6693     @payments = grep { ! $_->pkgnum || $pkgnums{$_->pkgnum} } @payments;
6694   }
6695
6696   my $payment;
6697
6698   foreach my $cust_bill ( @invoices ) {
6699
6700     if ( !defined($payment) || $payment->unapplied == 0 ) {
6701       $payment = pop @payments or last;
6702     }
6703
6704     my $owed;
6705     if ( $conf->exists('pkg-balances') && $payment->pkgnum ) {
6706       $owed = $cust_bill->owed_pkgnum($payment->pkgnum);
6707     } else {
6708       $owed = $cust_bill->owed;
6709     }
6710     unless ( $owed > 0 ) {
6711       push @payments, $payment;
6712       next;
6713     }
6714
6715     my $amount = min( $payment->unapplied, $owed );
6716
6717     my $cust_bill_pay = new FS::cust_bill_pay ( {
6718       'paynum' => $payment->paynum,
6719       'invnum' => $cust_bill->invnum,
6720       'amount' => $amount,
6721     } );
6722     $cust_bill_pay->pkgnum( $payment->pkgnum )
6723       if $conf->exists('pkg-balances') && $payment->pkgnum;
6724     my $error = $cust_bill_pay->insert(%options);
6725     if ( $error ) {
6726       $dbh->rollback or die $dbh->errstr if $oldAutoCommit;
6727       die $error;
6728     }
6729
6730     redo if ( $cust_bill->owed > 0) && ! $conf->exists('pkg-balances');
6731
6732   }
6733
6734   my $total_unapplied_payments = $self->total_unapplied_payments;
6735
6736   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
6737
6738   return $total_unapplied_payments;
6739 }
6740
6741 =item total_owed
6742
6743 Returns the total owed for this customer on all invoices
6744 (see L<FS::cust_bill/owed>).
6745
6746 =cut
6747
6748 sub total_owed {
6749   my $self = shift;
6750   $self->total_owed_date(2145859200); #12/31/2037
6751 }
6752
6753 =item total_owed_date TIME
6754
6755 Returns the total owed for this customer on all invoices with date earlier than
6756 TIME.  TIME is specified as a UNIX timestamp; see L<perlfunc/"time">).  Also
6757 see L<Time::Local> and L<Date::Parse> for conversion functions.
6758
6759 =cut
6760
6761 sub total_owed_date {
6762   my $self = shift;
6763   my $time = shift;
6764
6765 #  my $custnum = $self->custnum;
6766 #
6767 #  my $owed_sql = FS::cust_bill->owed_sql;
6768 #
6769 #  my $sql = "
6770 #    SELECT SUM($owed_sql) FROM cust_bill
6771 #      WHERE custnum = $custnum
6772 #        AND _date <= $time
6773 #  ";
6774 #
6775 #  my $sth = dbh->prepare($sql) or die dbh->errstr;
6776 #  $sth->execute() or die $sth->errstr;
6777 #
6778 #  return sprintf( '%.2f', $sth->fetchrow_arrayref->[0] );
6779
6780   my $total_bill = 0;
6781   foreach my $cust_bill (
6782     grep { $_->_date <= $time }
6783       qsearch('cust_bill', { 'custnum' => $self->custnum, } )
6784   ) {
6785     $total_bill += $cust_bill->owed;
6786   }
6787   sprintf( "%.2f", $total_bill );
6788
6789 }
6790
6791 =item total_owed_pkgnum PKGNUM
6792
6793 Returns the total owed on all invoices for this customer's specific package
6794 when using experimental package balances (see L<FS::cust_bill/owed_pkgnum>).
6795
6796 =cut
6797
6798 sub total_owed_pkgnum {
6799   my( $self, $pkgnum ) = @_;
6800   $self->total_owed_date_pkgnum(2145859200, $pkgnum); #12/31/2037
6801 }
6802
6803 =item total_owed_date_pkgnum TIME PKGNUM
6804
6805 Returns the total owed for this customer's specific package when using
6806 experimental package balances on all invoices with date earlier than
6807 TIME.  TIME is specified as a UNIX timestamp; see L<perlfunc/"time">).  Also
6808 see L<Time::Local> and L<Date::Parse> for conversion functions.
6809
6810 =cut
6811
6812 sub total_owed_date_pkgnum {
6813   my( $self, $time, $pkgnum ) = @_;
6814
6815   my $total_bill = 0;
6816   foreach my $cust_bill (
6817     grep { $_->_date <= $time }
6818       qsearch('cust_bill', { 'custnum' => $self->custnum, } )
6819   ) {
6820     $total_bill += $cust_bill->owed_pkgnum($pkgnum);
6821   }
6822   sprintf( "%.2f", $total_bill );
6823
6824 }
6825
6826 =item total_paid
6827
6828 Returns the total amount of all payments.
6829
6830 =cut
6831
6832 sub total_paid {
6833   my $self = shift;
6834   my $total = 0;
6835   $total += $_->paid foreach $self->cust_pay;
6836   sprintf( "%.2f", $total );
6837 }
6838
6839 =item total_unapplied_credits
6840
6841 Returns the total outstanding credit (see L<FS::cust_credit>) for this
6842 customer.  See L<FS::cust_credit/credited>.
6843
6844 =item total_credited
6845
6846 Old name for total_unapplied_credits.  Don't use.
6847
6848 =cut
6849
6850 sub total_credited {
6851   #carp "total_credited deprecated, use total_unapplied_credits";
6852   shift->total_unapplied_credits(@_);
6853 }
6854
6855 sub total_unapplied_credits {
6856   my $self = shift;
6857   my $total_credit = 0;
6858   $total_credit += $_->credited foreach $self->cust_credit;
6859   sprintf( "%.2f", $total_credit );
6860 }
6861
6862 =item total_unapplied_credits_pkgnum PKGNUM
6863
6864 Returns the total outstanding credit (see L<FS::cust_credit>) for this
6865 customer.  See L<FS::cust_credit/credited>.
6866
6867 =cut
6868
6869 sub total_unapplied_credits_pkgnum {
6870   my( $self, $pkgnum ) = @_;
6871   my $total_credit = 0;
6872   $total_credit += $_->credited foreach $self->cust_credit_pkgnum($pkgnum);
6873   sprintf( "%.2f", $total_credit );
6874 }
6875
6876
6877 =item total_unapplied_payments
6878
6879 Returns the total unapplied payments (see L<FS::cust_pay>) for this customer.
6880 See L<FS::cust_pay/unapplied>.
6881
6882 =cut
6883
6884 sub total_unapplied_payments {
6885   my $self = shift;
6886   my $total_unapplied = 0;
6887   $total_unapplied += $_->unapplied foreach $self->cust_pay;
6888   sprintf( "%.2f", $total_unapplied );
6889 }
6890
6891 =item total_unapplied_payments_pkgnum PKGNUM
6892
6893 Returns the total unapplied payments (see L<FS::cust_pay>) for this customer's
6894 specific package when using experimental package balances.  See
6895 L<FS::cust_pay/unapplied>.
6896
6897 =cut
6898
6899 sub total_unapplied_payments_pkgnum {
6900   my( $self, $pkgnum ) = @_;
6901   my $total_unapplied = 0;
6902   $total_unapplied += $_->unapplied foreach $self->cust_pay_pkgnum($pkgnum);
6903   sprintf( "%.2f", $total_unapplied );
6904 }
6905
6906
6907 =item total_unapplied_refunds
6908
6909 Returns the total unrefunded refunds (see L<FS::cust_refund>) for this
6910 customer.  See L<FS::cust_refund/unapplied>.
6911
6912 =cut
6913
6914 sub total_unapplied_refunds {
6915   my $self = shift;
6916   my $total_unapplied = 0;
6917   $total_unapplied += $_->unapplied foreach $self->cust_refund;
6918   sprintf( "%.2f", $total_unapplied );
6919 }
6920
6921 =item balance
6922
6923 Returns the balance for this customer (total_owed plus total_unrefunded, minus
6924 total_unapplied_credits minus total_unapplied_payments).
6925
6926 =cut
6927
6928 sub balance {
6929   my $self = shift;
6930   sprintf( "%.2f",
6931       $self->total_owed
6932     + $self->total_unapplied_refunds
6933     - $self->total_unapplied_credits
6934     - $self->total_unapplied_payments
6935   );
6936 }
6937
6938 =item balance_date TIME
6939
6940 Returns the balance for this customer, only considering invoices with date
6941 earlier than TIME (total_owed_date minus total_credited minus
6942 total_unapplied_payments).  TIME is specified as a UNIX timestamp; see
6943 L<perlfunc/"time">).  Also see L<Time::Local> and L<Date::Parse> for conversion
6944 functions.
6945
6946 =cut
6947
6948 sub balance_date {
6949   my $self = shift;
6950   my $time = shift;
6951   sprintf( "%.2f",
6952         $self->total_owed_date($time)
6953       + $self->total_unapplied_refunds
6954       - $self->total_unapplied_credits
6955       - $self->total_unapplied_payments
6956   );
6957 }
6958
6959 =item balance_date_range START_TIME [ END_TIME [ OPTION => VALUE ... ] ]
6960
6961 Returns the balance for this customer, only considering invoices with date
6962 earlier than START_TIME, and optionally not later than END_TIME
6963 (total_owed_date minus total_unapplied_credits minus total_unapplied_payments).
6964
6965 Times are specified as SQL fragments or numeric
6966 UNIX timestamps; see L<perlfunc/"time">).  Also see L<Time::Local> and
6967 L<Date::Parse> for conversion functions.  The empty string can be passed
6968 to disable that time constraint completely.
6969
6970 Available options are:
6971
6972 =over 4
6973
6974 =item unapplied_date
6975
6976 set to true to disregard unapplied credits, payments and refunds outside the specified time period - by default the time period restriction only applies to invoices (useful for reporting, probably a bad idea for event triggering)
6977
6978 =back
6979
6980 =cut
6981
6982 sub balance_date_range {
6983   my $self = shift;
6984   my $sql = 'SELECT SUM('. $self->balance_date_sql(@_).
6985             ') FROM cust_main WHERE custnum='. $self->custnum;
6986   sprintf( "%.2f", $self->scalar_sql($sql) );
6987 }
6988
6989 =item balance_pkgnum PKGNUM
6990
6991 Returns the balance for this customer's specific package when using
6992 experimental package balances (total_owed plus total_unrefunded, minus
6993 total_unapplied_credits minus total_unapplied_payments)
6994
6995 =cut
6996
6997 sub balance_pkgnum {
6998   my( $self, $pkgnum ) = @_;
6999
7000   sprintf( "%.2f",
7001       $self->total_owed_pkgnum($pkgnum)
7002 # n/a - refunds aren't part of pkg-balances since they don't apply to invoices
7003 #    + $self->total_unapplied_refunds_pkgnum($pkgnum)
7004     - $self->total_unapplied_credits_pkgnum($pkgnum)
7005     - $self->total_unapplied_payments_pkgnum($pkgnum)
7006   );
7007 }
7008
7009 =item in_transit_payments
7010
7011 Returns the total of requests for payments for this customer pending in
7012 batches in transit to the bank.  See L<FS::pay_batch> and L<FS::cust_pay_batch>
7013
7014 =cut
7015
7016 sub in_transit_payments {
7017   my $self = shift;
7018   my $in_transit_payments = 0;
7019   foreach my $pay_batch ( qsearch('pay_batch', {
7020     'status' => 'I',
7021   } ) ) {
7022     foreach my $cust_pay_batch ( qsearch('cust_pay_batch', {
7023       'batchnum' => $pay_batch->batchnum,
7024       'custnum' => $self->custnum,
7025     } ) ) {
7026       $in_transit_payments += $cust_pay_batch->amount;
7027     }
7028   }
7029   sprintf( "%.2f", $in_transit_payments );
7030 }
7031
7032 =item payment_info
7033
7034 Returns a hash of useful information for making a payment.
7035
7036 =over 4
7037
7038 =item balance
7039
7040 Current balance.
7041
7042 =item payby
7043
7044 'CARD' (credit card - automatic), 'DCRD' (credit card - on-demand),
7045 'CHEK' (electronic check - automatic), 'DCHK' (electronic check - on-demand),
7046 'LECB' (Phone bill billing), 'BILL' (billing), or 'COMP' (free).
7047
7048 =back
7049
7050 For credit card transactions:
7051
7052 =over 4
7053
7054 =item card_type 1
7055
7056 =item payname
7057
7058 Exact name on card
7059
7060 =back
7061
7062 For electronic check transactions:
7063
7064 =over 4
7065
7066 =item stateid_state
7067
7068 =back
7069
7070 =cut
7071
7072 sub payment_info {
7073   my $self = shift;
7074
7075   my %return = ();
7076
7077   $return{balance} = $self->balance;
7078
7079   $return{payname} = $self->payname
7080                      || ( $self->first. ' '. $self->get('last') );
7081
7082   $return{$_} = $self->get($_) for qw(address1 address2 city state zip);
7083
7084   $return{payby} = $self->payby;
7085   $return{stateid_state} = $self->stateid_state;
7086
7087   if ( $self->payby =~ /^(CARD|DCRD)$/ ) {
7088     $return{card_type} = cardtype($self->payinfo);
7089     $return{payinfo} = $self->paymask;
7090
7091     @return{'month', 'year'} = $self->paydate_monthyear;
7092
7093   }
7094
7095   if ( $self->payby =~ /^(CHEK|DCHK)$/ ) {
7096     my ($payinfo1, $payinfo2) = split '@', $self->paymask;
7097     $return{payinfo1} = $payinfo1;
7098     $return{payinfo2} = $payinfo2;
7099     $return{paytype}  = $self->paytype;
7100     $return{paystate} = $self->paystate;
7101
7102   }
7103
7104   #doubleclick protection
7105   my $_date = time;
7106   $return{paybatch} = "webui-MyAccount-$_date-$$-". rand() * 2**32;
7107
7108   %return;
7109
7110 }
7111
7112 =item paydate_monthyear
7113
7114 Returns a two-element list consisting of the month and year of this customer's
7115 paydate (credit card expiration date for CARD customers)
7116
7117 =cut
7118
7119 sub paydate_monthyear {
7120   my $self = shift;
7121   if ( $self->paydate  =~ /^(\d{4})-(\d{1,2})-\d{1,2}$/ ) { #Pg date format
7122     ( $2, $1 );
7123   } elsif ( $self->paydate =~ /^(\d{1,2})-(\d{1,2}-)?(\d{4}$)/ ) {
7124     ( $1, $3 );
7125   } else {
7126     ('', '');
7127   }
7128 }
7129
7130 =item tax_exemption TAXNAME
7131
7132 =cut
7133
7134 sub tax_exemption {
7135   my( $self, $taxname ) = @_;
7136
7137   qsearchs( 'cust_main_exemption', { 'custnum' => $self->custnum,
7138                                      'taxname' => $taxname,
7139                                    },
7140           );
7141 }
7142
7143 =item cust_main_exemption
7144
7145 =cut
7146
7147 sub cust_main_exemption {
7148   my $self = shift;
7149   qsearch( 'cust_main_exemption', { 'custnum' => $self->custnum } );
7150 }
7151
7152 =item invoicing_list [ ARRAYREF ]
7153
7154 If an arguement is given, sets these email addresses as invoice recipients
7155 (see L<FS::cust_main_invoice>).  Errors are not fatal and are not reported
7156 (except as warnings), so use check_invoicing_list first.
7157
7158 Returns a list of email addresses (with svcnum entries expanded).
7159
7160 Note: You can clear the invoicing list by passing an empty ARRAYREF.  You can
7161 check it without disturbing anything by passing nothing.
7162
7163 This interface may change in the future.
7164
7165 =cut
7166
7167 sub invoicing_list {
7168   my( $self, $arrayref ) = @_;
7169
7170   if ( $arrayref ) {
7171     my @cust_main_invoice;
7172     if ( $self->custnum ) {
7173       @cust_main_invoice =
7174         qsearch( 'cust_main_invoice', { 'custnum' => $self->custnum } );
7175     } else {
7176       @cust_main_invoice = ();
7177     }
7178     foreach my $cust_main_invoice ( @cust_main_invoice ) {
7179       #warn $cust_main_invoice->destnum;
7180       unless ( grep { $cust_main_invoice->address eq $_ } @{$arrayref} ) {
7181         #warn $cust_main_invoice->destnum;
7182         my $error = $cust_main_invoice->delete;
7183         warn $error if $error;
7184       }
7185     }
7186     if ( $self->custnum ) {
7187       @cust_main_invoice =
7188         qsearch( 'cust_main_invoice', { 'custnum' => $self->custnum } );
7189     } else {
7190       @cust_main_invoice = ();
7191     }
7192     my %seen = map { $_->address => 1 } @cust_main_invoice;
7193     foreach my $address ( @{$arrayref} ) {
7194       next if exists $seen{$address} && $seen{$address};
7195       $seen{$address} = 1;
7196       my $cust_main_invoice = new FS::cust_main_invoice ( {
7197         'custnum' => $self->custnum,
7198         'dest'    => $address,
7199       } );
7200       my $error = $cust_main_invoice->insert;
7201       warn $error if $error;
7202     }
7203   }
7204
7205   if ( $self->custnum ) {
7206     map { $_->address }
7207       qsearch( 'cust_main_invoice', { 'custnum' => $self->custnum } );
7208   } else {
7209     ();
7210   }
7211
7212 }
7213
7214 =item check_invoicing_list ARRAYREF
7215
7216 Checks these arguements as valid input for the invoicing_list method.  If there
7217 is an error, returns the error, otherwise returns false.
7218
7219 =cut
7220
7221 sub check_invoicing_list {
7222   my( $self, $arrayref ) = @_;
7223
7224   foreach my $address ( @$arrayref ) {
7225
7226     if ($address eq 'FAX' and $self->getfield('fax') eq '') {
7227       return 'Can\'t add FAX invoice destination with a blank FAX number.';
7228     }
7229
7230     my $cust_main_invoice = new FS::cust_main_invoice ( {
7231       'custnum' => $self->custnum,
7232       'dest'    => $address,
7233     } );
7234     my $error = $self->custnum
7235                 ? $cust_main_invoice->check
7236                 : $cust_main_invoice->checkdest
7237     ;
7238     return $error if $error;
7239
7240   }
7241
7242   return "Email address required"
7243     if $conf->exists('cust_main-require_invoicing_list_email')
7244     && ! grep { $_ !~ /^([A-Z]+)$/ } @$arrayref;
7245
7246   '';
7247 }
7248
7249 =item set_default_invoicing_list
7250
7251 Sets the invoicing list to all accounts associated with this customer,
7252 overwriting any previous invoicing list.
7253
7254 =cut
7255
7256 sub set_default_invoicing_list {
7257   my $self = shift;
7258   $self->invoicing_list($self->all_emails);
7259 }
7260
7261 =item all_emails
7262
7263 Returns the email addresses of all accounts provisioned for this customer.
7264
7265 =cut
7266
7267 sub all_emails {
7268   my $self = shift;
7269   my %list;
7270   foreach my $cust_pkg ( $self->all_pkgs ) {
7271     my @cust_svc = qsearch('cust_svc', { 'pkgnum' => $cust_pkg->pkgnum } );
7272     my @svc_acct =
7273       map { qsearchs('svc_acct', { 'svcnum' => $_->svcnum } ) }
7274         grep { qsearchs('svc_acct', { 'svcnum' => $_->svcnum } ) }
7275           @cust_svc;
7276     $list{$_}=1 foreach map { $_->email } @svc_acct;
7277   }
7278   keys %list;
7279 }
7280
7281 =item invoicing_list_addpost
7282
7283 Adds postal invoicing to this customer.  If this customer is already configured
7284 to receive postal invoices, does nothing.
7285
7286 =cut
7287
7288 sub invoicing_list_addpost {
7289   my $self = shift;
7290   return if grep { $_ eq 'POST' } $self->invoicing_list;
7291   my @invoicing_list = $self->invoicing_list;
7292   push @invoicing_list, 'POST';
7293   $self->invoicing_list(\@invoicing_list);
7294 }
7295
7296 =item invoicing_list_emailonly
7297
7298 Returns the list of email invoice recipients (invoicing_list without non-email
7299 destinations such as POST and FAX).
7300
7301 =cut
7302
7303 sub invoicing_list_emailonly {
7304   my $self = shift;
7305   warn "$me invoicing_list_emailonly called"
7306     if $DEBUG;
7307   grep { $_ !~ /^([A-Z]+)$/ } $self->invoicing_list;
7308 }
7309
7310 =item invoicing_list_emailonly_scalar
7311
7312 Returns the list of email invoice recipients (invoicing_list without non-email
7313 destinations such as POST and FAX) as a comma-separated scalar.
7314
7315 =cut
7316
7317 sub invoicing_list_emailonly_scalar {
7318   my $self = shift;
7319   warn "$me invoicing_list_emailonly_scalar called"
7320     if $DEBUG;
7321   join(', ', $self->invoicing_list_emailonly);
7322 }
7323
7324 =item referral_custnum_cust_main
7325
7326 Returns the customer who referred this customer (or the empty string, if
7327 this customer was not referred).
7328
7329 Note the difference with referral_cust_main method: This method,
7330 referral_custnum_cust_main returns the single customer (if any) who referred
7331 this customer, while referral_cust_main returns an array of customers referred
7332 BY this customer.
7333
7334 =cut
7335
7336 sub referral_custnum_cust_main {
7337   my $self = shift;
7338   return '' unless $self->referral_custnum;
7339   qsearchs('cust_main', { 'custnum' => $self->referral_custnum } );
7340 }
7341
7342 =item referral_cust_main [ DEPTH [ EXCLUDE_HASHREF ] ]
7343
7344 Returns an array of customers referred by this customer (referral_custnum set
7345 to this custnum).  If DEPTH is given, recurses up to the given depth, returning
7346 customers referred by customers referred by this customer and so on, inclusive.
7347 The default behavior is DEPTH 1 (no recursion).
7348
7349 Note the difference with referral_custnum_cust_main method: This method,
7350 referral_cust_main, returns an array of customers referred BY this customer,
7351 while referral_custnum_cust_main returns the single customer (if any) who
7352 referred this customer.
7353
7354 =cut
7355
7356 sub referral_cust_main {
7357   my $self = shift;
7358   my $depth = @_ ? shift : 1;
7359   my $exclude = @_ ? shift : {};
7360
7361   my @cust_main =
7362     map { $exclude->{$_->custnum}++; $_; }
7363       grep { ! $exclude->{ $_->custnum } }
7364         qsearch( 'cust_main', { 'referral_custnum' => $self->custnum } );
7365
7366   if ( $depth > 1 ) {
7367     push @cust_main,
7368       map { $_->referral_cust_main($depth-1, $exclude) }
7369         @cust_main;
7370   }
7371
7372   @cust_main;
7373 }
7374
7375 =item referral_cust_main_ncancelled
7376
7377 Same as referral_cust_main, except only returns customers with uncancelled
7378 packages.
7379
7380 =cut
7381
7382 sub referral_cust_main_ncancelled {
7383   my $self = shift;
7384   grep { scalar($_->ncancelled_pkgs) } $self->referral_cust_main;
7385 }
7386
7387 =item referral_cust_pkg [ DEPTH ]
7388
7389 Like referral_cust_main, except returns a flat list of all unsuspended (and
7390 uncancelled) packages for each customer.  The number of items in this list may
7391 be useful for comission calculations (perhaps after a C<grep { my $pkgpart = $_->pkgpart; grep { $_ == $pkgpart } @commission_worthy_pkgparts> } $cust_main-> ).
7392
7393 =cut
7394
7395 sub referral_cust_pkg {
7396   my $self = shift;
7397   my $depth = @_ ? shift : 1;
7398
7399   map { $_->unsuspended_pkgs }
7400     grep { $_->unsuspended_pkgs }
7401       $self->referral_cust_main($depth);
7402 }
7403
7404 =item referring_cust_main
7405
7406 Returns the single cust_main record for the customer who referred this customer
7407 (referral_custnum), or false.
7408
7409 =cut
7410
7411 sub referring_cust_main {
7412   my $self = shift;
7413   return '' unless $self->referral_custnum;
7414   qsearchs('cust_main', { 'custnum' => $self->referral_custnum } );
7415 }
7416
7417 =item credit AMOUNT, REASON [ , OPTION => VALUE ... ]
7418
7419 Applies a credit to this customer.  If there is an error, returns the error,
7420 otherwise returns false.
7421
7422 REASON can be a text string, an FS::reason object, or a scalar reference to
7423 a reasonnum.  If a text string, it will be automatically inserted as a new
7424 reason, and a 'reason_type' option must be passed to indicate the
7425 FS::reason_type for the new reason.
7426
7427 An I<addlinfo> option may be passed to set the credit's I<addlinfo> field.
7428
7429 Any other options are passed to FS::cust_credit::insert.
7430
7431 =cut
7432
7433 sub credit {
7434   my( $self, $amount, $reason, %options ) = @_;
7435
7436   my $cust_credit = new FS::cust_credit {
7437     'custnum' => $self->custnum,
7438     'amount'  => $amount,
7439   };
7440
7441   if ( ref($reason) ) {
7442
7443     if ( ref($reason) eq 'SCALAR' ) {
7444       $cust_credit->reasonnum( $$reason );
7445     } else {
7446       $cust_credit->reasonnum( $reason->reasonnum );
7447     }
7448
7449   } else {
7450     $cust_credit->set('reason', $reason)
7451   }
7452
7453   $cust_credit->addlinfo( delete $options{'addlinfo'} )
7454     if exists($options{'addlinfo'});
7455
7456   $cust_credit->insert(%options);
7457
7458 }
7459
7460 =item charge HASHREF || AMOUNT [ PKG [ COMMENT [ TAXCLASS ] ] ]
7461
7462 Creates a one-time charge for this customer.  If there is an error, returns
7463 the error, otherwise returns false.
7464
7465 New-style, with a hashref of options:
7466
7467   my $error = $cust_main->charge(
7468                                   {
7469                                     'amount'     => 54.32,
7470                                     'quantity'   => 1,
7471                                     'start_date' => str2time('7/4/2009'),
7472                                     'pkg'        => 'Description',
7473                                     'comment'    => 'Comment',
7474                                     'additional' => [], #extra invoice detail
7475                                     'classnum'   => 1,  #pkg_class
7476
7477                                     'setuptax'   => '', # or 'Y' for tax exempt
7478
7479                                     #internal taxation
7480                                     'taxclass'   => 'Tax class',
7481
7482                                     #vendor taxation
7483                                     'taxproduct' => 2,  #part_pkg_taxproduct
7484                                     'override'   => {}, #XXX describe
7485
7486                                     #will be filled in with the new object
7487                                     'cust_pkg_ref' => \$cust_pkg,
7488
7489                                     #generate an invoice immediately
7490                                     'bill_now' => 0,
7491                                     'invoice_terms' => '', #with these terms
7492                                   }
7493                                 );
7494
7495 Old-style:
7496
7497   my $error = $cust_main->charge( 54.32, 'Description', 'Comment', 'Tax class' );
7498
7499 =cut
7500
7501 sub charge {
7502   my $self = shift;
7503   my ( $amount, $quantity, $start_date, $classnum );
7504   my ( $pkg, $comment, $additional );
7505   my ( $setuptax, $taxclass );   #internal taxes
7506   my ( $taxproduct, $override ); #vendor (CCH) taxes
7507   my $cust_pkg_ref = '';
7508   my ( $bill_now, $invoice_terms ) = ( 0, '' );
7509   if ( ref( $_[0] ) ) {
7510     $amount     = $_[0]->{amount};
7511     $quantity   = exists($_[0]->{quantity}) ? $_[0]->{quantity} : 1;
7512     $start_date = exists($_[0]->{start_date}) ? $_[0]->{start_date} : '';
7513     $pkg        = exists($_[0]->{pkg}) ? $_[0]->{pkg} : 'One-time charge';
7514     $comment    = exists($_[0]->{comment}) ? $_[0]->{comment}
7515                                            : '$'. sprintf("%.2f",$amount);
7516     $setuptax   = exists($_[0]->{setuptax}) ? $_[0]->{setuptax} : '';
7517     $taxclass   = exists($_[0]->{taxclass}) ? $_[0]->{taxclass} : '';
7518     $classnum   = exists($_[0]->{classnum}) ? $_[0]->{classnum} : '';
7519     $additional = $_[0]->{additional} || [];
7520     $taxproduct = $_[0]->{taxproductnum};
7521     $override   = { '' => $_[0]->{tax_override} };
7522     $cust_pkg_ref = exists($_[0]->{cust_pkg_ref}) ? $_[0]->{cust_pkg_ref} : '';
7523     $bill_now = exists($_[0]->{bill_now}) ? $_[0]->{bill_now} : '';
7524     $invoice_terms = exists($_[0]->{invoice_terms}) ? $_[0]->{invoice_terms} : '';
7525   } else {
7526     $amount     = shift;
7527     $quantity   = 1;
7528     $start_date = '';
7529     $pkg        = @_ ? shift : 'One-time charge';
7530     $comment    = @_ ? shift : '$'. sprintf("%.2f",$amount);
7531     $setuptax   = '';
7532     $taxclass   = @_ ? shift : '';
7533     $additional = [];
7534   }
7535
7536   local $SIG{HUP} = 'IGNORE';
7537   local $SIG{INT} = 'IGNORE';
7538   local $SIG{QUIT} = 'IGNORE';
7539   local $SIG{TERM} = 'IGNORE';
7540   local $SIG{TSTP} = 'IGNORE';
7541   local $SIG{PIPE} = 'IGNORE';
7542
7543   my $oldAutoCommit = $FS::UID::AutoCommit;
7544   local $FS::UID::AutoCommit = 0;
7545   my $dbh = dbh;
7546
7547   my $part_pkg = new FS::part_pkg ( {
7548     'pkg'           => $pkg,
7549     'comment'       => $comment,
7550     'plan'          => 'flat',
7551     'freq'          => 0,
7552     'disabled'      => 'Y',
7553     'classnum'      => ( $classnum ? $classnum : '' ),
7554     'setuptax'      => $setuptax,
7555     'taxclass'      => $taxclass,
7556     'taxproductnum' => $taxproduct,
7557   } );
7558
7559   my %options = ( ( map { ("additional_info$_" => $additional->[$_] ) }
7560                         ( 0 .. @$additional - 1 )
7561                   ),
7562                   'additional_count' => scalar(@$additional),
7563                   'setup_fee' => $amount,
7564                 );
7565
7566   my $error = $part_pkg->insert( options       => \%options,
7567                                  tax_overrides => $override,
7568                                );
7569   if ( $error ) {
7570     $dbh->rollback if $oldAutoCommit;
7571     return $error;
7572   }
7573
7574   my $pkgpart = $part_pkg->pkgpart;
7575   my %type_pkgs = ( 'typenum' => $self->agent->typenum, 'pkgpart' => $pkgpart );
7576   unless ( qsearchs('type_pkgs', \%type_pkgs ) ) {
7577     my $type_pkgs = new FS::type_pkgs \%type_pkgs;
7578     $error = $type_pkgs->insert;
7579     if ( $error ) {
7580       $dbh->rollback if $oldAutoCommit;
7581       return $error;
7582     }
7583   }
7584
7585   my $cust_pkg = new FS::cust_pkg ( {
7586     'custnum'    => $self->custnum,
7587     'pkgpart'    => $pkgpart,
7588     'quantity'   => $quantity,
7589     'start_date' => $start_date,
7590   } );
7591
7592   $error = $cust_pkg->insert;
7593   if ( $error ) {
7594     $dbh->rollback if $oldAutoCommit;
7595     return $error;
7596   } elsif ( $cust_pkg_ref ) {
7597     ${$cust_pkg_ref} = $cust_pkg;
7598   }
7599
7600   if ( $bill_now ) {
7601     my $error = $self->bill( 'invoice_terms' => $invoice_terms,
7602                              'pkg_list'      => [ $cust_pkg ],
7603                            );
7604     if ( $error ) {
7605       $dbh->rollback if $oldAutoCommit;
7606       return $error;
7607     }
7608   }
7609
7610   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
7611   return '';
7612
7613 }
7614
7615 #=item charge_postal_fee
7616 #
7617 #Applies a one time charge this customer.  If there is an error,
7618 #returns the error, returns the cust_pkg charge object or false
7619 #if there was no charge.
7620 #
7621 #=cut
7622 #
7623 # This should be a customer event.  For that to work requires that bill
7624 # also be a customer event.
7625
7626 sub charge_postal_fee {
7627   my $self = shift;
7628
7629   my $pkgpart = $conf->config('postal_invoice-fee_pkgpart');
7630   return '' unless ($pkgpart && grep { $_ eq 'POST' } $self->invoicing_list);
7631
7632   my $cust_pkg = new FS::cust_pkg ( {
7633     'custnum'  => $self->custnum,
7634     'pkgpart'  => $pkgpart,
7635     'quantity' => 1,
7636   } );
7637
7638   my $error = $cust_pkg->insert;
7639   $error ? $error : $cust_pkg;
7640 }
7641
7642 =item cust_bill
7643
7644 Returns all the invoices (see L<FS::cust_bill>) for this customer.
7645
7646 =cut
7647
7648 sub cust_bill {
7649   my $self = shift;
7650   map { $_ } #return $self->num_cust_bill unless wantarray;
7651   sort { $a->_date <=> $b->_date }
7652     qsearch('cust_bill', { 'custnum' => $self->custnum, } )
7653 }
7654
7655 =item open_cust_bill
7656
7657 Returns all the open (owed > 0) invoices (see L<FS::cust_bill>) for this
7658 customer.
7659
7660 =cut
7661
7662 sub open_cust_bill {
7663   my $self = shift;
7664
7665   qsearch({
7666     'table'     => 'cust_bill',
7667     'hashref'   => { 'custnum' => $self->custnum, },
7668     'extra_sql' => ' AND '. FS::cust_bill->owed_sql. ' > 0',
7669     'order_by'  => 'ORDER BY _date ASC',
7670   });
7671
7672 }
7673
7674 =item cust_statements
7675
7676 Returns all the statements (see L<FS::cust_statement>) for this customer.
7677
7678 =cut
7679
7680 sub cust_statement {
7681   my $self = shift;
7682   map { $_ } #return $self->num_cust_statement unless wantarray;
7683   sort { $a->_date <=> $b->_date }
7684     qsearch('cust_statement', { 'custnum' => $self->custnum, } )
7685 }
7686
7687 =item cust_credit
7688
7689 Returns all the credits (see L<FS::cust_credit>) for this customer.
7690
7691 =cut
7692
7693 sub cust_credit {
7694   my $self = shift;
7695   map { $_ } #return $self->num_cust_credit unless wantarray;
7696   sort { $a->_date <=> $b->_date }
7697     qsearch( 'cust_credit', { 'custnum' => $self->custnum } )
7698 }
7699
7700 =item cust_credit_pkgnum
7701
7702 Returns all the credits (see L<FS::cust_credit>) for this customer's specific
7703 package when using experimental package balances.
7704
7705 =cut
7706
7707 sub cust_credit_pkgnum {
7708   my( $self, $pkgnum ) = @_;
7709   map { $_ } #return $self->num_cust_credit_pkgnum($pkgnum) unless wantarray;
7710   sort { $a->_date <=> $b->_date }
7711     qsearch( 'cust_credit', { 'custnum' => $self->custnum,
7712                               'pkgnum'  => $pkgnum,
7713                             }
7714     );
7715 }
7716
7717 =item cust_pay
7718
7719 Returns all the payments (see L<FS::cust_pay>) for this customer.
7720
7721 =cut
7722
7723 sub cust_pay {
7724   my $self = shift;
7725   return $self->num_cust_pay unless wantarray;
7726   sort { $a->_date <=> $b->_date }
7727     qsearch( 'cust_pay', { 'custnum' => $self->custnum } )
7728 }
7729
7730 =item num_cust_pay
7731
7732 Returns the number of payments (see L<FS::cust_pay>) for this customer.  Also
7733 called automatically when the cust_pay method is used in a scalar context.
7734
7735 =cut
7736
7737 sub num_cust_pay {
7738   my $self = shift;
7739   my $sql = "SELECT COUNT(*) FROM cust_pay WHERE custnum = ?";
7740   my $sth = dbh->prepare($sql) or die dbh->errstr;
7741   $sth->execute($self->custnum) or die $sth->errstr;
7742   $sth->fetchrow_arrayref->[0];
7743 }
7744
7745 =item cust_pay_pkgnum
7746
7747 Returns all the payments (see L<FS::cust_pay>) for this customer's specific
7748 package when using experimental package balances.
7749
7750 =cut
7751
7752 sub cust_pay_pkgnum {
7753   my( $self, $pkgnum ) = @_;
7754   map { $_ } #return $self->num_cust_pay_pkgnum($pkgnum) unless wantarray;
7755   sort { $a->_date <=> $b->_date }
7756     qsearch( 'cust_pay', { 'custnum' => $self->custnum,
7757                            'pkgnum'  => $pkgnum,
7758                          }
7759     );
7760 }
7761
7762 =item cust_pay_void
7763
7764 Returns all voided payments (see L<FS::cust_pay_void>) for this customer.
7765
7766 =cut
7767
7768 sub cust_pay_void {
7769   my $self = shift;
7770   map { $_ } #return $self->num_cust_pay_void unless wantarray;
7771   sort { $a->_date <=> $b->_date }
7772     qsearch( 'cust_pay_void', { 'custnum' => $self->custnum } )
7773 }
7774
7775 =item cust_pay_batch
7776
7777 Returns all batched payments (see L<FS::cust_pay_void>) for this customer.
7778
7779 =cut
7780
7781 sub cust_pay_batch {
7782   my $self = shift;
7783   map { $_ } #return $self->num_cust_pay_batch unless wantarray;
7784   sort { $a->paybatchnum <=> $b->paybatchnum }
7785     qsearch( 'cust_pay_batch', { 'custnum' => $self->custnum } )
7786 }
7787
7788 =item cust_pay_pending
7789
7790 Returns all pending payments (see L<FS::cust_pay_pending>) for this customer
7791 (without status "done").
7792
7793 =cut
7794
7795 sub cust_pay_pending {
7796   my $self = shift;
7797   return $self->num_cust_pay_pending unless wantarray;
7798   sort { $a->_date <=> $b->_date }
7799     qsearch( 'cust_pay_pending', {
7800                                    'custnum' => $self->custnum,
7801                                    'status'  => { op=>'!=', value=>'done' },
7802                                  },
7803            );
7804 }
7805
7806 =item num_cust_pay_pending
7807
7808 Returns the number of pending payments (see L<FS::cust_pay_pending>) for this
7809 customer (without status "done").  Also called automatically when the
7810 cust_pay_pending method is used in a scalar context.
7811
7812 =cut
7813
7814 sub num_cust_pay_pending {
7815   my $self = shift;
7816   my $sql = " SELECT COUNT(*) FROM cust_pay_pending ".
7817             "   WHERE custnum = ? AND status != 'done' ";
7818   my $sth = dbh->prepare($sql) or die dbh->errstr;
7819   $sth->execute($self->custnum) or die $sth->errstr;
7820   $sth->fetchrow_arrayref->[0];
7821 }
7822
7823 =item cust_refund
7824
7825 Returns all the refunds (see L<FS::cust_refund>) for this customer.
7826
7827 =cut
7828
7829 sub cust_refund {
7830   my $self = shift;
7831   map { $_ } #return $self->num_cust_refund unless wantarray;
7832   sort { $a->_date <=> $b->_date }
7833     qsearch( 'cust_refund', { 'custnum' => $self->custnum } )
7834 }
7835
7836 =item display_custnum
7837
7838 Returns the displayed customer number for this customer: agent_custid if
7839 cust_main-default_agent_custid is set and it has a value, custnum otherwise.
7840
7841 =cut
7842
7843 sub display_custnum {
7844   my $self = shift;
7845   if ( $conf->exists('cust_main-default_agent_custid') && $self->agent_custid ){
7846     return $self->agent_custid;
7847   } else {
7848     return $self->custnum;
7849   }
7850 }
7851
7852 =item name
7853
7854 Returns a name string for this customer, either "Company (Last, First)" or
7855 "Last, First".
7856
7857 =cut
7858
7859 sub name {
7860   my $self = shift;
7861   my $name = $self->contact;
7862   $name = $self->company. " ($name)" if $self->company;
7863   $name;
7864 }
7865
7866 =item ship_name
7867
7868 Returns a name string for this (service/shipping) contact, either
7869 "Company (Last, First)" or "Last, First".
7870
7871 =cut
7872
7873 sub ship_name {
7874   my $self = shift;
7875   if ( $self->get('ship_last') ) {
7876     my $name = $self->ship_contact;
7877     $name = $self->ship_company. " ($name)" if $self->ship_company;
7878     $name;
7879   } else {
7880     $self->name;
7881   }
7882 }
7883
7884 =item name_short
7885
7886 Returns a name string for this customer, either "Company" or "First Last".
7887
7888 =cut
7889
7890 sub name_short {
7891   my $self = shift;
7892   $self->company !~ /^\s*$/ ? $self->company : $self->contact_firstlast;
7893 }
7894
7895 =item ship_name_short
7896
7897 Returns a name string for this (service/shipping) contact, either "Company"
7898 or "First Last".
7899
7900 =cut
7901
7902 sub ship_name_short {
7903   my $self = shift;
7904   if ( $self->get('ship_last') ) {
7905     $self->ship_company !~ /^\s*$/
7906       ? $self->ship_company
7907       : $self->ship_contact_firstlast;
7908   } else {
7909     $self->name_company_or_firstlast;
7910   }
7911 }
7912
7913 =item contact
7914
7915 Returns this customer's full (billing) contact name only, "Last, First"
7916
7917 =cut
7918
7919 sub contact {
7920   my $self = shift;
7921   $self->get('last'). ', '. $self->first;
7922 }
7923
7924 =item ship_contact
7925
7926 Returns this customer's full (shipping) contact name only, "Last, First"
7927
7928 =cut
7929
7930 sub ship_contact {
7931   my $self = shift;
7932   $self->get('ship_last')
7933     ? $self->get('ship_last'). ', '. $self->ship_first
7934     : $self->contact;
7935 }
7936
7937 =item contact_firstlast
7938
7939 Returns this customers full (billing) contact name only, "First Last".
7940
7941 =cut
7942
7943 sub contact_firstlast {
7944   my $self = shift;
7945   $self->first. ' '. $self->get('last');
7946 }
7947
7948 =item ship_contact_firstlast
7949
7950 Returns this customer's full (shipping) contact name only, "First Last".
7951
7952 =cut
7953
7954 sub ship_contact_firstlast {
7955   my $self = shift;
7956   $self->get('ship_last')
7957     ? $self->first. ' '. $self->get('ship_last')
7958     : $self->contact_firstlast;
7959 }
7960
7961 =item country_full
7962
7963 Returns this customer's full country name
7964
7965 =cut
7966
7967 sub country_full {
7968   my $self = shift;
7969   code2country($self->country);
7970 }
7971
7972 =item geocode DATA_VENDOR
7973
7974 Returns a value for the customer location as encoded by DATA_VENDOR.
7975 Currently this only makes sense for "CCH" as DATA_VENDOR.
7976
7977 =cut
7978
7979 sub geocode {
7980   my ($self, $data_vendor) = (shift, shift);  #always cch for now
7981
7982   my $geocode = $self->get('geocode');  #XXX only one data_vendor for geocode
7983   return $geocode if $geocode;
7984
7985   my $prefix = ( $conf->exists('tax-ship_address') && length($self->ship_last) )
7986                ? 'ship_'
7987                : '';
7988
7989   my ($zip,$plus4) = ( '', '' );
7990   ($zip,$plus4) = split /-/, $self->get("${prefix}zip")
7991     if $self->country eq 'US';
7992
7993   #CCH specific location stuff
7994   my $extra_sql = "AND plus4lo <= '$plus4' AND plus4hi >= '$plus4'";
7995
7996   my @cust_tax_location =
7997     qsearch( {
7998                'table'     => 'cust_tax_location',
7999                'hashref'   => { 'zip' => $zip, 'data_vendor' => $data_vendor },
8000                'extra_sql' => $extra_sql,
8001                'order_by'  => 'ORDER BY plus4hi',#overlapping with distinct ends
8002              }
8003            );
8004   $geocode = $cust_tax_location[0]->geocode
8005     if scalar(@cust_tax_location);
8006
8007   $geocode;
8008 }
8009
8010 =item cust_status
8011
8012 =item status
8013
8014 Returns a status string for this customer, currently:
8015
8016 =over 4
8017
8018 =item prospect - No packages have ever been ordered
8019
8020 =item active - One or more recurring packages is active
8021
8022 =item inactive - No active recurring packages, but otherwise unsuspended/uncancelled (the inactive status is new - previously inactive customers were mis-identified as cancelled)
8023
8024 =item suspended - All non-cancelled recurring packages are suspended
8025
8026 =item cancelled - All recurring packages are cancelled
8027
8028 =back
8029
8030 =cut
8031
8032 sub status { shift->cust_status(@_); }
8033
8034 sub cust_status {
8035   my $self = shift;
8036   for my $status (qw( prospect active inactive suspended cancelled )) {
8037     my $method = $status.'_sql';
8038     my $numnum = ( my $sql = $self->$method() ) =~ s/cust_main\.custnum/?/g;
8039     my $sth = dbh->prepare("SELECT $sql") or die dbh->errstr;
8040     $sth->execute( ($self->custnum) x $numnum )
8041       or die "Error executing 'SELECT $sql': ". $sth->errstr;
8042     return $status if $sth->fetchrow_arrayref->[0];
8043   }
8044 }
8045
8046 =item ucfirst_cust_status
8047
8048 =item ucfirst_status
8049
8050 Returns the status with the first character capitalized.
8051
8052 =cut
8053
8054 sub ucfirst_status { shift->ucfirst_cust_status(@_); }
8055
8056 sub ucfirst_cust_status {
8057   my $self = shift;
8058   ucfirst($self->cust_status);
8059 }
8060
8061 =item statuscolor
8062
8063 Returns a hex triplet color string for this customer's status.
8064
8065 =cut
8066
8067 use vars qw(%statuscolor);
8068 tie %statuscolor, 'Tie::IxHash',
8069   'prospect'  => '7e0079', #'000000', #black?  naw, purple
8070   'active'    => '00CC00', #green
8071   'inactive'  => '0000CC', #blue
8072   'suspended' => 'FF9900', #yellow
8073   'cancelled' => 'FF0000', #red
8074 ;
8075
8076 sub statuscolor { shift->cust_statuscolor(@_); }
8077
8078 sub cust_statuscolor {
8079   my $self = shift;
8080   $statuscolor{$self->cust_status};
8081 }
8082
8083 =item tickets
8084
8085 Returns an array of hashes representing the customer's RT tickets.
8086
8087 =cut
8088
8089 sub tickets {
8090   my $self = shift;
8091
8092   my $num = $conf->config('cust_main-max_tickets') || 10;
8093   my @tickets = ();
8094
8095   if ( $conf->config('ticket_system') ) {
8096     unless ( $conf->config('ticket_system-custom_priority_field') ) {
8097
8098       @tickets = @{ FS::TicketSystem->customer_tickets($self->custnum, $num) };
8099
8100     } else {
8101
8102       foreach my $priority (
8103         $conf->config('ticket_system-custom_priority_field-values'), ''
8104       ) {
8105         last if scalar(@tickets) >= $num;
8106         push @tickets,
8107           @{ FS::TicketSystem->customer_tickets( $self->custnum,
8108                                                  $num - scalar(@tickets),
8109                                                  $priority,
8110                                                )
8111            };
8112       }
8113     }
8114   }
8115   (@tickets);
8116 }
8117
8118 # Return services representing svc_accts in customer support packages
8119 sub support_services {
8120   my $self = shift;
8121   my %packages = map { $_ => 1 } $conf->config('support_packages');
8122
8123   grep { $_->pkg_svc && $_->pkg_svc->primary_svc eq 'Y' }
8124     grep { $_->part_svc->svcdb eq 'svc_acct' }
8125     map { $_->cust_svc }
8126     grep { exists $packages{ $_->pkgpart } }
8127     $self->ncancelled_pkgs;
8128
8129 }
8130
8131 # Return a list of latitude/longitude for one of the services (if any)
8132 sub service_coordinates {
8133   my $self = shift;
8134
8135   my @svc_X =
8136     grep { $_->latitude && $_->longitude }
8137     map { $_->svc_x }
8138     map { $_->cust_svc }
8139     $self->ncancelled_pkgs;
8140
8141   scalar(@svc_X) ? ( $svc_X[0]->latitude, $svc_X[0]->longitude ) : ()
8142 }
8143
8144 =back
8145
8146 =head1 CLASS METHODS
8147
8148 =over 4
8149
8150 =item statuses
8151
8152 Class method that returns the list of possible status strings for customers
8153 (see L<the status method|/status>).  For example:
8154
8155   @statuses = FS::cust_main->statuses();
8156
8157 =cut
8158
8159 sub statuses {
8160   #my $self = shift; #could be class...
8161   keys %statuscolor;
8162 }
8163
8164 =item prospect_sql
8165
8166 Returns an SQL expression identifying prospective cust_main records (customers
8167 with no packages ever ordered)
8168
8169 =cut
8170
8171 use vars qw($select_count_pkgs);
8172 $select_count_pkgs =
8173   "SELECT COUNT(*) FROM cust_pkg
8174     WHERE cust_pkg.custnum = cust_main.custnum";
8175
8176 sub select_count_pkgs_sql {
8177   $select_count_pkgs;
8178 }
8179
8180 sub prospect_sql { "
8181   0 = ( $select_count_pkgs )
8182 "; }
8183
8184 =item active_sql
8185
8186 Returns an SQL expression identifying active cust_main records (customers with
8187 active recurring packages).
8188
8189 =cut
8190
8191 sub active_sql { "
8192   0 < ( $select_count_pkgs AND ". FS::cust_pkg->active_sql. "
8193       )
8194 "; }
8195
8196 =item inactive_sql
8197
8198 Returns an SQL expression identifying inactive cust_main records (customers with
8199 no active recurring packages, but otherwise unsuspended/uncancelled).
8200
8201 =cut
8202
8203 sub inactive_sql { "
8204   0 = ( $select_count_pkgs AND ". FS::cust_pkg->active_sql. " )
8205   AND
8206   0 < ( $select_count_pkgs AND ". FS::cust_pkg->inactive_sql. " )
8207 "; }
8208
8209 =item susp_sql
8210 =item suspended_sql
8211
8212 Returns an SQL expression identifying suspended cust_main records.
8213
8214 =cut
8215
8216
8217 sub suspended_sql { susp_sql(@_); }
8218 sub susp_sql { "
8219     0 < ( $select_count_pkgs AND ". FS::cust_pkg->suspended_sql. " )
8220     AND
8221     0 = ( $select_count_pkgs AND ". FS::cust_pkg->active_sql. " )
8222 "; }
8223
8224 =item cancel_sql
8225 =item cancelled_sql
8226
8227 Returns an SQL expression identifying cancelled cust_main records.
8228
8229 =cut
8230
8231 sub cancelled_sql { cancel_sql(@_); }
8232 sub cancel_sql {
8233
8234   my $recurring_sql = FS::cust_pkg->recurring_sql;
8235   my $cancelled_sql = FS::cust_pkg->cancelled_sql;
8236
8237   "
8238         0 < ( $select_count_pkgs )
8239     AND 0 < ( $select_count_pkgs AND $recurring_sql AND $cancelled_sql   )
8240     AND 0 = ( $select_count_pkgs AND $recurring_sql
8241                   AND ( cust_pkg.cancel IS NULL OR cust_pkg.cancel = 0 )
8242             )
8243     AND 0 = (  $select_count_pkgs AND ". FS::cust_pkg->inactive_sql. " )
8244   ";
8245
8246 }
8247
8248 =item uncancel_sql
8249 =item uncancelled_sql
8250
8251 Returns an SQL expression identifying un-cancelled cust_main records.
8252
8253 =cut
8254
8255 sub uncancelled_sql { uncancel_sql(@_); }
8256 sub uncancel_sql { "
8257   ( 0 < ( $select_count_pkgs
8258                    AND ( cust_pkg.cancel IS NULL
8259                          OR cust_pkg.cancel = 0
8260                        )
8261         )
8262     OR 0 = ( $select_count_pkgs )
8263   )
8264 "; }
8265
8266 =item balance_sql
8267
8268 Returns an SQL fragment to retreive the balance.
8269
8270 =cut
8271
8272 sub balance_sql { "
8273     ( SELECT COALESCE( SUM(charged), 0 ) FROM cust_bill
8274         WHERE cust_bill.custnum   = cust_main.custnum     )
8275   - ( SELECT COALESCE( SUM(paid),    0 ) FROM cust_pay
8276         WHERE cust_pay.custnum    = cust_main.custnum     )
8277   - ( SELECT COALESCE( SUM(amount),  0 ) FROM cust_credit
8278         WHERE cust_credit.custnum = cust_main.custnum     )
8279   + ( SELECT COALESCE( SUM(refund),  0 ) FROM cust_refund
8280         WHERE cust_refund.custnum = cust_main.custnum     )
8281 "; }
8282
8283 =item balance_date_sql START_TIME [ END_TIME [ OPTION => VALUE ... ] ]
8284
8285 Returns an SQL fragment to retreive the balance for this customer, only
8286 considering invoices with date earlier than START_TIME, and optionally not
8287 later than END_TIME (total_owed_date minus total_unapplied_credits minus
8288 total_unapplied_payments).
8289
8290 Times are specified as SQL fragments or numeric
8291 UNIX timestamps; see L<perlfunc/"time">).  Also see L<Time::Local> and
8292 L<Date::Parse> for conversion functions.  The empty string can be passed
8293 to disable that time constraint completely.
8294
8295 Available options are:
8296
8297 =over 4
8298
8299 =item unapplied_date
8300
8301 set to true to disregard unapplied credits, payments and refunds outside the specified time period - by default the time period restriction only applies to invoices (useful for reporting, probably a bad idea for event triggering)
8302
8303 =item total
8304
8305 (unused.  obsolete?)
8306 set to true to remove all customer comparison clauses, for totals
8307
8308 =item where
8309
8310 (unused.  obsolete?)
8311 WHERE clause hashref (elements "AND"ed together) (typically used with the total option)
8312
8313 =item join
8314
8315 (unused.  obsolete?)
8316 JOIN clause (typically used with the total option)
8317
8318 =back
8319
8320 =cut
8321
8322 sub balance_date_sql {
8323   my( $class, $start, $end, %opt ) = @_;
8324
8325   my $owed         = FS::cust_bill->owed_sql;
8326   my $unapp_refund = FS::cust_refund->unapplied_sql;
8327   my $unapp_credit = FS::cust_credit->unapplied_sql;
8328   my $unapp_pay    = FS::cust_pay->unapplied_sql;
8329
8330   my $j = $opt{'join'} || '';
8331
8332   my $owed_wh   = $class->_money_table_where( 'cust_bill',   $start,$end,%opt );
8333   my $refund_wh = $class->_money_table_where( 'cust_refund', $start,$end,%opt );
8334   my $credit_wh = $class->_money_table_where( 'cust_credit', $start,$end,%opt );
8335   my $pay_wh    = $class->_money_table_where( 'cust_pay',    $start,$end,%opt );
8336
8337   "   ( SELECT COALESCE(SUM($owed),         0) FROM cust_bill   $j $owed_wh   )
8338     + ( SELECT COALESCE(SUM($unapp_refund), 0) FROM cust_refund $j $refund_wh )
8339     - ( SELECT COALESCE(SUM($unapp_credit), 0) FROM cust_credit $j $credit_wh )
8340     - ( SELECT COALESCE(SUM($unapp_pay),    0) FROM cust_pay    $j $pay_wh    )
8341   ";
8342
8343 }
8344
8345 =item unapplied_payments_date_sql START_TIME [ END_TIME ]
8346
8347 Returns an SQL fragment to retreive the total unapplied payments for this
8348 customer, only considering invoices with date earlier than START_TIME, and
8349 optionally not later than END_TIME.
8350
8351 Times are specified as SQL fragments or numeric
8352 UNIX timestamps; see L<perlfunc/"time">).  Also see L<Time::Local> and
8353 L<Date::Parse> for conversion functions.  The empty string can be passed
8354 to disable that time constraint completely.
8355
8356 Available options are:
8357
8358 =cut
8359
8360 sub unapplied_payments_date_sql {
8361   my( $class, $start, $end, ) = @_;
8362
8363   my $unapp_pay    = FS::cust_pay->unapplied_sql;
8364
8365   my $pay_where = $class->_money_table_where( 'cust_pay', $start, $end,
8366                                                           'unapplied_date'=>1 );
8367
8368   " ( SELECT COALESCE(SUM($unapp_pay), 0) FROM cust_pay $pay_where ) ";
8369 }
8370
8371 =item _money_table_where TABLE START_TIME [ END_TIME [ OPTION => VALUE ... ] ]
8372
8373 Helper method for balance_date_sql; name (and usage) subject to change
8374 (suggestions welcome).
8375
8376 Returns a WHERE clause for the specified monetary TABLE (cust_bill,
8377 cust_refund, cust_credit or cust_pay).
8378
8379 If TABLE is "cust_bill" or the unapplied_date option is true, only
8380 considers records with date earlier than START_TIME, and optionally not
8381 later than END_TIME .
8382
8383 =cut
8384
8385 sub _money_table_where {
8386   my( $class, $table, $start, $end, %opt ) = @_;
8387
8388   my @where = ();
8389   push @where, "cust_main.custnum = $table.custnum" unless $opt{'total'};
8390   if ( $table eq 'cust_bill' || $opt{'unapplied_date'} ) {
8391     push @where, "$table._date <= $start" if defined($start) && length($start);
8392     push @where, "$table._date >  $end"   if defined($end)   && length($end);
8393   }
8394   push @where, @{$opt{'where'}} if $opt{'where'};
8395   my $where = scalar(@where) ? 'WHERE '. join(' AND ', @where ) : '';
8396
8397   $where;
8398
8399 }
8400
8401 =item search HASHREF
8402
8403 (Class method)
8404
8405 Returns a qsearch hash expression to search for parameters specified in HREF.
8406 Valid parameters are
8407
8408 =over 4
8409
8410 =item agentnum
8411
8412 =item status
8413
8414 =item cancelled_pkgs
8415
8416 bool
8417
8418 =item signupdate
8419
8420 listref of start date, end date
8421
8422 =item payby
8423
8424 listref
8425
8426 =item paydate_year
8427
8428 =item paydate_month
8429
8430 =item current_balance
8431
8432 listref (list returned by FS::UI::Web::parse_lt_gt($cgi, 'current_balance'))
8433
8434 =item cust_fields
8435
8436 =item flattened_pkgs
8437
8438 bool
8439
8440 =back
8441
8442 =cut
8443
8444 sub search {
8445   my ($class, $params) = @_;
8446
8447   my $dbh = dbh;
8448
8449   my @where = ();
8450   my $orderby;
8451
8452   ##
8453   # parse agent
8454   ##
8455
8456   if ( $params->{'agentnum'} =~ /^(\d+)$/ and $1 ) {
8457     push @where,
8458       "cust_main.agentnum = $1";
8459   }
8460
8461   ##
8462   # parse status
8463   ##
8464
8465   #prospect active inactive suspended cancelled
8466   if ( grep { $params->{'status'} eq $_ } FS::cust_main->statuses() ) {
8467     my $method = $params->{'status'}. '_sql';
8468     #push @where, $class->$method();
8469     push @where, FS::cust_main->$method();
8470   }
8471
8472   ##
8473   # parse cancelled package checkbox
8474   ##
8475
8476   my $pkgwhere = "";
8477
8478   $pkgwhere .= "AND (cancel = 0 or cancel is null)"
8479     unless $params->{'cancelled_pkgs'};
8480
8481   ##
8482   # parse without census tract checkbox
8483   ##
8484
8485   push @where, "(censustract = '' or censustract is null)"
8486     if $params->{'no_censustract'};
8487
8488   ##
8489   # dates
8490   ##
8491
8492   foreach my $field (qw( signupdate )) {
8493
8494     next unless exists($params->{$field});
8495
8496     my($beginning, $ending) = @{$params->{$field}};
8497
8498     push @where,
8499       "cust_main.$field IS NOT NULL",
8500       "cust_main.$field >= $beginning",
8501       "cust_main.$field <= $ending";
8502
8503     $orderby ||= "ORDER BY cust_main.$field";
8504
8505   }
8506
8507   ###
8508   # classnum
8509   ###
8510
8511   if ( $params->{'classnum'} ) {
8512
8513     my @classnum = ref( $params->{'classnum'} )
8514                      ? @{ $params->{'classnum'} }
8515                      :  ( $params->{'classnum'} );
8516
8517     @classnum = grep /^(\d*)$/, @classnum;
8518
8519     if ( @classnum ) {
8520       push @where, '( '. join(' OR ', map {
8521                                             $_ ? "cust_main.classnum = $_"
8522                                                : "cust_main.classnum IS NULL"
8523                                           }
8524                                           @classnum
8525                              ).
8526                    ' )';
8527     }
8528
8529   }
8530
8531   ###
8532   # payby
8533   ###
8534
8535   if ( $params->{'payby'} ) {
8536
8537     my @payby = ref( $params->{'payby'} )
8538                   ? @{ $params->{'payby'} }
8539                   :  ( $params->{'payby'} );
8540
8541     @payby = grep /^([A-Z]{4})$/, @{ $params->{'payby'} };
8542
8543     push @where, '( '. join(' OR ', map "cust_main.payby = '$_'", @payby). ' )'
8544       if @payby;
8545
8546   }
8547
8548   ###
8549   # paydate_year / paydate_month
8550   ###
8551
8552   if ( $params->{'paydate_year'} =~ /^(\d{4})$/ ) {
8553     my $year = $1;
8554     $params->{'paydate_month'} =~ /^(\d\d?)$/
8555       or die "paydate_year without paydate_month?";
8556     my $month = $1;
8557
8558     push @where,
8559       'paydate IS NOT NULL',
8560       "paydate != ''",
8561       "CAST(paydate AS timestamp) < CAST('$year-$month-01' AS timestamp )"
8562 ;
8563   }
8564
8565   ###
8566   # invoice terms
8567   ###
8568
8569   if ( $params->{'invoice_terms'} =~ /^([\w ]+)$/ ) {
8570     my $terms = $1;
8571     if ( $1 eq 'NULL' ) {
8572       push @where,
8573         "( cust_main.invoice_terms IS NULL OR cust_main.invoice_terms = '' )";
8574     } else {
8575       push @where,
8576         "cust_main.invoice_terms IS NOT NULL",
8577         "cust_main.invoice_terms = '$1'";
8578     }
8579   }
8580
8581   ##
8582   # amounts
8583   ##
8584
8585   if ( $params->{'current_balance'} ) {
8586
8587     #my $balance_sql = $class->balance_sql();
8588     my $balance_sql = FS::cust_main->balance_sql();
8589
8590     my @current_balance =
8591       ref( $params->{'current_balance'} )
8592       ? @{ $params->{'current_balance'} }
8593       :  ( $params->{'current_balance'} );
8594
8595     push @where, map { s/current_balance/$balance_sql/; $_ }
8596                      @current_balance;
8597
8598   }
8599
8600   ##
8601   # custbatch
8602   ##
8603
8604   if ( $params->{'custbatch'} =~ /^([\w\/\-\:\.]+)$/ and $1 ) {
8605     push @where,
8606       "cust_main.custbatch = '$1'";
8607   }
8608
8609   ##
8610   # setup queries, subs, etc. for the search
8611   ##
8612
8613   $orderby ||= 'ORDER BY custnum';
8614
8615   # here is the agent virtualization
8616   push @where, $FS::CurrentUser::CurrentUser->agentnums_sql;
8617
8618   my $extra_sql = scalar(@where) ? ' WHERE '. join(' AND ', @where) : '';
8619
8620   my $addl_from = 'LEFT JOIN cust_pkg USING ( custnum  ) ';
8621
8622   my $count_query = "SELECT COUNT(*) FROM cust_main $extra_sql";
8623
8624   my $select = join(', ',
8625                  'cust_main.custnum',
8626                  FS::UI::Web::cust_sql_fields($params->{'cust_fields'}),
8627                );
8628
8629   my(@extra_headers) = ();
8630   my(@extra_fields)  = ();
8631
8632   if ($params->{'flattened_pkgs'}) {
8633
8634     if ($dbh->{Driver}->{Name} eq 'Pg') {
8635
8636       $select .= ", array_to_string(array(select pkg from cust_pkg left join part_pkg using ( pkgpart ) where cust_main.custnum = cust_pkg.custnum $pkgwhere),'|') as magic";
8637
8638     }elsif ($dbh->{Driver}->{Name} =~ /^mysql/i) {
8639       $select .= ", GROUP_CONCAT(pkg SEPARATOR '|') as magic";
8640       $addl_from .= " LEFT JOIN part_pkg using ( pkgpart )";
8641     }else{
8642       warn "warning: unknown database type ". $dbh->{Driver}->{Name}.
8643            "omitting packing information from report.";
8644     }
8645
8646     my $header_query = "SELECT COUNT(cust_pkg.custnum = cust_main.custnum) AS count FROM cust_main $addl_from $extra_sql $pkgwhere group by cust_main.custnum order by count desc limit 1";
8647
8648     my $sth = dbh->prepare($header_query) or die dbh->errstr;
8649     $sth->execute() or die $sth->errstr;
8650     my $headerrow = $sth->fetchrow_arrayref;
8651     my $headercount = $headerrow ? $headerrow->[0] : 0;
8652     while($headercount) {
8653       unshift @extra_headers, "Package ". $headercount;
8654       unshift @extra_fields, eval q!sub {my $c = shift;
8655                                          my @a = split '\|', $c->magic;
8656                                          my $p = $a[!.--$headercount. q!];
8657                                          $p;
8658                                         };!;
8659     }
8660
8661   }
8662
8663   my $sql_query = {
8664     'table'         => 'cust_main',
8665     'select'        => $select,
8666     'hashref'       => {},
8667     'extra_sql'     => $extra_sql,
8668     'order_by'      => $orderby,
8669     'count_query'   => $count_query,
8670     'extra_headers' => \@extra_headers,
8671     'extra_fields'  => \@extra_fields,
8672   };
8673
8674 }
8675
8676 =item email_search_result HASHREF
8677
8678 (Class method)
8679
8680 Emails a notice to the specified customers.
8681
8682 Valid parameters are those of the L<search> method, plus the following:
8683
8684 =over 4
8685
8686 =item from
8687
8688 From: address
8689
8690 =item subject
8691
8692 Email Subject:
8693
8694 =item html_body
8695
8696 HTML body
8697
8698 =item text_body
8699
8700 Text body
8701
8702 =item job
8703
8704 Optional job queue job for status updates.
8705
8706 =back
8707
8708 Returns an error message, or false for success.
8709
8710 If an error occurs during any email, stops the enture send and returns that
8711 error.  Presumably if you're getting SMTP errors aborting is better than
8712 retrying everything.
8713
8714 =cut
8715
8716 sub email_search_result {
8717   my($class, $params) = @_;
8718
8719   my $from = delete $params->{from};
8720   my $subject = delete $params->{subject};
8721   my $html_body = delete $params->{html_body};
8722   my $text_body = delete $params->{text_body};
8723
8724   my $job = delete $params->{'job'};
8725
8726   $params->{'payby'} = [ split(/\0/, $params->{'payby'}) ]
8727     unless ref($params->{'payby'});
8728
8729   my $sql_query = $class->search($params);
8730
8731   my $count_query   = delete($sql_query->{'count_query'});
8732   my $count_sth = dbh->prepare($count_query)
8733     or die "Error preparing $count_query: ". dbh->errstr;
8734   $count_sth->execute
8735     or die "Error executing $count_query: ". $count_sth->errstr;
8736   my $count_arrayref = $count_sth->fetchrow_arrayref;
8737   my $num_cust = $count_arrayref->[0];
8738
8739   #my @extra_headers = @{ delete($sql_query->{'extra_headers'}) };
8740   #my @extra_fields  = @{ delete($sql_query->{'extra_fields'})  };
8741
8742
8743   my( $num, $last, $min_sec ) = (0, time, 5); #progresbar foo
8744
8745   #eventually order+limit magic to reduce memory use?
8746   foreach my $cust_main ( qsearch($sql_query) ) {
8747
8748     my $to = $cust_main->invoicing_list_emailonly_scalar;
8749     next unless $to;
8750
8751     my $error = send_email(
8752       generate_email(
8753         'from'      => $from,
8754         'to'        => $to,
8755         'subject'   => $subject,
8756         'html_body' => $html_body,
8757         'text_body' => $text_body,
8758       )
8759     );
8760     return $error if $error;
8761
8762     if ( $job ) { #progressbar foo
8763       $num++;
8764       if ( time - $min_sec > $last ) {
8765         my $error = $job->update_statustext(
8766           int( 100 * $num / $num_cust )
8767         );
8768         die $error if $error;
8769         $last = time;
8770       }
8771     }
8772
8773   }
8774
8775   return '';
8776 }
8777
8778 use Storable qw(thaw);
8779 use Data::Dumper;
8780 use MIME::Base64;
8781 sub process_email_search_result {
8782   my $job = shift;
8783   #warn "$me process_re_X $method for job $job\n" if $DEBUG;
8784
8785   my $param = thaw(decode_base64(shift));
8786   warn Dumper($param) if $DEBUG;
8787
8788   $param->{'job'} = $job;
8789
8790   $param->{'payby'} = [ split(/\0/, $param->{'payby'}) ]
8791     unless ref($param->{'payby'});
8792
8793   my $error = FS::cust_main->email_search_result( $param );
8794   die $error if $error;
8795
8796 }
8797
8798 =item fuzzy_search FUZZY_HASHREF [ HASHREF, SELECT, EXTRA_SQL, CACHE_OBJ ]
8799
8800 Performs a fuzzy (approximate) search and returns the matching FS::cust_main
8801 records.  Currently, I<first>, I<last>, I<company> and/or I<address1> may be
8802 specified (the appropriate ship_ field is also searched).
8803
8804 Additional options are the same as FS::Record::qsearch
8805
8806 =cut
8807
8808 sub fuzzy_search {
8809   my( $self, $fuzzy, $hash, @opt) = @_;
8810   #$self
8811   $hash ||= {};
8812   my @cust_main = ();
8813
8814   check_and_rebuild_fuzzyfiles();
8815   foreach my $field ( keys %$fuzzy ) {
8816
8817     my $all = $self->all_X($field);
8818     next unless scalar(@$all);
8819
8820     my %match = ();
8821     $match{$_}=1 foreach ( amatch( $fuzzy->{$field}, ['i'], @$all ) );
8822
8823     my @fcust = ();
8824     foreach ( keys %match ) {
8825       push @fcust, qsearch('cust_main', { %$hash, $field=>$_}, @opt);
8826       push @fcust, qsearch('cust_main', { %$hash, "ship_$field"=>$_}, @opt);
8827     }
8828     my %fsaw = ();
8829     push @cust_main, grep { ! $fsaw{$_->custnum}++ } @fcust;
8830   }
8831
8832   # we want the components of $fuzzy ANDed, not ORed, but still don't want dupes
8833   my %saw = ();
8834   @cust_main = grep { ++$saw{$_->custnum} == scalar(keys %$fuzzy) } @cust_main;
8835
8836   @cust_main;
8837
8838 }
8839
8840 =item masked FIELD
8841
8842 Returns a masked version of the named field
8843
8844 =cut
8845
8846 sub masked {
8847 my ($self,$field) = @_;
8848
8849 # Show last four
8850
8851 'x'x(length($self->getfield($field))-4).
8852   substr($self->getfield($field), (length($self->getfield($field))-4));
8853
8854 }
8855
8856 =back
8857
8858 =head1 SUBROUTINES
8859
8860 =over 4
8861
8862 =item smart_search OPTION => VALUE ...
8863
8864 Accepts the following options: I<search>, the string to search for.  The string
8865 will be searched for as a customer number, phone number, name or company name,
8866 as an exact, or, in some cases, a substring or fuzzy match (see the source code
8867 for the exact heuristics used); I<no_fuzzy_on_exact>, causes smart_search to
8868 skip fuzzy matching when an exact match is found.
8869
8870 Any additional options are treated as an additional qualifier on the search
8871 (i.e. I<agentnum>).
8872
8873 Returns a (possibly empty) array of FS::cust_main objects.
8874
8875 =cut
8876
8877 sub smart_search {
8878   my %options = @_;
8879
8880   #here is the agent virtualization
8881   my $agentnums_sql = $FS::CurrentUser::CurrentUser->agentnums_sql;
8882
8883   my @cust_main = ();
8884
8885   my $skip_fuzzy = delete $options{'no_fuzzy_on_exact'};
8886   my $search = delete $options{'search'};
8887   ( my $alphanum_search = $search ) =~ s/\W//g;
8888
8889   if ( $alphanum_search =~ /^1?(\d{3})(\d{3})(\d{4})(\d*)$/ ) { #phone# search
8890
8891     #false laziness w/Record::ut_phone
8892     my $phonen = "$1-$2-$3";
8893     $phonen .= " x$4" if $4;
8894
8895     push @cust_main, qsearch( {
8896       'table'   => 'cust_main',
8897       'hashref' => { %options },
8898       'extra_sql' => ( scalar(keys %options) ? ' AND ' : ' WHERE ' ).
8899                      ' ( '.
8900                          join(' OR ', map "$_ = '$phonen'",
8901                                           qw( daytime night fax
8902                                               ship_daytime ship_night ship_fax )
8903                              ).
8904                      ' ) '.
8905                      " AND $agentnums_sql", #agent virtualization
8906     } );
8907
8908     unless ( @cust_main || $phonen =~ /x\d+$/ ) { #no exact match
8909       #try looking for matches with extensions unless one was specified
8910
8911       push @cust_main, qsearch( {
8912         'table'   => 'cust_main',
8913         'hashref' => { %options },
8914         'extra_sql' => ( scalar(keys %options) ? ' AND ' : ' WHERE ' ).
8915                        ' ( '.
8916                            join(' OR ', map "$_ LIKE '$phonen\%'",
8917                                             qw( daytime night
8918                                                 ship_daytime ship_night )
8919                                ).
8920                        ' ) '.
8921                        " AND $agentnums_sql", #agent virtualization
8922       } );
8923
8924     }
8925
8926   # custnum search (also try agent_custid), with some tweaking options if your
8927   # legacy cust "numbers" have letters
8928   }
8929
8930   if ( $search =~ /^\s*(\d+)\s*$/
8931          || ( $conf->config('cust_main-agent_custid-format') eq 'ww?d+'
8932               && $search =~ /^\s*(\w\w?\d+)\s*$/
8933             )
8934          || ( $conf->exists('address1-search' )
8935               && $search =~ /^\s*(\d+\-?\w*)\s*$/ #i.e. 1234A or 9432-D
8936             )
8937      )
8938   {
8939
8940     my $num = $1;
8941
8942     if ( $num =~ /^(\d+)$/ && $num <= 2147483647 ) { #need a bigint custnum? wow
8943       push @cust_main, qsearch( {
8944         'table'     => 'cust_main',
8945         'hashref'   => { 'custnum' => $num, %options },
8946         'extra_sql' => " AND $agentnums_sql", #agent virtualization
8947       } );
8948     }
8949
8950     push @cust_main, qsearch( {
8951       'table'     => 'cust_main',
8952       'hashref'   => { 'agent_custid' => $num, %options },
8953       'extra_sql' => " AND $agentnums_sql", #agent virtualization
8954     } );
8955
8956     if ( $conf->exists('address1-search') ) {
8957       my $len = length($num);
8958       $num = lc($num);
8959       foreach my $prefix ( '', 'ship_' ) {
8960         push @cust_main, qsearch( {
8961           'table'     => 'cust_main',
8962           'hashref'   => { %options, },
8963           'extra_sql' =>
8964             ( keys(%options) ? ' AND ' : ' WHERE ' ).
8965             " LOWER(SUBSTRING(${prefix}address1 FROM 1 FOR $len)) = '$num' ".
8966             " AND $agentnums_sql",
8967         } );
8968       }
8969     }
8970
8971   } elsif ( $search =~ /^\s*(\S.*\S)\s+\((.+), ([^,]+)\)\s*$/ ) {
8972
8973     my($company, $last, $first) = ( $1, $2, $3 );
8974
8975     # "Company (Last, First)"
8976     #this is probably something a browser remembered,
8977     #so just do an exact search (but case-insensitive, so USPS standardization
8978     #doesn't throw a wrench in the works)
8979
8980     foreach my $prefix ( '', 'ship_' ) {
8981       push @cust_main, qsearch( {
8982         'table'     => 'cust_main',
8983         'hashref'   => { %options },
8984         'extra_sql' =>
8985           ( keys(%options) ? ' AND ' : ' WHERE ' ).
8986           join(' AND ',
8987             " LOWER(${prefix}first)   = ". dbh->quote(lc($first)),
8988             " LOWER(${prefix}last)    = ". dbh->quote(lc($last)),
8989             " LOWER(${prefix}company) = ". dbh->quote(lc($company)),
8990             $agentnums_sql,
8991           ),
8992       } );
8993     }
8994
8995   } elsif ( $search =~ /^\s*(\S.*\S)\s*$/ ) { # value search
8996                                               # try (ship_){last,company}
8997
8998     my $value = lc($1);
8999
9000     # # remove "(Last, First)" in "Company (Last, First)", otherwise the
9001     # # full strings the browser remembers won't work
9002     # $value =~ s/\([\w \,\.\-\']*\)$//; #false laziness w/Record::ut_name
9003
9004     use Lingua::EN::NameParse;
9005     my $NameParse = new Lingua::EN::NameParse(
9006              auto_clean     => 1,
9007              allow_reversed => 1,
9008     );
9009
9010     my($last, $first) = ( '', '' );
9011     #maybe disable this too and just rely on NameParse?
9012     if ( $value =~ /^(.+),\s*([^,]+)$/ ) { # Last, First
9013
9014       ($last, $first) = ( $1, $2 );
9015
9016     #} elsif  ( $value =~ /^(.+)\s+(.+)$/ ) {
9017     } elsif ( ! $NameParse->parse($value) ) {
9018
9019       my %name = $NameParse->components;
9020       $first = $name{'given_name_1'};
9021       $last  = $name{'surname_1'};
9022
9023     }
9024
9025     if ( $first && $last ) {
9026
9027       my($q_last, $q_first) = ( dbh->quote($last), dbh->quote($first) );
9028
9029       #exact
9030       my $sql = scalar(keys %options) ? ' AND ' : ' WHERE ';
9031       $sql .= "
9032         (     ( LOWER(last) = $q_last AND LOWER(first) = $q_first )
9033            OR ( LOWER(ship_last) = $q_last AND LOWER(ship_first) = $q_first )
9034         )";
9035
9036       push @cust_main, qsearch( {
9037         'table'     => 'cust_main',
9038         'hashref'   => \%options,
9039         'extra_sql' => "$sql AND $agentnums_sql", #agent virtualization
9040       } );
9041
9042       # or it just be something that was typed in... (try that in a sec)
9043
9044     }
9045
9046     my $q_value = dbh->quote($value);
9047
9048     #exact
9049     my $sql = scalar(keys %options) ? ' AND ' : ' WHERE ';
9050     $sql .= " (    LOWER(last)          = $q_value
9051                 OR LOWER(company)       = $q_value
9052                 OR LOWER(ship_last)     = $q_value
9053                 OR LOWER(ship_company)  = $q_value
9054             ";
9055     $sql .= "   OR LOWER(address1)      = $q_value
9056                 OR LOWER(ship_address1) = $q_value
9057             "
9058       if $conf->exists('address1-search');
9059     $sql .= " )";
9060
9061     push @cust_main, qsearch( {
9062       'table'     => 'cust_main',
9063       'hashref'   => \%options,
9064       'extra_sql' => "$sql AND $agentnums_sql", #agent virtualization
9065     } );
9066
9067     #no exact match, trying substring/fuzzy
9068     #always do substring & fuzzy (unless they're explicity config'ed off)
9069     #getting complaints searches are not returning enough
9070     unless ( @cust_main  && $skip_fuzzy || $conf->exists('disable-fuzzy') ) {
9071
9072       #still some false laziness w/search (was search/cust_main.cgi)
9073
9074       #substring
9075
9076       my @hashrefs = (
9077         { 'company'      => { op=>'ILIKE', value=>"%$value%" }, },
9078         { 'ship_company' => { op=>'ILIKE', value=>"%$value%" }, },
9079       );
9080
9081       if ( $first && $last ) {
9082
9083         push @hashrefs,
9084           { 'first'        => { op=>'ILIKE', value=>"%$first%" },
9085             'last'         => { op=>'ILIKE', value=>"%$last%" },
9086           },
9087           { 'ship_first'   => { op=>'ILIKE', value=>"%$first%" },
9088             'ship_last'    => { op=>'ILIKE', value=>"%$last%" },
9089           },
9090         ;
9091
9092       } else {
9093
9094         push @hashrefs,
9095           { 'last'         => { op=>'ILIKE', value=>"%$value%" }, },
9096           { 'ship_last'    => { op=>'ILIKE', value=>"%$value%" }, },
9097         ;
9098       }
9099
9100       if ( $conf->exists('address1-search') ) {
9101         push @hashrefs,
9102           { 'address1'      => { op=>'ILIKE', value=>"%$value%" }, },
9103           { 'ship_address1' => { op=>'ILIKE', value=>"%$value%" }, },
9104         ;
9105       }
9106
9107       foreach my $hashref ( @hashrefs ) {
9108
9109         push @cust_main, qsearch( {
9110           'table'     => 'cust_main',
9111           'hashref'   => { %$hashref,
9112                            %options,
9113                          },
9114           'extra_sql' => " AND $agentnums_sql", #agent virtualizaiton
9115         } );
9116
9117       }
9118
9119       #fuzzy
9120       my @fuzopts = (
9121         \%options,                #hashref
9122         '',                       #select
9123         " AND $agentnums_sql",    #extra_sql  #agent virtualization
9124       );
9125
9126       if ( $first && $last ) {
9127         push @cust_main, FS::cust_main->fuzzy_search(
9128           { 'last'   => $last,    #fuzzy hashref
9129             'first'  => $first }, #
9130           @fuzopts
9131         );
9132       }
9133       foreach my $field ( 'last', 'company' ) {
9134         push @cust_main,
9135           FS::cust_main->fuzzy_search( { $field => $value }, @fuzopts );
9136       }
9137       if ( $conf->exists('address1-search') ) {
9138         push @cust_main,
9139           FS::cust_main->fuzzy_search( { 'address1' => $value }, @fuzopts );
9140       }
9141
9142     }
9143
9144   }
9145
9146   #eliminate duplicates
9147   my %saw = ();
9148   @cust_main = grep { !$saw{$_->custnum}++ } @cust_main;
9149
9150   @cust_main;
9151
9152 }
9153
9154 =item email_search
9155
9156 Accepts the following options: I<email>, the email address to search for.  The
9157 email address will be searched for as an email invoice destination and as an
9158 svc_acct account.
9159
9160 #Any additional options are treated as an additional qualifier on the search
9161 #(i.e. I<agentnum>).
9162
9163 Returns a (possibly empty) array of FS::cust_main objects (but usually just
9164 none or one).
9165
9166 =cut
9167
9168 sub email_search {
9169   my %options = @_;
9170
9171   local($DEBUG) = 1;
9172
9173   my $email = delete $options{'email'};
9174
9175   #we're only being used by RT at the moment... no agent virtualization yet
9176   #my $agentnums_sql = $FS::CurrentUser::CurrentUser->agentnums_sql;
9177
9178   my @cust_main = ();
9179
9180   if ( $email =~ /([^@]+)\@([^@]+)/ ) {
9181
9182     my ( $user, $domain ) = ( $1, $2 );
9183
9184     warn "$me smart_search: searching for $user in domain $domain"
9185       if $DEBUG;
9186
9187     push @cust_main,
9188       map $_->cust_main,
9189           qsearch( {
9190                      'table'     => 'cust_main_invoice',
9191                      'hashref'   => { 'dest' => $email },
9192                    }
9193                  );
9194
9195     push @cust_main,
9196       map  $_->cust_main,
9197       grep $_,
9198       map  $_->cust_svc->cust_pkg,
9199           qsearch( {
9200                      'table'     => 'svc_acct',
9201                      'hashref'   => { 'username' => $user, },
9202                      'extra_sql' =>
9203                        'AND ( SELECT domain FROM svc_domain
9204                                 WHERE svc_acct.domsvc = svc_domain.svcnum
9205                             ) = '. dbh->quote($domain),
9206                    }
9207                  );
9208   }
9209
9210   my %saw = ();
9211   @cust_main = grep { !$saw{$_->custnum}++ } @cust_main;
9212
9213   warn "$me smart_search: found ". scalar(@cust_main). " unique customers"
9214     if $DEBUG;
9215
9216   @cust_main;
9217
9218 }
9219
9220 =item check_and_rebuild_fuzzyfiles
9221
9222 =cut
9223
9224 sub check_and_rebuild_fuzzyfiles {
9225   my $dir = $FS::UID::conf_dir. "/cache.". $FS::UID::datasrc;
9226   rebuild_fuzzyfiles() if grep { ! -e "$dir/cust_main.$_" } @fuzzyfields
9227 }
9228
9229 =item rebuild_fuzzyfiles
9230
9231 =cut
9232
9233 sub rebuild_fuzzyfiles {
9234
9235   use Fcntl qw(:flock);
9236
9237   my $dir = $FS::UID::conf_dir. "/cache.". $FS::UID::datasrc;
9238   mkdir $dir, 0700 unless -d $dir;
9239
9240   foreach my $fuzzy ( @fuzzyfields ) {
9241
9242     open(LOCK,">>$dir/cust_main.$fuzzy")
9243       or die "can't open $dir/cust_main.$fuzzy: $!";
9244     flock(LOCK,LOCK_EX)
9245       or die "can't lock $dir/cust_main.$fuzzy: $!";
9246
9247     open (CACHE,">$dir/cust_main.$fuzzy.tmp")
9248       or die "can't open $dir/cust_main.$fuzzy.tmp: $!";
9249
9250     foreach my $field ( $fuzzy, "ship_$fuzzy" ) {
9251       my $sth = dbh->prepare("SELECT $field FROM cust_main".
9252                              " WHERE $field != '' AND $field IS NOT NULL");
9253       $sth->execute or die $sth->errstr;
9254
9255       while ( my $row = $sth->fetchrow_arrayref ) {
9256         print CACHE $row->[0]. "\n";
9257       }
9258
9259     }
9260
9261     close CACHE or die "can't close $dir/cust_main.$fuzzy.tmp: $!";
9262
9263     rename "$dir/cust_main.$fuzzy.tmp", "$dir/cust_main.$fuzzy";
9264     close LOCK;
9265   }
9266
9267 }
9268
9269 =item all_X
9270
9271 =cut
9272
9273 sub all_X {
9274   my( $self, $field ) = @_;
9275   my $dir = $FS::UID::conf_dir. "/cache.". $FS::UID::datasrc;
9276   open(CACHE,"<$dir/cust_main.$field")
9277     or die "can't open $dir/cust_main.$field: $!";
9278   my @array = map { chomp; $_; } <CACHE>;
9279   close CACHE;
9280   \@array;
9281 }
9282
9283 =item append_fuzzyfiles FIRSTNAME LASTNAME COMPANY ADDRESS1
9284
9285 =cut
9286
9287 sub append_fuzzyfiles {
9288   #my( $first, $last, $company ) = @_;
9289
9290   &check_and_rebuild_fuzzyfiles;
9291
9292   use Fcntl qw(:flock);
9293
9294   my $dir = $FS::UID::conf_dir. "/cache.". $FS::UID::datasrc;
9295
9296   foreach my $field (@fuzzyfields) {
9297     my $value = shift;
9298
9299     if ( $value ) {
9300
9301       open(CACHE,">>$dir/cust_main.$field")
9302         or die "can't open $dir/cust_main.$field: $!";
9303       flock(CACHE,LOCK_EX)
9304         or die "can't lock $dir/cust_main.$field: $!";
9305
9306       print CACHE "$value\n";
9307
9308       flock(CACHE,LOCK_UN)
9309         or die "can't unlock $dir/cust_main.$field: $!";
9310       close CACHE;
9311     }
9312
9313   }
9314
9315   1;
9316 }
9317
9318 =item batch_charge
9319
9320 =cut
9321
9322 sub batch_charge {
9323   my $param = shift;
9324   #warn join('-',keys %$param);
9325   my $fh = $param->{filehandle};
9326   my @fields = @{$param->{fields}};
9327
9328   eval "use Text::CSV_XS;";
9329   die $@ if $@;
9330
9331   my $csv = new Text::CSV_XS;
9332   #warn $csv;
9333   #warn $fh;
9334
9335   my $imported = 0;
9336   #my $columns;
9337
9338   local $SIG{HUP} = 'IGNORE';
9339   local $SIG{INT} = 'IGNORE';
9340   local $SIG{QUIT} = 'IGNORE';
9341   local $SIG{TERM} = 'IGNORE';
9342   local $SIG{TSTP} = 'IGNORE';
9343   local $SIG{PIPE} = 'IGNORE';
9344
9345   my $oldAutoCommit = $FS::UID::AutoCommit;
9346   local $FS::UID::AutoCommit = 0;
9347   my $dbh = dbh;
9348
9349   #while ( $columns = $csv->getline($fh) ) {
9350   my $line;
9351   while ( defined($line=<$fh>) ) {
9352
9353     $csv->parse($line) or do {
9354       $dbh->rollback if $oldAutoCommit;
9355       return "can't parse: ". $csv->error_input();
9356     };
9357
9358     my @columns = $csv->fields();
9359     #warn join('-',@columns);
9360
9361     my %row = ();
9362     foreach my $field ( @fields ) {
9363       $row{$field} = shift @columns;
9364     }
9365
9366     my $cust_main = qsearchs('cust_main', { 'custnum' => $row{'custnum'} } );
9367     unless ( $cust_main ) {
9368       $dbh->rollback if $oldAutoCommit;
9369       return "unknown custnum $row{'custnum'}";
9370     }
9371
9372     if ( $row{'amount'} > 0 ) {
9373       my $error = $cust_main->charge($row{'amount'}, $row{'pkg'});
9374       if ( $error ) {
9375         $dbh->rollback if $oldAutoCommit;
9376         return $error;
9377       }
9378       $imported++;
9379     } elsif ( $row{'amount'} < 0 ) {
9380       my $error = $cust_main->credit( sprintf( "%.2f", 0-$row{'amount'} ),
9381                                       $row{'pkg'}                         );
9382       if ( $error ) {
9383         $dbh->rollback if $oldAutoCommit;
9384         return $error;
9385       }
9386       $imported++;
9387     } else {
9388       #hmm?
9389     }
9390
9391   }
9392
9393   $dbh->commit or die $dbh->errstr if $oldAutoCommit;
9394
9395   return "Empty file!" unless $imported;
9396
9397   ''; #no error
9398
9399 }
9400
9401 =item notify CUSTOMER_OBJECT TEMPLATE_NAME OPTIONS
9402
9403 Sends a templated email notification to the customer (see L<Text::Template>).
9404
9405 OPTIONS is a hash and may include
9406
9407 I<from> - the email sender (default is invoice_from)
9408
9409 I<to> - comma-separated scalar or arrayref of recipients
9410    (default is invoicing_list)
9411
9412 I<subject> - The subject line of the sent email notification
9413    (default is "Notice from company_name")
9414
9415 I<extra_fields> - a hashref of name/value pairs which will be substituted
9416    into the template
9417
9418 The following variables are vavailable in the template.
9419
9420 I<$first> - the customer first name
9421 I<$last> - the customer last name
9422 I<$company> - the customer company
9423 I<$payby> - a description of the method of payment for the customer
9424             # would be nice to use FS::payby::shortname
9425 I<$payinfo> - the account information used to collect for this customer
9426 I<$expdate> - the expiration of the customer payment in seconds from epoch
9427
9428 =cut
9429
9430 sub notify {
9431   my ($self, $template, %options) = @_;
9432
9433   return unless $conf->exists($template);
9434
9435   my $from = $conf->config('invoice_from', $self->agentnum)
9436     if $conf->exists('invoice_from', $self->agentnum);
9437   $from = $options{from} if exists($options{from});
9438
9439   my $to = join(',', $self->invoicing_list_emailonly);
9440   $to = $options{to} if exists($options{to});
9441
9442   my $subject = "Notice from " . $conf->config('company_name', $self->agentnum)
9443     if $conf->exists('company_name', $self->agentnum);
9444   $subject = $options{subject} if exists($options{subject});
9445
9446   my $notify_template = new Text::Template (TYPE => 'ARRAY',
9447                                             SOURCE => [ map "$_\n",
9448                                               $conf->config($template)]
9449                                            )
9450     or die "can't create new Text::Template object: Text::Template::ERROR";
9451   $notify_template->compile()
9452     or die "can't compile template: Text::Template::ERROR";
9453
9454   $FS::notify_template::_template::company_name =
9455     $conf->config('company_name', $self->agentnum);
9456   $FS::notify_template::_template::company_address =
9457     join("\n", $conf->config('company_address', $self->agentnum) ). "\n";
9458
9459   my $paydate = $self->paydate || '2037-12-31';
9460   $FS::notify_template::_template::first = $self->first;
9461   $FS::notify_template::_template::last = $self->last;
9462   $FS::notify_template::_template::company = $self->company;
9463   $FS::notify_template::_template::payinfo = $self->mask_payinfo;
9464   my $payby = $self->payby;
9465   my ($payyear,$paymonth,$payday) = split (/-/,$paydate);
9466   my $expire_time = timelocal(0,0,0,$payday,--$paymonth,$payyear);
9467
9468   #credit cards expire at the end of the month/year of their exp date
9469   if ($payby eq 'CARD' || $payby eq 'DCRD') {
9470     $FS::notify_template::_template::payby = 'credit card';
9471     ($paymonth < 11) ? $paymonth++ : ($paymonth=0, $payyear++);
9472     $expire_time = timelocal(0,0,0,$payday,$paymonth,$payyear);
9473     $expire_time--;
9474   }elsif ($payby eq 'COMP') {
9475     $FS::notify_template::_template::payby = 'complimentary account';
9476   }else{
9477     $FS::notify_template::_template::payby = 'current method';
9478   }
9479   $FS::notify_template::_template::expdate = $expire_time;
9480
9481   for (keys %{$options{extra_fields}}){
9482     no strict "refs";
9483     ${"FS::notify_template::_template::$_"} = $options{extra_fields}->{$_};
9484   }
9485
9486   send_email(from => $from,
9487              to => $to,
9488              subject => $subject,
9489              body => $notify_template->fill_in( PACKAGE =>
9490                                                 'FS::notify_template::_template'                                              ),
9491             );
9492
9493 }
9494
9495 =item generate_letter CUSTOMER_OBJECT TEMPLATE_NAME OPTIONS
9496
9497 Generates a templated notification to the customer (see L<Text::Template>).
9498
9499 OPTIONS is a hash and may include
9500
9501 I<extra_fields> - a hashref of name/value pairs which will be substituted
9502    into the template.  These values may override values mentioned below
9503    and those from the customer record.
9504
9505 The following variables are available in the template instead of or in addition
9506 to the fields of the customer record.
9507
9508 I<$payby> - a description of the method of payment for the customer
9509             # would be nice to use FS::payby::shortname
9510 I<$payinfo> - the masked account information used to collect for this customer
9511 I<$expdate> - the expiration of the customer payment method in seconds from epoch
9512 I<$returnaddress> - the return address defaults to invoice_latexreturnaddress or company_address
9513
9514 =cut
9515
9516 sub generate_letter {
9517   my ($self, $template, %options) = @_;
9518
9519   return unless $conf->exists($template);
9520
9521   my $letter_template = new Text::Template
9522                         ( TYPE       => 'ARRAY',
9523                           SOURCE     => [ map "$_\n", $conf->config($template)],
9524                           DELIMITERS => [ '[@--', '--@]' ],
9525                         )
9526     or die "can't create new Text::Template object: Text::Template::ERROR";
9527
9528   $letter_template->compile()
9529     or die "can't compile template: Text::Template::ERROR";
9530
9531   my %letter_data = map { $_ => $self->$_ } $self->fields;
9532   $letter_data{payinfo} = $self->mask_payinfo;
9533
9534   #my $paydate = $self->paydate || '2037-12-31';
9535   my $paydate = $self->paydate =~ /^\S+$/ ? $self->paydate : '2037-12-31';
9536
9537   my $payby = $self->payby;
9538   my ($payyear,$paymonth,$payday) = split (/-/,$paydate);
9539   my $expire_time = timelocal(0,0,0,$payday,--$paymonth,$payyear);
9540
9541   #credit cards expire at the end of the month/year of their exp date
9542   if ($payby eq 'CARD' || $payby eq 'DCRD') {
9543     $letter_data{payby} = 'credit card';
9544     ($paymonth < 11) ? $paymonth++ : ($paymonth=0, $payyear++);
9545     $expire_time = timelocal(0,0,0,$payday,$paymonth,$payyear);
9546     $expire_time--;
9547   }elsif ($payby eq 'COMP') {
9548     $letter_data{payby} = 'complimentary account';
9549   }else{
9550     $letter_data{payby} = 'current method';
9551   }
9552   $letter_data{expdate} = $expire_time;
9553
9554   for (keys %{$options{extra_fields}}){
9555     $letter_data{$_} = $options{extra_fields}->{$_};
9556   }
9557
9558   unless(exists($letter_data{returnaddress})){
9559     my $retadd = join("\n", $conf->config_orbase( 'invoice_latexreturnaddress',
9560                                                   $self->agent_template)
9561                      );
9562     if ( length($retadd) ) {
9563       $letter_data{returnaddress} = $retadd;
9564     } elsif ( grep /\S/, $conf->config('company_address', $self->agentnum) ) {
9565       $letter_data{returnaddress} =
9566         join( '\\*'."\n", map s/( {2,})/'~' x length($1)/eg,
9567                           $conf->config('company_address', $self->agentnum)
9568         );
9569     } else {
9570       $letter_data{returnaddress} = '~';
9571     }
9572   }
9573
9574   $letter_data{conf_dir} = "$FS::UID::conf_dir/conf.$FS::UID::datasrc";
9575
9576   $letter_data{company_name} = $conf->config('company_name', $self->agentnum);
9577
9578   my $dir = $FS::UID::conf_dir."/cache.". $FS::UID::datasrc;
9579   my $fh = new File::Temp( TEMPLATE => 'letter.'. $self->custnum. '.XXXXXXXX',
9580                            DIR      => $dir,
9581                            SUFFIX   => '.tex',
9582                            UNLINK   => 0,
9583                          ) or die "can't open temp file: $!\n";
9584
9585   $letter_template->fill_in( OUTPUT => $fh, HASH => \%letter_data );
9586   close $fh;
9587   $fh->filename =~ /^(.*).tex$/ or die "unparsable filename: ". $fh->filename;
9588   return $1;
9589 }
9590
9591 =item print_ps TEMPLATE
9592
9593 Returns an postscript letter filled in from TEMPLATE, as a scalar.
9594
9595 =cut
9596
9597 sub print_ps {
9598   my $self = shift;
9599   my $file = $self->generate_letter(@_);
9600   FS::Misc::generate_ps($file);
9601 }
9602
9603 =item print TEMPLATE
9604
9605 Prints the filled in template.
9606
9607 TEMPLATE is the name of a L<Text::Template> to fill in and print.
9608
9609 =cut
9610
9611 sub queueable_print {
9612   my %opt = @_;
9613
9614   my $self = qsearchs('cust_main', { 'custnum' => $opt{custnum} } )
9615     or die "invalid customer number: " . $opt{custvnum};
9616
9617   my $error = $self->print( $opt{template} );
9618   die $error if $error;
9619 }
9620
9621 sub print {
9622   my ($self, $template) = (shift, shift);
9623   do_print [ $self->print_ps($template) ];
9624 }
9625
9626 #these three subs should just go away once agent stuff is all config overrides
9627
9628 sub agent_template {
9629   my $self = shift;
9630   $self->_agent_plandata('agent_templatename');
9631 }
9632
9633 sub agent_invoice_from {
9634   my $self = shift;
9635   $self->_agent_plandata('agent_invoice_from');
9636 }
9637
9638 sub _agent_plandata {
9639   my( $self, $option ) = @_;
9640
9641   #yuck.  this whole thing needs to be reconciled better with 1.9's idea of
9642   #agent-specific Conf
9643
9644   use FS::part_event::Condition;
9645
9646   my $agentnum = $self->agentnum;
9647
9648   my $regexp = '';
9649   if ( driver_name =~ /^Pg/i ) {
9650     $regexp = '~';
9651   } elsif ( driver_name =~ /^mysql/i ) {
9652     $regexp = 'REGEXP';
9653   } else {
9654     die "don't know how to use regular expressions in ". driver_name. " databases";
9655   }
9656
9657   my $part_event_option =
9658     qsearchs({
9659       'select'    => 'part_event_option.*',
9660       'table'     => 'part_event_option',
9661       'addl_from' => q{
9662         LEFT JOIN part_event USING ( eventpart )
9663         LEFT JOIN part_event_option AS peo_agentnum
9664           ON ( part_event.eventpart = peo_agentnum.eventpart
9665                AND peo_agentnum.optionname = 'agentnum'
9666                AND peo_agentnum.optionvalue }. $regexp. q{ '(^|,)}. $agentnum. q{(,|$)'
9667              )
9668         LEFT JOIN part_event_condition
9669           ON ( part_event.eventpart = part_event_condition.eventpart
9670                AND part_event_condition.conditionname = 'cust_bill_age'
9671              )
9672         LEFT JOIN part_event_condition_option
9673           ON ( part_event_condition.eventconditionnum = part_event_condition_option.eventconditionnum
9674                AND part_event_condition_option.optionname = 'age'
9675              )
9676       },
9677       #'hashref'   => { 'optionname' => $option },
9678       #'hashref'   => { 'part_event_option.optionname' => $option },
9679       'extra_sql' =>
9680         " WHERE part_event_option.optionname = ". dbh->quote($option).
9681         " AND action = 'cust_bill_send_agent' ".
9682         " AND ( disabled IS NULL OR disabled != 'Y' ) ".
9683         " AND peo_agentnum.optionname = 'agentnum' ".
9684         " AND ( agentnum IS NULL OR agentnum = $agentnum ) ".
9685         " ORDER BY
9686            CASE WHEN part_event_condition_option.optionname IS NULL
9687            THEN -1
9688            ELSE ". FS::part_event::Condition->age2seconds_sql('part_event_condition_option.optionvalue').
9689         " END
9690           , part_event.weight".
9691         " LIMIT 1"
9692     });
9693
9694   unless ( $part_event_option ) {
9695     return $self->agent->invoice_template || ''
9696       if $option eq 'agent_templatename';
9697     return '';
9698   }
9699
9700   $part_event_option->optionvalue;
9701
9702 }
9703
9704 sub queued_bill {
9705   ## actual sub, not a method, designed to be called from the queue.
9706   ## sets up the customer, and calls the bill_and_collect
9707   my (%args) = @_; #, ($time, $invoice_time, $check_freq, $resetup) = @_;
9708   my $cust_main = qsearchs( 'cust_main', { custnum => $args{'custnum'} } );
9709       $cust_main->bill_and_collect(
9710         %args,
9711       );
9712 }
9713
9714 sub _upgrade_data { #class method
9715   my ($class, %opts) = @_;
9716
9717   my $sql = 'UPDATE h_cust_main SET paycvv = NULL WHERE paycvv IS NOT NULL';
9718   my $sth = dbh->prepare($sql) or die dbh->errstr;
9719   $sth->execute or die $sth->errstr;
9720
9721 }
9722
9723 =back
9724
9725 =head1 BUGS
9726
9727 The delete method.
9728
9729 The delete method should possibly take an FS::cust_main object reference
9730 instead of a scalar customer number.
9731
9732 Bill and collect options should probably be passed as references instead of a
9733 list.
9734
9735 There should probably be a configuration file with a list of allowed credit
9736 card types.
9737
9738 No multiple currency support (probably a larger project than just this module).
9739
9740 payinfo_masked false laziness with cust_pay.pm and cust_refund.pm
9741
9742 Birthdates rely on negative epoch values.
9743
9744 The payby for card/check batches is broken.  With mixed batching, bad
9745 things will happen.
9746
9747 B<collect> I<invoice_time> should be renamed I<time>, like B<bill>.
9748
9749 =head1 SEE ALSO
9750
9751 L<FS::Record>, L<FS::cust_pkg>, L<FS::cust_bill>, L<FS::cust_credit>
9752 L<FS::agent>, L<FS::part_referral>, L<FS::cust_main_county>,
9753 L<FS::cust_main_invoice>, L<FS::UID>, schema.html from the base documentation.
9754
9755 =cut
9756
9757 1;
9758