load h_cust_main for change history
[freeside.git] / FS / FS / Mason.pm
1 package FS::Mason;
2
3 use strict;
4 use vars qw( @ISA @EXPORT_OK $addl_handler_use );
5 use Exporter;
6 use Carp;
7 use File::Slurp qw( slurp );
8 use HTML::Mason 1.27; #http://www.masonhq.com/?ApacheModPerl2Redirect
9 use HTML::Mason::Interp;
10 use HTML::Mason::Compiler::ToObject;
11
12 @ISA = qw( Exporter );
13 @EXPORT_OK = qw( mason_interps );
14
15 =head1 NAME
16
17 FS::Mason - Initialize the Mason environment
18
19 =head1 SYNOPSIS
20
21   use FS::Mason qw( mason_interps );
22
23   my( $fs_interp, $rt_interp ) = mason_interps('apache');
24
25   #OR
26
27   my( $fs_interp, $rt_interp ) = mason_interps('standalone'); #XXX name?
28
29 =head1 DESCRIPTION
30
31 Initializes the Mason environment, loads all Freeside and RT libraries, etc.
32
33 =cut
34
35 $addl_handler_use = '';
36 my $addl_handler_use_file = '%%%FREESIDE_CONF%%%/addl_handler_use.pl';
37 if ( -e $addl_handler_use_file ) {
38   $addl_handler_use = slurp( $addl_handler_use_file );
39 }
40
41 # List of modules that you want to use from components (see Admin
42 # manual for details)
43 {
44   package HTML::Mason::Commands;
45
46   use strict;
47   use vars qw( %session );
48   use CGI 3.29 qw(-private_tempfiles); #3.29 to fix RT attachment problems
49
50   #breaks quick payment entry
51   #http://rt.cpan.org/Public/Bug/Display.html?id=37365
52   die "CGI.pm v3.38 is broken, use any other version >= 3.29".
53       " (Debian 5.0?  aptitude remove libcgi-pm-perl)"
54     if $CGI::VERSION == 3.38;
55
56   #use CGI::Carp qw(fatalsToBrowser);
57   use CGI::Cookie;
58   use List::Util qw( max min sum );
59   use List::MoreUtils qw( first_index uniq );
60   use Scalar::Util qw( blessed );
61   use Data::Dumper;
62   use Date::Format;
63   use Time::Local;
64   use Time::HiRes;
65   use Time::Duration;
66   use DateTime;
67   use DateTime::Format::Strptime;
68   use FS::Misc::DateTime qw( parse_datetime );
69   use FS::Misc::Geo qw( get_censustract get_district );
70   use Lingua::EN::Inflect qw(PL);
71   Lingua::EN::Inflect::classical names=>0; #Categorys
72   use Tie::IxHash;
73   use URI;
74   use URI::Escape 3.31;
75   use HTML::Entities;
76   use HTML::TreeBuilder;
77   use HTML::TableExtract qw(tree);
78   use HTML::FormatText;
79   use HTML::Defang;
80   use JSON;
81 #  use XMLRPC::Transport::HTTP;
82 #  use XMLRPC::Lite; # for XMLRPC::Serializer
83   use MIME::Base64;
84   use IO::Handle;
85   use IO::File;
86   use IO::Scalar;
87   use IO::String;
88   #not actually using this yet anyway...# use IPC::Run3 0.036;
89   use Net::Whois::Raw qw(whois);
90   if ( $] < 5.006 ) {
91     eval "use Net::Whois::Raw 0.32 qw(whois)";
92     die $@ if $@;
93   }
94   use Text::CSV_XS;
95   use Spreadsheet::WriteExcel;
96   use Spreadsheet::WriteExcel::Utility;
97   use OLE::Storage_Lite;
98   use Excel::Writer::XLSX;
99   #use Excel::Writer::XLSX::Utility; #redundant with above
100
101   use Business::CreditCard 0.30; #for mask-aware cardtype()
102   use NetAddr::IP;
103   use Net::Ping;
104   use Net::Ping::External;
105   #if CPAN #7815 ever gets fixed# if ( $Net::Ping::External::VERSION <= 0.12 )
106   {
107     no warnings 'redefine';
108     eval 'sub Net::Ping::External::_ping_linux { 
109             my %args = @_;
110             my $command = "ping -s $args{size} -c $args{count} -w $args{timeout} $args{host}";
111             return Net::Ping::External::_ping_system($command, 0);
112           }
113          ';
114     die $@ if $@;
115   }
116   use String::Approx qw(amatch);
117   use Chart::LinesPoints;
118   use Chart::Mountain;
119   use Chart::Bars;
120   use Color::Scheme;
121   use HTML::Widgets::SelectLayers 0.07; #should go away in favor of
122                                         #selectlayers.html
123   use Locale::Country;
124   use Business::US::USPS::WebTools::AddressStandardization;
125   use Geo::GoogleEarth::Pluggable;
126   use LWP::UserAgent;
127   use Storable qw( nfreeze thaw );
128   use FS;
129   use FS::UID qw( getotaker dbh datasrc driver_name );
130   use FS::Record qw( qsearch qsearchs fields dbdef
131                     str2time_sql str2time_sql_closing
132                     midnight_sql
133                    );
134   use FS::Conf;
135   use FS::CGI qw(header menubar table itable ntable idiot
136                  eidiot myexit http_header);
137   use FS::UI::Web qw(svc_url);
138   use FS::UI::Web::small_custview qw(small_custview);
139   use FS::UI::bytecount;
140   use FS::Msgcat qw(gettext geterror);
141   use FS::Misc qw( send_email send_fax ocr_image
142                    states_hash counties cities state_label
143                  );
144   use FS::Misc::eps2png qw( eps2png );
145   use FS::Report::FCC_477;
146   use FS::Report::Table;
147   use FS::Report::Table::Monthly;
148   use FS::Report::Table::Daily;
149   use FS::TicketSystem;
150   use FS::NetworkMonitoringSystem;
151   use FS::Tron qw( tron_lint );
152   use FS::Locales;
153   use FS::Maketext qw( mt emt js_mt );
154
155   use FS::agent;
156   use FS::agent_type;
157   use FS::domain_record;
158   use FS::cust_bill;
159   use FS::cust_bill_pay;
160   use FS::cust_credit;
161   use FS::cust_credit_bill;
162   use FS::cust_main;
163   use FS::h_cust_main;
164   use FS::cust_main::Search qw(smart_search);
165   use FS::cust_main::Import;
166   use FS::cust_main_county;
167   use FS::cust_location;
168   use FS::cust_pay;
169   use FS::cust_pkg;
170   use FS::cust_pkg::Import;
171   use FS::part_pkg_taxclass;
172   use FS::cust_pkg_reason;
173   use FS::cust_refund;
174   use FS::cust_credit_refund;
175   use FS::cust_pay_refund;
176   use FS::cust_svc;
177   use FS::nas;
178   use FS::part_bill_event;
179   use FS::part_event;
180   use FS::part_event_condition;
181   use FS::part_pkg;
182   use FS::part_referral;
183   use FS::part_svc;
184   use FS::part_svc_router;
185   use FS::part_virtual_field;
186   use FS::pay_batch;
187   use FS::pkg_svc;
188   use FS::port;
189   use FS::queue qw(joblisting);
190   use FS::raddb;
191   use FS::session;
192   use FS::svc_acct;
193   use FS::svc_acct_pop qw(popselector);
194   use FS::acct_rt_transaction;
195   use FS::svc_domain;
196   use FS::svc_forward;
197   use FS::svc_www;
198   use FS::router;
199   use FS::addr_block;
200   use FS::svc_broadband;
201   use FS::svc_external;
202   use FS::type_pkgs;
203   use FS::part_export;
204   use FS::part_export_option;
205   use FS::export_svc;
206   use FS::export_device;
207   use FS::msgcat;
208   use FS::rate;
209   use FS::rate_region;
210   use FS::rate_prefix;
211   use FS::rate_detail;
212   use FS::usage_class;
213   use FS::payment_gateway;
214   use FS::agent_payment_gateway;
215   use FS::XMLRPC;
216   use FS::payby;
217   use FS::cdr;
218   use FS::cdr_batch;
219   use FS::inventory_class;
220   use FS::inventory_item;
221   use FS::pkg_category;
222   use FS::pkg_class;
223   use FS::access_user;
224   use FS::access_user_pref;
225   use FS::access_group;
226   use FS::access_usergroup;
227   use FS::access_groupagent;
228   use FS::access_right;
229   use FS::AccessRight;
230   use FS::svc_phone;
231   use FS::phone_device;
232   use FS::part_device;
233   use FS::reason_type;
234   use FS::reason;
235   use FS::cust_main_note;
236   use FS::tax_class;
237   use FS::cust_tax_location;
238   use FS::part_pkg_taxproduct;
239   use FS::part_pkg_taxoverride;
240   use FS::part_pkg_taxrate;
241   use FS::tax_rate;
242   use FS::part_pkg_report_option;
243   use FS::cust_attachment;
244   use FS::h_cust_pkg;
245   use FS::h_inventory_item;
246   use FS::h_svc_acct;
247   use FS::h_svc_broadband;
248   use FS::h_svc_domain;
249   #use FS::h_domain_record;
250   use FS::h_svc_external;
251   use FS::h_svc_forward;
252   use FS::h_svc_phone;
253   #use FS::h_phone_device;
254   use FS::h_svc_www;
255   use FS::cust_statement;
256   use FS::cust_class;
257   use FS::cust_category;
258   use FS::prospect_main;
259   use FS::contact;
260   use FS::phone_type;
261   use FS::svc_pbx;
262   use FS::discount;
263   use FS::cust_pkg_discount;
264   use FS::cust_bill_pkg_discount;
265   use FS::svc_mailinglist;
266   use FS::cgp_rule;
267   use FS::cgp_rule_condition;
268   use FS::cgp_rule_action;
269   use FS::bill_batch;
270   use FS::cust_bill_batch;
271   use FS::rate_time;
272   use FS::rate_time_interval;
273   use FS::msg_template;
274   use FS::part_tag;
275   use FS::acct_snarf;
276   use FS::part_pkg_discount;
277   use FS::svc_cert;
278   use FS::svc_dsl;
279   use FS::qual;
280   use FS::qual_option;
281   use FS::dsl_note;
282   use FS::part_pkg_vendor;
283   use FS::cust_note_class;
284   use FS::svc_port;
285   use FS::lata;
286   use FS::did_vendor;
287   use FS::did_order;
288   use FS::torrus_srvderive;
289   use FS::torrus_srvderive_component;
290   use FS::areacode;
291   use FS::svc_dish;
292   use FS::h_svc_dish;
293   use FS::svc_hardware;
294   use FS::h_svc_hardware;
295   use FS::hardware_class;
296   use FS::hardware_type;
297   use FS::hardware_status;
298   use FS::did_order_item;
299   use FS::msa;
300   use FS::rate_center;
301   use FS::cust_msg;
302   use FS::radius_group;
303   use FS::template_content;
304   use FS::dsl_device;
305   use FS::nas;
306   use FS::nas;
307   use FS::export_nas;
308   use FS::legacy_cust_bill;
309   use FS::rate_tier;
310   use FS::rate_tier_detail;
311   use FS::radius_attr;
312   use FS::discount_plan;
313   use FS::tower;
314   use FS::tower_sector;
315   use FS::agent_pkg_class;
316   use FS::log;
317   use FS::log_context;
318   # Sammath Naur
319
320   if ( $FS::Mason::addl_handler_use ) {
321     eval $FS::Mason::addl_handler_use;
322     die $@ if $@;
323   }
324
325   if ( %%%RT_ENABLED%%% ) {
326     eval '
327       use lib ( "/opt/rt3/local/lib", "/opt/rt3/lib" );
328       use vars qw($Nobody $SystemUser);
329       use RT;
330       use RT::Util;
331       use RT::Tickets;
332       use RT::Transactions;
333       use RT::Users;
334       use RT::CurrentUser;
335       use RT::Templates;
336       use RT::Queues;
337       use RT::ScripActions;
338       use RT::ScripConditions;
339       use RT::Scrips;
340       use RT::Groups;
341       use RT::GroupMembers;
342       use RT::CustomFields;
343       use RT::CustomFieldValues;
344       use RT::ObjectCustomFieldValues;
345
346       #blah.  manually updated from RT::Interface::Web::Handler
347       use RT::Interface::Web;
348       use MIME::Entity;
349       use Text::Wrapper;
350       use Time::ParseDate;
351       use Time::HiRes;
352       use HTML::Scrubber;
353
354       #blah.  not even in RT::Interface::Web::Handler, just in 
355       #html/NoAuth/css/dhandler and rt-test-dependencies.  ask for it here
356       #to throw a real error instead of just a mysterious unstyled RT
357       use CSS::Squish 0.06;
358
359       use RT::Interface::Web::Request;
360
361       #another undeclared web UI dep (for ticket links graph)
362       use IPC::Run::SafeHandles;
363
364       #slow, unreliable, segfaults and is optional
365       #see rt/html/Ticket/Elements/ShowTransactionAttachments
366       #use Text::Quoted;
367
368       #?#use File::Path qw( rmtree );
369       #?#use File::Glob qw( bsd_glob );
370       #?#use File::Spec::Unix;
371
372     ';
373     die $@ if $@;
374   }
375
376   *CGI::redirect = sub {
377     my $self = shift;
378     my $cookie = '';
379     if ( $_[0] eq '-cookie' ) { #this isn't actually used at the moment
380       (my $x, $cookie) = (shift, shift);
381       $HTML::Mason::r->err_headers_out->add( 'Set-cookie' => $cookie );
382     }
383     my $location = shift;
384
385     use vars qw($m);
386
387     # false laziness w/below
388     if ( defined(@DBIx::Profile::ISA) ) {
389
390       if ( $FS::CurrentUser::CurrentUser->option('show_db_profile') ) {
391
392         #profiling redirect
393
394         my $page =
395           qq!<HTML><BODY>Redirect to <A HREF="$location">$location</A>!.
396           '<BR><BR><PRE>'.
397             ( UNIVERSAL::can(dbh, 'sprintProfile')
398                 ? encode_entities(dbh->sprintProfile())
399                 : 'DBIx::Profile missing sprintProfile method;'.
400                   'unpatched or too old?'                        ).
401           #"\n\n". &sprintAutoProfile().  '</PRE>'.
402           "\n\n".                         '</PRE>'.
403           '</BODY></HTML>';
404
405
406         dbh->{'private_profile'} = {};
407         return $page;
408
409       } else {
410
411         #clear db profile, but normal redirect
412         dbh->{'private_profile'} = {};
413         $m->redirect($location);
414         '';
415
416       }
417
418     } else { #normal redirect
419
420       $m->redirect($location);
421       '';
422
423     }
424
425   };
426   
427   sub include {
428     use vars qw($m);
429     #carp #should just switch to <& &> syntax
430     $m->scomp(@_);
431   }
432
433   sub errorpage {
434     use vars qw($m);
435     $m->comp('/elements/errorpage.html', @_);
436   }
437
438   sub errorpage_popup {
439     use vars qw($m);
440     $m->comp('/elements/errorpage-popup.html', @_);
441   }
442
443   sub redirect {
444     my( $location ) = @_;
445     use vars qw($m);
446     $m->clear_buffer;
447     #false laziness w/above
448     if ( defined(@DBIx::Profile::ISA) ) {
449
450       if ( $FS::CurrentUser::CurrentUser->option('show_db_profile') ) {
451
452         #profiling redirect
453
454         $m->print(
455           qq!<HTML><BODY>Redirect to <A HREF="$location">$location</A>!.
456           '<BR><BR><PRE>'.
457             ( UNIVERSAL::can(dbh, 'sprintProfile')
458                 ? encode_entities(dbh->sprintProfile())
459                 : 'DBIx::Profile missing sprintProfile method;'.
460                   'unpatched or too old?'                        ).
461           #"\n\n". &sprintAutoProfile().  '</PRE>'.
462           "\n\n".                         '</PRE>'.
463           '</BODY></HTML>'
464         );
465
466         dbh->{'private_profile'} = {};
467
468       } else {
469
470         #clear db profile, but normal redirect
471         dbh->{'private_profile'} = {};
472         $m->redirect($location);
473
474       }
475
476     } else { #normal redirect
477
478       $m->redirect($location);
479
480     }
481
482   }
483
484 } # end package HTML::Mason::Commands;
485
486 =head1 SUBROUTINE
487
488 =over 4
489
490 =item mason_interps [ MODE [ OPTION => VALUE ... ] ]
491
492 Returns a list consisting of two HTML::Mason::Interp objects, the first for
493 Freeside pages, and the second for RT pages.
494
495 MODE can be 'apache' or 'standalone'.  If not specified, defaults to 'apache'.
496
497 Options and values can be passed following mode.  Currently available options
498 are:
499
500 I<outbuf> should be set to a scalar reference in standalone mode.
501
502 =cut
503
504 my %defang_opts = ( attribs_to_callback => ['src'], attribs_callback => sub { 1 });
505
506 sub mason_interps {
507   my $mode = shift || 'apache';
508   my %opt = @_;
509
510   #my $request_class = 'HTML::Mason::Request'.
511                       #( $mode eq 'apache' ? '::ApacheHandler' : '' );
512   my $request_class = $mode eq 'standalone' ? 'FS::Mason::StandaloneRequest'
513                                             : 'FS::Mason::Request';
514
515   #not entirely sure it belongs here, but what the hey
516   if ( %%%RT_ENABLED%%% && $mode ne 'standalone' ) {
517     RT::LoadConfig();
518   }
519
520   # A hook supporting strange legacy ways people (well, SG) have added stuff on
521
522   my @addl_comp_root = ();
523   my $addl_comp_root_file = '%%%FREESIDE_CONF%%%/addl_comp_root.pl';
524   if ( -e $addl_comp_root_file ) {
525     warn "reading $addl_comp_root_file\n";
526     my $text = slurp( $addl_comp_root_file );
527     my @addl = eval $text;
528     if ( @addl && ! $@ ) {
529       @addl_comp_root = @addl;
530     } elsif ($@) {
531       warn "error parsing $addl_comp_root_file: $@\n";
532     }
533   }
534
535   my $fs_comp_root =
536     scalar(@addl_comp_root)
537       ? [
538           [ 'freeside'=>'%%%FREESIDE_DOCUMENT_ROOT%%%' ],
539           @addl_comp_root,
540         ]
541       : '%%%FREESIDE_DOCUMENT_ROOT%%%';
542
543   my %interp = (
544     request_class        => $request_class,
545     data_dir             => '%%%MASONDATA%%%',
546     error_mode           => 'output',
547     error_format         => 'html',
548     ignore_warnings_expr => '.',
549   );
550
551   $interp{out_method} = $opt{outbuf} if $mode eq 'standalone' && $opt{outbuf};
552
553   my $html_defang = new HTML::Defang (%defang_opts);
554
555   #false laziness w/ FS::Maketext js_mt
556   my $js_string_sub = sub {
557     #${$_[0]} =~ s/(['\\\n])/'\\'.($1 eq "\n" ? 'n' : $1)/ge;
558     ${$_[0]} =~ s/(['\\])/\\$1/g;
559     ${$_[0]} =~ s/\r/\\r/g;
560     ${$_[0]} =~ s/\n/\\n/g;
561     # prevent premature termination of the script
562     ${$_[0]} =~ s[</script>][<\\/script>]ig;
563     ${$_[0]} = "'". ${$_[0]}. "'";
564   };
565
566   my $defang_sub = sub {
567     ${$_[0]} = $html_defang->defang(${$_[0]});
568   };
569
570   my $fs_interp = new HTML::Mason::Interp (
571     %interp,
572     comp_root    => $fs_comp_root,
573     escape_flags => { 'js_string'   => $js_string_sub,
574                       'defang'      => $defang_sub,
575                     },
576     compiler     => HTML::Mason::Compiler::ToObject->new(
577                       allow_globals        => [qw(%session)],
578                     ),
579   );
580
581   my $rt_interp = new HTML::Mason::Interp (
582     %interp,
583     comp_root    => [
584                       [ 'rt'       => '%%%FREESIDE_DOCUMENT_ROOT%%%/rt' ],
585                       [ 'freeside' => '%%%FREESIDE_DOCUMENT_ROOT%%%'    ],
586                     ],
587     escape_flags => { 'h'         => \&RT::Interface::Web::EscapeUTF8,
588                       'u'         => \&RT::Interface::Web::EscapeURI,
589                       'j'         => \&RT::Interface::Web::EscapeJS,
590                       'js_string' => $js_string_sub,
591                     },
592     compiler     => HTML::Mason::Compiler::ToObject->new(
593                       default_escape_flags => 'h',
594                       allow_globals        => [qw(%session)],
595                     ),
596   );
597
598   ( $fs_interp, $rt_interp );
599
600 }
601
602 =back
603
604 =head1 BUGS
605
606 Lurking in the darkness...
607
608 =head1 SEE ALSO
609
610 L<HTML::Mason>, L<FS>, L<RT>
611
612 =cut
613
614 1;