Merge remote-tracking branch 'upstream/master'
[freeside.git] / FS / FS / Mason.pm
1 package FS::Mason;
2
3 use strict;
4 use vars qw( @ISA @EXPORT_OK $addl_handler_use );
5 use Exporter;
6 use Carp;
7 use File::Slurp qw( slurp );
8 use HTML::Mason 1.27; #http://www.masonhq.com/?ApacheModPerl2Redirect
9 use HTML::Mason::Interp;
10 use HTML::Mason::Compiler::ToObject;
11
12 @ISA = qw( Exporter );
13 @EXPORT_OK = qw( mason_interps );
14
15 =head1 NAME
16
17 FS::Mason - Initialize the Mason environment
18
19 =head1 SYNOPSIS
20
21   use FS::Mason qw( mason_interps );
22
23   my( $fs_interp, $rt_interp ) = mason_interps('apache');
24
25   #OR
26
27   my( $fs_interp, $rt_interp ) = mason_interps('standalone'); #XXX name?
28
29 =head1 DESCRIPTION
30
31 Initializes the Mason environment, loads all Freeside and RT libraries, etc.
32
33 =cut
34
35 $addl_handler_use = '';
36 my $addl_handler_use_file = '%%%FREESIDE_CONF%%%/addl_handler_use.pl';
37 if ( -e $addl_handler_use_file ) {
38   $addl_handler_use = slurp( $addl_handler_use_file );
39 }
40
41 # List of modules that you want to use from components (see Admin
42 # manual for details)
43 {
44   package HTML::Mason::Commands;
45
46   use strict;
47   use vars qw( %session );
48   use CGI 3.29 qw(-private_tempfiles); #3.29 to fix RT attachment problems
49
50   #breaks quick payment entry
51   #http://rt.cpan.org/Public/Bug/Display.html?id=37365
52   die "CGI.pm v3.38 is broken, use any other version >= 3.29".
53       " (Debian 5.0?  aptitude remove libcgi-pm-perl)"
54     if $CGI::VERSION == 3.38;
55
56   #use CGI::Carp qw(fatalsToBrowser);
57   use CGI::Cookie;
58   use List::Util qw( max min sum );
59   use List::MoreUtils qw( first_index uniq );
60   use Scalar::Util qw( blessed );
61   use Data::Dumper;
62   use Date::Format;
63   use Time::Local;
64   use Time::HiRes;
65   use Time::Duration;
66   use DateTime;
67   use DateTime::Format::Strptime;
68   use FS::Misc::DateTime qw( parse_datetime );
69   use FS::Misc::Geo qw( get_district );
70   use Lingua::EN::Inflect qw(PL);
71   Lingua::EN::Inflect::classical names=>0; #Categorys
72   use Tie::IxHash;
73   use URI;
74   use URI::Escape 3.31;
75   use HTML::Entities;
76   use HTML::TreeBuilder;
77   use HTML::TableExtract qw(tree);
78   use HTML::FormatText;
79   use HTML::Defang;
80   use JSON::XS;
81 #  use XMLRPC::Transport::HTTP;
82 #  use XMLRPC::Lite; # for XMLRPC::Serializer
83   use MIME::Base64;
84   use IO::Handle;
85   use IO::File;
86   use IO::Scalar;
87   use IO::String;
88   #not actually using this yet anyway...# use IPC::Run3 0.036;
89   use Net::Whois::Raw qw(whois);
90   if ( $] < 5.006 ) {
91     eval "use Net::Whois::Raw 0.32 qw(whois)";
92     die $@ if $@;
93   }
94   use Text::CSV_XS;
95   use Spreadsheet::WriteExcel;
96   use Spreadsheet::WriteExcel::Utility;
97   use OLE::Storage_Lite;
98   use Excel::Writer::XLSX;
99   #use Excel::Writer::XLSX::Utility; #redundant with above
100
101   use Business::CreditCard 0.30; #for mask-aware cardtype()
102   use NetAddr::IP;
103   use Net::Ping;
104   use Net::Ping::External;
105   #if CPAN #7815 ever gets fixed# if ( $Net::Ping::External::VERSION <= 0.12 )
106   {
107     no warnings 'redefine';
108     eval 'sub Net::Ping::External::_ping_linux { 
109             my %args = @_;
110             my $command = "ping -s $args{size} -c $args{count} -w $args{timeout} $args{host}";
111             return Net::Ping::External::_ping_system($command, 0);
112           }
113          ';
114     die $@ if $@;
115   }
116   use String::Approx qw(amatch);
117   use Chart::LinesPoints;
118   use Chart::Mountain;
119   use Chart::Bars;
120   use Color::Scheme;
121   use HTML::Widgets::SelectLayers 0.07; #should go away in favor of
122                                         #selectlayers.html
123   use Locale::Country;
124   use Locale::Currency;
125   use Locale::Currency::Format;
126   use Business::US::USPS::WebTools::AddressStandardization;
127   use Geo::GoogleEarth::Pluggable;
128   use LWP::UserAgent;
129   use Storable qw( nfreeze thaw );
130   use FS;
131   use FS::UID qw( dbh datasrc driver_name );
132   use FS::Record qw( qsearch qsearchs fields dbdef
133                     str2time_sql str2time_sql_closing
134                     midnight_sql
135                    );
136   use FS::Conf;
137   use FS::CGI qw(header menubar table itable ntable idiot
138                  eidiot myexit http_header);
139   use FS::UI::Web qw(svc_url);
140   use FS::UI::Web::small_custview qw(small_custview);
141   use FS::UI::bytecount;
142   use FS::Msgcat qw(gettext geterror);
143   use FS::Misc qw( send_email send_fax ocr_image
144                    states_hash counties cities state_label
145                  );
146   use FS::Misc::eps2png qw( eps2png );
147   use FS::Report::FCC_477;
148   use FS::Report::Table;
149   use FS::Report::Table::Monthly;
150   use FS::Report::Table::Daily;
151   use FS::TicketSystem;
152   use FS::NetworkMonitoringSystem;
153   use FS::Tron qw( tron_lint );
154   use FS::Locales;
155   use FS::Maketext qw( mt emt js_mt );
156
157   use FS::agent;
158   use FS::agent_type;
159   use FS::domain_record;
160   use FS::cust_bill;
161   use FS::cust_bill_pay;
162   use FS::cust_credit;
163   use FS::cust_credit_bill;
164   use FS::cust_main;
165   use FS::h_cust_main;
166   use FS::cust_main::Search qw(smart_search);
167   use FS::cust_main::Import;
168   use FS::cust_main_county;
169   use FS::cust_location;
170   use FS::cust_pay;
171   use FS::cust_pkg;
172   use FS::cust_pkg::Import;
173   use FS::part_pkg_taxclass;
174   use FS::cust_pkg_reason;
175   use FS::cust_refund;
176   use FS::cust_credit_refund;
177   use FS::cust_pay_refund;
178   use FS::cust_svc;
179   use FS::nas;
180   use FS::part_bill_event;
181   use FS::part_event;
182   use FS::part_event_condition;
183   use FS::part_pkg;
184   use FS::part_referral;
185   use FS::part_svc;
186   use FS::part_svc_router;
187   use FS::part_virtual_field;
188   use FS::pay_batch;
189   use FS::pkg_svc;
190   use FS::port;
191   use FS::queue qw(joblisting);
192   use FS::raddb;
193   use FS::session;
194   use FS::svc_acct;
195   use FS::svc_acct_pop qw(popselector);
196   use FS::acct_rt_transaction;
197   use FS::svc_domain;
198   use FS::svc_forward;
199   use FS::svc_www;
200   use FS::router;
201   use FS::addr_block;
202   use FS::svc_broadband;
203   use FS::svc_external;
204   use FS::type_pkgs;
205   use FS::part_export;
206   use FS::part_export_option;
207   use FS::export_svc;
208   use FS::export_device;
209   use FS::msgcat;
210   use FS::rate;
211   use FS::rate_region;
212   use FS::rate_prefix;
213   use FS::rate_detail;
214   use FS::usage_class;
215   use FS::payment_gateway;
216   use FS::agent_payment_gateway;
217   use FS::XMLRPC;
218   use FS::payby;
219   use FS::cdr;
220   use FS::cdr_batch;
221   use FS::inventory_class;
222   use FS::inventory_item;
223   use FS::pkg_category;
224   use FS::pkg_class;
225   use FS::access_user;
226   use FS::access_user_pref;
227   use FS::access_group;
228   use FS::access_usergroup;
229   use FS::access_groupagent;
230   use FS::access_right;
231   use FS::AccessRight;
232   use FS::svc_phone;
233   use FS::phone_device;
234   use FS::part_device;
235   use FS::reason_type;
236   use FS::reason;
237   use FS::cust_main_note;
238   use FS::tax_class;
239   use FS::cust_tax_location;
240   use FS::part_pkg_taxproduct;
241   use FS::part_pkg_taxoverride;
242   use FS::part_pkg_taxrate;
243   use FS::tax_rate;
244   use FS::part_pkg_report_option;
245   use FS::cust_attachment;
246   use FS::h_cust_pkg;
247   use FS::h_inventory_item;
248   use FS::h_svc_acct;
249   use FS::h_svc_broadband;
250   use FS::h_svc_domain;
251   #use FS::h_domain_record;
252   use FS::h_svc_external;
253   use FS::h_svc_forward;
254   use FS::h_svc_phone;
255   #use FS::h_phone_device;
256   use FS::h_svc_www;
257   use FS::cust_statement;
258   use FS::cust_class;
259   use FS::cust_category;
260   use FS::prospect_main;
261   use FS::contact;
262   use FS::phone_type;
263   use FS::svc_pbx;
264   use FS::discount;
265   use FS::cust_pkg_discount;
266   use FS::cust_bill_pkg_discount;
267   use FS::svc_mailinglist;
268   use FS::cgp_rule;
269   use FS::cgp_rule_condition;
270   use FS::cgp_rule_action;
271   use FS::bill_batch;
272   use FS::cust_bill_batch;
273   use FS::rate_time;
274   use FS::rate_time_interval;
275   use FS::msg_template;
276   use FS::part_tag;
277   use FS::acct_snarf;
278   use FS::part_pkg_discount;
279   use FS::svc_cert;
280   use FS::svc_dsl;
281   use FS::qual;
282   use FS::qual_option;
283   use FS::dsl_note;
284   use FS::part_pkg_vendor;
285   use FS::cust_note_class;
286   use FS::svc_port;
287   use FS::lata;
288   use FS::did_vendor;
289   use FS::did_order;
290   use FS::torrus_srvderive;
291   use FS::torrus_srvderive_component;
292   use FS::areacode;
293   use FS::svc_dish;
294   use FS::h_svc_dish;
295   use FS::svc_hardware;
296   use FS::h_svc_hardware;
297   use FS::hardware_class;
298   use FS::hardware_type;
299   use FS::hardware_status;
300   use FS::did_order_item;
301   use FS::msa;
302   use FS::rate_center;
303   use FS::cust_msg;
304   use FS::radius_group;
305   use FS::template_content;
306   use FS::dsl_device;
307   use FS::nas;
308   use FS::nas;
309   use FS::export_nas;
310   use FS::legacy_cust_bill;
311   use FS::rate_tier;
312   use FS::rate_tier_detail;
313   use FS::radius_attr;
314   use FS::discount_plan;
315   use FS::tower;
316   use FS::tower_sector;
317   use FS::sales;
318   use FS::contact_class;
319   use FS::part_svc_class;
320   use FS::upload_target;
321   use FS::quotation;
322   use FS::quotation_pkg;
323   use FS::quotation_pkg_discount;
324   use FS::cust_bill_void;
325   use FS::cust_bill_pkg_void;
326   use FS::cust_bill_pkg_detail_void;
327   use FS::cust_bill_pkg_display_void;
328   use FS::cust_bill_pkg_tax_location_void;
329   use FS::cust_bill_pkg_tax_rate_location_void;
330   use FS::cust_tax_exempt_pkg_void;
331   use FS::cust_bill_pkg_discount_void;
332   use FS::agent_pkg_class;
333   use FS::svc_export_machine;
334   use FS::GeocodeCache;
335   use FS::log;
336   use FS::log_context;
337   use FS::part_pkg_usage_class;
338   use FS::cust_pkg_usage;
339   use FS::part_pkg_usage_class;
340   use FS::part_pkg_usage;
341   use FS::cdr_cust_pkg_usage;
342   use FS::part_pkg_msgcat;
343   use FS::svc_cable;
344   use FS::agent_currency;
345   use FS::currency_exchange;
346   use FS::part_pkg_currency;
347   use FS::cust_payby;
348   use FS::vend_main;
349   use FS::vend_class;
350   use FS::vend_bill;
351   use FS::vend_pay;
352   use FS::vend_bill_pay;
353   use FS::sales_pkg_class;
354   use FS::svc_alarm;
355   use FS::cable_model;
356   use FS::invoice_mode;
357   use FS::invoice_conf;
358   use FS::cable_provider;
359   use FS::cust_credit_void;
360   use FS::discount_class;
361   # Sammath Naur
362
363   if ( $FS::Mason::addl_handler_use ) {
364     eval $FS::Mason::addl_handler_use;
365     die $@ if $@;
366   }
367
368   if ( %%%RT_ENABLED%%% ) {
369     eval '
370       use lib ( "/opt/rt3/local/lib", "/opt/rt3/lib" );
371       use vars qw($Nobody $SystemUser);
372       use RT;
373       use RT::Util;
374       use RT::Tickets;
375       use RT::Transactions;
376       use RT::Users;
377       use RT::CurrentUser;
378       use RT::Templates;
379       use RT::Queues;
380       use RT::ScripActions;
381       use RT::ScripConditions;
382       use RT::Scrips;
383       use RT::Groups;
384       use RT::GroupMembers;
385       use RT::CustomFields;
386       use RT::CustomFieldValues;
387       use RT::ObjectCustomFieldValues;
388
389       #blah.  manually updated from RT::Interface::Web::Handler
390       use RT::Interface::Web;
391       use MIME::Entity;
392       use Text::Wrapper;
393       use Time::ParseDate;
394       use Time::HiRes;
395       use HTML::Scrubber;
396
397       #blah.  not even in RT::Interface::Web::Handler, just in 
398       #html/NoAuth/css/dhandler and rt-test-dependencies.  ask for it here
399       #to throw a real error instead of just a mysterious unstyled RT
400       use CSS::Squish 0.06;
401
402       use RT::Interface::Web::Request;
403
404       #another undeclared web UI dep (for ticket links graph)
405       use IPC::Run::SafeHandles;
406
407       #slow, unreliable, segfaults and is optional
408       #see rt/html/Ticket/Elements/ShowTransactionAttachments
409       #use Text::Quoted;
410
411       #?#use File::Path qw( rmtree );
412       #?#use File::Glob qw( bsd_glob );
413       #?#use File::Spec::Unix;
414
415     ';
416     die $@ if $@;
417   }
418
419   *CGI::redirect = sub {
420     my $self = shift;
421     my $cookie = '';
422     if ( $_[0] eq '-cookie' ) { #this isn't actually used at the moment
423       (my $x, $cookie) = (shift, shift);
424       $HTML::Mason::r->err_headers_out->add( 'Set-cookie' => $cookie );
425     }
426     my $location = shift;
427
428     use vars qw($m);
429
430     # false laziness w/below
431     if ( @DBIx::Profile::ISA ) {
432
433       if ( $FS::CurrentUser::CurrentUser->option('show_db_profile') ) {
434
435         #profiling redirect
436
437         my $page =
438           qq!<HTML><BODY>Redirect to <A HREF="$location">$location</A>!.
439           '<BR><BR><PRE>'.
440             ( UNIVERSAL::can(dbh, 'sprintProfile')
441                 ? encode_entities(dbh->sprintProfile())
442                 : 'DBIx::Profile missing sprintProfile method;'.
443                   'unpatched or too old?'                        ).
444           #"\n\n". &sprintAutoProfile().  '</PRE>'.
445           "\n\n".                         '</PRE>'.
446           '</BODY></HTML>';
447
448
449         dbh->{'private_profile'} = {};
450         return $page;
451
452       } else {
453
454         #clear db profile, but normal redirect
455         dbh->{'private_profile'} = {};
456         $m->redirect($location);
457         '';
458
459       }
460
461     } else { #normal redirect
462
463       $m->redirect($location);
464       '';
465
466     }
467
468   };
469   
470   sub include {
471     use vars qw($m);
472     #carp #should just switch to <& &> syntax
473     $m->scomp(@_);
474   }
475
476   sub errorpage {
477     use vars qw($m);
478     $m->comp('/elements/errorpage.html', @_);
479   }
480
481   sub errorpage_popup {
482     use vars qw($m);
483     $m->comp('/elements/errorpage-popup.html', @_);
484   }
485
486   sub redirect {
487     my( $location ) = @_;
488     use vars qw($m);
489     $m->clear_buffer;
490     #false laziness w/above
491     if ( @DBIx::Profile::ISA ) {
492
493       if ( $FS::CurrentUser::CurrentUser->option('show_db_profile') ) {
494
495         #profiling redirect
496
497         $m->print(
498           qq!<HTML><BODY>Redirect to <A HREF="$location">$location</A>!.
499           '<BR><BR><PRE>'.
500             ( UNIVERSAL::can(dbh, 'sprintProfile')
501                 ? encode_entities(dbh->sprintProfile())
502                 : 'DBIx::Profile missing sprintProfile method;'.
503                   'unpatched or too old?'                        ).
504           #"\n\n". &sprintAutoProfile().  '</PRE>'.
505           "\n\n".                         '</PRE>'.
506           '</BODY></HTML>'
507         );
508
509         dbh->{'private_profile'} = {};
510
511       } else {
512
513         #clear db profile, but normal redirect
514         dbh->{'private_profile'} = {};
515         $m->redirect($location);
516
517       }
518
519     } else { #normal redirect
520
521       $m->redirect($location);
522
523     }
524
525   }
526
527 } # end package HTML::Mason::Commands;
528
529 =head1 SUBROUTINE
530
531 =over 4
532
533 =item mason_interps [ MODE [ OPTION => VALUE ... ] ]
534
535 Returns a list consisting of two HTML::Mason::Interp objects, the first for
536 Freeside pages, and the second for RT pages.
537
538 MODE can be 'apache' or 'standalone'.  If not specified, defaults to 'apache'.
539
540 Options and values can be passed following mode.  Currently available options
541 are:
542
543 I<outbuf> should be set to a scalar reference in standalone mode.
544
545 =cut
546
547 my %defang_opts = ( attribs_to_callback => ['src'], attribs_callback => sub { 1 });
548
549 sub mason_interps {
550   my $mode = shift || 'apache';
551   my %opt = @_;
552
553   #my $request_class = 'HTML::Mason::Request'.
554                       #( $mode eq 'apache' ? '::ApacheHandler' : '' );
555   my $request_class = $mode eq 'standalone' ? 'FS::Mason::StandaloneRequest'
556                                             : 'FS::Mason::Request';
557
558   #not entirely sure it belongs here, but what the hey
559   if ( %%%RT_ENABLED%%% && $mode ne 'standalone' ) {
560     RT::LoadConfig();
561   }
562
563   my $fs_comp_root = '%%%FREESIDE_DOCUMENT_ROOT%%%';
564
565   my %interp = (
566     request_class        => $request_class,
567     data_dir             => '%%%MASONDATA%%%',
568     error_mode           => 'output',
569     error_format         => 'html',
570     ignore_warnings_expr => '.',
571   );
572
573   $interp{out_method} = $opt{outbuf} if $mode eq 'standalone' && $opt{outbuf};
574
575   my $html_defang = new HTML::Defang (%defang_opts);
576
577   #false laziness w/ FS::Maketext js_mt
578   my $js_string_sub = sub {
579     #${$_[0]} =~ s/(['\\\n])/'\\'.($1 eq "\n" ? 'n' : $1)/ge;
580     ${$_[0]} =~ s/(['\\])/\\$1/g;
581     ${$_[0]} =~ s/\r/\\r/g;
582     ${$_[0]} =~ s/\n/\\n/g;
583     # prevent premature termination of the script
584     ${$_[0]} =~ s[</script>][<\\/script>]ig;
585     ${$_[0]} = "'". ${$_[0]}. "'";
586   };
587
588   my $defang_sub = sub {
589     ${$_[0]} = $html_defang->defang(${$_[0]});
590   };
591
592   my $fs_interp = new HTML::Mason::Interp (
593     %interp,
594     comp_root    => $fs_comp_root,
595     escape_flags => { 'js_string'   => $js_string_sub,
596                       'defang'      => $defang_sub,
597                     },
598     compiler     => HTML::Mason::Compiler::ToObject->new(
599                       allow_globals        => [qw(%session)],
600                     ),
601   );
602
603   my $rt_interp = new HTML::Mason::Interp (
604     %interp,
605     comp_root    => [
606                       [ 'rt'       => '%%%FREESIDE_DOCUMENT_ROOT%%%/rt' ],
607                       [ 'freeside' => '%%%FREESIDE_DOCUMENT_ROOT%%%'    ],
608                     ],
609     escape_flags => { 'h'         => \&RT::Interface::Web::EscapeUTF8,
610                       'u'         => \&RT::Interface::Web::EscapeURI,
611                       'j'         => \&RT::Interface::Web::EscapeJS,
612                       'js_string' => $js_string_sub,
613                     },
614     compiler     => HTML::Mason::Compiler::ToObject->new(
615                       default_escape_flags => 'h',
616                       allow_globals        => [qw(%session $DECODED_ARGS)],
617                     ),
618   );
619
620   ( $fs_interp, $rt_interp );
621
622 }
623
624 =back
625
626 =head1 BUGS
627
628 Lurking in the darkness...
629
630 =head1 SEE ALSO
631
632 L<HTML::Mason>, L<FS>, L<RT>
633
634 =cut
635
636 1;