bulk checkin from working on the road:
[freeside.git] / httemplate / docs / upgrade8.html
1 <head>
2   <title>Upgrading to 1.4.0</title>
3 </head>
4 <body>
5 <h1>Upgrading to 1.4.0 from 1.3.1</h1>
6 <ul>
7   <li>If migrating from less than 1.3.1, see these <a href="upgrade7.html">instructions</a> first.
8   <li><font size="+2" color="#ff0000">Backup your database and current Freeside installation.</font> (with&nbsp;<a href="http://www.ca.postgresql.org/devel-corner/docs/postgres/backup.html">PostgreSQL</a>) (with&nbsp;<a href="http://www.mysql.com/documentation/mysql/bychapter/manual_MySQL_Database_Administration.html#Backup">MySQL</a>)
9   <li><a href="http://perl.apache.org/">mod_perl</a> is now required.
10   <li>Install <a href="http://search.cpan.org/search?dist=Time-Duration">Time-Duration</a>, <a href="http://search.cpan.org/search?dist=Tie-IxHash">Tie-IxHash</a> and <a href="http://search.cpan.org/search?dist=HTML-Widgets-SelectLayers">HTML-Widgets-SelectLayers</a>.
11   <li>Install <a href="http://www.apache-asp.org/">Apache::ASP</a> or <a href="http://www.masonhq.com/">HTML::Mason</a>.
12   <li>Install <a href="http://rsync.samba.org/">rsync</a>
13 </ul>
14 <table>
15   <tr>
16     <th>Apache::ASP</th><th>Mason</th>
17   </tr>
18   <tr>
19     <td><ul>
20       <li>Run <tt>make aspdocs</tt>
21       <li>Copy <tt>aspdocs/</tt> to your web server's document space.
22       <li>Create a <a href="http://www.apache-asp.org/config.html#Global">Global</a> directory, such as <tt>/usr/local/etc/freeside/asp-global/</tt>
23       <li>Copy <tt>htetc/global.asa</tt> to the Global directory.
24       <li>Configure Apache for the Global directory and to execute .cgi files using Apache::ASP.  For example:
25 <font size="-1"><pre>
26 &lt;Directory /usr/local/apache/htdocs/freeside-asp&gt;
27 &lt;Files ~ (\.cgi)&gt;
28 AddHandler perl-script .cgi
29 PerlHandler Apache::ASP
30 &lt;/Files&gt;
31 &lt;Perl&gt;
32 $MLDBM::RemoveTaint = 1;
33 &lt;/Perl&gt;
34 PerlSetVar Global /usr/local/etc/freeside/asp-global/
35 &lt;/Directory&gt;
36 </pre></font>
37     </ul></td>
38     <td><ul>
39       <li>Run <tt>make masondocs</tt>
40       <li>Copy <tt>masondocs/</tt> to your web server's document space.
41       <li>Copy <tt>htetc/handler.pl</tt> to your web server's configuration directory.
42       <li>Edit <tt>handler.pl</tt> and set an appropriate <tt>data_dir</tt>, such as <tt>/usr/local/etc/freeside/mason-data</tt>
43       <li>Configure Apache to use the <tt>handler.pl</tt> file and to execute .cgi files using HTML::Mason.  For example:
44 <font size="-1"><pre>
45 &lt;Directory /usr/local/apache/htdocs/freeside-mason&gt;
46 &lt;Files ~ (\.cgi)&gt;
47 AddHandler perl-script .cgi
48 PerlHandler HTML::Mason
49 &lt;/Files&gt;
50 &lt;Perl&gt;
51 require "/usr/local/apache/conf/handler.pl";
52 &lt;/Perl&gt;
53 &lt;/Directory&gt;
54 </pre></font>
55     </ul></td>
56   </tr>
57 </table>
58 <ul>
59   <li>Build and install the Perl modules:
60     <pre>
61 $ su
62 # make install-perl-modules</pre>
63    <li>Apply the following changes to your database:
64 <pre>
65 CREATE TABLE svc_forward (
66   svcnum int NOT NULL,
67   srcsvc int NOT NULL,
68   dstsvc int NOT NULL,
69   dst varchar(80),
70   PRIMARY KEY (svcnum)
71 );
72
73 CREATE TABLE cust_credit_bill (
74   creditbillnum int primary key,
75   crednum int not null,
76   invnum int not null,
77   _date int not null,
78   amount decimal(10,2) not null
79 );
80
81 CREATE TABLE cust_bill_pay (
82   billpaynum int primary key,
83   invnum int not null,
84   paynum int not null,
85   _date int not null,
86   amount decimal(10,2) not null
87 );
88
89 CREATE TABLE cust_credit_refund (
90   creditrefundnum int primary key,
91   crednum int not null,
92   refundnum int not null,
93   _date int not null,
94   amount decimal(10,2) not null
95 );
96
97 CREATE TABLE part_svc_column (
98   columnnum int primary key,
99   svcpart int not null,
100   columnname varchar(64) not null,
101   columnvalue varchar(80) null,
102   columnflag char(1) null
103 );
104
105 CREATE TABLE queue (
106   jobnum int primary key,
107   job text not null,
108   _date int not null,
109   status varchar(80) not null,
110   statustext text null,
111   svcnum int null
112 );
113 CREATE INDEX queue1 ON queue ( svcnum );
114 CREATE INDEX queue2 ON queue ( status );
115
116 CREATE TABLE queue_arg (
117   argnum int primary key,
118   jobnum int not null,
119   arg text null
120 );
121 CREATE INDEX queue_arg1 ON queue_arg ( jobnum );
122
123 CREATE TABLE part_pop_local (
124   localnum int primary key,
125   popnum int not null,
126   city varchar(80) null,
127   state char(2) null,
128   npa char(3) not null,
129   nxx char(3) not null
130 );
131 CREATE UNIQUE INDEX part_pop_local1 ON part_pop_local ( npa, nxx );
132
133 CREATE TABLE cust_bill_event (
134   eventnum int primary key,
135   invnum int not null,
136   eventpart int not null,
137   _date int not null
138 );
139 CREATE UNIQUE INDEX cust_bill_event1 ON cust_bill_event ( eventpart, invnum );
140 CREATE INDEX cust_bill_event2 ON cust_bill_event ( invnum );
141
142 CREATE TABLE part_bill_event (
143   eventpart int primary key,
144   payby char(4) not null,
145   event varchar(80) not null,
146   eventcode text null,
147   seconds int null,
148   weight int not null,
149   plan varchar(80) null,
150   plandata text null,
151   disabled char(1) null
152 );
153 CREATE INDEX part_bill_event1 ON part_bill_event ( payby );
154
155 CREATE TABLE part_export (
156   exportnum int primary key,
157   svcpart int not null,
158   machine varchar(80) not null,
159   exporttype varchar(80) not null,
160   nodomain char(1) NULL
161 );
162 CREATE INDEX part_export1 ON part_export ( machine );
163 CREATE INDEX part_export2 ON part_export ( exporttype );
164
165 CREATE TABLE part_export_option (
166   optionnum int primary key,
167   exportnum int not null,
168   optionname varchar(80) not null,
169   optionvalue text NULL
170 );
171 CREATE INDEX part_export_option1 ON part_export_option ( exportnum );
172 CREATE INDEX part_export_option2 ON part_export_option ( optionname );
173
174 CREATE TABLE radius_usergroup (
175   usergroupnum int primary key,
176   svcnum int not null,
177   groupname varchar(80) not null
178 );
179 CREATE INDEX radius_usergroup1 ON radius_usergroup ( svcnum );
180 CREATE INDEX radius_usergroup2 ON radius_usergroup ( groupname );
181
182 CREATE TABLE msgcat (
183   msgnum int primary key,
184   msgcode varchar(80) not null,
185   locale varchar(16) not null,
186   msg text not null
187 );
188 CREATE INDEX msgcat1 ON msgcat ( msgcode, locale );
189
190 ALTER TABLE svc_acct ADD domsvc integer NOT NULL;
191 ALTER TABLE svc_domain ADD catchall integer NULL;
192 ALTER TABLE cust_main ADD referral_custnum integer NULL;
193 ALTER TABLE cust_pay ADD custnum integer;
194 ALTER TABLE cust_pay_batch ADD paybatchnum integer;
195 ALTER TABLE cust_refund ADD custnum integer;
196 ALTER TABLE cust_pkg ADD manual_flag char(1) NULL;
197 ALTER TABLE part_pkg ADD plan varchar(80) NULL;
198 ALTER TABLE part_pkg ADD plandata text NULL;
199 ALTER TABLE part_pkg ADD setuptax char(1) NULL;
200 ALTER TABLE part_pkg ADD recurtax char(1) NULL;
201 ALTER TABLE part_pkg ADD disabled char(1) NULL;
202 ALTER TABLE part_svc ADD disabled char(1) NULL;
203 ALTER TABLE cust_bill ADD closed char(1) NULL;
204 ALTER TABLE cust_pay ADD closed char(1) NULL;
205 ALTER TABLE cust_credit ADD closed char(1) NULL;
206 ALTER TABLE cust_refund ADD closed char(1) NULL;
207 ALTER TABLE cust_bill_event ADD status varchar(80);
208 ALTER TABLE cust_bill_event ADD statustext text NULL;
209 ALTER TABLE svc_acct ADD sec_phrase varchar(80) NULL;
210 CREATE INDEX cust_main3 ON cust_main ( referral_custnum );
211 CREATE INDEX cust_credit_bill1 ON cust_credit_bill ( crednum );
212 CREATE INDEX cust_credit_bill2 ON cust_credit_bill ( invnum );
213 CREATE INDEX cust_bill_pay1 ON cust_bill_pay ( invnum );
214 CREATE INDEX cust_bill_pay2 ON cust_bill_pay ( paynum );
215 CREATE INDEX cust_credit_refund1 ON cust_credit_refund ( crednum );
216 CREATE INDEX cust_credit_refund2 ON cust_credit_refund ( refundnum );
217 CREATE UNIQUE INDEX cust_pay_batch_pkey ON cust_pay_batch ( paybatchnum );
218 CREATE UNIQUE INDEX part_svc_column1 ON part_svc_column ( svcpart, columnname );
219 CREATE INDEX cust_pay2 ON cust_pay ( paynum );
220 CREATE INDEX cust_pay3 ON cust_pay ( custnum );
221 CREATE INDEX cust_pay4 ON cust_pay ( paybatch );
222 </pre>
223
224   <li>If you are using PostgreSQL, apply the following changes to your database:
225 <pre>
226 CREATE UNIQUE INDEX agent_pkey ON agent ( agentnum );
227 CREATE UNIQUE INDEX agent_type_pkey ON agent_type ( typenum );
228 CREATE UNIQUE INDEX cust_bill_pkey ON cust_bill ( invnum );
229 CREATE UNIQUE INDEX cust_credit_pkey ON cust_credit ( crednum );
230 CREATE UNIQUE INDEX cust_main_pkey ON cust_main ( custnum );
231 CREATE UNIQUE INDEX cust_main_county_pkey ON cust_main_county ( taxnum );
232 CREATE UNIQUE INDEX cust_main_invoice_pkey ON cust_main_invoice ( destnum );
233 CREATE UNIQUE INDEX cust_pay_pkey ON cust_pay ( paynum );
234 CREATE UNIQUE INDEX cust_pkg_pkey ON cust_pkg ( pkgnum );
235 CREATE UNIQUE INDEX cust_refund_pkey ON cust_refund ( refundnum );
236 CREATE UNIQUE INDEX cust_svc_pkey ON cust_svc ( svcnum );
237 CREATE UNIQUE INDEX domain_record_pkey ON domain_record ( recnum );
238 CREATE UNIQUE INDEX nas_pkey ON nas ( nasnum );
239 CREATE UNIQUE INDEX part_pkg_pkey ON part_pkg ( pkgpart );
240 CREATE UNIQUE INDEX part_referral_pkey ON part_referral ( refnum );
241 CREATE UNIQUE INDEX part_svc_pkey ON part_svc ( svcpart );
242 CREATE UNIQUE INDEX port_pkey ON port ( portnum );
243 CREATE UNIQUE INDEX prepay_credit_pkey ON prepay_credit ( prepaynum );
244 CREATE UNIQUE INDEX session_pkey ON session ( sessionnum );
245 CREATE UNIQUE INDEX svc_acct_pkey ON svc_acct ( svcnum );
246 CREATE UNIQUE INDEX svc_acct_pop_pkey ON svc_acct_pop ( popnum );
247 CREATE UNIQUE INDEX svc_acct_sm_pkey ON svc_acct_sm ( svcnum );
248 CREATE UNIQUE INDEX svc_domain_pkey ON svc_domain ( svcnum );
249 CREATE UNIQUE INDEX svc_www_pkey ON svc_www ( svcnum );
250 CREATE UNIQUE INDEX type_pkgs_pkey ON type_pkgs ( typenum );
251 </pre>
252   <li>If you wish to enable service/shipping addresses, apply the following
253       changes to your database:
254 <pre>
255 ALTER TABLE cust_main ADD COLUMN ship_last varchar(80) NULL;
256 ALTER TABLE cust_main ADD COLUMN ship_first varchar(80) NULL;
257 ALTER TABLE cust_main ADD COLUMN ship_company varchar(80) NULL;
258 ALTER TABLE cust_main ADD COLUMN ship_address1 varchar(80) NULL;
259 ALTER TABLE cust_main ADD COLUMN ship_address2 varchar(80) NULL;
260 ALTER TABLE cust_main ADD COLUMN ship_city varchar(80) NULL;
261 ALTER TABLE cust_main ADD COLUMN ship_county varchar(80) NULL;
262 ALTER TABLE cust_main ADD COLUMN ship_state varchar(80) NULL;
263 ALTER TABLE cust_main ADD COLUMN ship_zip varchar(10) NULL;
264 ALTER TABLE cust_main ADD COLUMN ship_country char(2) NULL;
265 ALTER TABLE cust_main ADD COLUMN ship_daytime varchar(20) NULL;
266 ALTER TABLE cust_main ADD COLUMN ship_night varchar(20) NULL;
267 ALTER TABLE cust_main ADD COLUMN ship_fax varchar(12) NULL;
268 CREATE INDEX cust_main1 ON cust_main ( ship_last );
269 CREATE INDEX cust_main2 ON cust_main ( ship_company );
270 </pre>
271   <li>If you wish to enable customer comments, apply the following change to
272       your database:
273 <pre>
274 ALTER TABLE cust_main ADD COLUMN comments text NULL;
275 </pre>
276   <li>If you are using the signup server, reinstall it according to the <a href="signup.html">instructions</a>.  The 1.3.x signup server is not compatible with 1.4.x.
277   <li>Run bin/dbdef-create.
278   <li>If you have svc_acct_sm records or service definitions:
279     <ul>
280       <li>Create a service definition with table svc_forward
281       <li>Run bin/fs-migrate-svc_acct_sm
282     </ul>
283   <li>Run bin/fs-migrate-payref
284   <li>Run bin/fs-migrate-part_svc
285   <li><b>After running bin/fs-migrate-payref</b>, apply the following changes to your database:
286   <table border><tr><th>PostgreSQL</th><th>MySQL, others</th></tr>
287 <tr><td>
288 <font size=-1><pre>
289 CREATE TABLE cust_pay_temp (
290   paynum int primary key,
291   custnum int not null,
292   paid decimal(10,2) not null,
293   _date int null,
294   payby char(4) not null,
295   payinfo varchar(16) null,
296   paybatch varchar(80) null
297 );
298 INSERT INTO cust_pay_temp SELECT * from cust_pay;
299 DROP TABLE cust_pay;
300 ALTER TABLE cust_pay_temp RENAME TO cust_pay;
301 CREATE UNIQUE INDEX cust_pay1 ON cust_pay (paynum);
302 CREATE TABLE cust_refund_temp (
303   refundnum int primary key,
304   custnum int not null,
305   _date int null,
306   refund decimal(10,2) not null,
307   otaker varchar(8) not null,
308   reason varchar(80) not null,
309   payby char(4) not null,
310   payinfo varchar(16) null,
311   paybatch varchar(80) null
312 );
313 INSERT INTO cust_refund_temp SELECT * from cust_refund;
314 DROP TABLE cust_refund;
315 ALTER TABLE cust_refund_temp RENAME TO cust_refund;
316 CREATE UNIQUE INDEX cust_refund1 ON cust_refund (refundnum);
317 </pre></font>
318 </td><td>
319 <font size=-1><pre>
320 ALTER TABLE cust_pay DROP COLUMN invnum;
321 ALTER TABLE cust_refund DROP COLUMN crednum;
322 </pre></font>
323 </td></tr></table>
324   <li><b>IMPORTANT: After applying the second set of database changes</b>, run bin/dbdef-create again.
325   <li><b>IMPORTANT</b>: run bin/create-history-tables
326   <li><b>IMPORTANT: After running bin/create-history-tables</b>, run bin/dbdef-create again.
327   <li>set the <a href="../config/config.cgi#username_policy">user_policy configuration value</a> as appropriate for your site.
328   <li>set the <a href="../config/config.cgi#locale">locale configuration value</a> to en_US.
329   <li>the mxmachines, nsmachines, arecords and cnamerecords configuration values have been deprecated.  Set the <a href="../config/config.cgi#defaultrecords">defaultrecords configuration value</a> instead.
330   <li>Create the `/usr/local/etc/freeside/cache.<i>datasrc</i>' directory
331       (owned by the freeside user).
332   <li>freeside-queued was installed with the Perl modules.  Start it now and ensure that is run upon system startup.
333   <li>Set appropriate <a href="../browse/part_bill_event.cgi">invoice events</a> for your site.  At the very least, you'll want to set some invoice events "<i>After 0 days</i>": a <i>BILL</i> invoice event to print invoices, a <i>CARD</i> invoice event to batch or run cards real-time, and a <i>COMP</i> invoice event to "pay" complimentary customers.  If you were using the <i>-i</i> option to <a href="man/bin/freeside-bill.html">freeside-bill</a> it should be removed.
334   <li>Use <a href="man/bin/freeside-daily.html">freeside-daily</a> instead of <a href="man/bin/freeside-bill.html">freeside-bill</a>.
335   <li>If you would like Freeside to notify your customers when their credit
336   cards and other billing arrangements are about to expire, arrange for
337   <b>freeside-expiration-alerter</b> to be run daily by cron or similar
338   facility.  The message it sends can be configured from the
339   <u>Configuration</u> choice of the main menu as <u>alerter_template</u>.
340   <li>Export has been rewritten.  If you were using the icradiusmachines,
341   icradius_mysqldest, icradius_mysqlsource, or icradius_secrets files, add
342   an appropriate "sqlradius" export to all relevant Service Definitions
343   instead.  Use <a href="http://www.mysql.com/documentation/mysql/bychapter/manual_MySQL_Database_Administration.html#Replication">MySQL replication</a> or
344   point the "sqlradius" export directly at your external ICRADIUS or FreeRADIUS
345   database (or through an SSL-necrypting proxy...)
346 </ul>
347 </body>