added new Filter::it engine
[spider.git] / Changes
1 30Oct00=======================================================================
2 1. put in new Filter::it code and tested it. Now all we have to do is write
3 the user access routines (oh and the help files!).
4 29Oct00=======================================================================
5 1. put in echo cancelling measures into the clients. This doesn't mean you
6 shouldn't take steps to prevent echoing on node links, but it may help where
7 (whatever you do) it still bloody echos! This is experimental.
8 2. store dxchan and mynode as callsigns (and not references) in the routing 
9 tables and do some checking in accessors to see if we can capture some errors.
10 3. tart up the stat/chan etc display to give more useful debugging info 
11 28Oct00=======================================================================
12 1. updated show/sun and show/moon from stuff sent by Steve Franke K9AN
13 2. added show/call which queries jeifer.pineknot.com for any call in the 
14 world (as opposed to UALR which only does US calls). Inspired by a bit of 
15 perl sent to me by Steve Franke (again!) and also Angel EA7WA who gave me the
16 pineknot ip address.
17 3. fixed clients so that they accept -0 as a valid SSID and then strip it off
18 as though they had come in without (why has this taken so long to appear? How
19 long have we been running this code ??????). 
20 27Oct00=======================================================================
21 1. alter the code in clean_old of DXMsg system to see if we get some different
22 behaviour with random crashing
23 26Oct00=======================================================================
24 1. if there is a 'connected' file in /spider/data then the client will send
25 it out to the user after connection.
26 25Oct00=======================================================================
27 1. fix catchup and uncatchup commands so that they accept ranges
28 24Oct00=======================================================================
29 1. added cty.dat from http://www.k1ea.com/cty/index.htm to the prefix_data.pl
30 data file and modified create_prefix.pl accordingly.
31 2. the 'no text line' messages should now propagate correctly
32 3. added the dxcc, itu and cq zone numbers for announcer and origining node 
33 on announce filters - see the /spider/filter/ann/*.issue files for more info.
34 4. you can now specify a 'user_default.pl', 'node_default.pl' and 
35 'in_node_default.pl' in each of the filter directories
36 23Oct00=======================================================================
37 1. Added K5K as Kingman Reef
38 1. Added K7K as Kure
39 17Oct00=======================================================================
40 1. force frames to go down the local interface when doing a route. This is 
41 particularly important for pings!
42 16Oct00=======================================================================
43 1. add a ':' after 'G7BRN de G1TLH' in a talk message.
44 2. added /J to the list of things to ignore (as in G1TLH/J) in prefix 
45 processing (ie /J mean Jota not /JA [Japan]).
46 3. change all INCOMING 00-08 0A-1F and 9B characters that make it past the
47 intermediate client->server protocol to '.'.
48 04Sep00=======================================================================
49 1. made PC10,11,12 badword checking dependant on a flag variable ($censorpc)
50 default = 0 (off).
51 02Sep00=======================================================================
52 1. fix a long standing talk bug to do with routing to specific nodes (t xxx >
53 yyy .....)
54 2. Add badwords checking in various places. You put a list of words into
55 /spider/data/badwords one or several per line. Lines starting with # are
56 ignored. PC10, PC11, PC12 with words contained in this file will not be
57 sent on. Also ann, talk and dx commands have badword checking added. Words
58 are NOT case sensitive, but you will need to put all the endings in (eg 
59 ...k, ...ker, ...king).
60 3. Added new version of admin manual from G0VGS.
61 01Sep00=======================================================================
62 1. allow blank on field 4 of PC10 (even though it's "illegal").
63 28Aug00=======================================================================
64 1. changes DXChannel::get_all_ak1a to get_all_nodes.
65 2. ignore PC21s coming in on the interface with that callsign (ie nodes 
66 trying to disconnect themselves).
67 3. output correct PC29 on blank lines and escape ^ characters differently 
68 (and transparently for spider nodes).
69 26Aug00=======================================================================
70 1. make blank origins on messages the node call.
71 2. added new version of FAQ from Ian G0VGS
72 3. added a dummy PC75 command (WCY merge?)
73 4. Don't allow mail routing for clx nodes
74 5. Log isolates
75 25Aug00=======================================================================
76 1. moan about and then delete empty message files
77 24Aug00=======================================================================
78 1. Removed WWV command so that users can't interfere (read mess up) the
79 automatic feeds which come from various places on the net.
80 23Aug00=======================================================================
81 1. Added persistant dupe file so that all dupes are stored here (including
82 announces) - announces are now kept for 5 days (as default).
83 2. limit the characters stored in a dupe for spots and announces
84 20Aug00=======================================================================
85 1. Added system Alias for set/nodxgrid => unset/dxgrid
86 2. Add full individual checking for all PC protocol fields in all messages
87 and removed any language dependant stuff (hopefully).
88 3. console.pl is now a bit more international (client.c/pl already are)
89 19Aug00=======================================================================
90 1. Added an efficiency thing for AUTOLOADed accessors from OO Perl by Conway.
91 2. Fiddled with the rtty and digital bandplan frequencies.
92 18Aug00=======================================================================
93 1. added a couple of changes for perl 5.6.0
94 2. removed del_dup from DXUser for earlier versions of DB '1.85' (ie real ones
95 not 2.x versions in 1.85 compatibility mode).
96 3. Started the OOing of the PC protocol stuff.
97 15Aug00=======================================================================
98 1. added 1.25 of the admin manual html
99 14Aug00=======================================================================
100 1. Added regex support to sh/dup_*.pl commands
101 2. fixed rcmd in crontab so that will work again
102 13Aug00=======================================================================
103 1. removed extra /60 in AnnTalk to make deduping of announces work a bit
104 better for longer...
105 05Aug00=======================================================================
106 1. Fixed hex character problem put in somewhen in the C Client
107 03Aug00=======================================================================
108 1. caught some more signals (are any of these causing the random stopping
109 of the code?
110 2. the Console now requires 1.05 of the Curses module ^R REFRESHES THE SCREEN
111 (as does ^L) AT LAST!!!!!
112 02Aug00=======================================================================
113 1. put back hex check exception for PC29
114 01Aug00=======================================================================
115 1. made the export and import ascii system work finally. The user_asc file
116 generated (automatically and 0000Z Sunday morning) is autoloading. Just 
117 execute it and it will automatically reload your user database.
118 2. remove import_users.pl no longer necessary
119 31Jul00=======================================================================
120 1. try to fix paging problem.
121 2. added help for spoof and set/forward
122 3. fixed bogus callsign check for field 2 of a PC12
123 4. Add DB_File to DXCommandmode to make it available for commands
124 30Jul00=======================================================================
125 1. Added talk mode so that I don't have to keep typing T <call> all the time.
126 2. fiddled around with storing of Debug messages a bit more.
127 3. bomb proofed the type command.
128 4. started the objectifying for talk, dx and announcements.
129 5. fix talkmode so that it only does 'via' PC10s when it really needs to.
130 6. SEND now displays a message if you try to do it in not prompt mode.
131 7. stopped a few more things being done by rcmd (eg send, talk, ann, dx)
132 8. tidied up the talking a bit more.
133 9. Increase default hop counts all round.
134 10. Adjust hex encoding so that 8 bit characters should now go thru
135 11. check more of the essential protocol fields for 8 bit characters.
136 29Jul00=======================================================================
137 1. added forward/latlong which will forward ALL the users that have a latitude
138 and longitude set on them to one or more locally connected nodes - with a hop
139 count of 1.
140 2. speeded up the show/node command by using the DB_File interface and 
141 sequentially reading the data directly and only 'get'ting the ones that are
142 nodes.
143 3. did the same for show/isolate and show/lockout.
144 28Jul00=======================================================================
145 1. fixed watchdbg midnight rollover loop and removed the date part of the 
146 date/time translation to leave just the time.
147 27Jul00=======================================================================
148 1. made sure that 'en' is the default language on new users.
149 2. issue error message if shutdown is attempted by a low privileged user.
150 3. Make sure a privilege is defined for all users (even if it is 0).
151 4. Try to fix some more dups (and the time on them).
152 5. make the time stored on dups generated locally on spots an integer no of 
153 minutes * 60 
154 6. send unsolicited PC[38]5s to the sysop if online.
155 7. merged current html from www.dxcluster.org with Ian's stuff
156 8. Added sgml files into the source tree
157 9. changed default paclen in client.c to 236
158 26Jul00=======================================================================
159 1. added wantgrid (to control display of grid square info on DX Broadcasts)
160 2. added lastoper for controlling periodic demands for user info from other
161 nodes.
162 3. added spiderFAQ stuff from Ian G0VGS and latest update of the admin manual
163 4. changed updating and deleting from user file in an attempt to keep down
164 duplicates and possibly corruptions.
165 5. added a DXUser::export routine to allow the cluster to automatically 
166 export the user data in ascii from cron.
167 6. added a line in the ISSUED crontab to do the export once a week
168 7. delete annok and dxok if set to 1 in user records.
169 8. added export_users command to allow arbitary exporting of user files
170 9. added set and unset/dxgrid command to allow control over the grid squares 
171 on DX announcements
172 10. Removed export_user.pl (no longer needed)
173 11. made import_users.pl accept a non related input filename and always
174 update the current user file.
175 12. added an 'auto rcmd <node> for/oper <call>' for people I can see on the
176 cluster that issue spots and for whom I have no qra info (no more than once
177 a month). This isn't the default - set $send_opernam in
178 /spider/local/DXProtVars.pm (copied from /spider/perl). Good for gateways.
179 13. Despace spot texts properly again for deduping purposes.
180 14. Corrected Pc84/85 handling a bit.
181 15. Sync the user database every 15 secs to see whether we can reduce the 
182 corruptions and duplicates.
183 25Jul00=======================================================================
184 1. ignore \n in ax25 mode for C client.
185 2. remove extra space at the end of a DX spot announce when no grid square
186 is output.
187 3. added new admin manual from Ian G0VGS
188 20Jul00=======================================================================
189 1. Finally managed to update my source with the sourceforge one
190 2. added user->qra cleaning in various places
191 3. added four digit locator strings to broadcast DX spots (for users).
192 4. PC11 with blank callsigns should now be ignored.
193 5. put back the unpadding to the PC11 dup checking to catch spots with added
194 blanks at the end of lines.
195 25Jun00=======================================================================
196 1. added 0 to the regex that checks for valid data on the cluster.pl->client
197 channel - this will allow G0VGS and G0RDI to connect....
198 2. removed technically unnecessary /= 60 from the dup routines to see if 
199 Arnold's Sparcs don't then crash.
200 19Jun00=======================================================================
201 1. move ann_dup, spot_dup etc to dup_ann, dup_spots etc
202 2. made mode 3 the default line ending convention for all out going connects
203 via telnet in client.pl
204 18Jun00=======================================================================
205 1. fixed line ending ambiguities (I think) for telnet connections. Well 
206 actually only really band aided it. It works but isn't how I want it. 
207 Client.pl has got to go....
208 2. Added 1.21 of Ian G0VGS's admin manual
209 17Jun00=======================================================================
210 1. I believe I have fixed all the login/logout 'broken pipe' errors
211 2. Added G0RDI's 'links' command.
212 3. added update_sysop.pl which cleans out all previous versions of the sysops
213 information from the user database and recreates it with that in DXVars.pm
214 4. Added node type to links and who
215 5. Hardened up the cluster->client link in the cluster software so that 
216 rubbish on port 27754 doesn't (usually) crash the cluster.
217 14Jun00=======================================================================
218 1. fixed sh/node crash
219 2. fixed RTT in who.pl
220 13Jun00=======================================================================
221 1. fixed looping bug in C client on ending.
222 12Jun00=======================================================================
223 1. Added RCMD for clx
224 2. Added WCY processing
225 3. Added new node types (clx, spider, dxnet, arcluster)
226 4. Store echo settings
227 5. Store pagelth settings
228 6. sort out source of DXVars for callbot.pl
229 7. added sh/isolate
230 8. added sh/lockout 
231 11Jun00=======================================================================
232 1. removed extraneous DXDebug from DXUtil
233 2. added help for set/echo
234 3. Centralised all spot, wwv and ann dup handling into respective packages.
235 4. Created new AnnTalk package (for above and OOing announce and talk 
236 handling).
237 5. Fixed problem with outputting lines with | in them to console.pl.
238 10Jun00=======================================================================
239 1. got rid of some more nasty bugs in sh/qra.
240 2. fixed 9A3xx to always be Croatia (and not Haiti!).
241 09Jun00=======================================================================
242 1. change some print commands in DXMsg to dbg('err'...
243 2. overloaded confess, croak et al into DXDebug and removed Carp from 
244 everywhere and checked that the necessary debugging really does go into
245 the debug files now.
246 3. changed print statements in cluster.pl to dbg('err',... so they go into
247 the debug files as well.
248 4. Altered the logic around duplicate spots, reduced the length of comment
249 checked to 20 characters (this should solve some problems including those
250 people sucking ar-cluster spots with prefixes in the extreme rh end). 
251 08Jun00=======================================================================
252 1. fixed problem with binary characters from cluster->client
253 2. added set/echo and unset/echo commands
254 3. echo login characters on login: prompt for C client
255 4. Send \r\n on telnet connections for C Client
256 5. Make echoing the default option (for M$ telnet clients :-()
257 11May00=======================================================================
258 1. fixed looping in Msg.pm (at last)
259 10May00=======================================================================
260 1. wrote a cross between 'tail -f' and grepdbg so that you can watch the
261 debug files for particular strings and only have them print out. 
262 05May00=======================================================================
263 1. rewrote parts of Msg.pm and client.c so that the messages no longer use
264 a length word at the front of each one. They are simply strings of characters
265 separated by a \n. No binary characters are allowed (they are encoded as %nn)
266 a la HTTP. This hopefully cures Arnold's problem and also make it more
267 secure anyway. It also paves the way for the ax25/ip multicast client.
268 30Apr00=======================================================================
269 1. put some extra checks and balances in to message send routine in Msg.pm to
270 see if I can prevent the error seen by Arnold (which I think is only likely to
271 appear in heavily loaded sites).
272 25Apr00=======================================================================
273 1. Changed reply so that you can reply to more than one address privately
274 31Mar00=======================================================================
275 1. fixed nnn-mmm in kill (erase/delete) msgs so that mmm is also deleted and
276 not just nnn -> mmm-1.
277 2. Added an autosplit to message importing so that messages are split
278 automagically into bits if the filename used in the import directory starts
279 with "split". This will add a [1/5] type string on the the end of the subject. 
280 3. dedupe more aggressively on the text of Spots so that only the 1st 27 chars
281 of text are considered (as opposed to the whole lot).
282 30Mar00=======================================================================
283 1. altered client.pl connect code so that it doesn't falsely recognise 
284 /spider/src/client as a 'client' instruction.
285 28Mar00=======================================================================
286 1. Added buffering to client 
287 2. Fixed LOGIN so that you can login with an arbitrary callsign
288 27Mar00=======================================================================
289 1. updated wpxloc.raw and rsgb.cty for 4W and TX0.
290 2. display 'start time' rather than 'last start time in' in who.
291 3. Allow local users to see their own sh/talk or sh/log stuff.
292 4. A more robust version of the C client.
293 5. Added a message exporting command 'export'.
294 6. allow swopping on all messages, including imported and manually sent ones
295 7. S A < B @ C $BID now works from the command line and thus bbses ought to
296 be able to send messages into the cluster. Bids are (currently) ignored.
297 26Mar00=======================================================================
298 1. first cut of C client
299 18Mar00=======================================================================
300 1. fixed convkeps.pl so that it accepts more formats for floating point.
301 08Mar00=======================================================================
302 1. tidied up Sun.pm and sh/sat
303 2. fixed sh/qra so that the correct lat/long is displayed if only one locator
304 is given.
305 10Jan00=======================================================================
306 1. added Steve Franke's new Sun.pm and show/satellite command
307 08Jan00=======================================================================
308 1. really removed the restriction on 0 length messages.
309 2. added a periodic msg file import system a la FBB. Stick one or more files
310 into /spider/msg/import with a suitable SEND line, subject and the text and 
311 it will import it. The importer will accept some BBS syntax (eg < GB7TLH) to
312 allow you to customise the 'from' callsign.
313 03Jan00=======================================================================
314 1. changed the copyright statement in sh/version!
315 2. added sh/date with special "be compatible with ak1a" syntax for the output
316 of sh/date with no arguments, otherwise the same as sh/time. A special favour
317 to G4PDQ...
318 3. and another one, added show/node especially for G4PDQ.
319 01Jan00=======================================================================
320 1. Fixed Julian routines to get rid of the millenium bug! (do as I say, not
321 as I do!).
322 2. updated gdx.pl so that external programs can do a sh/dx just as a normal
323 user can. On reflection this could be used as a model for all sorts of 
324 "external" interface routines.
325 3. renamed gdx.pl as showdx.
326 11Dec99=======================================================================
327 1. added missing pc48 so that it calls the DXDb::process routine 
328 10Dec99=======================================================================
329 1. allow msgs to marked as read or unread
330 02Dec99=======================================================================
331 1. DX command doesn't recognise '6M' as '6m' in SH/DX ON 6M.
332 2. set/node now sets the homenode as the callsign.
333 3. changed the label for the 18Mhz band from '18m' to '17m' in the bands 
334 table. 
335 01Dec99=======================================================================
336 1. started the callbot which lives at n2tly.dxcluster.net 9000.
337 2. added www.qrz.com
338 3. added www.buck.com
339 4. added k4ute at no4j.com
340 28Nov99=======================================================================
341 1. fixed all the stupid errors introduced in 1.36 confusing DXUser->get with
342 DXCluster->get_exact.
343 24Nov99=======================================================================
344 1. extended badmsg.pl stuff so that it works like the forward file and allows
345 one to reject on to, from, origin and subject fields.
346 2. added a swop.pl again in a forward.pl like format that allows simple swop
347 for a field or test on a field and set another.
348 3. Fixed the problem that read private mail follows you around as well as
349 unread private mail does.
350 4. Change the logic of connections so that the node will accept callsigns with
351 SSIDs to -8 as different entities from each other. SSIDs > 8 are subtracted 
352 from 15 and are assumed to be coming in via netrom diddled connections. This
353 affects lots of the commands as well. I may not have got them all.
354 5. Hangup clients on HUP signals. I originally ignored them, for reasons that
355 are now lost in the mists of time. HUP signals now cause clients to die 
356 (cleanly) and disconnect everything correctly.
357 6. Added show/time command
358 21Nov99=======================================================================
359 1. lose extraneous rubbish after the callsign as sent by BBSes.
360 2. Change end label on sh/moon to RGain dB rather than Loss dB.
361 3. Remove spurious call to DXCluster->get_exact in pc50.
362 4. Allow rcmd to locally connected nodes that are not (for some reason) in the
363 nodes table.
364 5. Try and send a PC39 in more cases to a cluster that I want to disconnect
365 from in the hope that it notices and disconnects its end.
366 20Nov99=======================================================================
367 1. Added set/unset logininfo which will tell anybody that has this set when
368 someone has either logged in or out of this node.
369 2. Added set/pinginterval command which alters the length of time between
370 pings sent to nodes, the value is minutes < 120 and seconds above that, 0
371 means disable pinging (not recommended).
372 3. If someone does a sysop whilst connected via ax25, don't show privilege
373 level or passwd in stat/user.
374 4. Fixed the problem with the dx command where if the callsign ended in a ?
375 then the call and the freq would be replicated in the remarks.
376 5. Set/unset ann, dx, talk, beep, wx, wwv all are now permanent (ie stored in
377 the user file)
378 19Nov99=======================================================================
379 1. Added new version of sh/sun and also sh/moon from Steve K9AN
380 2. Added rtt to who.
381 3. added Aliase for show/tnc_sta to who.
382 4. added Alias for show/uptime to sh/cl 
383 18Nov99=======================================================================
384 1. Added ping obs counter together with Time::HiRes timers. This will dis-
385 connect nodes that fail to respond to 3 ping requests (on the 4th attempt). 
386 The default time is a ping every 3 mins, therefore a link will be struck out
387 after 12 minutes of nil response.
388 2. Maintain a table of outstanding connects to other nodes and prevent over-
389 laps (special favour to G0RDI).
390 17Nov99=======================================================================
391 1. Started using Data::Dumper for things again
392 2. 'Fixed' DXUser file corruption?
393 3. Allow multiline (ie lines with \n in them) output in $DXChannel::send 
394 4. Added Andrew K9CW's updated wpxloc.raw, regenerated prefix_data.pl
395 5. Put in callsign matching and stuff into sh/sun.
396 14Nov99=======================================================================
397 1. added BBS.pm to start BBS input of mail
398 2. fixed eval in DXUser to log errors rather than banging out
399 12Nov99=======================================================================
400 1. added sh/sun command kindly supplied by Steve K9AN.
401 2. allow ^Z on its own on a line to terminate a message
402 08Nov99=======================================================================
403 1. added spoofing (mk1 version) for sysops, useful for those little jobs like
404 reseting a user's qra locator and such like "spoof g7brn set/qra jo02lq".
405 2. fixed set/location so it stores the qra locator in the qra locator slot, 
406 NOT the lat/long (who wrote this stuff...?).
407 07Nov99=======================================================================
408 1. reduced the amount of stuff compared against for dup announces.
409 2. Check the regex for DK0WCY announces produces results before storing it as
410 a WWV.
411 3. Added some logging for set/priv (un)set/lockout.
412 4. Added test long path calc to sh/muf
413 5. Only wonder down the msg queue every minute
414 6. Put in the initial DB code (at last), you can create and remove local and
415 standard remote dbs, you can import AK1A style .FUL ascii databases, you can
416 enquire on a local or remote database.
417 7. A return ping to a node will clear down all outstanding pings to
418 that node (which might cause some confusion if more then one ping is
419 outstanding for a node, but then - shit happens).
420 04Nov99=======================================================================
421 1. Removed ~ from the end of the PC18.
422 2. Removed a hangover from duff character checking in cluster.pl
423 3. Stop PC frames that are to be routed, being routed back to themselves.
424 03Nov99=======================================================================
425 1. Simplified command caching so it uses anonymous subroutines, you should
426 also get error messages back on the console now when developing.
427 2. Allow locally connected AK1A clusters that for some obscure reason don't
428 issue PC19s to still appear as connected and allow them to acquire users.
429 31Oct99=======================================================================
430 1. updated Minimuf.pm and show/muf.pl to the fixed versions sent to me by
431 Steve Franke K9AN. 
432 2. Made set/badnodes work, added show/badnodes. This is an interim fix until
433 input spot filtering works.
434 24Oct99=======================================================================
435 1. fixed announces so that nodes only get one of them (not two).
436 2. Altered the select timeouts to prevent apparent excessive CPU usage on
437 multiprocessor machines (or at least that is what seems to be the trouble
438 here). 
439 22Oct99=======================================================================
440 1. allow filter CALLSIGNS to be in upper or lower case.
441 2. create the concept of input and output filters, input filters are of the 
442 form "in_$call.pl" eg: "in_g1tlh.pl" (or "in_G1TLH.pl"), output filters are 
443 "g1tlh.pl" (or "G1TLH.pl").
444 3. all users can now filter on spots, ann and wwv (assuming the sysop has set
445 the filters up - still no user creatable filters. Nodes can filter on both
446 input for announces and output for all of these. I would recommend setting 
447 up a few filters that are likely to be wanted and then symlinking callsigns
448 to them as you get requests.
449 4. added callsign and length of history/position of screen stats to console.
450 If you want to change the colour of the callsign you will need to copy the
451 Console.pm to your /spider/local directory and change the $mycallcolor equate.
452 21Oct99=======================================================================
453 1. fixed reply so that reply b or reply nop generate a bulletin with the 
454 correct address.
455 2. implemented sh/muf command.
456 3. reduced privilege of catchup and uncatchup to 5. This so that, suitably
457 privileged, nodes that occasionally link can rcmd a "catchup <nodecall> all"
458 to the node they are connecting to and thus prevent a large tranche of, 
459 potentially duplicate, mail. This isn't an issue for DXSpider, but may be
460 an issue for any AK1A clusters you are connected to.
461 20Oct99=======================================================================
462 1. Translated all the subroutines of minimuf into perl as Minimuf.pm
463 2. Limited the length of an ANN that is saved for de-duping to $pc12_dup_lth
464 (def 72)
465 3. help command should now return stuff that you expect.
466 4. reduced necessary privilege to use 'MSG' command to 6.
467 5. Correct the count of spots and wwv for a merge.
468 6. Allow decodes of DK0WCY-3 WWV data beacon announces
469 7. rewrote send so that an SB doesn't send a buckshee bull to NOPRIVATE!
470 8. Changed default colouration on console so that all spots >= 50Mhz are red
471 9. Fixed init command so that PC21s are sent down non-initted channels
472 10. Allow forwarding of unknown private mail. This means that you can set up
473 forwarding of 'foreign' mail across to and by gateways using the same 
474 mechanism as bulletins (/spider/msg/forward.pl).
475 11. Allow line wrapping on the console (G0RDI, G0VGS et al).
476 18Oct99=======================================================================
477 1. changed help command so that it works correctly with multiple title lines.
478 2. added to address to the list of things a message checks to see whether it
479 is a duplicate (how on earth did it take _this_ long to find this one?).
480 3. Changes S CC so that the callsign it says it has sent to is the real one
481 (request from G8TIC)
482 21Sep99=======================================================================
483 1. allow zero messages to be stored (request from G4PDQ)
484 2. make DX more flexible and change spotter syntax to be consistant with
485 sh/dx (request from K9AN)
486 30Aug99=======================================================================
487 1. remove -@ as well as \d from SSIDs for spots
488 2. remove WEB and/or NET from the front or rear of callsigns in Prefix.pm
489 29Aug99=======================================================================
490 1. Added msg command to allow the changing of To, From, Subject and so on the
491 messages. This seems particularly important just now as a whole raft of G3's
492 seem to be putting out non private bulls to callsigns.
493 2. While I am at set messages to TO fields that appear to be users to private
494 if they have been sent as bulls.
495 3. Add DISTROs, if a callsign field appears in /spider/msg/distro in upper
496 use that as a list of callsigns to send further. Note this is potentially
497 recursive as callsigns in a distro can be distros.
498 25Aug99=======================================================================
499 1. check the date of a WWV much more carefully.
500 24Aug99=======================================================================
501 1. Prevented spots with lowercase callsigns being forwarded. This opens a
502 much bigger can of worms which I shall have to address later.
503 17Aug99=======================================================================
504 1. all protocol except PC29 containing %XX characters will be dumped.
505 2. Changed console.pl so that if you start typing it moves the top window
506 back to the bottom.
507 19Jul99=======================================================================
508 1. Added iota and qra clauses to sh/dx as well, these take optional arguments
509 and will look for the appropriate strings.
510 17Jul99=======================================================================
511 1. Started database integration.
512 2. added qsl clause to sh/dx that searches for qsl or via in the dx info
513 16Jul99=======================================================================
514 1. drop frames with 'illegal' characters in them (but pass frames with 
515 embedded %XX characters).
516 15Jul99=======================================================================
517 1. Changed grepdbg to accept a regexp. More useful (to me anyway).
518 2. Altered init command so that it doesn't send PC21s down the initted 
519 channel.
520 10Jul99=======================================================================
521 1. added an explicit disconnect from my side for already connected calls. This
522 appears to have fixed a problem where if two consoles connect at the same time
523 with the same (sysop?) callsign the cluster would stop.
524 2. added some debugging in the Message handler to allow more state to be seen.
525 3. Message handler now seems to work better for longer and doesn't spew out
526 PC42 aborts with quite such gay abandon.
527 05Jul99=======================================================================
528 1. added stat/msg and stat/cluster commands to allow me to poke about inside
529 the msg and cluster node tables.
530 04Jul99=======================================================================
531 1. removed silly 'new message has arrived' to connected nodes 
532 2. added a ! command to the console.pl program; works like the bash shell.
533 01Jul99=======================================================================
534 1. Altered priv to 5 for connect.pl to match disconnect for nodes
535 29Jun99=======================================================================
536 1. fixed merge command that I broke.
537 2. added some randomness in waittimes for aborted outgoing messages 
538 3. Message Queuing now only occurs every 5 minutes (configurable if anyone 
539 wants to write the command for doing it) and on receipt of a PC16. This is
540 a further attempt at sorting the crossing of messages!
541 4. a PC33 will cause another attempt at queuing. If you are on a roll, keep
542 going!
543 28Jun99=======================================================================
544 1. console.pl now works with history and editting.
545 2. added scrolling to stuff sent by the cluster.
546 3. added colours to things.
547 27Jun99=======================================================================
548 1. added WWV filtering
549 2. added timeouts to for forwarding Messages, also added a waiting time for
550 failed (stalled) outgoing messages.
551 3. Incoming messages will now have priority over outgoing messages to the
552 same node.
553 4. Added 'catchup' command which will 'catchup' messages to date for a node. 
554 This means that when you start forwarding to a node, it doesn't get all the
555 messages queued up that are probably old.
556 5. added 'uncatchup' which does the opposite of the above.
557 6. fixed kill full and PC49 handling so that it actually works.
558 7. Fixed local aliases so they add to the front of the standard ones. This
559 means you only need to add your specials or override the system ones you need
560 to.
561 21Jun99=======================================================================
562 1. changed regex for cluster->client msgs so that strings like |---| are no
563 longer ignored.
564 20Jun99=======================================================================
565 1. prevented a merge to myself (causes a loop)
566 18Jun99=======================================================================
567 1. fixed a problem with DXLogPrint repeating log entries.
568 2. altered the permissions on disconnnect so that priv 5 users can disconnect
569 clusters, but still require priv 8 to disconnect users.
570 3. made sure that an incoming PC18 clears out all the cluster info for
571 that channel before re-initialising.
572 4. add init command.
573 5. disconnect users before nodess on shutdown
574 15Jun99=======================================================================
575 1. added grepdbg program (so you can search your debug files and get times
576 and dates of incidents).
577 2. Moved DXVars.pm to DXVars.pm.issue to force new users to cp it to their
578 local directory.
579 3. added $allowzero to DXProt to allow thru PC19s with zero protocol versions.
580 14Jun99=======================================================================
581 1. changed IO::File in help and apropos to IO::File
582 2. added a check for isa('DXNode') for PC50s
583 08Jun99=======================================================================
584 1. Started work on the curses based operator console.
585 03Jun99=======================================================================
586 1. cluster seems to have a memory leak, put DESTROY functions in where 
587 appropriate.
588 2. try to make sure that PC21 commands are not issued inappropriately and
589 also reformat PC19 for onward broadcast so that nodes coming in on loops are
590 dropped from those broadcasts.
591 3. make sure PC16,17,19,21 doen't affect locally connected nodes.
592 4. Changed all instances of FileHandle to IO::File.
593 01Jun99=======================================================================
594 1. removed a output of an unwanted pc21 for isolated nodes
595 31May99=======================================================================
596 1. Added checking for PC16,17,19 and 21 to make sure that they come in from
597 the channels that they are supposed to.
598 2. Pass the RCMDing node's priv level to the command (rather than the 
599 connecting node's privilege level).
600 3. Pass thru merge requests for other nodes.
601 4. Removed a warning from client.pl
602 5. routed external DB commands and drop them (for now) locally
603 6. routed external mail commands (ie those addressed elsewhere)
604 7. routed external PC26/27 lines 
605 25May99=======================================================================
606 1. try to make the lastin value correct even for local users
607 2. got rid of the stupid bug that failed to print out the offline message
608 but put a "*main::STDOUTmain" for every line of that message instead.
609 3. Ported to 5.00503 (well actually just installed it and it just runs). 
610 4. Added who command
611 23May99=======================================================================
612 1. Got rid of some of the useless error messages on global destruction when
613 quiting a program.
614 2. Stuck -w back on client.pl
615 23May99=======================================================================
616 1. tried to change connection to raw mode for cluster connections
617 2. sh/c and sh/u are now sorted in alphabetical order
618 3. Limited the number of queued dx spots when composing messages to 20 (the 
619 oldest one is lost for every one added above 20).
620 4. Added generalised shell globbing everywhere I think it is useful, including
621 sh/dx, dir, sh/files etc
622 5. Made dir more compatible with ak1a and added 'to' and 'from' call searching
623 it should now do everything that ak1a does except counts.
624 6. added similar functionality to kill command so that you can kill ranges, to
625 and from callsigns etc.
626 22May99=======================================================================
627 1. added check for -1 from Date::Parse and return undef for out of range dates
628 2. added show/files and type commands
629 21May99=======================================================================
630 1. made set/nodx work again.
631 2. made dx stuff queue nicely again when sending messages.
632 18May99=======================================================================
633 1. Added announce dup checking.
634 2. Added system announce filtering.
635 08May99=======================================================================
636 1. Added a bit more checking to the rcmd thing to make more sure that this
637 rcmd isn't coming from an imposter. Not possible to prevent everything 
638 ofcourse, just make it a bit harder.
639 2. altered set/lockout and set/privilege so that they can't executed remotely.
640 3. Added some code to reject rubbish (with invalid binary characters) protocol
641 or user lines as input.
642 4. prevented PC command being executed remotely :-)
643 05May99=======================================================================
644 1. change the connection overlap from an abort to a disconnect.
645 02May99=======================================================================
646 1. Added the mechanism for doing user spot filtering for spots in the cluster 
647 (no user control just yet - but sysops can do it).
648 2. Fixed problem with nodes sending out the node lists of isolated nodes.
649 30Apr99=======================================================================
650 1. Try to make it even more AK1A friendly by putting the node list out in the
651 'correct' order.
652 2. added code so that local users and commands go to all connected nodes 
653 INCLUDING the isolated ones.
654 26Apr99=======================================================================
655 1. added set/user command as a hack, please use this with care, there is
656 very little checking.
657 2. added export_opernam.pl which is a basic reader of AK1A opernam.dat files
658 to stdout
659 25Apr99=======================================================================
660 1. Fixed problem with filtered spots not coming out.
661 2. Added the possibility of filtering on channel callsign
662 20Apr99=======================================================================
663 1. altered order of undefing and closing of user file in an attempt to make 
664 corruptions/missing users less likely.
665 2. made messages that are addressed to the node call appear to the alias call
666 3. check dates much more rigourously.
667 4. ignore SIGTERM and SIGINT during shutdown of the cluster
668 15Mar99=======================================================================
669 1. added $actiondata to filter line to allow per action data such as no of hops
670 2. fixed a silly problem in talk for non-existant callsigns
671 3. Added sysop command
672 02Mar99========================================================================
673 1. Changed DXUser so that it uses a homemade import/export hash routine 
674 2. DXUser now uses a DB_BTREE file
675 3. Added export_users.pl, import_users.pl and convert_users.pl
676 25Feb99========================================================================
677 1. added NL language stuff.
678 2. added set/language
679 21Feb99========================================================================
680 1. Allowed multiple 'on <freq>' for show/dx
681 2. Made sure the 'on 20m/ssb' thing worked (also 'on hf/cw').
682 3. first cut of the Filtering code, no user commands yet but the file
683 format is defined and manually added filters should work for spots
684 17Feb99========================================================================
685 1. added export_user.pl to export user files (for interest and safety)
686 2. changed DXUser::init to allow O_RDONLY access which may limit the number
687 of coredumps G0RDI seems to get.
688 15Feb99========================================================================
689 1. Added msg forwarding code which uses $main::root/msg/forward.pl.
690 14Feb99========================================================================
691 1. Changed A & K in WWV to be the other way around (I am told by G3IOR that
692 this will mean that we won't have pole to pole aurora nor all the power lines
693 overloading everywhere as well as a result of having values of K > 10).
694 2. allow the '~' character in message bodies.
695 3. Moved $main::data/badmsg.pl to $main::root/msg/badmsg.pl.
696 11Feb99========================================================================
697 1. Fixed a problem with isolated nodes' configurations being sent on sending 
698 local configs to new connections.
699 08Feb99========================================================================
700 1. added a $SIG{ALRM} in the client to actually catch the alarm when it goes 
701 off which means that the netrom/ax25 call programs terminate properly (and not
702 loop as fast as their little legs can paddle, soaking up CPU time).
703 2. Implemented read receipts as an especial request from G4PDQ.
704 3. Fiddled with DXUser a bit to see whether I can stop it core dumping on new
705 users in PC16s on G0RDI's machine.
706 4. Added E4 (Palestine) to Prefix data.
707 30Jan99========================================================================
708 1. Some of the dates we get can cause crashes, tried to make it more robust (oh
709 and Y2K compliant)
710 2. PC16 seem to come in with missing callsigns from somewhere
711 3. added $main::data/baddx.pl which prevents callsigns that are in the list being
712 a) forwarded b) stored and c) (except for the originator, if local) being
713 displayed locally.
714 4. added $main::data/badmsg.pl which deletes any messages whose TO address is
715 in this list (this is largely for european sensibilities). 
716 18Jan99========================================================================
717 1. added present(),presentish() and disconnect() to DXCron so that you can see 
718 (easily) if a station is on the cluster anywhere and also disconnect them
719 locally. 
720 2. added rcmd() to DXCron so you can send an rcmd to someone else from crontab.
721 3. <embarrassment>Fixed create_sysop.pl so that longitude is spelt correctly
722 there as well</embarrassment> made the update work properly. NOTE create_sysop
723 will only do what you expect if all cluster.pl and client.pl programs are 
724 stopped.
725 4. DXCron wasn't reading in reliably on startup, this is now (hopefully) fixed.
726 the -M semantics are rather strange!
727 5. The -w switch is now standard on cluster.pl
728 6. Added last_connect() which gives the last connect time of a user (or now
729 if connected).
730 7. Added present_on(call, node) and presentish_on(ditto) which returns true if 
731 the call is connected to the node.
732 8. incoming messages for users will now send a 'new message' message (instead
733 of merely generating the message)[who wrote this rubbish?].
734 9. Hooked $SIG{__WARN__} and $SIG{__DIE__} so we store these nasty error 
735 messages.
736 10. Print the no of users on restricted protocol links if we have had PC50
737 11. Had a go at making the sh/cl stats more accurate.
738 12. PC11 was trying to call Local::spot1 instead of Local::spot, no warning 
739 previously.
740 13. Added a simple lockfile to prevent more than one cluster running at a time
741 17Jan99========================================================================
742 1. fixed some permission problems on DXLog.
743 2. There is a circumstance in DXMsg which caused the cluster to stop on an 
744 null ref pointer which I can't get to the bottom of but have bandaided out 
745 for now.
746 3. Started filter and Database code.
747 4. Upper cased all the TO callsigns for sending to more than one station in
748 messages.
749 07Jan99========================================================================
750 1. Fixed Geomag after emacs reformatted it wrong so sh/wwv works again.
751 2. Added more range checking in WWV spots (they really are a heap of ...)
752 3. Changed create_sysop.pl so that you can update as well as create the user 
753 file
754 4. Remove spotter's SSID from WWV spots
755 06Jan99========================================================================
756 1. Do some range checking for spots and WWV in the future (got a WWV for Oct 
757 2034 whhich caused a bit of confusion!)
758 2. Make WWV spots broadcast them to the users! (as opposed to merely storing 
759 them)(thank you G0RDI).
760 3. Allow users to do show/announce (thank you JE1SGH).
761 4. Delay broadcasts to users if they are not in a 'prompt' state (means you can
762 add messages and see what you are doing on a busy system)
763 5. Made set/unset dx,ann,wx,talk,wwv do what is expected
764 6. added set/sys_location and set/set_qra to set the cluster lat/long and qra
765 7. New messages will now be announced on logon (if there are any)
766 03Jan99========================================================================
767 1. Upped the version no !!!!
768 2. made the DXProtocol routines much less sensitive to '~' characters (JE1SGH)
769 3. added '^' -> ':' conversions on ann, talk and dx commands
770 4. You can now send messages containing blank lines.
771 5. Fixed merge command problem reported by G0RDI
772 28Dec98========================================================================
773 1. Crossed fingers, got rid of the instabilities caused by execing programs
774 at vast speed (reduced it significantly anyway).
775 2. Personals will now move if homenode is known.
776 3. Added Local.pm for doing local specials
777 27Dec98========================================================================
778 1. Various detail changes to remove some more warning with -w on
779 2. Added DXCron handling - you can do crontabs now.
780 3. Added show/program command so you can see where it is loading your .pm files
781 from.
782 4. Added pc26/27 replies to locally connected cluster's merge (pc25) requests
783 5. Added spotters DXCC and original cluster to Spot data files.
784 23Dec98========================================================================
785 1. Reindented various things
786 2. Added missing $main::mycall on the end of outgoing PC11s (!)
787 3. Check that PC16/17 node calls really are nodes (AFAIAC).
788 22Dec98========================================================================
789 1. Added brackets round callsign if not here for prompt
790 2. Added Iain's set/password routine
791 3. Fixed sh/dx problems (the xemacs indent region messed Spot.pm up!)
792 4. Issued 1.15
793 21Dec98============= late! ====================================================
794 1. fixed problem with missing DXDebug in DXProt.
795 2. Fixed DXDebug so that it actually works as advertised with and without 
796 trailing \n. 
797 3. Added deduping of WWV spots as well (at for date,time,sfi,k and i) dups
798 4. Replaced the 0 in "02-Dec-1998" with ' ' so it reads " 2-Dec-1998", it seems
799 hard to credit it but some 'programs' out there that connect to clusters have
800 problems with the leading '0'!
801 5. In the same vain, included a strictly AK1A compatible sh/heading, apparently
802 this is necessary for the same reason as 4.
803 6. Started contrib tree stored the old show/heading in contrib/g0rdi/show.
804 7. Because I now correctly dedupe spots and wwv (there's a hostage to fortune..)
805 I have added a merge command. 
806 21Dec98========================================================================
807 1. Added "issue" to the client program for 'login' connections
808 2. Added more docs for client program.
809 3. Fixed problem introduced in 1.12 where a connect locally with a callsign of
810 someone connected remotely would stop the cluster.
811 4. issue release 1.13
812 20Dec98========================================================================
813 1. Removed all the warnings I get with perl -w (at least for just starting the
814 cluster and running a few commands).
815 2. Added per node hop control.
816 3. Added some docs on how to use it and isolation
817 4. Made talk command more intelligent in that if the user isn't seen and the
818 user's last node is visible it tries the talk anyway.
819 19Dec98========================================================================
820 1. Fixed problems with sh/rcmd (talk/ann/log) with a callsign as argument and
821 also made what G0RDI wanted work as well!
822 2. Added isolate flag to allow isolation of different networks at a gateway.
823 3. Changed make Makefile.PL to perl Makefile.PL in instructions
824 4. Copied latest instructions to html directory
825 5. Had another attempt at making clients disconnect without hanging everytime.
826 6. Changed msg queuing semantics so that the system routes on exact callsign.
827 7. Changed the protocol version so that it increments with the DXSpider version.
828 14Dec98========================================================================
829 1. Made the telnet thing work a bit better. It still will not work reliably to
830 a real telnetd on port 23.
831 2. Allowed network logins on client by specifying login instead of call.
832 3. made msg handling more robust (PC30 with unknown streams cause PC42), queueing
833 is only done on channels that are in state 'normal'.
834 4. Added pc command which takes a callsign and some text and sends it without
835 mods to the callsign, useful for sending manual PC protocol to unstick things.
836 Also for sending anonymous messages to online users.
837 5. Stopped duplicate messages being stored (it receives them and then bins them)
838 6. Implemented PC49 delete/full from outside (kill full on the inside)
839 7. Implemented the client command in connect scripts so that you can have 
840 different scripts for the same callsign.
841 8. Added sh/wwv command
842 13Dec98========================================================================
843 1. Fixed VS6 lat/long in prefix_data and wpxloc.raw
844 2. Sorted out last in times for remote users
845 3. editted and substitued G0RDI's version of the install instructions over
846 mine in spider/html
847 4. fixed telnet connections
848 5. added connect instructions to html tree.
849 6. Added some more help
850 7. Upissued version
851 12Dec98========================================================================
852 1. Incorporated sh/st, (un)set/lockout, forward/opername from Iain G0RDI
853 2. Added group handling with (un)set/group, show/group. This allows arbitrary
854 groups to be formed (for ann/<group> for example) and is also used to 'filter' 
855 spots, announces, wwvs etc into groups of cluster nodes (useful for creating 
856 disjoint cluster networks)
857 3. **** CHANGE mylongtitude to mylongitude in DXVars.pm ****
858 4. Altered QRA locator routines so they work correctly!
859 5. Fixed all commands that had the wrong mylat(itude) and mylong(itude) names
860 in.
861 07Dec98========================================================================
862 1. Added set/name, set/qra, set/location, set/qth, set/homenode, set/bbs, 
863 set/email
864 2. changed the Msg socket close to a shutdown (hopefully more reliable), this 
865 should stop clients hanging on exit.
866 3. Added Alias support for help
867 4. Added lltos and stoll routines to DXBearing
868 5. Added auto prompting for name, qth, location and homenode if any of these
869 aren't known.
870 06Dec98========================================================================
871 1. Fixed DXBearing::is_qra so that it correctly detects full QRA locators
872 2. Added sh/qra for doing locator distances and bearings
873 3. Added some stuff to Notes.txt on hints for command writers
874 4. Changed help system to use just one file per language
875 5. Started adding more help
876 6. Fixed 24Mhz band limits
877 7. Added apropos command and lots of new help text
878 05Dec98========================================================================
879 1. Added sh/heading and QRA locator calculation stuff
880 04Dec98========================================================================
881 1. Started Changes file
882 2. Added load/cmd_cache.pl to clear cmd cache shortcuts (use this if cluster.pl
883 get confused about where it is getting its commands from eg if you have
884 removed a file from local_cmd 'cos you want to go back to standard one)
885 3. Fixed bull handling at least to the extent that it stores them and
886 doesn't mess up the normal directory handling.
887 4. Fixed the unset/debug command so that it actually does the job!
888 5. Removed the middle line 'written in perl for unix' from show/version.pl