insert some comments about console.pl
[spider.git] / Changes
1 19Sep01=======================================================================
2 1. put in some rudimentory rsfp checking for various things
3 2. tried to do some fixes on console.pl - YOU WILL REQUIRE Curses 1.06 from
4 CPAN (perl -MCPAN -eshell, then at cpan> install Curses). 
5 17Sep01=======================================================================
6 1. Fixed help and apropos commands so that they default to english if
7 the language is not english and help in the 'not english' language isn't
8 available.
9 2. added some help text for sh/newc.
10 15Sep01=======================================================================
11 1. released 1.48
12 2. found 1st bug, fixed unset/logininfo reseting itself after logout 
13 14Sep01=======================================================================
14 1. added the start of script files on login/startup. You can now add 
15 commands (for example to set variables) to a file called 
16 /spider/scripts/startup. You can also put in scripts for a callsign which
17 will be executed when that callsign logs on. A sample script is in the
18 directory (you did remember to do cvs update -d?). User settable versions
19 of this will happen when the general mechanism for doing that is available.
20 2. Added set/unset/anntalk commands. If you unset/anntalk then you will
21 no longer see many of the of talk like announces. Unfortunately you may
22 miss the odd useful one as well (but since everything is repeated many times
23 you probably won't :-)
24 3. centralise the invalid callsign check so that g1tlh1 and similar calls
25 will not be allowed to login anymore.
26 4. Fiddle with the lockout mechanism so that set/login g1tlh also locks out
27 g1tlh-1 -> g1tlh-15 UNLESS one of these is specifically unlocked.
28 5. Make sh/log only show stuff that sh/ann, sh/talk, sh/rcmd doesn't.
29 6. Make the scripts look for user and node_default files if there isn't a 
30 more specific one.
31 7. add the blank command which prints nn blank lines (default 1), this cmd
32 can also print lines of characters: see help for examples.
33 13Sep01=======================================================================
34 1. did some work on making talk more intelligent and fixed a>b problem.
35 2. fixed a nasty problem on input when being hit with full buffers of 
36 data (eg at init time with large lists of node/users on fast links).
37 3. fixed realtime input filter changing.
38 4. added announce->talk conversion for routable calls when announces of the
39 form 'to g1tlh hello', 't g1tlh hello'  or 'g1tlh hello' appear. 
40 This also suppresses similar announces for users whose callsign is not the 
41 one in the announce.
42 5. Change the badwords interface to be the same as baddx, badspotter et al.
43 added set/badword, unset/badword and show/badword. This routine will auto
44 convert (and delete afterwards) the old badwords file. 
45 6. fix intermittant bullitin mail forwarding?
46 11Sep01=======================================================================
47 1. added IP address logging of connections
48 10Sep01=======================================================================
49 1. clear/* node_default and user_default now work.
50 2. in acc or rej/* you can now use (comma separated) prefixes as well as lists
51 of numbers for things like *_dxcc, *_itu and *_cq (eg: by_dxcc ve,w); just
52 remember that countries like ve and w have lots of zones and itus!
53 3. Added all the clear/* commands to help and added some comments about 2.
54 4. All filters (including *_default ones) are now reinstalled on channels in
55 realtime, so changing a filter does NOT require a disconnect and reconnect
56 cycle anymore. 
57 09Sep01=======================================================================
58 1. Add show/dxstats command
59 2. Add show/hfstats command
60 3. Add show/vhfstats command
61 4. Add show/hftable command
62 5. Add show/vhftable command (BE WARNED, the first time you run one of these
63 commands it will take some considerable time to complete, thereafter it will
64 be a lot faster).
65 08Sep01=======================================================================
66 1. Update the sgml docs on filtering a bit.
67 06Sep01=======================================================================
68 1. prevent nodes appearing as users from incoming PC16s
69 2. Change ping averaging to be like TCP and become a smoothed RTT.
70 3. Make all the Prompts in stat/* like output appear in alphebetical order
71 4. Fix problem with 17m spots not appearing in sh/dx
72 5. pump up eph dups everytime they re-occur and increase life to 180 secs
73 04Sep01=======================================================================
74 1. add delete/user command
75 03Sep01=======================================================================
76 1. make spot dups look back 5 mins.
77 2. strip the top off each character in any text field of a Spot for duping.
78 3. Try to make the routing tables more accurate for users that login to
79 more than one node.
80 4. Make PC50s come out in one heap on all channels every 14 mins, instead of
81 on the 14th minute in the connection time for each channel. This should 
82 reduce (slightly) the dups that are dumped.
83 5. Speed up input queue processing (a lot).
84 6. make set/isolate and acc/route mutually exclusive (and issue appropriate
85 error messages) and fix set/iso on PC18 input.
86 7. Improve stat/route_node and stat/route_user for diagnostics.
87 8. strip top bit of comments in ann/spots.
88 9. fix the announce filtering problem.
89 10. Fix the double announcement of node disconnections?
90 01Sep01=======================================================================
91 1. Change build number calc (hopefully for the last time)
92 27Aug01=======================================================================
93 1. make rej/wwv and rej/wcy work
94 26Aug01=======================================================================
95 1. make all newly learned nodes locked out by default.
96 2. add lock_nodes.pl which locks out all the nodes in the user file whose
97 privilege is 1 or less and which isn't mentioned as an argument to the 
98 command on the command line.
99 3. make set/node, set/spider and their friends unlock a node as well as make
100 them one. 
101 4. Make sh/log et al more efficient / less memory hungry (and the display
102 the correct way round!)
103 24Aug01=======================================================================
104 1. Allow badmsg to reject on interface callsign ('I')
105 20Aug01=======================================================================
106 1. protect against PC41s with field[3] == field[2]
107 2. Redo Julian stuff as proper objects
108 3. Make the various Log display come out forwards instead of backwards
109 4. Add the dbgclean routine to system cron to clear out all debug files 
110 more then 10 days old.
111 19Aug01=======================================================================
112 1. Fix rcmds
113 2. make isolation when there are no filters present work again?
114 3. dup check PC16/17/19/21 !
115 17Aug01=======================================================================
116 1. Sort out PC41 handling to include type 5 records for QRA locators and also
117 remove all filtering (but retain ephemeral dup checking).
118 2. Improve format checking in latlong and qra locators.
119 3. Sort sh/st so that sh/st by itself displays only the local call not the
120 whole lot (all 17000+ users records in my case). SH/ST ALL does this.
121 16Aug01=======================================================================
122 1. send a forward/opernam for a logged in user once a month (when they next
123 login).
124 2. rearrange rcmd stuff to be more maintainable and also be certain that 
125 they are translated in both directions correctly for clx and ak1a style.
126 3. Allow PC41s to be propagated and hope that the ephemeral dup filters 
127 do their job!
128 15Aug01=======================================================================
129 1. fix problem with talks not coming out anymore
130 13Aug01=======================================================================
131 1. fixed problem of dxspots not being echoed back to spotter (announces too)
132 02Aug01=======================================================================
133 1. correct manual and help references on accept/route and reject/route. Thanks
134 to ea1dav for pointing out the errors
135 2. make sure that the actual line is printed in grepdbg & watchdbg esp. with
136 ALL the '^' and leading space characters as they really are
137 30Jul01=======================================================================
138 1. changes to manuals to add links etc. (g0vgs)
139 23Jul01=======================================================================
140 1. made ann,dx spots,wwv,wcy,wx more 'object oriented'.
141 2. allow for 'enhanced clients' and tell them what sort of thing is being 
142 sent.
143 3. Allow debug info to be sent via interface to an enhanced client.
144 21Jul01=======================================================================
145 1. started a gtkconsole program. It appears to sort of work. Requires Gtk-
146 Perl-0.7007.
147 2. start doing some spot statistical stuff. 
148 19Jul01=======================================================================
149 1. changes to Admin Manual to reflect route filtering.  Some alterations to
150 the help files (g0vgs)
151 09Jul01=======================================================================
152 1. fix cron so that it allows stuff to be executed on the hour (ie min=0)
153 06Jul01=======================================================================
154 1. fix talk and routing problems to mycall
155 2. add unset/privilege command to relinquish any sysop privileges you might 
156 have for the current session.
157 05Jul01=======================================================================
158 1. disconnect channels whose route node has disappeared
159 29Jun01=======================================================================
160 1. fix merge command
161 28Jun01=======================================================================
162 1. fix problems with users on more than one node
163 27Jun01=======================================================================
164 1. try adding an ARC mail hack
165 2. slug the not here messages so they can't loopback
166 25Jun01=======================================================================
167 1. added automatic 'not here' message
168 21Jun01=======================================================================
169 1. fix (some) problems with 'init'
170 2. fix stat/msg a bit more
171 3. small change to PC28 generation to make sure that the subject always 
172 contains at least a blank
173 16Jun01=======================================================================
174 1. fix talk
175 2. fix stat/msg 
176 14Jun01=======================================================================
177 1. changed debug api to (potentially) use less cpu time
178 2. changed the spider.cgi in Arnold's borrowed java client to Ian's perl 
179 script
180 3. Added input route filtering
181 4. put back the set/isolate logic into routing which is now overridable with
182 filters whcih means a default filter is no longer generated. If you want the
183 OLD behaviour, do rm /spider/filter/route/*.pl*, restart and try again. 
184 5. Add http_proxy to Internet.pm and allow sh/qrz to use an HTTP Proxy
185 13Jun01=======================================================================
186 1. fix init cnd rinit cmds
187 2. add missing clear/route cmd
188 10Jun01=======================================================================
189 1. fix set/here and unset/here
190 2. fix indirect routing to users two hops away
191 09Jun01=======================================================================
192 1. more fixes
193 2. add set/debug filter so that you can see why your filters aren't working
194 (for sysops only)
195 3. add ephemera deduping for all those PC41,24,50 etc etc broadcasts 
196 4. Fix a problem with the connect text being sent on outgoing connections
197 (this confuses db0fhf amongst other things)
198 5. catch deep recursion bugs before you run out of memory.
199 6. Make sure that PC16|17|19|21 update as well as add and delete
200 7. local announces by the sysop will always be displayed
201 08Jun01=======================================================================
202 1. first cut with new routing code. Created NEW_ROUTE branch
203 2. added acc/route and rej/route commands
204 3. added stat/route_node and stat/route_user commands to look at the routing
205 table entities
206 07Jun01=======================================================================
207 1. move userconfig.pl and nodeconfig.pl to stat/
208 2. fix problem with locally connected users not being removed from the 
209 routing tables
210 3. Fix the build calc to take into account subdirectories
211 06Jun01=======================================================================
212 1. add stat/route_node and stat/route_user commands
213 2. add sh/userconfig command (to show backward links to nodes)
214 3. add sh/nodeconfig command
215 05Jun01=======================================================================
216 1. add set/bbs command
217 2. more work on Routing code.
218 3. status/msg on its own will print the status of the msg system.
219 4. add sh/newconfig command
220 03Jun01=======================================================================
221 1. Fix the problem with ExtMsg and unresolvable IP addresses, hopefully
222 properly this time.
223 15May01=======================================================================
224 1. set/lockout now prevents any outgoing connection taking place.
225 2. Started the new routing stuff which will run in parallel for a while.
226 3. changed the msg timeout arrangements so that it might not get stuck so
227 easily.
228 4. add $DXMsg::bulltopriv global to make msgs to known callsigns private 
229 14May01=======================================================================
230 1. fix problem with re-reading in db definitions for remote databases.
231 2. try to prevent situations where two can (semi) successfully login, probably
232 under load, and get a 'tried to connect whilst already connected' abort.
233 3. change the max number of days to search for spots to 100
234 11May01=======================================================================
235 1. allow stat/msg on priv 1
236 07May01=======================================================================
237 1. set/page 0 switches off paging
238 03May01=======================================================================
239 1. It appears that for ages now, not enough PC19 and PC16s are being sent
240 if you have more than one of them. Sigh..
241 02May01=======================================================================
242 1. put an upper limit on the number of concurrent errors allowed in command
243 mode (20). This should disconnect runaway spot suckers....
244 28Apr01=======================================================================
245 1. fix an occasional problem with 'sorry connected to' messages
246 23Apr01=======================================================================
247 1. fix very long standing bug in storing and transmitting spots. The decimal
248 point was left off :-(
249 22Apr01=======================================================================
250 1. Sysops can now have full privileges if there is a ExtMsg listener on 
251 localhost (or everything) and they telnet to localhost and login with their
252 callsign. This means that they don't need a client anymore (for local access)
253 2. added input spot filtering. 
254 3. Added run_cmd to DXCron which allows you to run any command on the system
255 from the crontab. (Dunno why I didn't do this before). 
256 18Apr01=======================================================================
257 1. added Ian M0AZM's Java Client (SpiderConsole)
258 17Apr01=======================================================================
259 1. made a slight speedup on write in Msg.pm (about doubled it)
260 16Apr01=======================================================================
261 1. make the correct error messages come out on reject/accept when people
262 leave out keywords like 'on'.
263 2. Fairly major changes to the documentation tree.  Split the admin manual
264 into 2 sections, Installation and Admin and merge the Windows stuff.
265 15Apr01=======================================================================
266 1. made some mods to the sgml documentation for 1.47
267 2. added show/connect command
268 11Apr01=======================================================================
269 1. fixed more of the "xxx disappeared from yyy" messages
270 2. altered the build no logic so that it always checksums the same files
271 regardless of whatever else you might have in the directory.
272 3. made shortcut at shutdown so that you don't get a storm of PC21s on busy
273 nodes as each connection goes down. Just send a pc39 to each interface and
274 nothing else.
275 4. changed action of SIG{INT} and SIG{TERM} so that they now work on MSWin32
276 10Apr01=======================================================================
277 1. altered PC21 logic somewhat to eliminate dup PC21s
278 2. disconnect should remove dangling local users in the routing table.
279 3. fixed nasty recursive timer bug
280 4. added some extra info to make connect tracking a bit easier.
281 5. improved docs on connect scripts a bit (to include agw connects)
282 09Apr01=======================================================================
283 1. changed lockfile name to cluster.lck (from .lock) for MSWin's benefit
284 08Apr01=======================================================================
285 1. added a quick installation guide to the admin manual and removed references
286 to client.pl (g0vgs)
287 01Apr01=======================================================================
288 1. changed agwrestart semantics. You need to use main::agwrestart() in your
289 crontabs rather than AGWMsg::init();
290 2. try to thread winclient.pl for MSWin32.
291 31Mar01=======================================================================
292 1. added agwrestart command
293 2. add Iains Windoze installation manual (g0vgs)
294 3. various alterations to adminmanual and initial version of the CVS changes
295 file (g0vgs)
296 30Mar01=======================================================================
297 1. fix errors on accept in ExtMsg and in Msg
298 2. fix the non-blocking problems of connects (and other things in general).
299 non-blocking only works for unix implementations at the moment.
300 3. add rinit command (sends a PC20)
301 4. improve debuging so that stuff is always escaped and a new 'raw' debug 
302 mode that shows everything sent and received in glorious hex and characters
303 29Mar01=======================================================================
304 1. add better tracking of AGW circuits (possibly)
305 2. add set and unset/agwmonitor (ing) [for all the notice it seems to take]
306 28Mar01=======================================================================
307 1. AGW engine stuff now accepts incoming calls and at least attempts to do
308 outgoing ones. YMMV.
309 2. fixed 'always' telnet on a client line in a connect script
310 27Mar01=======================================================================
311 1. add first cut at an AGW Engine. Copy /spider/perl/AGWConnect.pm to 
312 /spider/local and edit it appropriately. You shouldn't need a login and passwd
313 if you are using the default setup. It may allow incoming connects (and then
314 again it may not - I don't have a reliable infrostructure to test with at the
315 moment). The AGW Engine is a M$ thingy, but that don't preclude you connecting
316 to it from a unix box. 
317 22Mar01=======================================================================
318 1. edit the helpfile for set/debug and add help for show/debug
319 2. Allow ^Z again on messages
320 3. Added back onboard support for ax25 OUTBOUND connections. You will need
321 exactly the same facilities as before (ie netrom_call, ax25_call suid root 
322 etc) but it is called direct from the cluster.pl - client.pl is DEAD!
323 19Mar01=======================================================================
324 1. Add 'not allowed' messages into sh/filter with callsign and reduce priv
325 2. decode %xx characters in winclient.pl
326 necessary to 1.
327 18Mar01=======================================================================
328 1. minor changes to user and admin manuals.  Added revsion numbers
329 17Mar01=======================================================================
330 1. put block check back in, try a work around for EWOULDBLOCK/EINPROGRESS
331 for M$. 
332 16Mar01=======================================================================
333 1. integrate build number into main cluster and change the PC18 to show 
334 version and build in the text portion
335 14Mar01=======================================================================
336 1. first cut at outgoing ax25 /external program connects
337 2. slight change of interface to connect
338 3. added a build number to sh/version
339 13Mar01=======================================================================
340 1. implemented first cut at non blocking connect
341 2. removed memory leakage in connects
342 3. add link IP address if available on who
343 4. made the \r\n work correctly on External connections
344 5. removed client.pl
345 6. fixed memory leakages in DXMsg
346 7. fixed pc39/21 handling
347 8. fixed routing table issues and general disconnection tidy up
348 10Mar01=======================================================================
349 1. minor changes to the admin manual to reflect differences in distibutions
350 thanks to pa3ezl (g0vgs)
351 2. add (finally) the first draft of the usermanual (g0vgs)
352 05Mar01=======================================================================
353 1. do some major surgery on the connect logic to shorten the possibility of 
354 duplicate connects happening
355 2. fix stupid error on sh/qrz queries that don't work
356 04Mar01=======================================================================
357 1. allow fallback to english for help
358 03Mar01=======================================================================
359 1. allow incoming and outgoing IP connects direct to cluster.pl
360 2. fixed (long standing)a hole in PC17 handling
361 3. added winclient.pl (actually just a very basic client) from Iain G0RDI
362 4. Added Spanish as a language (thanks ea1dav) (g0vgs) 
363 5. ignore BUST(ED) spots
364 28Feb01=======================================================================
365 1. allow sh/c gb7 (ie show the config of all gb7 nodes)(for example)
366 2. get rid of spurious DXHash 'uninitialised' messages if no corresponding 
367 file is present.
368 3. changed policy of $censorpc in DXProt.pm so that badwords are looked for
369 in all text announces etc.
370 4. Unpad (remove excess spaces from) spotted callsigns in PC11. 
371 5. test for opertaing system in various places and do different if M$
372 27Feb01=======================================================================
373 1. allow partial node callsigns on sh/c (eg sh/c gb7)
374 2. Changed Msg.pm to allow a more generalised interface with more than one
375 listener.
376 3. Added IntMsg.pm to implement the internal connection management that is
377 currently scattered about the cluster code.
378 25Feb01=======================================================================
379 1. Fixed watchdbg so that simple arguments work again
380 22Feb01=======================================================================
381 1. Added platform name to sh/version
382 2. changed client.pl so that it send \r\n instead of \n on telnet connects
383 3. added lineend '\r\n' command to connect scripts so you can override 
384 defaults
385 03Feb01=======================================================================
386 1. Changes and additions to the manual and added a help file for sh/log (g0vgs)
387 13Jan01=======================================================================
388 1. Documentation alterations to match new commands etc (g0vgs)
389 08Jan01=======================================================================
390 1. Changed the way that badnodes, baddx etc work. There is a new general way
391 implemented (dunno why I didn't do this before - hey ho...) as a consequence
392 there are set/unset/show baddx (for bad dx callsigns) badnode (for dx from
393 bad nodes) badspotter (for bad spotters of dx eg VE2STN). Expect more of 
394 this sort of thing...
395 2. Added one to the copyright dates...
396 06Jan01=======================================================================
397 1. Fix set/obscount so it actually works.
398 2. Allow different number formats for set/pingint eg: 5m for 5 minutes and
399 120s for 120 seconds (and 1h for 1 hour).
400 03Jan01=======================================================================
401 1. Added a txt directory for txt versions of manuals (g0vgs)
402 2. Various documentation changes
403 02Jan01=======================================================================
404 1. added a help file for forward/latlong and updated the admin manual to
405 match. (g0vgs)
406 2. Add spot2csv.pl to convert spot files into tab delimited .csv format.
407 3. Add show/route to see which interface a station is connected on.
408 31Dec00=======================================================================
409 1. add lat/long info to show/prefix
410 30Dec00=======================================================================
411 1. added latest version of the admin manual from Ian G0VGS.
412 23Dec00=======================================================================
413 1. don't route anything back down the channel it came from.
414 2. and, in the process, fix some silly errors in routing converted rcmd PCs
415 3. changed all occurrances of 'freq' in filter help to 'on' and corrected
416 some errors (eg freq/ssb).
417 4. added latest admin manual.
418 18Dec00=======================================================================
419 1. fix double printing of DB results
420 2. add new style filtering for WWV and WCY to complete the set
421 3. got the field nos right (hopefully) on Announces for filters
422 05Dec00=======================================================================
423 1. fix frequency hinting routine so it correctly handles things like 'on 23cm'
424 where digits are the 'wrong' way round.
425 2. made default max days to search for spots 3 months.
426 3. added hex decodes for those pesky 'national' characters that aren't really
427 in grepdbg and watchdbg.
428 4. decide that we are using Latin-1 and therefore characters 0x80-0x9f are
429 not allowed.
430 5. fix the announces so that they are all UPPER CASE for poor old DXTelnet.
431 03Dec00=======================================================================
432 1. change grepdbg and watchdbg so that you can see a number of lines before
433 the condx that you are looking for so:-
434   grepdbg 3 LOOP
435   watchdbg 3 LOOP 
436 will show both the LOOP line and the preceeding 2 lines.
437 2. add PCPROT to all error condx lines in DXProt.pm so that you can watch
438 for them more easily.
439 30Nov00=======================================================================
440 1. remove %nn strings from dups of announces and spots
441 2. remove check for ssids on PC41s 
442 29Nov00=======================================================================
443 1. make some small changes to DXmsg to try to track delete problems?
444 2. fix ann/full so it doesn't dup
445 27Nov00=======================================================================
446 1. alter sh/wcy output slightly
447 26Nov00=======================================================================
448 1. made it possible for sysop calls to be used on other nodes and still have
449 anti loop checking on PC16/17.
450 25Nov00=======================================================================
451 1. -l <nnn> now works on C client
452 2. -e toggles echo cancelling (normally on) on C client
453 20Nov00=======================================================================
454 1. added even more checking to PC16,17 and 39
455 19Nov00=======================================================================
456 1. improve reaping code a bit more.
457 2. put some extra checking in the PC16,17,19,21 code.
458 3. fix problem with the aliased user disappearing and loads of 'unitialised'
459 messages coming out.
460 16Nov00=======================================================================
461 1. Alter the process reaping code in cluster.pl to use waitpid
462 12Nov00=======================================================================
463 1. Fix lack 't' action in Filter.pm
464 08Nov00=======================================================================
465 1. fix cosmetic errors in for/oper for 'users'.
466 07Nov00=======================================================================
467 1. removed sh/call because the owner isn't happy about us using it. 
468 2. change sh/qrz to the new interface. MUCH QUICKER! you will need a user id
469 and password from qrz.com to use it and you will have to copy the 
470 /spider/perl/Internet.pm to /spider/local and alter it accordingly. Do 
471 remember to set $allow=1 as well! The new interface comes courtesy of Fred
472 LLoyd, the proprietor of http://www.qrz.com
473 06Nov00=======================================================================
474 1. Added sh/qrz to the list of callbook services
475 05Nov00=======================================================================
476 1. 75% speed up on sh/dx !, lower memory usage as well!
477 2. Fixed problem with clear/spot 0 (how did this one last so long!!!)
478 3. add 'on' in accept/reject spots as synonym for 'freq'
479 4. add the same speed up to general log printing
480 5. fixed help \ 
481 04Nov00=======================================================================
482 1. fix sh/filter so ity now works for any callsign (and not just connected
483 ones).
484 2. Have only one is_callsign and not an iscallsign as well.
485 3. Add set/hops and show/hops commands.
486 4. Add unset/badnode command and put some help in for these commands
487 03Nov00=======================================================================
488 1. allow - in filter strings
489 2. store only the filter expression NOTE BENE: you will need to clear all 
490 your existing filters and re-enter them!!!!!!
491 3. Added announce filtering
492 4. Fixed problem with announce filtering on output to the node
493 02Nov00=======================================================================
494 1. updated filtering logic. You will need to RECREATE your filters (clear/spot
495 all, then start again) for testing.
496 2. allow PC73 for DXNet
497 3. added some help text for filtering and filtering spots in particular.
498 01Nov00=======================================================================
499 1. put PC11 field 2 check back to m for pc text.
500 2. improve 'simple' callsign checking
501 3. Added the first cut of the new user/sysop filtering code. This cut works 
502 for spots and the syntax is:-
503
504 accept/spots [<call>] [input] [<filterno>] things ..
505 reject/spots [<call>] [input] [<filterno>] things ..
506
507 where things are: 
508   freq 0/30000 | hf | hf/cw | 6m,4m,2m
509   call G,PA,HB9
510   info iota
511   by G,PA,HB9
512   call_dxcc 61,62
513   call_itu 31
514   call_zone 14,15,16
515   by_dxcc 61,62
516   by_itu 31
517   by_zone 14,15,16
518   origin GB7,MB7
519   channel GB7DJK,GB7BAA
520       
521 You can simply string these together on one line one after the other and 
522 there is an implied 'and', you can also string together with 'or' 'not' (or
523 '!') and '(' and ')' - in otherwords an arbitrary expression.
524               
525 You can see what you have done with:
526
527 show/filter [<call>]
528
529 You can clear your work with:
530
531 clear/spots [<call>] [input] [<filterno>|all]
532
533 Have fun and someone please write the documentation.
534 4. Added show/msg_status.pl sysop command (shows some info on what is busy in 
535 the message system)
536 31Oct00=======================================================================
537 1. add 0x8e to the list of characters we clobber (make xterm go into graphics
538 mode).
539 30Oct00=======================================================================
540 1. put in new Filter::it code and tested it. Now all we have to do is write
541 the user access routines (oh and the help files!).
542 29Oct00=======================================================================
543 1. put in echo cancelling measures into the clients. This doesn't mean you
544 shouldn't take steps to prevent echoing on node links, but it may help where
545 (whatever you do) it still bloody echos! This is experimental.
546 2. store dxchan and mynode as callsigns (and not references) in the routing 
547 tables and do some checking in accessors to see if we can capture some errors.
548 3. tart up the stat/chan etc display to give more useful debugging info 
549 28Oct00=======================================================================
550 1. updated show/sun and show/moon from stuff sent by Steve Franke K9AN
551 2. added show/call which queries jeifer.pineknot.com for any call in the 
552 world (as opposed to UALR which only does US calls). Inspired by a bit of 
553 perl sent to me by Steve Franke (again!) and also Angel EA7WA who gave me the
554 pineknot ip address.
555 3. fixed clients so that they accept -0 as a valid SSID and then strip it off
556 as though they had come in without (why has this taken so long to appear? How
557 long have we been running this code ??????). 
558 27Oct00=======================================================================
559 1. alter the code in clean_old of DXMsg system to see if we get some different
560 behaviour with random crashing
561 26Oct00=======================================================================
562 1. if there is a 'connected' file in /spider/data then the client will send
563 it out to the user after connection.
564 25Oct00=======================================================================
565 1. fix catchup and uncatchup commands so that they accept ranges
566 24Oct00=======================================================================
567 1. added cty.dat from http://www.k1ea.com/cty/index.htm to the prefix_data.pl
568 data file and modified create_prefix.pl accordingly.
569 2. the 'no text line' messages should now propagate correctly
570 3. added the dxcc, itu and cq zone numbers for announcer and origining node 
571 on announce filters - see the /spider/filter/ann/*.issue files for more info.
572 4. you can now specify a 'user_default.pl', 'node_default.pl' and 
573 'in_node_default.pl' in each of the filter directories
574 23Oct00=======================================================================
575 1. Added K5K as Kingman Reef
576 1. Added K7K as Kure
577 17Oct00=======================================================================
578 1. force frames to go down the local interface when doing a route. This is 
579 particularly important for pings!
580 16Oct00=======================================================================
581 1. add a ':' after 'G7BRN de G1TLH' in a talk message.
582 2. added /J to the list of things to ignore (as in G1TLH/J) in prefix 
583 processing (ie /J mean Jota not /JA [Japan]).
584 3. change all INCOMING 00-08 0A-1F and 9B characters that make it past the
585 intermediate client->server protocol to '.'.
586 04Sep00=======================================================================
587 1. made PC10,11,12 badword checking dependant on a flag variable ($censorpc)
588 default = 0 (off).
589 02Sep00=======================================================================
590 1. fix a long standing talk bug to do with routing to specific nodes (t xxx >
591 yyy .....)
592 2. Add badwords checking in various places. You put a list of words into
593 /spider/data/badwords one or several per line. Lines starting with # are
594 ignored. PC10, PC11, PC12 with words contained in this file will not be
595 sent on. Also ann, talk and dx commands have badword checking added. Words
596 are NOT case sensitive, but you will need to put all the endings in (eg 
597 ...k, ...ker, ...king).
598 3. Added new version of admin manual from G0VGS.
599 01Sep00=======================================================================
600 1. allow blank on field 4 of PC10 (even though it's "illegal").
601 28Aug00=======================================================================
602 1. changes DXChannel::get_all_ak1a to get_all_nodes.
603 2. ignore PC21s coming in on the interface with that callsign (ie nodes 
604 trying to disconnect themselves).
605 3. output correct PC29 on blank lines and escape ^ characters differently 
606 (and transparently for spider nodes).
607 26Aug00=======================================================================
608 1. make blank origins on messages the node call.
609 2. added new version of FAQ from Ian G0VGS
610 3. added a dummy PC75 command (WCY merge?)
611 4. Don't allow mail routing for clx nodes
612 5. Log isolates
613 25Aug00=======================================================================
614 1. moan about and then delete empty message files
615 24Aug00=======================================================================
616 1. Removed WWV command so that users can't interfere (read mess up) the
617 automatic feeds which come from various places on the net.
618 23Aug00=======================================================================
619 1. Added persistant dupe file so that all dupes are stored here (including
620 announces) - announces are now kept for 5 days (as default).
621 2. limit the characters stored in a dupe for spots and announces
622 20Aug00=======================================================================
623 1. Added system Alias for set/nodxgrid => unset/dxgrid
624 2. Add full individual checking for all PC protocol fields in all messages
625 and removed any language dependant stuff (hopefully).
626 3. console.pl is now a bit more international (client.c/pl already are)
627 19Aug00=======================================================================
628 1. Added an efficiency thing for AUTOLOADed accessors from OO Perl by Conway.
629 2. Fiddled with the rtty and digital bandplan frequencies.
630 18Aug00=======================================================================
631 1. added a couple of changes for perl 5.6.0
632 2. removed del_dup from DXUser for earlier versions of DB '1.85' (ie real ones
633 not 2.x versions in 1.85 compatibility mode).
634 3. Started the OOing of the PC protocol stuff.
635 15Aug00=======================================================================
636 1. added 1.25 of the admin manual html
637 14Aug00=======================================================================
638 1. Added regex support to sh/dup_*.pl commands
639 2. fixed rcmd in crontab so that will work again
640 13Aug00=======================================================================
641 1. removed extra /60 in AnnTalk to make deduping of announces work a bit
642 better for longer...
643 05Aug00=======================================================================
644 1. Fixed hex character problem put in somewhen in the C Client
645 03Aug00=======================================================================
646 1. caught some more signals (are any of these causing the random stopping
647 of the code?
648 2. the Console now requires 1.05 of the Curses module ^R REFRESHES THE SCREEN
649 (as does ^L) AT LAST!!!!!
650 02Aug00=======================================================================
651 1. put back hex check exception for PC29
652 01Aug00=======================================================================
653 1. made the export and import ascii system work finally. The user_asc file
654 generated (automatically and 0000Z Sunday morning) is autoloading. Just 
655 execute it and it will automatically reload your user database.
656 2. remove import_users.pl no longer necessary
657 31Jul00=======================================================================
658 1. try to fix paging problem.
659 2. added help for spoof and set/forward
660 3. fixed bogus callsign check for field 2 of a PC12
661 4. Add DB_File to DXCommandmode to make it available for commands
662 30Jul00=======================================================================
663 1. Added talk mode so that I don't have to keep typing T <call> all the time.
664 2. fiddled around with storing of Debug messages a bit more.
665 3. bomb proofed the type command.
666 4. started the objectifying for talk, dx and announcements.
667 5. fix talkmode so that it only does 'via' PC10s when it really needs to.
668 6. SEND now displays a message if you try to do it in not prompt mode.
669 7. stopped a few more things being done by rcmd (eg send, talk, ann, dx)
670 8. tidied up the talking a bit more.
671 9. Increase default hop counts all round.
672 10. Adjust hex encoding so that 8 bit characters should now go thru
673 11. check more of the essential protocol fields for 8 bit characters.
674 29Jul00=======================================================================
675 1. added forward/latlong which will forward ALL the users that have a latitude
676 and longitude set on them to one or more locally connected nodes - with a hop
677 count of 1.
678 2. speeded up the show/node command by using the DB_File interface and 
679 sequentially reading the data directly and only 'get'ting the ones that are
680 nodes.
681 3. did the same for show/isolate and show/lockout.
682 28Jul00=======================================================================
683 1. fixed watchdbg midnight rollover loop and removed the date part of the 
684 date/time translation to leave just the time.
685 27Jul00=======================================================================
686 1. made sure that 'en' is the default language on new users.
687 2. issue error message if shutdown is attempted by a low privileged user.
688 3. Make sure a privilege is defined for all users (even if it is 0).
689 4. Try to fix some more dups (and the time on them).
690 5. make the time stored on dups generated locally on spots an integer no of 
691 minutes * 60 
692 6. send unsolicited PC[38]5s to the sysop if online.
693 7. merged current html from www.dxcluster.org with Ian's stuff
694 8. Added sgml files into the source tree
695 9. changed default paclen in client.c to 236
696 26Jul00=======================================================================
697 1. added wantgrid (to control display of grid square info on DX Broadcasts)
698 2. added lastoper for controlling periodic demands for user info from other
699 nodes.
700 3. added spiderFAQ stuff from Ian G0VGS and latest update of the admin manual
701 4. changed updating and deleting from user file in an attempt to keep down
702 duplicates and possibly corruptions.
703 5. added a DXUser::export routine to allow the cluster to automatically 
704 export the user data in ascii from cron.
705 6. added a line in the ISSUED crontab to do the export once a week
706 7. delete annok and dxok if set to 1 in user records.
707 8. added export_users command to allow arbitary exporting of user files
708 9. added set and unset/dxgrid command to allow control over the grid squares 
709 on DX announcements
710 10. Removed export_user.pl (no longer needed)
711 11. made import_users.pl accept a non related input filename and always
712 update the current user file.
713 12. added an 'auto rcmd <node> for/oper <call>' for people I can see on the
714 cluster that issue spots and for whom I have no qra info (no more than once
715 a month). This isn't the default - set $send_opernam in
716 /spider/local/DXProtVars.pm (copied from /spider/perl). Good for gateways.
717 13. Despace spot texts properly again for deduping purposes.
718 14. Corrected Pc84/85 handling a bit.
719 15. Sync the user database every 15 secs to see whether we can reduce the 
720 corruptions and duplicates.
721 25Jul00=======================================================================
722 1. ignore \n in ax25 mode for C client.
723 2. remove extra space at the end of a DX spot announce when no grid square
724 is output.
725 3. added new admin manual from Ian G0VGS
726 20Jul00=======================================================================
727 1. Finally managed to update my source with the sourceforge one
728 2. added user->qra cleaning in various places
729 3. added four digit locator strings to broadcast DX spots (for users).
730 4. PC11 with blank callsigns should now be ignored.
731 5. put back the unpadding to the PC11 dup checking to catch spots with added
732 blanks at the end of lines.
733 25Jun00=======================================================================
734 1. added 0 to the regex that checks for valid data on the cluster.pl->client
735 channel - this will allow G0VGS and G0RDI to connect....
736 2. removed technically unnecessary /= 60 from the dup routines to see if 
737 Arnold's Sparcs don't then crash.
738 19Jun00=======================================================================
739 1. move ann_dup, spot_dup etc to dup_ann, dup_spots etc
740 2. made mode 3 the default line ending convention for all out going connects
741 via telnet in client.pl
742 18Jun00=======================================================================
743 1. fixed line ending ambiguities (I think) for telnet connections. Well 
744 actually only really band aided it. It works but isn't how I want it. 
745 Client.pl has got to go....
746 2. Added 1.21 of Ian G0VGS's admin manual
747 17Jun00=======================================================================
748 1. I believe I have fixed all the login/logout 'broken pipe' errors
749 2. Added G0RDI's 'links' command.
750 3. added update_sysop.pl which cleans out all previous versions of the sysops
751 information from the user database and recreates it with that in DXVars.pm
752 4. Added node type to links and who
753 5. Hardened up the cluster->client link in the cluster software so that 
754 rubbish on port 27754 doesn't (usually) crash the cluster.
755 14Jun00=======================================================================
756 1. fixed sh/node crash
757 2. fixed RTT in who.pl
758 13Jun00=======================================================================
759 1. fixed looping bug in C client on ending.
760 12Jun00=======================================================================
761 1. Added RCMD for clx
762 2. Added WCY processing
763 3. Added new node types (clx, spider, dxnet, arcluster)
764 4. Store echo settings
765 5. Store pagelth settings
766 6. sort out source of DXVars for callbot.pl
767 7. added sh/isolate
768 8. added sh/lockout 
769 11Jun00=======================================================================
770 1. removed extraneous DXDebug from DXUtil
771 2. added help for set/echo
772 3. Centralised all spot, wwv and ann dup handling into respective packages.
773 4. Created new AnnTalk package (for above and OOing announce and talk 
774 handling).
775 5. Fixed problem with outputting lines with | in them to console.pl.
776 10Jun00=======================================================================
777 1. got rid of some more nasty bugs in sh/qra.
778 2. fixed 9A3xx to always be Croatia (and not Haiti!).
779 09Jun00=======================================================================
780 1. change some print commands in DXMsg to dbg('err'...
781 2. overloaded confess, croak et al into DXDebug and removed Carp from 
782 everywhere and checked that the necessary debugging really does go into
783 the debug files now.
784 3. changed print statements in cluster.pl to dbg('err',... so they go into
785 the debug files as well.
786 4. Altered the logic around duplicate spots, reduced the length of comment
787 checked to 20 characters (this should solve some problems including those
788 people sucking ar-cluster spots with prefixes in the extreme rh end). 
789 08Jun00=======================================================================
790 1. fixed problem with binary characters from cluster->client
791 2. added set/echo and unset/echo commands
792 3. echo login characters on login: prompt for C client
793 4. Send \r\n on telnet connections for C Client
794 5. Make echoing the default option (for M$ telnet clients :-()
795 11May00=======================================================================
796 1. fixed looping in Msg.pm (at last)
797 10May00=======================================================================
798 1. wrote a cross between 'tail -f' and grepdbg so that you can watch the
799 debug files for particular strings and only have them print out. 
800 05May00=======================================================================
801 1. rewrote parts of Msg.pm and client.c so that the messages no longer use
802 a length word at the front of each one. They are simply strings of characters
803 separated by a \n. No binary characters are allowed (they are encoded as %nn)
804 a la HTTP. This hopefully cures Arnold's problem and also make it more
805 secure anyway. It also paves the way for the ax25/ip multicast client.
806 30Apr00=======================================================================
807 1. put some extra checks and balances in to message send routine in Msg.pm to
808 see if I can prevent the error seen by Arnold (which I think is only likely to
809 appear in heavily loaded sites).
810 25Apr00=======================================================================
811 1. Changed reply so that you can reply to more than one address privately
812 31Mar00=======================================================================
813 1. fixed nnn-mmm in kill (erase/delete) msgs so that mmm is also deleted and
814 not just nnn -> mmm-1.
815 2. Added an autosplit to message importing so that messages are split
816 automagically into bits if the filename used in the import directory starts
817 with "split". This will add a [1/5] type string on the the end of the subject. 
818 3. dedupe more aggressively on the text of Spots so that only the 1st 27 chars
819 of text are considered (as opposed to the whole lot).
820 30Mar00=======================================================================
821 1. altered client.pl connect code so that it doesn't falsely recognise 
822 /spider/src/client as a 'client' instruction.
823 28Mar00=======================================================================
824 1. Added buffering to client 
825 2. Fixed LOGIN so that you can login with an arbitrary callsign
826 27Mar00=======================================================================
827 1. updated wpxloc.raw and rsgb.cty for 4W and TX0.
828 2. display 'start time' rather than 'last start time in' in who.
829 3. Allow local users to see their own sh/talk or sh/log stuff.
830 4. A more robust version of the C client.
831 5. Added a message exporting command 'export'.
832 6. allow swopping on all messages, including imported and manually sent ones
833 7. S A < B @ C $BID now works from the command line and thus bbses ought to
834 be able to send messages into the cluster. Bids are (currently) ignored.
835 26Mar00=======================================================================
836 1. first cut of C client
837 18Mar00=======================================================================
838 1. fixed convkeps.pl so that it accepts more formats for floating point.
839 08Mar00=======================================================================
840 1. tidied up Sun.pm and sh/sat
841 2. fixed sh/qra so that the correct lat/long is displayed if only one locator
842 is given.
843 10Jan00=======================================================================
844 1. added Steve Franke's new Sun.pm and show/satellite command
845 08Jan00=======================================================================
846 1. really removed the restriction on 0 length messages.
847 2. added a periodic msg file import system a la FBB. Stick one or more files
848 into /spider/msg/import with a suitable SEND line, subject and the text and 
849 it will import it. The importer will accept some BBS syntax (eg < GB7TLH) to
850 allow you to customise the 'from' callsign.
851 03Jan00=======================================================================
852 1. changed the copyright statement in sh/version!
853 2. added sh/date with special "be compatible with ak1a" syntax for the output
854 of sh/date with no arguments, otherwise the same as sh/time. A special favour
855 to G4PDQ...
856 3. and another one, added show/node especially for G4PDQ.
857 01Jan00=======================================================================
858 1. Fixed Julian routines to get rid of the millenium bug! (do as I say, not
859 as I do!).
860 2. updated gdx.pl so that external programs can do a sh/dx just as a normal
861 user can. On reflection this could be used as a model for all sorts of 
862 "external" interface routines.
863 3. renamed gdx.pl as showdx.
864 11Dec99=======================================================================
865 1. added missing pc48 so that it calls the DXDb::process routine 
866 10Dec99=======================================================================
867 1. allow msgs to marked as read or unread
868 02Dec99=======================================================================
869 1. DX command doesn't recognise '6M' as '6m' in SH/DX ON 6M.
870 2. set/node now sets the homenode as the callsign.
871 3. changed the label for the 18Mhz band from '18m' to '17m' in the bands 
872 table. 
873 01Dec99=======================================================================
874 1. started the callbot which lives at n2tly.dxcluster.net 9000.
875 2. added www.qrz.com
876 3. added www.buck.com
877 4. added k4ute at no4j.com
878 28Nov99=======================================================================
879 1. fixed all the stupid errors introduced in 1.36 confusing DXUser->get with
880 DXCluster->get_exact.
881 24Nov99=======================================================================
882 1. extended badmsg.pl stuff so that it works like the forward file and allows
883 one to reject on to, from, origin and subject fields.
884 2. added a swop.pl again in a forward.pl like format that allows simple swop
885 for a field or test on a field and set another.
886 3. Fixed the problem that read private mail follows you around as well as
887 unread private mail does.
888 4. Change the logic of connections so that the node will accept callsigns with
889 SSIDs to -8 as different entities from each other. SSIDs > 8 are subtracted 
890 from 15 and are assumed to be coming in via netrom diddled connections. This
891 affects lots of the commands as well. I may not have got them all.
892 5. Hangup clients on HUP signals. I originally ignored them, for reasons that
893 are now lost in the mists of time. HUP signals now cause clients to die 
894 (cleanly) and disconnect everything correctly.
895 6. Added show/time command
896 21Nov99=======================================================================
897 1. lose extraneous rubbish after the callsign as sent by BBSes.
898 2. Change end label on sh/moon to RGain dB rather than Loss dB.
899 3. Remove spurious call to DXCluster->get_exact in pc50.
900 4. Allow rcmd to locally connected nodes that are not (for some reason) in the
901 nodes table.
902 5. Try and send a PC39 in more cases to a cluster that I want to disconnect
903 from in the hope that it notices and disconnects its end.
904 20Nov99=======================================================================
905 1. Added set/unset logininfo which will tell anybody that has this set when
906 someone has either logged in or out of this node.
907 2. Added set/pinginterval command which alters the length of time between
908 pings sent to nodes, the value is minutes < 120 and seconds above that, 0
909 means disable pinging (not recommended).
910 3. If someone does a sysop whilst connected via ax25, don't show privilege
911 level or passwd in stat/user.
912 4. Fixed the problem with the dx command where if the callsign ended in a ?
913 then the call and the freq would be replicated in the remarks.
914 5. Set/unset ann, dx, talk, beep, wx, wwv all are now permanent (ie stored in
915 the user file)
916 19Nov99=======================================================================
917 1. Added new version of sh/sun and also sh/moon from Steve K9AN
918 2. Added rtt to who.
919 3. added Aliase for show/tnc_sta to who.
920 4. added Alias for show/uptime to sh/cl 
921 18Nov99=======================================================================
922 1. Added ping obs counter together with Time::HiRes timers. This will dis-
923 connect nodes that fail to respond to 3 ping requests (on the 4th attempt). 
924 The default time is a ping every 3 mins, therefore a link will be struck out
925 after 12 minutes of nil response.
926 2. Maintain a table of outstanding connects to other nodes and prevent over-
927 laps (special favour to G0RDI).
928 17Nov99=======================================================================
929 1. Started using Data::Dumper for things again
930 2. 'Fixed' DXUser file corruption?
931 3. Allow multiline (ie lines with \n in them) output in $DXChannel::send 
932 4. Added Andrew K9CW's updated wpxloc.raw, regenerated prefix_data.pl
933 5. Put in callsign matching and stuff into sh/sun.
934 14Nov99=======================================================================
935 1. added BBS.pm to start BBS input of mail
936 2. fixed eval in DXUser to log errors rather than banging out
937 12Nov99=======================================================================
938 1. added sh/sun command kindly supplied by Steve K9AN.
939 2. allow ^Z on its own on a line to terminate a message
940 08Nov99=======================================================================
941 1. added spoofing (mk1 version) for sysops, useful for those little jobs like
942 reseting a user's qra locator and such like "spoof g7brn set/qra jo02lq".
943 2. fixed set/location so it stores the qra locator in the qra locator slot, 
944 NOT the lat/long (who wrote this stuff...?).
945 07Nov99=======================================================================
946 1. reduced the amount of stuff compared against for dup announces.
947 2. Check the regex for DK0WCY announces produces results before storing it as
948 a WWV.
949 3. Added some logging for set/priv (un)set/lockout.
950 4. Added test long path calc to sh/muf
951 5. Only wonder down the msg queue every minute
952 6. Put in the initial DB code (at last), you can create and remove local and
953 standard remote dbs, you can import AK1A style .FUL ascii databases, you can
954 enquire on a local or remote database.
955 7. A return ping to a node will clear down all outstanding pings to
956 that node (which might cause some confusion if more then one ping is
957 outstanding for a node, but then - shit happens).
958 04Nov99=======================================================================
959 1. Removed ~ from the end of the PC18.
960 2. Removed a hangover from duff character checking in cluster.pl
961 3. Stop PC frames that are to be routed, being routed back to themselves.
962 03Nov99=======================================================================
963 1. Simplified command caching so it uses anonymous subroutines, you should
964 also get error messages back on the console now when developing.
965 2. Allow locally connected AK1A clusters that for some obscure reason don't
966 issue PC19s to still appear as connected and allow them to acquire users.
967 31Oct99=======================================================================
968 1. updated Minimuf.pm and show/muf.pl to the fixed versions sent to me by
969 Steve Franke K9AN. 
970 2. Made set/badnodes work, added show/badnodes. This is an interim fix until
971 input spot filtering works.
972 24Oct99=======================================================================
973 1. fixed announces so that nodes only get one of them (not two).
974 2. Altered the select timeouts to prevent apparent excessive CPU usage on
975 multiprocessor machines (or at least that is what seems to be the trouble
976 here). 
977 22Oct99=======================================================================
978 1. allow filter CALLSIGNS to be in upper or lower case.
979 2. create the concept of input and output filters, input filters are of the 
980 form "in_$call.pl" eg: "in_g1tlh.pl" (or "in_G1TLH.pl"), output filters are 
981 "g1tlh.pl" (or "G1TLH.pl").
982 3. all users can now filter on spots, ann and wwv (assuming the sysop has set
983 the filters up - still no user creatable filters. Nodes can filter on both
984 input for announces and output for all of these. I would recommend setting 
985 up a few filters that are likely to be wanted and then symlinking callsigns
986 to them as you get requests.
987 4. added callsign and length of history/position of screen stats to console.
988 If you want to change the colour of the callsign you will need to copy the
989 Console.pm to your /spider/local directory and change the $mycallcolor equate.
990 21Oct99=======================================================================
991 1. fixed reply so that reply b or reply nop generate a bulletin with the 
992 correct address.
993 2. implemented sh/muf command.
994 3. reduced privilege of catchup and uncatchup to 5. This so that, suitably
995 privileged, nodes that occasionally link can rcmd a "catchup <nodecall> all"
996 to the node they are connecting to and thus prevent a large tranche of, 
997 potentially duplicate, mail. This isn't an issue for DXSpider, but may be
998 an issue for any AK1A clusters you are connected to.
999 20Oct99=======================================================================
1000 1. Translated all the subroutines of minimuf into perl as Minimuf.pm
1001 2. Limited the length of an ANN that is saved for de-duping to $pc12_dup_lth
1002 (def 72)
1003 3. help command should now return stuff that you expect.
1004 4. reduced necessary privilege to use 'MSG' command to 6.
1005 5. Correct the count of spots and wwv for a merge.
1006 6. Allow decodes of DK0WCY-3 WWV data beacon announces
1007 7. rewrote send so that an SB doesn't send a buckshee bull to NOPRIVATE!
1008 8. Changed default colouration on console so that all spots >= 50Mhz are red
1009 9. Fixed init command so that PC21s are sent down non-initted channels
1010 10. Allow forwarding of unknown private mail. This means that you can set up
1011 forwarding of 'foreign' mail across to and by gateways using the same 
1012 mechanism as bulletins (/spider/msg/forward.pl).
1013 11. Allow line wrapping on the console (G0RDI, G0VGS et al).
1014 18Oct99=======================================================================
1015 1. changed help command so that it works correctly with multiple title lines.
1016 2. added to address to the list of things a message checks to see whether it
1017 is a duplicate (how on earth did it take _this_ long to find this one?).
1018 3. Changes S CC so that the callsign it says it has sent to is the real one
1019 (request from G8TIC)
1020 21Sep99=======================================================================
1021 1. allow zero messages to be stored (request from G4PDQ)
1022 2. make DX more flexible and change spotter syntax to be consistant with
1023 sh/dx (request from K9AN)
1024 30Aug99=======================================================================
1025 1. remove -@ as well as \d from SSIDs for spots
1026 2. remove WEB and/or NET from the front or rear of callsigns in Prefix.pm
1027 29Aug99=======================================================================
1028 1. Added msg command to allow the changing of To, From, Subject and so on the
1029 messages. This seems particularly important just now as a whole raft of G3's
1030 seem to be putting out non private bulls to callsigns.
1031 2. While I am at set messages to TO fields that appear to be users to private
1032 if they have been sent as bulls.
1033 3. Add DISTROs, if a callsign field appears in /spider/msg/distro in upper
1034 use that as a list of callsigns to send further. Note this is potentially
1035 recursive as callsigns in a distro can be distros.
1036 25Aug99=======================================================================
1037 1. check the date of a WWV much more carefully.
1038 24Aug99=======================================================================
1039 1. Prevented spots with lowercase callsigns being forwarded. This opens a
1040 much bigger can of worms which I shall have to address later.
1041 17Aug99=======================================================================
1042 1. all protocol except PC29 containing %XX characters will be dumped.
1043 2. Changed console.pl so that if you start typing it moves the top window
1044 back to the bottom.
1045 19Jul99=======================================================================
1046 1. Added iota and qra clauses to sh/dx as well, these take optional arguments
1047 and will look for the appropriate strings.
1048 17Jul99=======================================================================
1049 1. Started database integration.
1050 2. added qsl clause to sh/dx that searches for qsl or via in the dx info
1051 16Jul99=======================================================================
1052 1. drop frames with 'illegal' characters in them (but pass frames with 
1053 embedded %XX characters).
1054 15Jul99=======================================================================
1055 1. Changed grepdbg to accept a regexp. More useful (to me anyway).
1056 2. Altered init command so that it doesn't send PC21s down the initted 
1057 channel.
1058 10Jul99=======================================================================
1059 1. added an explicit disconnect from my side for already connected calls. This
1060 appears to have fixed a problem where if two consoles connect at the same time
1061 with the same (sysop?) callsign the cluster would stop.
1062 2. added some debugging in the Message handler to allow more state to be seen.
1063 3. Message handler now seems to work better for longer and doesn't spew out
1064 PC42 aborts with quite such gay abandon.
1065 05Jul99=======================================================================
1066 1. added stat/msg and stat/cluster commands to allow me to poke about inside
1067 the msg and cluster node tables.
1068 04Jul99=======================================================================
1069 1. removed silly 'new message has arrived' to connected nodes 
1070 2. added a ! command to the console.pl program; works like the bash shell.
1071 01Jul99=======================================================================
1072 1. Altered priv to 5 for connect.pl to match disconnect for nodes
1073 29Jun99=======================================================================
1074 1. fixed merge command that I broke.
1075 2. added some randomness in waittimes for aborted outgoing messages 
1076 3. Message Queuing now only occurs every 5 minutes (configurable if anyone 
1077 wants to write the command for doing it) and on receipt of a PC16. This is
1078 a further attempt at sorting the crossing of messages!
1079 4. a PC33 will cause another attempt at queuing. If you are on a roll, keep
1080 going!
1081 28Jun99=======================================================================
1082 1. console.pl now works with history and editting.
1083 2. added scrolling to stuff sent by the cluster.
1084 3. added colours to things.
1085 27Jun99=======================================================================
1086 1. added WWV filtering
1087 2. added timeouts to for forwarding Messages, also added a waiting time for
1088 failed (stalled) outgoing messages.
1089 3. Incoming messages will now have priority over outgoing messages to the
1090 same node.
1091 4. Added 'catchup' command which will 'catchup' messages to date for a node. 
1092 This means that when you start forwarding to a node, it doesn't get all the
1093 messages queued up that are probably old.
1094 5. added 'uncatchup' which does the opposite of the above.
1095 6. fixed kill full and PC49 handling so that it actually works.
1096 7. Fixed local aliases so they add to the front of the standard ones. This
1097 means you only need to add your specials or override the system ones you need
1098 to.
1099 21Jun99=======================================================================
1100 1. changed regex for cluster->client msgs so that strings like |---| are no
1101 longer ignored.
1102 20Jun99=======================================================================
1103 1. prevented a merge to myself (causes a loop)
1104 18Jun99=======================================================================
1105 1. fixed a problem with DXLogPrint repeating log entries.
1106 2. altered the permissions on disconnnect so that priv 5 users can disconnect
1107 clusters, but still require priv 8 to disconnect users.
1108 3. made sure that an incoming PC18 clears out all the cluster info for
1109 that channel before re-initialising.
1110 4. add init command.
1111 5. disconnect users before nodess on shutdown
1112 15Jun99=======================================================================
1113 1. added grepdbg program (so you can search your debug files and get times
1114 and dates of incidents).
1115 2. Moved DXVars.pm to DXVars.pm.issue to force new users to cp it to their
1116 local directory.
1117 3. added $allowzero to DXProt to allow thru PC19s with zero protocol versions.
1118 14Jun99=======================================================================
1119 1. changed IO::File in help and apropos to IO::File
1120 2. added a check for isa('DXNode') for PC50s
1121 08Jun99=======================================================================
1122 1. Started work on the curses based operator console.
1123 03Jun99=======================================================================
1124 1. cluster seems to have a memory leak, put DESTROY functions in where 
1125 appropriate.
1126 2. try to make sure that PC21 commands are not issued inappropriately and
1127 also reformat PC19 for onward broadcast so that nodes coming in on loops are
1128 dropped from those broadcasts.
1129 3. make sure PC16,17,19,21 doen't affect locally connected nodes.
1130 4. Changed all instances of FileHandle to IO::File.
1131 01Jun99=======================================================================
1132 1. removed a output of an unwanted pc21 for isolated nodes
1133 31May99=======================================================================
1134 1. Added checking for PC16,17,19 and 21 to make sure that they come in from
1135 the channels that they are supposed to.
1136 2. Pass the RCMDing node's priv level to the command (rather than the 
1137 connecting node's privilege level).
1138 3. Pass thru merge requests for other nodes.
1139 4. Removed a warning from client.pl
1140 5. routed external DB commands and drop them (for now) locally
1141 6. routed external mail commands (ie those addressed elsewhere)
1142 7. routed external PC26/27 lines 
1143 25May99=======================================================================
1144 1. try to make the lastin value correct even for local users
1145 2. got rid of the stupid bug that failed to print out the offline message
1146 but put a "*main::STDOUTmain" for every line of that message instead.
1147 3. Ported to 5.00503 (well actually just installed it and it just runs). 
1148 4. Added who command
1149 23May99=======================================================================
1150 1. Got rid of some of the useless error messages on global destruction when
1151 quiting a program.
1152 2. Stuck -w back on client.pl
1153 23May99=======================================================================
1154 1. tried to change connection to raw mode for cluster connections
1155 2. sh/c and sh/u are now sorted in alphabetical order
1156 3. Limited the number of queued dx spots when composing messages to 20 (the 
1157 oldest one is lost for every one added above 20).
1158 4. Added generalised shell globbing everywhere I think it is useful, including
1159 sh/dx, dir, sh/files etc
1160 5. Made dir more compatible with ak1a and added 'to' and 'from' call searching
1161 it should now do everything that ak1a does except counts.
1162 6. added similar functionality to kill command so that you can kill ranges, to
1163 and from callsigns etc.
1164 22May99=======================================================================
1165 1. added check for -1 from Date::Parse and return undef for out of range dates
1166 2. added show/files and type commands
1167 21May99=======================================================================
1168 1. made set/nodx work again.
1169 2. made dx stuff queue nicely again when sending messages.
1170 18May99=======================================================================
1171 1. Added announce dup checking.
1172 2. Added system announce filtering.
1173 08May99=======================================================================
1174 1. Added a bit more checking to the rcmd thing to make more sure that this
1175 rcmd isn't coming from an imposter. Not possible to prevent everything 
1176 ofcourse, just make it a bit harder.
1177 2. altered set/lockout and set/privilege so that they can't executed remotely.
1178 3. Added some code to reject rubbish (with invalid binary characters) protocol
1179 or user lines as input.
1180 4. prevented PC command being executed remotely :-)
1181 05May99=======================================================================
1182 1. change the connection overlap from an abort to a disconnect.
1183 02May99=======================================================================
1184 1. Added the mechanism for doing user spot filtering for spots in the cluster 
1185 (no user control just yet - but sysops can do it).
1186 2. Fixed problem with nodes sending out the node lists of isolated nodes.
1187 30Apr99=======================================================================
1188 1. Try to make it even more AK1A friendly by putting the node list out in the
1189 'correct' order.
1190 2. added code so that local users and commands go to all connected nodes 
1191 INCLUDING the isolated ones.
1192 26Apr99=======================================================================
1193 1. added set/user command as a hack, please use this with care, there is
1194 very little checking.
1195 2. added export_opernam.pl which is a basic reader of AK1A opernam.dat files
1196 to stdout
1197 25Apr99=======================================================================
1198 1. Fixed problem with filtered spots not coming out.
1199 2. Added the possibility of filtering on channel callsign
1200 20Apr99=======================================================================
1201 1. altered order of undefing and closing of user file in an attempt to make 
1202 corruptions/missing users less likely.
1203 2. made messages that are addressed to the node call appear to the alias call
1204 3. check dates much more rigourously.
1205 4. ignore SIGTERM and SIGINT during shutdown of the cluster
1206 15Mar99=======================================================================
1207 1. added $actiondata to filter line to allow per action data such as no of hops
1208 2. fixed a silly problem in talk for non-existant callsigns
1209 3. Added sysop command
1210 02Mar99========================================================================
1211 1. Changed DXUser so that it uses a homemade import/export hash routine 
1212 2. DXUser now uses a DB_BTREE file
1213 3. Added export_users.pl, import_users.pl and convert_users.pl
1214 25Feb99========================================================================
1215 1. added NL language stuff.
1216 2. added set/language
1217 21Feb99========================================================================
1218 1. Allowed multiple 'on <freq>' for show/dx
1219 2. Made sure the 'on 20m/ssb' thing worked (also 'on hf/cw').
1220 3. first cut of the Filtering code, no user commands yet but the file
1221 format is defined and manually added filters should work for spots
1222 17Feb99========================================================================
1223 1. added export_user.pl to export user files (for interest and safety)
1224 2. changed DXUser::init to allow O_RDONLY access which may limit the number
1225 of coredumps G0RDI seems to get.
1226 15Feb99========================================================================
1227 1. Added msg forwarding code which uses $main::root/msg/forward.pl.
1228 14Feb99========================================================================
1229 1. Changed A & K in WWV to be the other way around (I am told by G3IOR that
1230 this will mean that we won't have pole to pole aurora nor all the power lines
1231 overloading everywhere as well as a result of having values of K > 10).
1232 2. allow the '~' character in message bodies.
1233 3. Moved $main::data/badmsg.pl to $main::root/msg/badmsg.pl.
1234 11Feb99========================================================================
1235 1. Fixed a problem with isolated nodes' configurations being sent on sending 
1236 local configs to new connections.
1237 08Feb99========================================================================
1238 1. added a $SIG{ALRM} in the client to actually catch the alarm when it goes 
1239 off which means that the netrom/ax25 call programs terminate properly (and not
1240 loop as fast as their little legs can paddle, soaking up CPU time).
1241 2. Implemented read receipts as an especial request from G4PDQ.
1242 3. Fiddled with DXUser a bit to see whether I can stop it core dumping on new
1243 users in PC16s on G0RDI's machine.
1244 4. Added E4 (Palestine) to Prefix data.
1245 30Jan99========================================================================
1246 1. Some of the dates we get can cause crashes, tried to make it more robust (oh
1247 and Y2K compliant)
1248 2. PC16 seem to come in with missing callsigns from somewhere
1249 3. added $main::data/baddx.pl which prevents callsigns that are in the list being
1250 a) forwarded b) stored and c) (except for the originator, if local) being
1251 displayed locally.
1252 4. added $main::data/badmsg.pl which deletes any messages whose TO address is
1253 in this list (this is largely for european sensibilities). 
1254 18Jan99========================================================================
1255 1. added present(),presentish() and disconnect() to DXCron so that you can see 
1256 (easily) if a station is on the cluster anywhere and also disconnect them
1257 locally. 
1258 2. added rcmd() to DXCron so you can send an rcmd to someone else from crontab.
1259 3. <embarrassment>Fixed create_sysop.pl so that longitude is spelt correctly
1260 there as well</embarrassment> made the update work properly. NOTE create_sysop
1261 will only do what you expect if all cluster.pl and client.pl programs are 
1262 stopped.
1263 4. DXCron wasn't reading in reliably on startup, this is now (hopefully) fixed.
1264 the -M semantics are rather strange!
1265 5. The -w switch is now standard on cluster.pl
1266 6. Added last_connect() which gives the last connect time of a user (or now
1267 if connected).
1268 7. Added present_on(call, node) and presentish_on(ditto) which returns true if 
1269 the call is connected to the node.
1270 8. incoming messages for users will now send a 'new message' message (instead
1271 of merely generating the message)[who wrote this rubbish?].
1272 9. Hooked $SIG{__WARN__} and $SIG{__DIE__} so we store these nasty error 
1273 messages.
1274 10. Print the no of users on restricted protocol links if we have had PC50
1275 11. Had a go at making the sh/cl stats more accurate.
1276 12. PC11 was trying to call Local::spot1 instead of Local::spot, no warning 
1277 previously.
1278 13. Added a simple lockfile to prevent more than one cluster running at a time
1279 17Jan99========================================================================
1280 1. fixed some permission problems on DXLog.
1281 2. There is a circumstance in DXMsg which caused the cluster to stop on an 
1282 null ref pointer which I can't get to the bottom of but have bandaided out 
1283 for now.
1284 3. Started filter and Database code.
1285 4. Upper cased all the TO callsigns for sending to more than one station in
1286 messages.
1287 07Jan99========================================================================
1288 1. Fixed Geomag after emacs reformatted it wrong so sh/wwv works again.
1289 2. Added more range checking in WWV spots (they really are a heap of ...)
1290 3. Changed create_sysop.pl so that you can update as well as create the user 
1291 file
1292 4. Remove spotter's SSID from WWV spots
1293 06Jan99========================================================================
1294 1. Do some range checking for spots and WWV in the future (got a WWV for Oct 
1295 2034 whhich caused a bit of confusion!)
1296 2. Make WWV spots broadcast them to the users! (as opposed to merely storing 
1297 them)(thank you G0RDI).
1298 3. Allow users to do show/announce (thank you JE1SGH).
1299 4. Delay broadcasts to users if they are not in a 'prompt' state (means you can
1300 add messages and see what you are doing on a busy system)
1301 5. Made set/unset dx,ann,wx,talk,wwv do what is expected
1302 6. added set/sys_location and set/set_qra to set the cluster lat/long and qra
1303 7. New messages will now be announced on logon (if there are any)
1304 03Jan99========================================================================
1305 1. Upped the version no !!!!
1306 2. made the DXProtocol routines much less sensitive to '~' characters (JE1SGH)
1307 3. added '^' -> ':' conversions on ann, talk and dx commands
1308 4. You can now send messages containing blank lines.
1309 5. Fixed merge command problem reported by G0RDI
1310 28Dec98========================================================================
1311 1. Crossed fingers, got rid of the instabilities caused by execing programs
1312 at vast speed (reduced it significantly anyway).
1313 2. Personals will now move if homenode is known.
1314 3. Added Local.pm for doing local specials
1315 27Dec98========================================================================
1316 1. Various detail changes to remove some more warning with -w on
1317 2. Added DXCron handling - you can do crontabs now.
1318 3. Added show/program command so you can see where it is loading your .pm files
1319 from.
1320 4. Added pc26/27 replies to locally connected cluster's merge (pc25) requests
1321 5. Added spotters DXCC and original cluster to Spot data files.
1322 23Dec98========================================================================
1323 1. Reindented various things
1324 2. Added missing $main::mycall on the end of outgoing PC11s (!)
1325 3. Check that PC16/17 node calls really are nodes (AFAIAC).
1326 22Dec98========================================================================
1327 1. Added brackets round callsign if not here for prompt
1328 2. Added Iain's set/password routine
1329 3. Fixed sh/dx problems (the xemacs indent region messed Spot.pm up!)
1330 4. Issued 1.15
1331 21Dec98============= late! ====================================================
1332 1. fixed problem with missing DXDebug in DXProt.
1333 2. Fixed DXDebug so that it actually works as advertised with and without 
1334 trailing \n. 
1335 3. Added deduping of WWV spots as well (at for date,time,sfi,k and i) dups
1336 4. Replaced the 0 in "02-Dec-1998" with ' ' so it reads " 2-Dec-1998", it seems
1337 hard to credit it but some 'programs' out there that connect to clusters have
1338 problems with the leading '0'!
1339 5. In the same vain, included a strictly AK1A compatible sh/heading, apparently
1340 this is necessary for the same reason as 4.
1341 6. Started contrib tree stored the old show/heading in contrib/g0rdi/show.
1342 7. Because I now correctly dedupe spots and wwv (there's a hostage to fortune..)
1343 I have added a merge command. 
1344 21Dec98========================================================================
1345 1. Added "issue" to the client program for 'login' connections
1346 2. Added more docs for client program.
1347 3. Fixed problem introduced in 1.12 where a connect locally with a callsign of
1348 someone connected remotely would stop the cluster.
1349 4. issue release 1.13
1350 20Dec98========================================================================
1351 1. Removed all the warnings I get with perl -w (at least for just starting the
1352 cluster and running a few commands).
1353 2. Added per node hop control.
1354 3. Added some docs on how to use it and isolation
1355 4. Made talk command more intelligent in that if the user isn't seen and the
1356 user's last node is visible it tries the talk anyway.
1357 19Dec98========================================================================
1358 1. Fixed problems with sh/rcmd (talk/ann/log) with a callsign as argument and
1359 also made what G0RDI wanted work as well!
1360 2. Added isolate flag to allow isolation of different networks at a gateway.
1361 3. Changed make Makefile.PL to perl Makefile.PL in instructions
1362 4. Copied latest instructions to html directory
1363 5. Had another attempt at making clients disconnect without hanging everytime.
1364 6. Changed msg queuing semantics so that the system routes on exact callsign.
1365 7. Changed the protocol version so that it increments with the DXSpider version.
1366 14Dec98========================================================================
1367 1. Made the telnet thing work a bit better. It still will not work reliably to
1368 a real telnetd on port 23.
1369 2. Allowed network logins on client by specifying login instead of call.
1370 3. made msg handling more robust (PC30 with unknown streams cause PC42), queueing
1371 is only done on channels that are in state 'normal'.
1372 4. Added pc command which takes a callsign and some text and sends it without
1373 mods to the callsign, useful for sending manual PC protocol to unstick things.
1374 Also for sending anonymous messages to online users.
1375 5. Stopped duplicate messages being stored (it receives them and then bins them)
1376 6. Implemented PC49 delete/full from outside (kill full on the inside)
1377 7. Implemented the client command in connect scripts so that you can have 
1378 different scripts for the same callsign.
1379 8. Added sh/wwv command
1380 13Dec98========================================================================
1381 1. Fixed VS6 lat/long in prefix_data and wpxloc.raw
1382 2. Sorted out last in times for remote users
1383 3. editted and substitued G0RDI's version of the install instructions over
1384 mine in spider/html
1385 4. fixed telnet connections
1386 5. added connect instructions to html tree.
1387 6. Added some more help
1388 7. Upissued version
1389 12Dec98========================================================================
1390 1. Incorporated sh/st, (un)set/lockout, forward/opername from Iain G0RDI
1391 2. Added group handling with (un)set/group, show/group. This allows arbitrary
1392 groups to be formed (for ann/<group> for example) and is also used to 'filter' 
1393 spots, announces, wwvs etc into groups of cluster nodes (useful for creating 
1394 disjoint cluster networks)
1395 3. **** CHANGE mylongtitude to mylongitude in DXVars.pm ****
1396 4. Altered QRA locator routines so they work correctly!
1397 5. Fixed all commands that had the wrong mylat(itude) and mylong(itude) names
1398 in.
1399 07Dec98========================================================================
1400 1. Added set/name, set/qra, set/location, set/qth, set/homenode, set/bbs, 
1401 set/email
1402 2. changed the Msg socket close to a shutdown (hopefully more reliable), this 
1403 should stop clients hanging on exit.
1404 3. Added Alias support for help
1405 4. Added lltos and stoll routines to DXBearing
1406 5. Added auto prompting for name, qth, location and homenode if any of these
1407 aren't known.
1408 06Dec98========================================================================
1409 1. Fixed DXBearing::is_qra so that it correctly detects full QRA locators
1410 2. Added sh/qra for doing locator distances and bearings
1411 3. Added some stuff to Notes.txt on hints for command writers
1412 4. Changed help system to use just one file per language
1413 5. Started adding more help
1414 6. Fixed 24Mhz band limits
1415 7. Added apropos command and lots of new help text
1416 05Dec98========================================================================
1417 1. Added sh/heading and QRA locator calculation stuff
1418 04Dec98========================================================================
1419 1. Started Changes file
1420 2. Added load/cmd_cache.pl to clear cmd cache shortcuts (use this if cluster.pl
1421 get confused about where it is getting its commands from eg if you have
1422 removed a file from local_cmd 'cos you want to go back to standard one)
1423 3. Fixed bull handling at least to the extent that it stores them and
1424 doesn't mess up the normal directory handling.
1425 4. Fixed the unset/debug command so that it actually does the job!
1426 5. Removed the middle line 'written in perl for unix' from show/version.pl