Git and Version string changes

1. Removed dependency on perl Git package.
2. Force code to change directory to $DXSPIDER_ROOT || '/spider'. Also force
   git -C $root describe.
3. Change git commands AGAIN to work on old perls (which mojo won't work on,
   but it makes my life easier).
4. Change version strings to include the perl version in use.

force repo to use on git -C $root describe

force node to chir to $root

remove dependency on perl Git package

get enhanced mode "work" in basic console.pl

Fix slots around the time

Fill the slots around the time in the order set/dxgid, set/usstate, set/dxcq or set/dxicq

move isregistered to DXChannel.pm

to allow people to announce themselves in cron..

fix registration checking on call+ssid

Fix spurious Text::Wrap warning on console.pl

fix Text::Wrap::columns typo in console.pl

fix usdb, console.pl, sh/dx /p and sh/register

06Nov21=======================================================================
1. Improve console.pl scrolling. Split long lines (eg on announcements.
04Nov21=======================================================================
1. Fix illogicalities in USDB creations and make sure that O_CREAT on tie does
   NOT encounter an existing file to barf about. Even though it shouldn't.
   Thanks Howard WB3FFV.
2. Fixed a typo in show/registered that prevents a list of callsigns being
   searched for. Got rid of some over complex code. Thnake Fabrizio iZ0UIN.
3. Fix long line wrapping in console.pl
03Nov21=======================================================================
1. Move motd and issue files to local_data if not already there.
30Nov21=======================================================================
1. Fix sh/dx with callsigns that have /p or VE/G1TLH in them.
2. Add unset/ak1a, unset/arcluster aliases and some minimal help for UNSET/
   SPIDER, NODE, ARCLUSTER, AKIA and also SET/USER.

*really* changed the DX Spot to "the way it was"

restore old dx spot format, add CTY-3127 prefixes

Fix create_sysop.pl to work on base git install

add a digit to qrg in sh/dx

fix comment width issues for tabs

prat!

fix length calc in spot::formatl

force all channels to default width 80 columns

add width changing dx display in console

fix RBN callsigns and 'basecall()'

fix typo in Changes

fix self spotting by proxy (using by command)

Add ipaddr to error message

stop self spotting bwlow 23cms (configurable)

add cty3126, enable spot cache as default

fix spot cache clean, some detail rbn changes

don't fork sh/dx on simple query

If the query does not contain an "expression" (or even just a
callsign and is garanteed to be satified by the cache - if it is
enabled - then do not fork / run as a sub command.

So 'sh/dx', 'sh/mydx' with or without a count will be run from
the cache - if it is enabled.

"working" version of spot cache

experimental branch to improve spot query

This includes some SQLite changes as well as spot searching

fix Dan's crontab problem, add CTY-3117

chang date in Changes!

fix localdata(), add CTY 3105 prefixes

It appears that DXUtil::localdata had the mod time test the wrong
way around (how was this not noticed before???). That has been
fixed and the variable names make what is happening a bit more
obvious.

remove active debugging from mds

fix DXCron, lockout and close_gracefully

1. Fix DXCron::spawn_cmd so that more than one spawn_cmd can be active at a
   time. This affects many nodes where lots of regular spawn_cmds happen at
   a time and this prevented crucial things like 'start_connect' from working!
2. Sort user lockout issues to cope with all likely scenarios - including
   "phantom" SSID working.
3. Fix "close_gracefully" error messages which are useless, but benign. These
   happen (mainly) when outgoing connects timeout.

modify RBN timing arrangements

There are two new twiddle pots:

$limbotime (default 5*60 secs) which allows potential spots to
hang around longer to allow $minqual *different* skimmers to spot
them. At which point they are emitted. This is to catch the "slow
burning" spots where a call is spotted by different skimmers but
separated in time by more than $dwelltime - in fact maybe by
minutes.

$maxqual (default 9 skimmers) which short circuits the normal
hard maximum $quality (9 skimmer spots) and $dwelltime (10secs)
to allow a spot that has $maxqual *different* skimmers (usually
as the result of a burst from the RBN) to defeat $dwelltime and
be emitted the moment that condition is satisfied. There maybe
a better name for this.

add data section on 160m in bands.pl

use IO::Socket::IP and fix null reply

nominally working wsjtl with tcp listener

wsjtl WIP

get wsjtx to work

add missing WSJTX.pm

all dxdebug to have other directories, add wsjtl.pl

Watchdbg, grepdbg args change, fix pc92c for rbn

As Changes says:
1, Change interface to watchdbg & grepdbg slightly so that multiple search
   regexes are ANDed rather than ORed together. ORing is easily achieved
   already by the usual regex pattern 'PATT..|PATT..|..' whereas ANDing could
   not be done as easily without resorting lots of 'PATT.*PATH' things which
   would not necessarily get what was wanted.
2. Make sure that the pc92 C record only contains nodes and users and not
   other extranoeus things like skimmers...

make the RESPOTTING work again

Whoops. That explains the order of magnitude increase in spots!

write rbncache in raw json unless set/deb rbncache

simply the RBN skimmer scoring system

fix last fix!

remove $items warning in RBN

fix missing fields in rbn_cache, add timings

set/debug rbntimer will show how long a queue takes to process (remember
that this includes sending data out to users).
set/debug rbnskim shows the process of determining the "one true frequency" of
a spot, by running a weighed "auction" of all the spotters's performance
in previous "auctions". A spotter's frequency "score" can be between 5 and -5
(good -> bad) and that is added to each version of the frequency that is
sent by the RBN. The frequency with the highest score is the one posted.
It is the 'QRGScore' in the "progress" spot message.

new RBN weighted QRG scoring system.

add uptime cmd, add bells to sh/data

Add latest RBN chnages and data stats

Add CTY-3013 Prefixes

fix mojo complaints in check_cache

rbn, ve7cc improvements and fixes

1. Add show/rbn command that allows one to see who is online and configured
   for RBN. See help sh/rbn for details.
2. Fixed issue with set/ve7cc mode adding unwanted newlines to output.
3. Attempted to make the QRG normalisation more "intelligent". This would be
   sooooooooo much easier if skimmers were calibrated more accurately.
4. Added CTY-3012 prefixes.

put sh/rbn into git!

add sh/rbn command

Fix Filtering, RBN changes

Filter has changed so that it is now a "simple" transliteration
into perl expressions and relies on perl to do what is required
It is quitely that some more work will be required for error
handling, but the I no longer attempt to do any bracket handling
and leave that up to perl. This means that brackets are fully
working (as opposed to NOT working at all).

Regexes are now robustly translated where necessary. In order to
do this I have ditched Data Dumper because it did not seem to cope
with the regex translations correctly. '\s' would seem have been
translated to '\\s' and not what the regex actually said. So I
have changed the file format to JSON. As this is now the 3rd or
4th JSON change I have made, I have created a "standard" encode and
decode in DXJSON.pm and retrofitted it to all the other places
which had their own purpose built one. DXJSON.pm is just a very
light shim over the standard one.

The RBN changes are:

1. don't short-circuit the zone iteration by a  filter firing.
2. make sure that filtering and not filtering work identically
3. Add constants to the caches records to make it more obvious
   what is going on.

minor debugging change

stop crash if node adds itself in pc92

remove '#' in bands.pl !!!!!!

a more robust console.pl idle loop fix

make all the comparisons 'eq' and check that RESIZE still works

fix spurious == errors on console.pl input

This only happens if it catches a character during the idle loop
which is the only way to catch Curses RESIZE signal. But a stray
"normal" character might get through as well.

stop dbg init when not in debug mode.

This fixes problems reported when running console.pl not as the
sysop user.

kill some 5.28 warnings

add --all to the git pill in UPGRADE.mojo

Update the docs for the latest version

* major change: convert the users file to Json.
* NEW: add an RBN client.

Merge branch 'users.v3j' into mojo

add warning about filters and set/skimmer

fix help for priv 9 set/skimmer

rm rbn from Aliases, change help

Add a callsign to invalid characters in command handling

The last revision before merge back to mojo?

See Changes file for details

fix (bandaid for now) sh/cl local counts

fix (bandaid for now) sh/cl local counts

fix show/node

backport console.pl from users.v3j

more RBN.mojo changes

more RBN.mojo changes

update RBN.mojo

add current node to console.pl

add RBN.mojo

attempt to prevent echoing on ExtMsg login

This is to try to prevent any PROXY message being echoed

Add HAProxy type 1 "real ip" address changes

fix show/dxcc

fix show/dxcc

fix console.pl

Including removing the 80-1 limit on local connections, fixing the
scrolling and generally tarting console.pl up.
Change dx spot RBN format to "traditional" '-#' format.

fix longstanding issues with console EOL handling

Historically there has been an issue with line endings in console.pl
which meant that the spot line (for instance) had to be 1 character
less than the window width (e.g. 79 chars in an 80 char window).

This has now FINALLY been fixed.

In the process I have fixed the issues of extra things like
cq/itu/us state/dxgrid strings overwriting or coming out in a
stupid priority. So the priority is now from nearest/smallest
area -> largest wiz: QRA, US State, ITU or CQ zone. So you
can have them all on, but ITU zone will always trump CQ zone.

improve dbg tagging and dbgdump, Add call to conns

It would appear that the $conn did not always have a callsign set
on incoming connections. It does now.

add RBN stats + other fixes

Add some more comprehensive RBN stats (per minute, 10 minutes, hour).
Make the RBN spot cache global and make the inrush preventor code
work only on the first connection to skimmer provider.
Fix the $_isdbg clearing so that non-conditional logging messages
come out with a (*) in watchdbg and not the previous isdbg() sort.

Merge branch 'mojo' into users.v3j

Also convert QSL.pm and create_qsl.pl to JSON format.

fix ipv4 addresses masquerading as ipv6

various RBN fixes, fix links spacing

Add incoming RBN filtering from the RBN servers.
Use spot filtering if there is no RBN specific filtering.
Fix formatting issues in the 'links' command for isolated and skimmer nodes.

use spot filters for rbn in no rbn filters exist

make sure wantrbn is picked up again on restart

remove words about convert-v3-to-v4.pl from UPDATE.mojo

fix new RBN spot typos

RBN do filtering one per stored spot not per user

add RBN filtering

Set $Spot::readback back to 1

This is to solve the problem of losing found spots when traversing
multiple files.

TO BE FIXED!! So we can read forward again.

fix respotted spots

rbn collect qra info ftom FTx spots