EXTENSIVE user file and route cleanup, see Changes

Try to fix auto-locking (only for nodes)

Not users as well. Sheesh.

mark calls like DR4W-HB as invalid

fix RBN (and other) basecall issues

This fix allows the code to remove ssids from calls that may be
formatted like 2E1/G1TST/7-6-#. Basecall() will return the callsign
without the -6-#. It will also correctly deal with OH1H/7-2 et al.
returning OH1H/7

remove leading 0 from ssids on login

improve debugging for loops and route errors

prevent PC92 A/C changing our $my(alias|call)

It appears that some nodes are getting knickers in a twist in their
routing tables and causing routes and thus $my(alias|call) file types to
change. Prevent this from happening.

fix RBN marking in who cmd

fix DXVars.pm overrides line $clusterport

This is only of use for the paranoid and people running more than
one instance of DXSpider on one machine.

hide route changes, increase sh/ann cache to 130.

removed debug statement left in dx.pl

fix dx bug introduced by ip <ipaddr>

fix missing ; in spoof

nuke tabs in spot comments

final versions of Route caching functions

fix wcy logger position on print

route cache, wcy, wwv. ann caching

fix missing ';' in dx.pl

set def sendverity=0, some hostname changes

Make sure that an IP address (even 127.0.0.1) is always found.
Don't send PC41 if home isn't changed
set senderverify default = 0.

Fix dx.pl Spot::dup typo

add ip <ipaddress> to dx by <spotter>

This is for webclusters and can only be used by privileged users

prioritise PC61 over PC11

As promote PC11 to PC61 if the spotter's IP address is in the routing
table.

fix sort15 typo in DXProtHandle

Merge branch 'staging' of ssh://server/scm/spider into staging

staging new anti spot spam code

Git and Version string changes

1. Removed dependency on perl Git package.
2. Force code to change directory to $DXSPIDER_ROOT || '/spider'. Also force
   git -C $root describe.
3. Change git commands AGAIN to work on old perls (which mojo won't work on,
   but it makes my life easier).
4. Change version strings to include the perl version in use.

force repo to use on git -C $root describe

force node to chir to $root

remove dependency on perl Git package

get enhanced mode "work" in basic console.pl

Fix slots around the time

Fill the slots around the time in the order set/dxgid, set/usstate, set/dxcq or set/dxicq

move isregistered to DXChannel.pm

to allow people to announce themselves in cron..

fix registration checking on call+ssid

Fix spurious Text::Wrap warning on console.pl

fix Text::Wrap::columns typo in console.pl

fix usdb, console.pl, sh/dx /p and sh/register

06Nov21=======================================================================
1. Improve console.pl scrolling. Split long lines (eg on announcements.
04Nov21=======================================================================
1. Fix illogicalities in USDB creations and make sure that O_CREAT on tie does
   NOT encounter an existing file to barf about. Even though it shouldn't.
   Thanks Howard WB3FFV.
2. Fixed a typo in show/registered that prevents a list of callsigns being
   searched for. Got rid of some over complex code. Thnake Fabrizio iZ0UIN.
3. Fix long line wrapping in console.pl
03Nov21=======================================================================
1. Move motd and issue files to local_data if not already there.
30Nov21=======================================================================
1. Fix sh/dx with callsigns that have /p or VE/G1TLH in them.
2. Add unset/ak1a, unset/arcluster aliases and some minimal help for UNSET/
   SPIDER, NODE, ARCLUSTER, AKIA and also SET/USER.

*really* changed the DX Spot to "the way it was"

restore old dx spot format, add CTY-3127 prefixes

Fix create_sysop.pl to work on base git install

add a digit to qrg in sh/dx

fix comment width issues for tabs

prat!

fix length calc in spot::formatl

force all channels to default width 80 columns

add width changing dx display in console

fix RBN callsigns and 'basecall()'

fix typo in Changes

fix self spotting by proxy (using by command)

Add ipaddr to error message

stop self spotting bwlow 23cms (configurable)

add cty3126, enable spot cache as default

fix spot cache clean, some detail rbn changes

don't fork sh/dx on simple query

If the query does not contain an "expression" (or even just a
callsign and is garanteed to be satified by the cache - if it is
enabled - then do not fork / run as a sub command.

So 'sh/dx', 'sh/mydx' with or without a count will be run from
the cache - if it is enabled.

"working" version of spot cache

experimental branch to improve spot query

This includes some SQLite changes as well as spot searching

fix Dan's crontab problem, add CTY-3117

chang date in Changes!

fix localdata(), add CTY 3105 prefixes

It appears that DXUtil::localdata had the mod time test the wrong
way around (how was this not noticed before???). That has been
fixed and the variable names make what is happening a bit more
obvious.

remove active debugging from mds

fix DXCron, lockout and close_gracefully

1. Fix DXCron::spawn_cmd so that more than one spawn_cmd can be active at a
   time. This affects many nodes where lots of regular spawn_cmds happen at
   a time and this prevented crucial things like 'start_connect' from working!
2. Sort user lockout issues to cope with all likely scenarios - including
   "phantom" SSID working.
3. Fix "close_gracefully" error messages which are useless, but benign. These
   happen (mainly) when outgoing connects timeout.

modify RBN timing arrangements

There are two new twiddle pots:

$limbotime (default 5*60 secs) which allows potential spots to
hang around longer to allow $minqual *different* skimmers to spot
them. At which point they are emitted. This is to catch the "slow
burning" spots where a call is spotted by different skimmers but
separated in time by more than $dwelltime - in fact maybe by
minutes.

$maxqual (default 9 skimmers) which short circuits the normal
hard maximum $quality (9 skimmer spots) and $dwelltime (10secs)
to allow a spot that has $maxqual *different* skimmers (usually
as the result of a burst from the RBN) to defeat $dwelltime and
be emitted the moment that condition is satisfied. There maybe
a better name for this.

add data section on 160m in bands.pl

use IO::Socket::IP and fix null reply

nominally working wsjtl with tcp listener

wsjtl WIP

get wsjtx to work

add missing WSJTX.pm

all dxdebug to have other directories, add wsjtl.pl

Watchdbg, grepdbg args change, fix pc92c for rbn

As Changes says:
1, Change interface to watchdbg & grepdbg slightly so that multiple search
   regexes are ANDed rather than ORed together. ORing is easily achieved
   already by the usual regex pattern 'PATT..|PATT..|..' whereas ANDing could
   not be done as easily without resorting lots of 'PATT.*PATH' things which
   would not necessarily get what was wanted.
2. Make sure that the pc92 C record only contains nodes and users and not
   other extranoeus things like skimmers...

make the RESPOTTING work again

Whoops. That explains the order of magnitude increase in spots!

write rbncache in raw json unless set/deb rbncache

simply the RBN skimmer scoring system

fix last fix!

remove $items warning in RBN

fix missing fields in rbn_cache, add timings

set/debug rbntimer will show how long a queue takes to process (remember
that this includes sending data out to users).
set/debug rbnskim shows the process of determining the "one true frequency" of
a spot, by running a weighed "auction" of all the spotters's performance
in previous "auctions". A spotter's frequency "score" can be between 5 and -5
(good -> bad) and that is added to each version of the frequency that is
sent by the RBN. The frequency with the highest score is the one posted.
It is the 'QRGScore' in the "progress" spot message.

new RBN weighted QRG scoring system.

add uptime cmd, add bells to sh/data

Add latest RBN chnages and data stats

Add CTY-3013 Prefixes

fix mojo complaints in check_cache

rbn, ve7cc improvements and fixes

1. Add show/rbn command that allows one to see who is online and configured
   for RBN. See help sh/rbn for details.
2. Fixed issue with set/ve7cc mode adding unwanted newlines to output.
3. Attempted to make the QRG normalisation more "intelligent". This would be
   sooooooooo much easier if skimmers were calibrated more accurately.
4. Added CTY-3012 prefixes.

put sh/rbn into git!

add sh/rbn command

chnage skimmeranalysis a bit

WIP RBN, add skimmer analysis program

WIP change data structs for efficiency

Fix Filtering, RBN changes

Filter has changed so that it is now a "simple" transliteration
into perl expressions and relies on perl to do what is required
It is quitely that some more work will be required for error
handling, but the I no longer attempt to do any bracket handling
and leave that up to perl. This means that brackets are fully
working (as opposed to NOT working at all).

Regexes are now robustly translated where necessary. In order to
do this I have ditched Data Dumper because it did not seem to cope
with the regex translations correctly. '\s' would seem have been
translated to '\\s' and not what the regex actually said. So I
have changed the file format to JSON. As this is now the 3rd or
4th JSON change I have made, I have created a "standard" encode and
decode in DXJSON.pm and retrofitted it to all the other places
which had their own purpose built one. DXJSON.pm is just a very
light shim over the standard one.

The RBN changes are:

1. don't short-circuit the zone iteration by a  filter firing.
2. make sure that filtering and not filtering work identically
3. Add constants to the caches records to make it more obvious
   what is going on.

minor debugging change

stop crash if node adds itself in pc92

remove '#' in bands.pl !!!!!!

a more robust console.pl idle loop fix

make all the comparisons 'eq' and check that RESIZE still works

fix spurious == errors on console.pl input

This only happens if it catches a character during the idle loop
which is the only way to catch Curses RESIZE signal. But a stray
"normal" character might get through as well.

stop dbg init when not in debug mode.

This fixes problems reported when running console.pl not as the
sysop user.

kill some 5.28 warnings

add --all to the git pill in UPGRADE.mojo

Update the docs for the latest version

* major change: convert the users file to Json.
* NEW: add an RBN client.

Merge branch 'users.v3j' into mojo

add warning about filters and set/skimmer

fix help for priv 9 set/skimmer

rm rbn from Aliases, change help

Add a callsign to invalid characters in command handling

The last revision before merge back to mojo?

See Changes file for details