domtool-config: export truststore

Remove Config.{dispatcher,defaultNode}

defaultNode was punned to dispatcherName, and dispatcher relied on
other values in the file. I.e. you had to set all three to change the
dispatcher! Consolidate all into dispatcherName.

Build domtool-config by default

boostrap: fail on error, create cert for local machine

bootstrap: ensure ca config exists before continuing

domtool-adduser: use domtool-config to find ca

domtool-addcert: use domtool-config, support non-afs cert/key dirs

Removed `chown -R domtool.nogroup' calls since they are meaningless in
afs and incorrect on normal file systems. chown -R the key dir to the
user.nogroup unless `-unsafe' is passed, which allows the creation of
useless keys (the user running the script can read the key instead of
the intended user, which is ok for development).

Still needs improvement.

scripts: use getent instead of hardcoding an afs homedir

Scripts to bootstrap a development domtool environment

domtool-config: dump nodes, site domain, and certificate paths

Add caDir and move serialDir into Config.Bind

Include CONFIG_CORE signature in domtool.cfs and fix webbw build

Initial domtool-config tool

Query static configuration information from domtool at run time. Will
be used for new installation bootstrap and make install.

Makefile improvements

* Respect CFLAGS
* Require DEBUG=1 instead of just DEBUG being set
* Add TC=1 to instruct mlton to only type check
* BUILD32, in theory, could be used to build 32-bit binaries with
  mlton on a 32-bit host, but is not working currently

Factor path prefixes into ConfigCore structure

Not fully worked out yet, but this is the first step toward making it
easier to relocate domtool.

Add \\ config argument to moinMoin and wordPress

Move domtool-server from deleuze to fritz

domtool-doc: fake privs

With environment defaults in the basis library, permissions need to be
faked to allow typechecking of your_FOO refinement types to succeed.

Allow faking your_{user,path,group} and homedir

Autodoc hates the your_FOO refinement types, and I see no reason why
users wouldn't want to fake these values if they are already faking
domain permissions. Additionally, set the homedir to /tmp if the user
is unset and we're faking privs.

Annotate defaults

Autodoc support for default env var declarations

Allow all users to use "nogroup" as `your_group'

Move default environment settings from SML to Domtool

* Removed all Config settings that were only used to set env defaults
* Communicate values that must be generated SML-side using extern vals
* Remove Defaults module entirely

Move ambient environment defaults into Env.env

* Compute initial type in `checkFile' rather than passing in `env_vars'
* Not happy with function names (initialDynEnvFOO is not very nice
  looking)

Parse new `var' primitive

Binds CSymbol to default for an environment variable.

Remove .cvsignore, add .gitignore

Whoops...

Fix missing copyright info

Serve moin 1.9.8 htdocs prefix with apache

Use mod_disk_cache for wordpress wp-content and moin static files

Fix definition of DefaultAliasSource

Easy_domain: Use DefaultAliasSource for DefaultAlias
A catch-all alias by default is deprecated. Rather than eliminating a
default email alias entirely, it will soon default to
$hcoop-username@$domain. Use new DefaultAliasSource environment
variable to change. The default is still a catch-all temporarily.

Quiet compiler warning for Firewall.format{Input,Output}Rules
I think the type needs rethinking to make the case exhaustive

Re-enable querying user firewall rules

Add AuthGroupFile
RequireGroup is kind of useless without it

Point docstrings at Apache 2.2 documentation

Remove moinMoinOld directive

Remove references to mire from source code
* Nuke it from orbit!
* Also: why are we destroying all webalizer output in domtool-reset-global?!

Check user exists before opening incoming ports
* Although we can't limit who actually listens on the port, better to
  not open any ports for members who might be gone

Overhaul fwtool
* Parse into structured representation, and then convert later
* Printing code is still ugly, the rest is much easier to follow IMHO
* Fix ProxiedServer rule generation ("www-data" on a web nodes needs
  port opened too)
* Fix LocalServer rule generation (allow user to connect to their own
  server)
* Probably secretly sucks in some way
* UNTESTED

Fix ProxiedServer firewall rule generation for web node

Switch default web node from mire to navajos
Bombs away!

Hide .svn and .git dirs on wordpress sites

Remove php4 support Good riddance

SSLCertificateChainFile support
Like kerberos auth, this works around non-SSL vhosts by printing a
warning and ignore the directive.

bare fwtool regen
Regenerate all nodes at once

Support MultiViews
Closes https://bugzilla.hcoop.net/show_bug.cgi?id=845

Update lib

Remove fritz from webNodes, remove mire from slave dns
Kill all of the old machines, I say.

Change package-exists to return section/description
Kind of ugly, will break in wheezy (fields are localized and names
change), but we need this information for the portal. Possible evil
use of MsgNo without MsgYes.

Add missed signature change

Move Acl.read from start of slave loop to firewall handling case
Reading it before blocking waiting for a message could result in stale
permissions being used for a single request.

Add query for existence of package
Used by the portal to determine if a package exists, rather than
querying the local apt. The implementation is copied from the portal
mostly, and is probably less than ideal: I think the return value of
apt-cache could be used, but the man page is unclear and this works
so...

Do not generate zone files on bind slaves
* bind slaves perform domain transfers from the master server, so
  there is no need to generate and push zone files to them. In theory.

Remove `bind_config' group chowning from domtool-publish
* This was added so that jsl and others could adminster the bind
  config without full root. No one is doing that now, no reason to
  require a non-standard group for the time being.

Add new outpost as domtool-slave and dns slave

Remove outpost
It disappeared on us :(

Add bog as domtool-slave
* firewall and proxy target for user servers

Drop default TTL to one hour
* We're transitioning to a new node, and dyndns says an hour is
  reasonable on the modern Internet anyway.

Add new moinmoin static files prefix to world readable files

Use sh instead of pagsh for init scripts
pagsh provides no benefit since domtool is started using k5start, and
should have been removed ages ago. Slipped through the cracks until it
broke something.

Fix domtool-postgres script
Export PGPORT is not enough, because sudo clears the environment. Whoops.

Clean postgres driver variables and add postgres-9.1 support
* Like with mysql, remove magic spaces at the end of the config
  settings
* Curry the definitions of the postgres dbms functions for
  multi-version support
* Register new postgres-9.1 dbms backend

Remove spaces from dbtool mysql driver config
This was used to avoid an extra " " in the shell command in SML. I
think that's just asking for subtle bugs.

Update Easy_Domain to support trivial configuration of default node

Force php in wordpress locations to version 5

Add navajos to library

EVar -> EString in default for DefaultWebNode
Even sml lets you do stupid things!

Register default value for DefaultWebNode environment variable
This will allow users to change the value used for the defaultA and vhost

Remove automatic insserv in Makefile
It was a bad idea. Added a --bootstrap option to the deploy script instead

Firewell: Concat $WEBNODES list using space instead of comma

Use jump instead of goto in firewall
They do the same thing, but ferm renamed the keyword to reflect what
it does better.

bourne shell vs bashism fix

Correct location of firewall rules
Helps to use the right pathname, usually.

Read ACL in slave service loop
At least the firewall needs to query permissions. Acl.read has the
handy attribute of clearing the current ACL. I think the main service
function sould also be re-reading the permissions on each loop, or
perhaps not because it may call setupUser instead? Investigate.

Better error message for fwtool

Generate config into domtool work directory and copy later
Also update paths in the config to where the live files are

Open outgoing ports on web nodes for firewall ProxiedServer directive
Opens outgoing ports for user on all user-accessible web nodes, but
right now that's just one machine.

For install_{server,slave}, insserv so domtool starts on boot
Brave GNU dependency based boot future

Expand valid proxyHosts
* Instead of matching `localhost', match from a list of possible hosts

Fix firewall input rules, add ProxiedServer directive
* mod uid-owner only works for output connections, hack it for now and
  just open the ports for everyone
* ProxiedServer allows connections from all webNodes, but does not
  open up output ports from them

Add navajos to domtool reset global
* Should clean this up in general

Fix chown group in publish script

Add navajos as domtool slave and user web node
* A brave new future awaits us

Merge branch 'master' of /afs/hcoop.net/user/h/hc/hcoop/.hcoop-git/domtool2

Fix all domtool scripts for modern Debian and HCoop practices
* There is no longer any local `domtool' group, use `nogroup' instead and
  chmod files user readable only
* The init scripts assumed `/usr/local/[s]bin' were in `$PATH', which
  is not true on a default Debian install. Rather than require
  customization of system defaults, just use long paths. It would be
  nice if the Makefile supported relocatable installs, but I also want
  a pony for xmas.
* `domtool-admin-sudo' never worked properly. It seems to rely on the
  mistaken assumption that starting a `pagsh' gives you a new
  PAG... when `pagsh' has the unintuitive behavior of adopting the
  current PAG instead of creating a new one if one should
  exist. Things appeared to work since there was always a local
  domtool user, and some interaction between the init scripts
  acquiring tokens outside of a PAG and sudo led to use of the uid
  ticket cache. The solution is just to use `k5start' instead of
  `kinit && aklog'

Fix unintentional punning of masterNode and dispatcherName
* masterNode is the DNS master, not the domtool dispatcher, but it was
  overloaded
* Luckily, there is a dispatcherName and a simple substitution fixes it

Per-host firewall rules
* The implementation is ugly (terribleness with tuples, filtering at
  generation time, etc.), but my SML-fu is too weak to do this
  properly in a time efficient manner
* Needs to check if user has some domtool permission to that node, ideally

`fwtool' main
* Basic driver

Firewall Regen Support
* Clean up code slightly (still ugly, I'm no good with SML)
* Accept `MsgFirewallRegen' to regenerate firewall on slave
* Not tested much, should also generate the firewall elsewhere and
  copy to `/etc'

Port firewall generation from Domtool1/fwtool
* fwtool was a bit of a hack -- try to clean things up...
* Parsing and generating the config are split (somewhat)
* Only one set of rules for all nodes with a firewall

vmailpasswd: actually call domtool-publish

Merge branch 'release'

Remove hopper from domtool email configuration

Force use of actual echo instead of shell builtin
* The default echo builtin used by make doesn't support -e any more!

Enable fritz as an admin web node

Configure outpost as a dns slave
* And remove hopper as it is not in dnsNodes_all and does not have
  bind installed

Merge branch 'dbms-in-slave'

Move Mysql-fixperms into slave
* Occurs on dbmsNode as with other database operations

Add fritz as a slave node
* Not used for anything yet, ensuring that the slave is setup correctly

Readd outpost_ip to hcoop base library