don't complain about $user.daemon missing a domtool dir

Not committed to this yet, but current hcoop.daemon exists with no
path or other permissions simply to allow queries to domtool and
management of vmail accounts. Ignore lack of .domtool directory.

Enable mccarthy as mailnode for all users

Set fritz as default DNS master, make deleuze a default slave

ns1.hcoop.net is moving to fritz, set as default internalMaster. Keep
deleuze as a default slave for transition as some members are using
deleuze.hcoop.net at their registrar.

Add mccarthy, enable for mail use by users with priv mail

systemd service files for server/slave

Welcome to the future, whether we like or not.

Service files should provide functionality similar to the current init
scripts. Current no service monitoring is implemented (if possible,
regularly `domtool-admin ping'ing service and restarting if no response
would be nice).

/var/log/domtool.log is gone, replaced by use of the system journal.

Add ProxyPreserveHost apache directive
* Link other proxy directives to apache docs while I'm at it.

Add fritz as a dns node and enable as a slave

Master DNS will be moving to fritz in the near future.

Update proxy.dtl with new proxy_reverse_target type

Release

Support ! as a ProxyPass target

Reported by notd, ProxyPass can take ! to indicate not to proxy
anything under a path. Split proxy_target and proxy_reverse_target
types since ProxyPassReverse does not allow ! as a target.

Release

portal: return success/failure of changing vmail password

I hear it's useful to tell the difference between failure and success.

Release

apt: Handle Description-en replacing Description in apt-cache output

Ideally we'd care about languages other than English, but this works.

Release

reset error state before generating basis library

Errors occuring during publishing in the dispatcher can leak into the
next run. Reset the error state in basis to avoid returning an empty
basis library now that it is evaluated at each MsgConfig.

This may be the wrong solution -- not sure why errors get to hang
around after a run anyway.

scripts: Fix lazy chown syntax

user.group doesn't work when user has a dot in it. Use : in
domtool-addcert, and update other scripts for consistency.

vmailpasswd: fix bad interpreter

portal: Use readLine and not getPass when stdin is not a terminal

It is way harder than neccessary to make the portal call
domtool-portal when it spews output. Just assume input produced via a
pipe is from a program that knows what it is doing.

client: function to check if stdin is a tty

Client.getPass: catch syserror inval when detecting non-tty use

libc in Debian before Jessie returns einval instead of enotty

Remove mccarthy as node before release

It's not actually ready yet, and we have to release now.

Change DefaultAliasSource to $user@hcoop.net, add defaultMailUser extern

 * The type checker can be annoying, but I am not capable of the feats
   of hacking required to make it expand externs at type checking
   time (nor am I certain that's even a good idea)
 * Feature idea: allow binding a name passed to registerFunction in
   multiple `extern val' declarations. Extern already assumes the
   extern will be correctly type, so there's no additional peril.

Client.getpass: allow use on non-tty devices

Warn user the password will be echoed just in case. This allows
getpass to be used with input piped to it (e.g. from the hcoop members
portal).

Add vmail command for changing password when you know the current password

Not 100% sure if this the best way, but the members portal was tied to
*the* mail node, which is not good to begin with, and breaks when
there are multiple mail nodes.

 * Replaces vmailpasswd.c, which is an awful program (passed password on
   the command line revealing it to `ps' and only supports a local
   filesystem userdb).
 * Restricted to users with the priv `vmail' for now, and only used by
   the portal. Not much worth in exposing generally it seems (vmail
   users cannot login to any shell machines, at least at hcoop)
 * Includes helper python program to run crypt() (better than C at
   least...)
 * New function to parse the userdb into a StringMap (a better
   approach is possible, similar to the Vmail.list). Will be used to
   compile the database for Dovecot later.
 * New binary `domtool-portal' to expose replacement vmailpasswd command

Manage spamassassin preferences in shared space

Disentangle vmail from the mail node, Prepare for dovecot support

* Use new Slave.run and Connect.commandWorker where possible
* Always reload vmail db in worker, never in dispatcher
* Move non-courier-specific configuration variables to Config.Vmail.
  The master userdb is still managed using courier-authlib-userdb.
* Manage vmail db in afs, syncing as needed.

domtool-config: print errors on stderr, return failure code, export vmaildb

Slave.run: run a command using Unix.execute

Similar to Slave.shell, only it passes the arguments list directly to
Unix.execute.

Connection utilities (or: copying and pasting code is bad)

Finally get around to factoring out functions to connect to the
dispatcher, connect to a worker, and send a "simple" message to
workers (one where MsgOk/MsgError are the only valid replies).

mod_auth_kerb: Enabled KDC Verification and Negotiate

Every <Location> that enables kerberos auth has to include the
keytab/service declarations. Since we're verifying the KDC, allow
gssapi negotiate.

Add mccarthy as admin web server and mail node

New `make install_serverslave' target, don't use sudo in make install_{server,slave}

The dispatcher node is likely also running a worker node, and both
must be stopped before installation or else one of them segfaults when
its binary is overwritten.

Fix domtool-addcert for when user running is not in `wheel'

Domtool on deleuze assumed admin users would be in group
`wheel'. This is no longer true. Instead, make the CA readable only by
root, generate the new keys and certs into a non-afs temp directory,
and then move everything into afs afterward.

Unify web_node/default_node, and provide a default for WebPlaces

Fix typo in defaults

Move more bind config into domtool, remove hardcoded /var/domtool references

dns_master_node and dns_slave_nodes do not need to be defined in SML,
and were removed.

Instead of checking Config.Bind.masterNode and skipping generating a
zone file on bind slaves, don't generate the incorrect soa.conf at
all (same effect, but the correct way).

Evaluate `val' and `var' bindings in the environment in which they were defined

Until this change, you could create a program such as:

  val mine : your_domain = "mydomain.org";
  val not_mine = mine;
  val mine = "not-my-domain.org";

  dom not_mine with end;

And domtool would happily configure "not-mydomain.org" for you.

Reduce toplevel environment decls and allow them in user config

The root of the dynamic environment is passed separately to Eval.exec'
to allow user config to re-declare dynamics (like regular vals). This
uncovered (and perpetuates) a bug with process DVal/DEnv:

  val foo = "foo";
  val bar = foo;
  val foo = "bar";

When bar is expanded, it now has the value "bar" instead of
"foo", which is wrong.

merge toplevel-dynamic-environment

Example config file for a single-machine development setup

bootstrap: run server to add first user

domtool-config: export truststore

Remove Config.{dispatcher,defaultNode}

defaultNode was punned to dispatcherName, and dispatcher relied on
other values in the file. I.e. you had to set all three to change the
dispatcher! Consolidate all into dispatcherName.

Build domtool-config by default

boostrap: fail on error, create cert for local machine

bootstrap: ensure ca config exists before continuing

domtool-adduser: use domtool-config to find ca

domtool-addcert: use domtool-config, support non-afs cert/key dirs

Removed `chown -R domtool.nogroup' calls since they are meaningless in
afs and incorrect on normal file systems. chown -R the key dir to the
user.nogroup unless `-unsafe' is passed, which allows the creation of
useless keys (the user running the script can read the key instead of
the intended user, which is ok for development).

Still needs improvement.

scripts: use getent instead of hardcoding an afs homedir

Scripts to bootstrap a development domtool environment

domtool-config: dump nodes, site domain, and certificate paths

Add caDir and move serialDir into Config.Bind

Include CONFIG_CORE signature in domtool.cfs and fix webbw build

Initial domtool-config tool

Query static configuration information from domtool at run time. Will
be used for new installation bootstrap and make install.

Makefile improvements

* Respect CFLAGS
* Require DEBUG=1 instead of just DEBUG being set
* Add TC=1 to instruct mlton to only type check
* BUILD32, in theory, could be used to build 32-bit binaries with
  mlton on a 32-bit host, but is not working currently

Factor path prefixes into ConfigCore structure

Not fully worked out yet, but this is the first step toward making it
easier to relocate domtool.

Add \\ config argument to moinMoin and wordPress

Move domtool-server from deleuze to fritz

domtool-doc: fake privs

With environment defaults in the basis library, permissions need to be
faked to allow typechecking of your_FOO refinement types to succeed.

Allow faking your_{user,path,group} and homedir

Autodoc hates the your_FOO refinement types, and I see no reason why
users wouldn't want to fake these values if they are already faking
domain permissions. Additionally, set the homedir to /tmp if the user
is unset and we're faking privs.

Annotate defaults

Autodoc support for default env var declarations

Allow all users to use "nogroup" as `your_group'

Move default environment settings from SML to Domtool

* Removed all Config settings that were only used to set env defaults
* Communicate values that must be generated SML-side using extern vals
* Remove Defaults module entirely

Move ambient environment defaults into Env.env

* Compute initial type in `checkFile' rather than passing in `env_vars'
* Not happy with function names (initialDynEnvFOO is not very nice
  looking)

Parse new `var' primitive

Binds CSymbol to default for an environment variable.

Remove .cvsignore, add .gitignore

Whoops...

Fix missing copyright info

Serve moin 1.9.8 htdocs prefix with apache

Use mod_disk_cache for wordpress wp-content and moin static files

Fix definition of DefaultAliasSource

Easy_domain: Use DefaultAliasSource for DefaultAlias
A catch-all alias by default is deprecated. Rather than eliminating a
default email alias entirely, it will soon default to
$hcoop-username@$domain. Use new DefaultAliasSource environment
variable to change. The default is still a catch-all temporarily.

Quiet compiler warning for Firewall.format{Input,Output}Rules
I think the type needs rethinking to make the case exhaustive

Re-enable querying user firewall rules

Add AuthGroupFile
RequireGroup is kind of useless without it

Point docstrings at Apache 2.2 documentation

Remove moinMoinOld directive

Remove references to mire from source code
* Nuke it from orbit!
* Also: why are we destroying all webalizer output in domtool-reset-global?!

Check user exists before opening incoming ports
* Although we can't limit who actually listens on the port, better to
  not open any ports for members who might be gone

Overhaul fwtool
* Parse into structured representation, and then convert later
* Printing code is still ugly, the rest is much easier to follow IMHO
* Fix ProxiedServer rule generation ("www-data" on a web nodes needs
  port opened too)
* Fix LocalServer rule generation (allow user to connect to their own
  server)
* Probably secretly sucks in some way
* UNTESTED

Fix ProxiedServer firewall rule generation for web node

Switch default web node from mire to navajos
Bombs away!

Hide .svn and .git dirs on wordpress sites

Remove php4 support Good riddance

SSLCertificateChainFile support
Like kerberos auth, this works around non-SSL vhosts by printing a
warning and ignore the directive.

bare fwtool regen
Regenerate all nodes at once

Support MultiViews
Closes https://bugzilla.hcoop.net/show_bug.cgi?id=845

Update lib

Remove fritz from webNodes, remove mire from slave dns
Kill all of the old machines, I say.

Change package-exists to return section/description
Kind of ugly, will break in wheezy (fields are localized and names
change), but we need this information for the portal. Possible evil
use of MsgNo without MsgYes.

Add missed signature change

Move Acl.read from start of slave loop to firewall handling case
Reading it before blocking waiting for a message could result in stale
permissions being used for a single request.

Add query for existence of package
Used by the portal to determine if a package exists, rather than
querying the local apt. The implementation is copied from the portal
mostly, and is probably less than ideal: I think the return value of
apt-cache could be used, but the man page is unclear and this works
so...

Do not generate zone files on bind slaves
* bind slaves perform domain transfers from the master server, so
  there is no need to generate and push zone files to them. In theory.

Remove `bind_config' group chowning from domtool-publish
* This was added so that jsl and others could adminster the bind
  config without full root. No one is doing that now, no reason to
  require a non-standard group for the time being.

Add new outpost as domtool-slave and dns slave

Remove outpost
It disappeared on us :(

Add bog as domtool-slave
* firewall and proxy target for user servers

Drop default TTL to one hour
* We're transitioning to a new node, and dyndns says an hour is
  reasonable on the modern Internet anyway.