]> scripts.mit.edu Git - wizard.git/blobdiff - wizard/deploy.py
Major updates to resolution code from runs.
[wizard.git] / wizard / deploy.py
index fce0c3a2fed678c67e77d777f472613f9cb6c3f1..b4d21528310bc6bee43fdf2a2e733f7d5021463f 100644 (file)
+"""
+Object model for querying information and manipulating deployments
+of autoinstalls.  Every :class:`Deployment` has an :class:`ApplicationVersion`
+which in turn has an :class:`Application`.
+"""
+
 import os.path
 import fileinput
 import dateutil.parser
 import distutils.version
+import tempfile
+import logging
+import shutil
 
 import wizard
+from wizard import git, old_log, scripts, shell, util
+
+## -- Global Functions --
 
-def getInstallLines(vs):
-    """Retrieves a list of lines from the version directory that
-    can be passed to Deployment.parse()"""
-    if os.path.isfile(vs):
-        return fileinput.input([vs])
-    return fileinput.input([vs + "/" + f for f in os.listdir(vs)])
+def get_install_lines(versions_store, user=None):
+    """
+    Low level function that retrieves a list of lines from the
+    :term:`versions store` that can be passed to :meth:`Deployment.parse`.
+    """
+    if os.path.isfile(versions_store):
+        return fileinput.input([versions_store])
+    if user:
+        return fileinput.input([versions_store + "/" + user])
+    return fileinput.input([versions_store + "/" + f for f in sorted(os.listdir(versions_store))])
+
+def parse_install_lines(show, versions_store, yield_errors = False, user = None):
+    """
+    Generator function for iterating through all autoinstalls.
+    Each item is an instance of :class:`Deployment`, or possibly
+    a :class:`wizard.deploy.Error` if ``yield_errors`` is ``True``.  You can
+    filter out applications and versions by specifying ``app``
+    or ``app-1.2.3`` in ``show``.  This function may generate
+    log output.
+    """
+    if not show:
+        show = applications()
+    elif isinstance(show, str):
+        # otherwise, frozenset will treat string as an iterable
+        show = frozenset([show])
+    else:
+        show = frozenset(show)
+    for line in get_install_lines(versions_store, user):
+        # construction
+        try:
+            d = Deployment.parse(line)
+            name = d.application.name
+        except NoSuchApplication as e:
+            if yield_errors:
+                yield e
+            continue
+        except Error:
+            # we consider this a worse error
+            logging.warning("Error with '%s'" % line.rstrip())
+            continue
+        # filter
+        if name + "-" + str(d.version) in show or name in show:
+            pass
+        else:
+            continue
+        # yield
+        yield d
+
+## -- Model Objects --
 
 class Deployment(object):
-    """Represents a deployment of an autoinstall; i.e. a concrete
-    directory in web_scripts that has .scripts-version in it."""
-    def __init__(self, location, log=None, version=None):
-        """ `location`  Location of the deployment
-            `version`   ApplicationVersion of the app (this is cached info)
-            `log`       DeployLog of the app"""
-        self.location = location
-        self._version = version
-        self._log = log
+    """
+    Represents a deployment of an autoinstall, e.g. directory in a user's
+    web_scripts that has ``.scripts`` directory or ``.scripts-version``
+    file in it.  Supply ``version`` with an :class:`ApplicationVersion` only if
+    you were reading from the :term:`versions store` and care about
+    speed (data from there can be stale).
+    """
+    #: Absolute path to the deployment
+    location = None
+    def __init__(self, location, version=None):
+        self.location = os.path.abspath(location)
+        self._app_version = version
+        # some cache variables
+        self._read_cache = {}
+        self._old_log = None
+    def read(self, file, force = False):
+        """
+        Reads a file's contents, possibly from cache unless ``force``
+        is ``True``.
+        """
+        if force or file not in self._read_cache:
+            f = open(os.path.join(self.location, file))
+            self._read_cache[file] = f.read()
+            f.close()
+        return self._read_cache[file]
+    def extract(self):
+        """
+        Extracts all the values of all variables from deployment.
+        These variables may be used for parametrizing generic parent
+        commits and include things such as database access credentials
+        and local configuration.
+        """
+        return self.application.extract(self)
+    def parametrize(self, dir):
+        """
+        Edits files in ``dir`` to replace WIZARD_* variables with literal
+        instances.  This is used for constructing virtual merge bases, and
+        as such dir will generally not equal :attr:`location`.
+        """
+        return self.application.parametrize(self, dir)
+    def upgrade(self, version, options):
+        """
+        Performs an upgrae of database schemas and other non-versioned data.
+        """
+        with util.ChangeDirectory(self.location):
+            return self.application.upgrade(self, version, options)
+    def backup(self, options):
+        """
+        Performs a backup of database schemas and other non-versioned data.
+        """
+        with util.ChangeDirectory(self.location):
+            return self.application.backup(self, options)
+    def restore(self, backup, options):
+        """
+        Restores a backup. Destroys state, so be careful! Also, this does
+        NOT restore the file-level backup, which is what 'wizard restore'
+        does, so you probably do NOT want to call this elsewhere unless
+        you know what you're doing.
+        """
+        with util.ChangeDirectory(self.location):
+            return self.application.restore(self, backup, options)
+    def prepareConfig(self):
+        """
+        Edits files in the deployment such that any user-specific configuration
+        is replaced with generic WIZARD_* variables.
+        """
+        return self.application.prepareConfig(self)
+    def checkConfig(self, deployment):
+        """
+        Checks if the application is configured.
+        """
+        raise NotImplemented
+
+    def verify(self):
+        """
+        Checks if this is an autoinstall, throws an exception if there
+        are problems.
+        """
+        with util.ChangeDirectory(self.location):
+            has_git = os.path.isdir(".git")
+            has_scripts = os.path.isdir(".scripts")
+            if not has_git and has_scripts:
+                raise CorruptedAutoinstallError(self.location)
+            elif has_git and not has_scripts:
+                raise AlreadyVersionedError(self.location)
+            elif not has_git and not has_scripts:
+                if os.path.isfile(".scripts-version"):
+                    raise NotMigratedError(self.location)
+
+    def verifyTag(self, srv_path):
+        """
+        Checks if the purported version has a corresponding tag
+        in the upstream repository.
+        """
+        repo = self.application.repository(srv_path)
+        try:
+            shell.Shell().eval("git", "--git-dir", repo, "rev-parse", self.app_version.scripts_tag, '--')
+        except shell.CallError:
+            raise NoTagError(self.app_version.scripts_tag)
+
+    def verifyGit(self, srv_path):
+        """
+        Checks if the autoinstall's Git repository makes sense,
+        checking if the tag is parseable and corresponds to
+        a real application, and if the tag in this repository
+        corresponds to the one in the remote repository.
+        """
+        with util.ChangeDirectory(self.location):
+            sh = shell.Shell()
+            repo = self.application.repository(srv_path)
+            def repo_rev_parse(tag):
+                return sh.eval("git", "--git-dir", repo, "rev-parse", tag)
+            def self_rev_parse(tag):
+                try:
+                    return sh.safeCall("git", "rev-parse", tag, strip=True)
+                except shell.CallError:
+                    raise NoLocalTagError(tag)
+            def compare_tags(tag):
+                return repo_rev_parse(tag) == self_rev_parse(tag)
+            if not compare_tags(self.app_version.pristine_tag):
+                raise InconsistentPristineTagError(self.app_version.pristine_tag)
+            if not compare_tags(self.app_version.scripts_tag):
+                raise InconsistentScriptsTagError(self.app_version.scripts_tag)
+            parent = repo_rev_parse(self.app_version.scripts_tag)
+            merge_base = sh.safeCall("git", "merge-base", parent, "HEAD", strip=True)
+            if merge_base != parent:
+                raise HeadNotDescendantError(self.app_version.scripts_tag)
+
+    def verifyConfigured(self):
+        """
+        Checks if the autoinstall is configured running.
+        """
+        if not self.configured:
+            raise NotConfiguredError(self.location)
+
+    def verifyVersion(self):
+        """
+        Checks if our version and the version number recorded in a file
+        are consistent.
+        """
+        real = self.application.detectVersion(self)
+        if not real:
+            raise VersionDetectionError
+        elif not str(real) == self.app_version.pristine_tag.partition('-')[2]:
+            raise VersionMismatchError(real, self.version)
+
+    def verifyWeb(self):
+        """
+        Checks if the autoinstall is viewable from the web.
+        """
+        out = []
+        if not self.application.checkWeb(self, out):
+            raise WebVerificationError(out[0])
+
+    def fetch(self, path, post=None):
+        """
+        Performs a HTTP request on the website.
+        """
+        try:
+            host, basepath = scripts.get_web_host_and_path(self.location)
+        except (ValueError, TypeError):
+            raise UnknownWebPath
+        return util.fetch(host, basepath, path, post)
+
+    @property
+    def configured(self):
+        """Whether or not an autoinstall has been configured/installed for use."""
+        return self.application.checkConfig(self)
+    @property
+    def migrated(self):
+        """Whether or not the autoinstalls has been migrated."""
+        return os.path.isdir(self.scripts_dir)
+    @property
+    def scripts_dir(self):
+        """The absolute path of the ``.scripts`` directory."""
+        return os.path.join(self.location, '.scripts')
+    @property
+    def old_version_file(self):
+        """
+        The absolute path of either ``.scripts-version`` (for unmigrated
+        installs) or ``.scripts/version``.
+
+        .. note::
+
+            Use of this is discouraged for migrated installs.
+        """
+        return os.path.join(self.location, '.scripts-version')
+    @property
+    def version_file(self):
+        """The absolute path of the ``.scripts/version`` file."""
+        return os.path.join(self.scripts_dir, 'version')
+    @property
+    def application(self):
+        """The :class:`Application` of this deployment."""
+        return self.app_version.application
+    @property
+    def old_log(self):
+        """
+        The :class:`wizard.old_log.Log` of this deployment.  This
+        is only applicable to un-migrated autoinstalls.
+        """
+        if not self._old_log:
+            self._old_log = old_log.DeployLog.load(self)
+        return self._old_log
+    @property
+    def version(self):
+        """
+        The :class:`distutils.version.LooseVersion` of this
+        deployment.
+        """
+        return self.app_version.version
+    @property
+    def app_version(self):
+        """The :class:`ApplicationVersion` of this deployment."""
+        if not self._app_version:
+            if os.path.isdir(os.path.join(self.location, ".git")):
+                try:
+                    with util.ChangeDirectory(self.location):
+                        appname, _, version = git.describe().partition('-')
+                    self._app_version = ApplicationVersion.make(appname, version)
+                except shell.CallError:
+                    pass
+        if not self._app_version:
+            self._app_version = self.old_log[-1].version
+        return self._app_version
     @staticmethod
     def parse(line):
-        """Parses a line from the results of parallel-find.pl.
-        This will work out of the box with fileinput, see
-        getInstallLines()"""
+        """
+        Parses a line from the :term:`versions store`.
+
+        .. note::
+
+            Use this method only when speed is of the utmost
+            importance.  You should prefer to directly create a deployment
+            with only a ``location`` when possible.
+        """
         line = line.rstrip()
         try:
             location, deploydir = line.split(":")
         except ValueError:
             return Deployment(line) # lazy loaded version
-        return Deployment(location, version=ApplicationVersion.parse(deploydir, location))
-    @staticmethod
-    def fromDir(dir):
-        """Lazily creates a deployment from a directory"""
-        return Deployment(dir)
-    def getVersionFile(self):
-        return os.path.join(self.location, '.scripts-version')
-    def getApplication(self):
-        return self.getAppVersion().application
-    def getLog(self):
-        if not self._log:
-            self._log = DeployLog.load(self.getVersionFile())
-        return self._log
-    def getVersion(self):
-        """Returns the distutils Version of the deployment"""
-        return self.getAppVersion().version
-    def getAppVersion(self, force = False):
-        """Returns the ApplicationVersion of the deployment"""
-        if self._version and not force: return self._version
-        else: return self.getLog()[-1].version
+        try:
+            return Deployment(location, version=ApplicationVersion.parse(deploydir))
+        except Error as e:
+            e.location = location
+            raise e
 
 class Application(object):
-    """Represents the generic notion of an application, i.e.
-    mediawiki or phpbb."""
+    """Represents an application, i.e. mediawiki or phpbb."""
+    #: String name of the application
+    name = None
+    #: Dictionary of version strings to :class:`ApplicationVersion`.
+    #: See also :meth:`makeVersion`.
+    versions = None
+    #: List of files that need to be modified when parametrizing.
+    #: This is a class-wide constant, and should not normally be modified.
+    parametrized_files = []
     def __init__(self, name):
         self.name = name
         self.versions = {}
-    def getRepository(self):
-        """Returns the Git repository that would contain this application."""
-        repo = os.path.join("/afs/athena.mit.edu/contrib/scripts/git/autoinstalls", self.name + ".git")
+        # cache variables
+        self._extractors = {}
+        self._substitutions = {}
+    def repository(self, srv_path):
+        """
+        Returns the Git repository that would contain this application.
+        ``srv_path`` corresponds to ``options.srv_path`` from the global baton.
+        """
+        repo = os.path.join(srv_path, self.name + ".git")
         if not os.path.isdir(repo):
-            raise NoRepositoryError(app)
+            repo = os.path.join(srv_path, self.name, ".git")
+            if not os.path.isdir(repo):
+                raise NoRepositoryError(self.name)
         return repo
-    def getVersion(self, version):
+    def makeVersion(self, version):
+        """
+        Creates or retrieves the :class:`ApplicationVersion` singleton for the
+        specified version.
+        """
         if version not in self.versions:
             self.versions[version] = ApplicationVersion(distutils.version.LooseVersion(version), self)
         return self.versions[version]
-
-class DeployLog(list):
-    # As per #python; if you decide to start overloading magic methods,
-    # we should remove this subclass
-    """Equivalent to .scripts-version: a series of DeployRevisions."""
-    def __init__(self, revs = []):
-        """`revs`  List of DeployRevision objects"""
-        list.__init__(self, revs) # pass to list
-    @staticmethod
-    def load(file):
-        """Loads a scripts version file and parses it into
-        DeployLog and DeployRevision objects"""
-        # XXX: DIRTY DIRTY HACK
-        # What we should actually do is parse the git logs
-        scriptsdir = os.path.join(os.path.dirname(file), ".scripts")
-        if os.path.isdir(scriptsdir):
-            file = os.path.join(scriptsdir, "old-version")
-        i = 0
-        rev = DeployRevision()
-        revs = []
-        def append(rev):
-            if i:
-                if i != 4:
-                    raise ScriptsVersionNotEnoughFieldsError(file)
-                revs.append(rev)
-        try:
-            fh = open(file)
-        except IOError:
-            raise ScriptsVersionNoSuchFile(file)
-        # XXX: possibly rewrite this parsing code. This might
-        # be legacy soon
-        for line in fh:
-            line = line.rstrip()
-            if not line:
-                append(rev)
-                i = 0
-                rev = DeployRevision()
-                continue
-            if i == 0:
-                # we need the dateutil parser in order to
-                # be able to parse time offsets
-                rev.datetime = dateutil.parser.parse(line)
-            elif i == 1:
-                rev.user = line
-            elif i == 2:
-                rev.source = DeploySource.parse(line)
-            elif i == 3:
-                rev.version = ApplicationVersion.parse(line, rev.source)
-            else:
-                # ruh oh
-                raise ScriptsVersionTooManyFieldsError(file)
-            i += 1
-        append(rev)
-        return DeployLog(revs)
-    def __repr__(self):
-        return '<DeployLog %s>' % list.__repr__(self)
-
-class DeployRevision(object):
-    """A single entry in the .scripts-version file. Contains who deployed
-    this revision, what application version this is, etc."""
-    def __init__(self, datetime=None, user=None, source=None, version=None):
-        """ `datetime`  Time this revision was deployed
-            `user`      Person who deployed this revision, in user@host format.
-            `source`    Instance of DeploySource
-            `version`   Instance of ApplicationVersion
-        Note: This object is typically built incrementally."""
-        self.datetime = datetime
-        self.user = user
-        self.source = source
-        self.version = version
-
-class DeploySource(object):
-    """Source of the deployment; see subclasses for examples"""
-    def __init__(self):
-        raise NotImplementedError # abstract class
-    @staticmethod
-    def parse(line):
-        # munge out common prefix
-        rel = os.path.relpath(line, "/afs/athena.mit.edu/contrib/scripts/")
-        parts = rel.split("/")
-        if parts[0] == "wizard":
-            return WizardUpdate()
-        elif parts[0] == "deploy" or parts[0] == "deploydev":
-            isDev = ( parts[0] == "deploydev" )
+    def extract(self, deployment):
+        """Extracts wizard variables from a deployment."""
+        result = {}
+        for k,extractor in self.extractors.items():
+            result[k] = extractor(deployment)
+        return result
+    def parametrize(self, deployment, dir):
+        """
+        Takes a generic source checkout at dir and parametrizes
+        it according to the values of deployment.
+        """
+        variables = deployment.extract()
+        for file in self.parametrized_files:
+            fullpath = os.path.join(dir, file)
             try:
-                if parts[1] == "updates":
-                    return OldUpdate(isDev)
-                else:
-                    return TarballInstall(line, isDev)
-            except IndexError:
-                pass
-        return UnknownDeploySource(line)
-
-class TarballInstall(DeploySource):
-    """Original installation from tarball, characterized by
-    /afs/athena.mit.edu/contrib/scripts/deploy/APP-x.y.z.tar.gz
-    """
-    def __init__(self, location, isDev):
-        self.location = location
-        self.isDev = isDev
-
-class OldUpdate(DeploySource):
-    """Upgrade using old upgrade infrastructure, characterized by
-    /afs/athena.mit.edu/contrib/scripts/deploydev/updates/update-scripts-version.pl
-    """
-    def __init__(self, isDev):
-        self.isDev = isDev
-
-class WizardUpdate(DeploySource):
-    """Upgrade using wizard infrastructure, characterized by
-    /afs/athena.mit.edu/contrib/scripts/wizard/bin/wizard HASHGOBBLEDYGOOK
-    """
-    def __init__(self):
+                contents = open(fullpath, "r").read()
+            except IOError:
+                continue
+            for key, value in variables.items():
+                if value is None: continue
+                contents = contents.replace(key, value)
+            f = open(fullpath, "w")
+            f.write(contents)
+    def resolveConflicts(self, dir):
+        """
+        Takes a directory with conflicted files and attempts to
+        resolve them.  Returns whether or not all conflicted
+        files were resolved or not.  Fully resolved files are
+        added to the index, but no commit is made.
+        """
+        return False
+    def prepareMerge(self, dir):
+        """
+        Takes a directory and performs various edits to files in
+        order to make a merge go more smoothly.  This is usually
+        used to fix botched line-endings.  If you add new files,
+        you have to 'git add' them; this is not necessary for edits.
+        """
         pass
-
-class UnknownDeploySource(DeploySource):
-    """Deployment that we don't know the meaning of. Wot!"""
-    def __init__(self, line):
-        self.line = line
+    def prepareConfig(self, deployment):
+        """
+        Takes a deployment and replaces any explicit instances
+        of a configuration variable with generic WIZARD_* constants.
+        There is a sane default implementation built on substitutions;
+        you can override this method to provide arbitrary extra
+        behavior.
+        """
+        for key, subst in self.substitutions.items():
+            subs = subst(deployment)
+            if not subs and key not in self.deprecated_keys:
+                logging.warning("No substitutions for %s" % key)
+    def install(self, version, options):
+        """
+        Run for 'wizard configure' (and, by proxy, 'wizard install')
+        to configure an application.  This assumes that the current
+        working directory is a deployment.
+        """
+        raise NotImplemented
+    def upgrade(self, deployment, version, options):
+        """
+        Run for 'wizard upgrade' to upgrade database schemas and other
+        non-versioned data in an application.  This assumes that
+        the current working directory is the deployment.
+        """
+        raise NotImplemented
+    def backup(self, deployment, options):
+        """
+        Run for 'wizard backup' and upgrades to backup database schemas
+        and other non-versioned data in an application.  This assumes
+        that the current working directory is the deployment.
+        """
+        raise NotImplemented
+    def restore(self, deployment, backup, options):
+        """
+        Run for 'wizard restore' and failed upgrades to restore database
+        and other non-versioned data to a backed up version.  This assumes
+        that the current working directory is the deployment.
+        """
+        raise NotImplemented
+    def detectVersion(self, deployment):
+        """
+        Checks source files to determine the version manually.
+        """
+        return None
+    def checkWeb(self, deployment, output=None):
+        """
+        Checks if the autoinstall is viewable from the web.  Output
+        should be an empty list that will get mutated by this function.
+        """
+        raise NotImplemented
+    @property
+    def extractors(self):
+        """
+        Dictionary of variable names to extractor functions.  These functions
+        take a :class:`Deployment` as an argument and return the value of
+        the variable, or ``None`` if it could not be found.
+        See also :func:`wizard.app.filename_regex_extractor`.
+        """
+        return {}
+    @property
+    def substitutions(self):
+        """
+        Dictionary of variable names to substitution functions.  These functions
+        take a :class:`Deployment` as an argument and modify the deployment such
+        that an explicit instance of the variable is released with the generic
+        WIZARD_* constant.  See also :func:`wizard.app.filename_regex_substitution`.
+        """
+        return {}
+    @staticmethod
+    def make(name):
+        """Makes an application, but uses the correct subtype if available."""
+        try:
+            __import__("wizard.app." + name)
+            return getattr(wizard.app, name).Application(name)
+        except ImportError:
+            return Application(name)
 
 class ApplicationVersion(object):
-    """Represents an abstract notion of a version for an application"""
+    """Represents an abstract notion of a version for an application, where
+    ``version`` is a :class:`distutils.version.LooseVersion` and
+    ``application`` is a :class:`Application`."""
+    #: The :class:`distutils.version.LooseVersion` of this instance.
+    version = None
+    #: The :class:`Application` of this instance.
+    application = None
     def __init__(self, version, application):
-        """ `version`       Instance of distutils.LooseVersion
-            `application`   Instance of Application
-        WARNING: Please don't call this directly; instead, use getVersion()
-        on the application you want, so that this version gets registered."""
         self.version = version
         self.application = application
-    def getScriptsTag(self):
-        """Returns the name of the Git tag for this version"""
-        # XXX: This assumes that there's only a -scripts version
-        # which will not be true in the future.
-        return "v%s-scripts" % self.version
+    @property
+    def tag(self):
+        """
+        Returns the name of the git describe tag for the commit the user is
+        presently on, something like mediawiki-1.2.3-scripts-4-g123abcd
+        """
+        return "%s-%s" % (self.application, self.version)
+    @property
+    def scripts_tag(self):
+        """
+        Returns the name of the Git tag for this version.
+        """
+        end = str(self.version).partition('-scripts')[2].partition('-')[0]
+        return "%s-scripts%s" % (self.pristine_tag, end)
+    @property
+    def pristine_tag(self):
+        """
+        Returns the name of the Git tag for the pristine version corresponding
+        to this version.
+        """
+        return "%s-%s" % (self.application.name, str(self.version).partition('-scripts')[0])
     def __cmp__(x, y):
         return cmp(x.version, y.version)
     @staticmethod
-    def parse(deploydir,location,applookup=None):
-        # The version of the deployment, will be:
-        #   /afs/athena.mit.edu/contrib/scripts/deploy/APP-x.y.z for old style installs
-        #   /afs/athena.mit.edu/contrib/scripts/wizard/srv/APP.git vx.y.z-scripts for new style installs
-        #   XXX: ^- the above is wrong; there will be no more .scripts-version
-        name = deploydir.split("/")[-1]
+    def parse(value):
+        """
+        Parses a line from the :term:`versions store` and return
+        :class:`ApplicationVersion`.
+
+        Use this only for cases when speed is of primary importance;
+        the data in version is unreliable and when possible, you should
+        prefer directly instantiating a Deployment and having it query
+        the autoinstall itself for information.
+
+        The `value` to parse will vary.  For old style installs, it
+        will look like::
+
+           /afs/athena.mit.edu/contrib/scripts/deploy/APP-x.y.z
+
+        For new style installs, it will look like::
+
+           APP-x.y.z-scripts
+        """
+        name = value.split("/")[-1]
         try:
-            if name.find(" ") != -1:
-                raw_app, raw_version = name.split(" ")
-                version = raw_version[1:] # remove leading v
-                app, _ = raw_app.split(".") # remove trailing .git
-            elif name.find("-") != -1:
+            if name.find("-") != -1:
                 app, _, version = name.partition("-")
             else:
+                # kind of poor, maybe should error.  Generally this
+                # will actually result in a not found error
                 app = name
                 version = "trunk"
-        except ValueError: # mostly from the a, b = foo.split(' ')
-            raise DeploymentParseError(deploydir, location)
-        if not applookup: applookup = applications
+        except ValueError:
+            raise DeploymentParseError(deploydir)
+        return ApplicationVersion.make(app, version)
+    @staticmethod
+    def make(app, version):
+        """
+        Makes/retrieves a singleton :class:`ApplicationVersion` from
+        a``app`` and ``version`` string.
+        """
         try:
-            # defer to the application for version creation
-            return applookup[app].getVersion(version)
+            # defer to the application for version creation to enforce
+            # singletons
+            return applications()[app].makeVersion(version)
         except KeyError:
-            raise NoSuchApplication(app, location)
+            raise NoSuchApplication(app)
+
+## -- Exceptions --
 
 class Error(wizard.Error):
-    """Base error class for deploy errors"""
-    def __init__(self, location):
-        self.location = location
-    def __str__(self):
-        return "ERROR: Generic error at %s" % self.location
+    """Base error class for this module"""
+    pass
+
+class NoSuchApplication(Error):
+    """
+    You attempted to reference a :class:`Application` named
+    ``app``, which is not recognized by Wizard.
+    """
+    #: The name of the application that does not exist.
+    app = None
+    #: The location of the autoinstall that threw this variable.
+    #: This should be set by error handling code when it is availble.
+    location = None
+    def __init__(self, app):
+        self.app = app
+
+class DeploymentParseError(Error):
+    """
+    Could not parse ``value`` from :term:`versions store`.
+    """
+    #: The value that failed to parse.
+    value = None
+    #: The location of the autoinstall that threw this variable.
+    #: This should be set by error handling code when it is available.
+    location = None
+    def __init__(self, value):
+        self.value = value
 
 class NoRepositoryError(Error):
+    """
+    :class:`Application` does not appear to have a Git repository
+    in the normal location.
+    """
+    #: The name of the application that does not have a Git repository.
+    app = None
     def __init__(self, app):
         self.app = app
-        self.location = "unknown"
+    def __str__(self):
+        return """Could not find Git repository for '%s'.  If you would like to use a local version, try specifying --srv-path or WIZARD_SRV_PATH.""" % self.app
+
+class NotMigratedError(Error):
+    """
+    The deployment contains a .scripts-version file, but no .git
+    or .scripts directory.
+    """
+    #: Directory of deployment
+    dir = None
+    def __init__(self, dir):
+        self.dir = dir
+    def __str__(self):
+        return """This installation was not migrated"""
+
+class AlreadyVersionedError(Error):
+    """The deployment contained a .git directory but no .scripts directory."""
+    #: Directory of deployment
+    dir = None
+    def __init__(self, dir):
+        self.dir = dir
     def __str__(self):
         return """
 
-ERROR: Could not find repository for this application. Have
-you converted the repository over? Is the name %s
-the same as the name of the .git folder?
-""" % self.app
+ERROR: Directory contains a .git directory, but not
+a .scripts directory.  If this is not a corrupt
+migration, this means that the user was versioning their
+install using Git."""
 
-class NoSuchApplication(Error):
-    def __init__(self, name, location):
-        self.name = name
-        self.location = location
+class NotConfiguredError(Error):
+    """The install was missing essential configuration."""
+    #: Directory of unconfigured install
+    dir = None
+    def __init__(self, dir):
+        self.dir = dir
     def __str__(self):
-        return "ERROR: Unrecognized app '%s' at %s" % (self.name, self.location)
+        return """
 
-class DeploymentParseError(Error):
-    def __init__(self, malformed, location):
-        self.malformed = malformed
-        self.location = location
+ERROR: The install was well-formed, but not configured
+(essential configuration files were not found.)"""
+
+class CorruptedAutoinstallError(Error):
+    """The install was missing a .git directory, but had a .scripts directory."""
+    #: Directory of the corrupted install
+    dir = None
+    def __init__(self, dir):
+        self.dir = dir
     def __str__(self):
-        return """ERROR: Unparseable '%s' at %s""" % (self.malformed, self.location)
+        return """
 
-class ScriptsVersionError(Error):
-    """Errors specific to the parsing of a full .scripts-version file
-    (errors that could also be triggered while parsing a parallel-find
-    output should not be this subclass.)"""
-    pass
+ERROR: Directory contains a .scripts directory,
+but not a .git directory."""
 
-class ScriptsVersionTooManyFieldsError(ScriptsVersionError):
+class NotAutoinstallError(Error):
+    """The directory was not an autoinstall, due to missing .scripts-version file."""
+    #: Directory in question
+    dir = None
+    def __init__(self, dir):
+        self.dir = dir
     def __str__(self):
         return """
 
-ERROR: Could not parse .scripts-version file.  It
-contained too many fields.
+ERROR: Could not find .scripts-version file. Are you sure
+this is an autoinstalled application?
 """
 
-class ScriptsVersionNotEnoughFieldsError(ScriptsVersionError):
+class NoTagError(Error):
+    """Deployment has a tag that does not have an equivalent in upstream repository."""
+    #: Missing tag
+    tag = None
+    def __init__(self, tag):
+        self.tag = tag
     def __str__(self):
         return """
 
-ERROR: Could not parse .scripts-version file. It
-didn't contain enough fields.
-"""
+ERROR: Could not find tag %s in repository.""" % self.tag
 
-class ScriptsVersionNoSuchFile(ScriptsVersionError):
-    def __init__(self, file):
-        self.file = file
+class NoLocalTagError(Error):
+    """Could not find tag in local repository."""
+    #: Missing tag
+    tag = None
+    def __init__(self, tag):
+        self.tag = tag
     def __str__(self):
         return """
 
-ERROR: File %s didn't exist.
-""" % self.file
+ERROR: Could not find tag %s in local repository.""" % self.tag
+
+class InconsistentPristineTagError(Error):
+    """Pristine tag commit ID does not match upstream pristine tag commit ID."""
+    #: Inconsistent tag
+    tag = None
+    def __init__(self, tag):
+        self.tag = tag
+    def __str__(self):
+        return """
+
+ERROR: Local pristine tag %s did not match repository's.  This
+probably means an upstream rebase occured.""" % self.tag
+
+class InconsistentScriptsTagError(Error):
+    """Scripts tag commit ID does not match upstream scripts tag commit ID."""
+    #: Inconsistent tag
+    tag = None
+    def __init__(self, tag):
+        self.tag = tag
+    def __str__(self):
+        return """
+
+ERROR: Local scripts tag %s did not match repository's.  This
+probably means an upstream rebase occurred.""" % self.tag
+
+class HeadNotDescendantError(Error):
+    """HEAD is not connected to tag."""
+    #: Tag that HEAD should have been descendant of.
+    tag = None
+    def __init__(self, tag):
+        self.tag = tag
+    def __str__(self):
+        return """
+
+ERROR: HEAD is not a descendant of %s.  This probably
+means that an upstream rebase occurred, and new tags were
+pulled, but local user commits were never rebased.""" % self.tag
+
+class VersionDetectionError(Error):
+    """Could not detect real version of application."""
+    def __str__(self):
+        return """
+
+ERROR: Could not detect the real version of the application."""
+
+class VersionMismatchError(Error):
+    """Git version of application does not match detected version."""
+    #: Detected version
+    real_version = None
+    #: Version from Git
+    git_version = None
+    def __init__(self, real_version, git_version):
+        self.real_version = real_version
+        self.git_version = git_version
+    def __str__(self):
+        return """
+
+ERROR: The detected version %s did not match the Git
+version %s.""" % (self.real_version, self.git_version)
+
+class WebVerificationError(Error):
+    """Could not access the application on the web"""
+    #: Contents of web page access
+    contents = None
+    def __init__(self, contents):
+        self.contents = contents
+    def __str__(self):
+        return """
+
+ERROR: We were not able to access the application on the
+web.  This may indicate that the website is behind
+authentication on the htaccess level.  The contents
+of the page were:
+
+%s""" % self.contents
+
+class UnknownWebPath(Error):
+    """Could not determine application's web path."""
+    def __str__(self):
+        return """
 
-# If you want, you can wrap this up into a registry and access things
-# through that, but it's not really necessary
+ERROR: We were not able to determine what the application's
+host and path were in order to perform a web request
+on the application.  You can specify this manually using
+the WIZARD_WEB_HOST and WIZARD_WEB_PATH environment
+variables."""
 
-application_list = [
+_application_list = [
     "mediawiki", "wordpress", "joomla", "e107", "gallery2",
     "phpBB", "advancedbook", "phpical", "trac", "turbogears", "django",
     # these are technically deprecated
     "advancedpoll", "gallery",
 ]
+_applications = None
 
-"""Hash table for looking up string application name to instance"""
-applications = dict([(n,Application(n)) for n in application_list ])
+def applications():
+    """Hash table for looking up string application name to instance"""
+    global _applications
+    if not _applications:
+        _applications = dict([(n,Application.make(n)) for n in _application_list ])
+    return _applications