Make phpBB installer more friendly for restricted envs.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

phpBB support

Signed-off-by: Alan Huang <cesium@mit.edu>

Make the import failure handling code fail out if a sub-import failed.

Signed-off-by: Andrew Farrell <afarrell@mit.edu>

Revamp database infrastructure.

* We now use DSN URLs using the sqlalchemy.engine.url.URL
  class to pass these values around.  Parameters are now
  database agnostic; applications are tied to specific databases.
* Remove need for WIZARD_MYSQL_DB in test scripts
* Implement `wizard database` and `wizard remove`
* Prevent database exhaustion
* Added dsn and dsn_file property to deploy.Deployment
* Make the remove/backup/restore scripts agnostic
* Added database property to app.Application
* Added callback support to ArgSchema
* Golfed the Scripts specific code into wizard.sql

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Update upgrading instructions with implementation details.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Update TODO.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Add --retry option, remove ncurses flash.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Add missing docs, rename test.sh to run.sh

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Reduce duplication in test scripts, more logging.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Make test scripts more autocomplete friendly.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Update documentation to use the new API.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Refactor more boilerplate out.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Add anatomy of a repository docs.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement upgrades for Wordpress, refactoring.

* Add some missing imports
* Restructure failure exceptions to have a superclass;
  moved install.Failure over.
* Fix some spurious names
* Added detectVersionFromFile helper method (more to come!)
* Made MediaWiki use the php parametrized files
* Fix some stylistic problems in Sphinx extension.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Add more Wordpress variables.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Add safety checks to prepare-config.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Fix bug in prepare-pristine, add secret key to wordpress, docs update.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Match for Success in wordpress installer. More documentation fixes.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Documentation updates, create upgrade document.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Make pull.sh call aklog.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Minor updates to docs, add RecoverableFailure docs.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Setup the rest to use conversion supplements.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Add support for supplements, convert intro text to use this.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Add todo items to the documentation.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Finish repository conversion docs, move re_define to app.php.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

More documentation improvements.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Expand documentation.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Revise existing repository conversion instructions.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Rename NonfatalFailure to RecoverableFailure.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

When MediaWiki installs fail due to bad user input, give useful errors.

Signed-off-by: Duncan Townsend <duncant@mit.edu>

NotImplemented -> NotImplementedError.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Revamp 'wizard summary', and start writing tutorial docs.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Improve wording of prompts.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Fix bug in scripts MySQL database generation.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Test if terminal is supported, or fallback to Prompt.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Use prompt if terminal is dumb.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Fix syntax error.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Minor doc updates and code refinements.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement post-installation machinery for Wordpress.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Fill in undocumented functions and classes.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Revamp tests, fix minor usability problems with installer.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Add script for convenient updating of /mit/scripts/wizard

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Update TODO, fix broken prepare-config.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement Wordpress installer for 2.0.2 w/ sqlalchemy.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Update TODO.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement required/optional argument grouping.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Fix double-slash in URLs, and broken command line options.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Remove unnecessary commands, add help to install.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Ask for password twice, and check if they match.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Fix bug in wizard configure with old API.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Update TODO.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Remove directory/application interactivity.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement interactive mode without validation.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Refactor documentation in wizard.install

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Change wizard install to not make external code.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Fix bugs in scripts-specific installation code.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Massively refactor install modules.

* ArgHandler is now ArgSchema and installopt.Controller
* Environment turned into a dynamic strategy
* Strategies made into two stage objects, with prepare and execute
* Rewrite priority code

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Move install.py to install folder.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Add php.ini note in TODO, and mention general purpose.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Allow newly initialized repo, and allow passing of tarball, for prepare-pristine.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Update TODO.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement prepare-new/prepare-pristine, add stub wordpress.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Changed scripts.py to work on macs. Added a unit test for said changes.

- Added exception catching for systems that don't have "fs"
- Removed the call to "du" and replaced it with python code

Signed-off-by: Duncan Townsend <duncant@mit.edu>

Update TODO.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Sacrifice user friendly message for good messages when imports fail.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Add decorator as a dependency.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Misc bug fixes.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Partition on colon for exceptions, ignore blank blacklistings.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Make blacklisted error have different error code, remove -1.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Remove spurious app import.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Remove unnecessary imports.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Fix pylint errors.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Move generic functionality out of wizard.app.mediawiki.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Document wizard.app, and refactor APIs.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Move Application/ApplicationVersion to wizard.app

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Refactor Deployment into Working/Production copies.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Rename logging and base args, fix pylint errors.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Minor refactorings, update TODO.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Stop using excepthook magic, add exitcode support.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Update TODO.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

More bugfixes from running live.

* Add a few more wgCacheEpoch resolutions
* Make prepareMerge work for \r\r\r\n
* Add flush and fails to Report.  This needs further work.
* Require reason for wizard blacklist
* Cleanup /dev/shm/wizard at the start of mass runs
* Special case a few more errors
* Report reason for blacklisting in stdout.
* Add global finally for removing /dev/shm directories
* Add QuotaParseError

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Major updates to resolution code from runs.

* Augment MediaWiki conflict resolution with correct version for
  end of line
* Add prepareMerge to application for pre-merge resolution
  helpers (mostly for line-ending problems)
* Fix MediaWiki resolveConflicts parsing of ls-files output,
  and another unrelated bug
* Add space between logging and summary outputs
* Move backup back to correct location, and perform size calculation
  twice
* UpgradeVerificationFailure gets useful output
* /dev/shm/wizard gets chmod'ed 0777
* Fix resolution algorithm to handle each conflict block individually.
  Test cases augmented accordingly.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Fix quota verification bugs.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement disk quota checking.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Report stats if you C-c the process.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Automatically perform logging during --continue.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement number of conflict reporting for upgrades.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement 'append-by-default' reports, --redo for mass-upgrade.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement sqlite dict.  We might not actually use this.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Fix bugs with new reporting code.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Change reporting and logging semantics.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement quick logging changes.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement MediaWiki scaffolding for auto conflict resolution; untested.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement backend for automatic conflict resolution.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Fix missing documentation.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Merges occur on /dev/shm if available.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Suppress ^M characters from Git progress bars.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Fix errors parsing error messages with indents.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Update TODO, add VISION text.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>

Implement 'wizard blacklist', tweaks.

Signed-off-by: Edward Z. Yang <ezyang@mit.edu>