]> scripts.mit.edu Git - autoinstallsdev/mediawiki.git/blobdiff - includes/upload/UploadStash.php
MediaWiki 1.30.2
[autoinstallsdev/mediawiki.git] / includes / upload / UploadStash.php
index 1765925d297692e5a91d0e2a418fb2dc4d6e56c7..755f9fdf7b55d8a632f2a15f9103a75c937b3ca3 100644 (file)
 <?php
-/** 
+/**
+ * Temporary storage for uploaded files.
+ *
+ * This program is free software; you can redistribute it and/or modify
+ * it under the terms of the GNU General Public License as published by
+ * the Free Software Foundation; either version 2 of the License, or
+ * (at your option) any later version.
+ *
+ * This program is distributed in the hope that it will be useful,
+ * but WITHOUT ANY WARRANTY; without even the implied warranty of
+ * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the
+ * GNU General Public License for more details.
+ *
+ * You should have received a copy of the GNU General Public License along
+ * with this program; if not, write to the Free Software Foundation, Inc.,
+ * 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301, USA.
+ * http://www.gnu.org/copyleft/gpl.html
+ *
+ * @file
+ * @ingroup Upload
+ */
+
+/**
  * UploadStash is intended to accomplish a few things:
- *   - enable applications to temporarily stash files without publishing them to the wiki.
- *      - Several parts of MediaWiki do this in similar ways: UploadBase, UploadWizard, and FirefoggChunkedExtension
- *        And there are several that reimplement stashing from scratch, in idiosyncratic ways. The idea is to unify them all here.
- *       Mostly all of them are the same except for storing some custom fields, which we subsume into the data array.
- *   - enable applications to find said files later, as long as the session or temp files haven't been purged. 
- *   - enable the uploading user (and *ONLY* the uploading user) to access said files, and thumbnails of said files, via a URL.
- *     We accomplish this by making the session serve as a URL->file mapping, on the assumption that nobody else can access 
- *     the session, even the uploading user. See SpecialUploadStash, which implements a web interface to some files stored this way.
+ *   - Enable applications to temporarily stash files without publishing them to
+ *     the wiki.
+ *      - Several parts of MediaWiki do this in similar ways: UploadBase,
+ *        UploadWizard, and FirefoggChunkedExtension.
+ *        And there are several that reimplement stashing from scratch, in
+ *        idiosyncratic ways. The idea is to unify them all here.
+ *        Mostly all of them are the same except for storing some custom fields,
+ *        which we subsume into the data array.
+ *   - Enable applications to find said files later, as long as the db table or
+ *     temp files haven't been purged.
+ *   - Enable the uploading user (and *ONLY* the uploading user) to access said
+ *     files, and thumbnails of said files, via a URL. We accomplish this using
+ *     a database table, with ownership checking as you might expect. See
+ *     SpecialUploadStash, which implements a web interface to some files stored
+ *     this way.
  *
+ * UploadStash right now is *mostly* intended to show you one user's slice of
+ * the entire stash. The user parameter is only optional because there are few
+ * cases where we clean out the stash from an automated script. In the future we
+ * might refactor this.
+ *
+ * UploadStash represents the entire stash of temporary files.
+ * UploadStashFile is a filestore for the actual physical disk files.
+ * UploadFromStash extends UploadBase, and represents a single stashed file as
+ * it is moved from the stash to the regular file repository
+ *
+ * @ingroup Upload
  */
 class UploadStash {
-
        // Format of the key for files -- has to be suitable as a filename itself (e.g. ab12cd34ef.jpg)
-       const KEY_FORMAT_REGEX = '/^[\w-]+\.\w*$/';
+       const KEY_FORMAT_REGEX = '/^[\w-\.]+\.\w*$/';
+       const MAX_US_PROPS_SIZE = 65535;
 
-       // repository that this uses to store temp files
-       // public because we sometimes need to get a LocalFile within the same repo.
-       public $repo; 
-       
-       // array of initialized objects obtained from session (lazily initialized upon getFile())
-       private $files = array();  
+       /**
+        * repository that this uses to store temp files
+        * public because we sometimes need to get a LocalFile within the same repo.
+        *
+        * @var LocalRepo
+        */
+       public $repo;
+
+       // array of initialized repo objects
+       protected $files = [];
+
+       // cache of the file metadata that's stored in the database
+       protected $fileMetadata = [];
 
-       // TODO: Once UploadBase starts using this, switch to use these constants rather than UploadBase::SESSION*
-       // const SESSION_VERSION = 2;
-       // const SESSION_KEYNAME = 'wsUploadData';
+       // fileprops cache
+       protected $fileProps = [];
+
+       // current user
+       protected $user, $userId, $isLoggedIn;
 
        /**
-        * Represents the session which contains temporarily stored files.
-        * Designed to be compatible with the session stashing code in UploadBase (should replace it eventually)
+        * Represents a temporary filestore, with metadata in the database.
+        * Designed to be compatible with the session stashing code in UploadBase
+        * (should replace it eventually).
         *
-        * @param $repo FileRepo: optional -- repo in which to store files. Will choose LocalRepo if not supplied.
+        * @param FileRepo $repo
+        * @param User $user (default null)
         */
-       public function __construct( $repo ) { 
-
+       public function __construct( FileRepo $repo, $user = null ) {
                // this might change based on wiki's configuration.
                $this->repo = $repo;
 
-               if ( ! isset( $_SESSION ) ) {
-                       throw new UploadStashNotAvailableException( 'no session variable' );
+               // if a user was passed, use it. otherwise, attempt to use the global.
+               // this keeps FileRepo from breaking when it creates an UploadStash object
+               if ( $user ) {
+                       $this->user = $user;
+               } else {
+                       global $wgUser;
+                       $this->user = $wgUser;
                }
 
-               if ( !isset( $_SESSION[UploadBase::SESSION_KEYNAME] ) ) {
-                       $_SESSION[UploadBase::SESSION_KEYNAME] = array();
+               if ( is_object( $this->user ) ) {
+                       $this->userId = $this->user->getId();
+                       $this->isLoggedIn = $this->user->isLoggedIn();
                }
-               
        }
 
        /**
         * Get a file and its metadata from the stash.
-        * May throw exception if session data cannot be parsed due to schema change, or key not found.
+        * The noAuth param is a bit janky but is required for automated scripts
+        * which clean out the stash.
         *
-        * @param $key Integer: key
+        * @param string $key Key under which file information is stored
+        * @param bool $noAuth (optional) Don't check authentication. Used by maintenance scripts.
         * @throws UploadStashFileNotFoundException
-        * @throws UploadStashBadVersionException
+        * @throws UploadStashNotLoggedInException
+        * @throws UploadStashWrongOwnerException
+        * @throws UploadStashBadPathException
         * @return UploadStashFile
         */
-       public function getFile( $key ) {
-               if ( ! preg_match( self::KEY_FORMAT_REGEX, $key ) ) {
+       public function getFile( $key, $noAuth = false ) {
+               if ( !preg_match( self::KEY_FORMAT_REGEX, $key ) ) {
                        throw new UploadStashBadPathException( "key '$key' is not in a proper format" );
-               } 
-               if ( !isset( $this->files[$key] ) ) {
-                       if ( !isset( $_SESSION[UploadBase::SESSION_KEYNAME][$key] ) ) {
-                               throw new UploadStashFileNotFoundException( "key '$key' not found in stash" );
+               }
+
+               if ( !$noAuth && !$this->isLoggedIn ) {
+                       throw new UploadStashNotLoggedInException( __METHOD__ .
+                               ' No user is logged in, files must belong to users' );
+               }
+
+               if ( !isset( $this->fileMetadata[$key] ) ) {
+                       if ( !$this->fetchFileMetadata( $key ) ) {
+                               // If nothing was received, it's likely due to replication lag.
+                               // Check the master to see if the record is there.
+                               $this->fetchFileMetadata( $key, DB_MASTER );
                        }
 
-                       $data = $_SESSION[UploadBase::SESSION_KEYNAME][$key];
-                       // guards against PHP class changing while session data doesn't
-                       if ($data['version'] !== UploadBase::SESSION_VERSION ) {
-                               throw new UploadStashBadVersionException( $data['version'] . " does not match current version " . UploadBase::SESSION_VERSION );
+                       if ( !isset( $this->fileMetadata[$key] ) ) {
+                               throw new UploadStashFileNotFoundException( "key '$key' not found in stash" );
                        }
-               
-                       // separate the stashData into the path, and then the rest of the data
-                       $path = $data['mTempPath'];
-                       unset( $data['mTempPath'] );
-
-                       $file = new UploadStashFile( $this, $this->repo, $path, $key, $data );
-                       if ( $file->getSize === 0 ) {
-                               throw new UploadStashZeroLengthFileException( "File is zero length" );
+
+                       // create $this->files[$key]
+                       $this->initFile( $key );
+
+                       // fetch fileprops
+                       if ( strlen( $this->fileMetadata[$key]['us_props'] ) ) {
+                               $this->fileProps[$key] = unserialize( $this->fileMetadata[$key]['us_props'] );
+                       } else { // b/c for rows with no us_props
+                               wfDebug( __METHOD__ . " fetched props for $key from file\n" );
+                               $path = $this->fileMetadata[$key]['us_path'];
+                               $this->fileProps[$key] = $this->repo->getFileProps( $path );
                        }
-                       $this->files[$key] = $file;
+               }
 
+               if ( !$this->files[$key]->exists() ) {
+                       wfDebug( __METHOD__ . " tried to get file at $key, but it doesn't exist\n" );
+                       // @todo Is this not an UploadStashFileNotFoundException case?
+                       throw new UploadStashBadPathException( "path doesn't exist" );
                }
+
+               if ( !$noAuth ) {
+                       if ( $this->fileMetadata[$key]['us_user'] != $this->userId ) {
+                               throw new UploadStashWrongOwnerException( "This file ($key) doesn't "
+                                       . "belong to the current user." );
+                       }
+               }
+
                return $this->files[$key];
        }
 
        /**
-        * Stash a file in a temp directory and record that we did this in the session, along with other metadata.
-        * We store data in a flat key-val namespace because that's how UploadBase did it. This also means we have to
-        * ensure that the key-val pairs in $data do not overwrite other required fields.
+        * Getter for file metadata.
+        *
+        * @param string $key Key under which file information is stored
+        * @return array
+        */
+       public function getMetadata( $key ) {
+               $this->getFile( $key );
+
+               return $this->fileMetadata[$key];
+       }
+
+       /**
+        * Getter for fileProps
+        *
+        * @param string $key Key under which file information is stored
+        * @return array
+        */
+       public function getFileProps( $key ) {
+               $this->getFile( $key );
+
+               return $this->fileProps[$key];
+       }
+
+       /**
+        * Stash a file in a temp directory and record that we did this in the
+        * database, along with other metadata.
         *
-        * @param $path String: path to file you want stashed
-        * @param $data Array: optional, other data you want associated with the file. Do not use 'mTempPath', 'mFileProps', 'mFileSize', or 'version' as keys here
-        * @param $key String: optional, unique key for this file in this session. Used for directory hashing when storing, otherwise not important
+        * @param string $path Path to file you want stashed
+        * @param string $sourceType The type of upload that generated this file
+        *   (currently, I believe, 'file' or null)
         * @throws UploadStashBadPathException
         * @throws UploadStashFileException
-        * @return UploadStashFile: file, or null on failure
+        * @throws UploadStashNotLoggedInException
+        * @return UploadStashFile|null File, or null on failure
         */
-       public function stashFile( $path, $data = array(), $key = null ) {
-               if ( ! file_exists( $path ) ) {
-                       wfDebug( "UploadStash: tried to stash file at '$path', but it doesn't exist\n" );
+       public function stashFile( $path, $sourceType = null ) {
+               if ( !is_file( $path ) ) {
+                       wfDebug( __METHOD__ . " tried to stash file at '$path', but it doesn't exist\n" );
                        throw new UploadStashBadPathException( "path doesn't exist" );
                }
-                $fileProps = File::getPropsFromPath( $path );
+
+               $mwProps = new MWFileProps( MimeMagic::singleton() );
+               $fileProps = $mwProps->getPropsFromPath( $path, true );
+               wfDebug( __METHOD__ . " stashing file at '$path'\n" );
 
                // we will be initializing from some tmpnam files that don't have extensions.
                // most of MediaWiki assumes all uploaded files have good extensions. So, we fix this.
                $extension = self::getExtensionForPath( $path );
-               if ( ! preg_match( "/\\.\\Q$extension\\E$/", $path ) ) {
+               if ( !preg_match( "/\\.\\Q$extension\\E$/", $path ) ) {
                        $pathWithGoodExtension = "$path.$extension";
-                       if ( ! rename( $path, $pathWithGoodExtension ) ) {
-                               throw new UploadStashFileException( "couldn't rename $path to have a better extension at $pathWithGoodExtension" );
-                       }
-                       $path = $pathWithGoodExtension;
-               } 
-
-               // If no key was supplied, use content hash. Also has the nice property of collapsing multiple identical files
-               // uploaded this session, which could happen if uploads had failed.
-               if ( is_null( $key ) ) {
-                       $key = $fileProps['sha1'] . "." . $extension;
+               } else {
+                       $pathWithGoodExtension = $path;
                }
 
-               if ( ! preg_match( self::KEY_FORMAT_REGEX, $key ) ) {
+               // If no key was supplied, make one.  a mysql insertid would be totally
+               // reasonable here, except that for historical reasons, the key is this
+               // random thing instead.  At least it's not guessable.
+               // Some things that when combined will make a suitably unique key.
+               // see: http://www.jwz.org/doc/mid.html
+               list( $usec, $sec ) = explode( ' ', microtime() );
+               $usec = substr( $usec, 2 );
+               $key = Wikimedia\base_convert( $sec . $usec, 10, 36 ) . '.' .
+                       Wikimedia\base_convert( mt_rand(), 10, 36 ) . '.' .
+                       $this->userId . '.' .
+                       $extension;
+
+               $this->fileProps[$key] = $fileProps;
+
+               if ( !preg_match( self::KEY_FORMAT_REGEX, $key ) ) {
                        throw new UploadStashBadPathException( "key '$key' is not in a proper format" );
-               } 
+               }
 
+               wfDebug( __METHOD__ . " key for '$path': $key\n" );
 
                // if not already in a temporary area, put it there
-               $status = $this->repo->storeTemp( basename( $path ), $path );
-
-               if( ! $status->isOK() ) {
-                       // It is a convention in MediaWiki to only return one error per API exception, even if multiple errors
-                       // are available. We use reset() to pick the "first" thing that was wrong, preferring errors to warnings.
-                       // This is a bit lame, as we may have more info in the $status and we're throwing it away, but to fix it means
+               $storeStatus = $this->repo->storeTemp( basename( $pathWithGoodExtension ), $path );
+
+               if ( !$storeStatus->isOK() ) {
+                       // It is a convention in MediaWiki to only return one error per API
+                       // exception, even if multiple errors are available. We use reset()
+                       // to pick the "first" thing that was wrong, preferring errors to
+                       // warnings. This is a bit lame, as we may have more info in the
+                       // $storeStatus and we're throwing it away, but to fix it means
                        // redesigning API errors significantly.
-                       // $status->value just contains the virtual URL (if anything) which is probably useless to the caller
-                       $error = reset( $status->getErrorsArray() );
-                       if ( ! count( $error ) ) {
-                               $error = reset( $status->getWarningsArray() );
-                               if ( ! count( $error ) ) {
-                                       $error = array( 'unknown', 'no error recorded' );
+                       // $storeStatus->value just contains the virtual URL (if anything)
+                       // which is probably useless to the caller.
+                       $error = $storeStatus->getErrorsArray();
+                       $error = reset( $error );
+                       if ( !count( $error ) ) {
+                               $error = $storeStatus->getWarningsArray();
+                               $error = reset( $error );
+                               if ( !count( $error ) ) {
+                                       $error = [ 'unknown', 'no error recorded' ];
                                }
                        }
-                       throw new UploadStashFileException( "error storing file in '$path': " . implode( '; ', $error ) );
+                       // At this point, $error should contain the single "most important"
+                       // error, plus any parameters.
+                       $errorMsg = array_shift( $error );
+                       throw new UploadStashFileException( "Error storing file in '$path': "
+                               . wfMessage( $errorMsg, $error )->text() );
                }
-               $stashPath = $status->value;
-
-               // required info we always store. Must trump any other application info in $data
-               // 'mTempPath', 'mFileSize', and 'mFileProps' are arbitrary names
-               // chosen for compatibility with UploadBase's way of doing this.
-               $requiredData = array( 
-                       'mTempPath' => $stashPath,
-                       'mFileSize' => $fileProps['size'],
-                       'mFileProps' => $fileProps,
-                       'version' => UploadBase::SESSION_VERSION
+               $stashPath = $storeStatus->value;
+
+               // fetch the current user ID
+               if ( !$this->isLoggedIn ) {
+                       throw new UploadStashNotLoggedInException( __METHOD__
+                               . ' No user is logged in, files must belong to users' );
+               }
+
+               // insert the file metadata into the db.
+               wfDebug( __METHOD__ . " inserting $stashPath under $key\n" );
+               $dbw = $this->repo->getMasterDB();
+
+               $serializedFileProps = serialize( $fileProps );
+               if ( strlen( $serializedFileProps ) > self::MAX_US_PROPS_SIZE ) {
+                       // Database is going to truncate this and make the field invalid.
+                       // Prioritize important metadata over file handler metadata.
+                       // File handler should be prepared to regenerate invalid metadata if needed.
+                       $fileProps['metadata'] = false;
+                       $serializedFileProps = serialize( $fileProps );
+               }
+
+               $this->fileMetadata[$key] = [
+                       'us_user' => $this->userId,
+                       'us_key' => $key,
+                       'us_orig_path' => $path,
+                       'us_path' => $stashPath, // virtual URL
+                       'us_props' => $dbw->encodeBlob( $serializedFileProps ),
+                       'us_size' => $fileProps['size'],
+                       'us_sha1' => $fileProps['sha1'],
+                       'us_mime' => $fileProps['mime'],
+                       'us_media_type' => $fileProps['media_type'],
+                       'us_image_width' => $fileProps['width'],
+                       'us_image_height' => $fileProps['height'],
+                       'us_image_bits' => $fileProps['bits'],
+                       'us_source_type' => $sourceType,
+                       'us_timestamp' => $dbw->timestamp(),
+                       'us_status' => 'finished'
+               ];
+
+               $dbw->insert(
+                       'uploadstash',
+                       $this->fileMetadata[$key],
+                       __METHOD__
                );
 
-               // now, merge required info and extra data into the session. (The extra data changes from application to application.
-               // UploadWizard wants different things than say FirefoggChunkedUpload.)
-               wfDebug( __METHOD__ . " storing under $key\n" );
-               $_SESSION[UploadBase::SESSION_KEYNAME][$key] = array_merge( $data, $requiredData );
-               
+               // store the insertid in the class variable so immediate retrieval
+               // (possibly laggy) isn't necesary.
+               $this->fileMetadata[$key]['us_id'] = $dbw->insertId();
+
+               # create the UploadStashFile object for this file.
+               $this->initFile( $key );
+
                return $this->getFile( $key );
        }
 
        /**
-        * Find or guess extension -- ensuring that our extension matches our mime type.
-        * Since these files are constructed from php tempnames they may not start off 
+        * Remove all files from the stash.
+        * Does not clean up files in the repo, just the record of them.
+        *
+        * @throws UploadStashNotLoggedInException
+        * @return bool Success
+        */
+       public function clear() {
+               if ( !$this->isLoggedIn ) {
+                       throw new UploadStashNotLoggedInException( __METHOD__
+                               . ' No user is logged in, files must belong to users' );
+               }
+
+               wfDebug( __METHOD__ . ' clearing all rows for user ' . $this->userId . "\n" );
+               $dbw = $this->repo->getMasterDB();
+               $dbw->delete(
+                       'uploadstash',
+                       [ 'us_user' => $this->userId ],
+                       __METHOD__
+               );
+
+               # destroy objects.
+               $this->files = [];
+               $this->fileMetadata = [];
+
+               return true;
+       }
+
+       /**
+        * Remove a particular file from the stash.  Also removes it from the repo.
+        *
+        * @param string $key
+        * @throws UploadStashNoSuchKeyException|UploadStashNotLoggedInException
+        * @throws UploadStashWrongOwnerException
+        * @return bool Success
+        */
+       public function removeFile( $key ) {
+               if ( !$this->isLoggedIn ) {
+                       throw new UploadStashNotLoggedInException( __METHOD__
+                               . ' No user is logged in, files must belong to users' );
+               }
+
+               $dbw = $this->repo->getMasterDB();
+
+               // this is a cheap query. it runs on the master so that this function
+               // still works when there's lag. It won't be called all that often.
+               $row = $dbw->selectRow(
+                       'uploadstash',
+                       'us_user',
+                       [ 'us_key' => $key ],
+                       __METHOD__
+               );
+
+               if ( !$row ) {
+                       throw new UploadStashNoSuchKeyException( "No such key ($key), cannot remove" );
+               }
+
+               if ( $row->us_user != $this->userId ) {
+                       throw new UploadStashWrongOwnerException( "Can't delete: "
+                               . "the file ($key) doesn't belong to this user." );
+               }
+
+               return $this->removeFileNoAuth( $key );
+       }
+
+       /**
+        * Remove a file (see removeFile), but doesn't check ownership first.
+        *
+        * @param string $key
+        * @return bool Success
+        */
+       public function removeFileNoAuth( $key ) {
+               wfDebug( __METHOD__ . " clearing row $key\n" );
+
+               // Ensure we have the UploadStashFile loaded for this key
+               $this->getFile( $key, true );
+
+               $dbw = $this->repo->getMasterDB();
+
+               $dbw->delete(
+                       'uploadstash',
+                       [ 'us_key' => $key ],
+                       __METHOD__
+               );
+
+               /** @todo Look into UnregisteredLocalFile and find out why the rv here is
+                *  sometimes wrong (false when file was removed). For now, ignore.
+                */
+               $this->files[$key]->remove();
+
+               unset( $this->files[$key] );
+               unset( $this->fileMetadata[$key] );
+
+               return true;
+       }
+
+       /**
+        * List all files in the stash.
+        *
+        * @throws UploadStashNotLoggedInException
+        * @return array
+        */
+       public function listFiles() {
+               if ( !$this->isLoggedIn ) {
+                       throw new UploadStashNotLoggedInException( __METHOD__
+                               . ' No user is logged in, files must belong to users' );
+               }
+
+               $dbr = $this->repo->getReplicaDB();
+               $res = $dbr->select(
+                       'uploadstash',
+                       'us_key',
+                       [ 'us_user' => $this->userId ],
+                       __METHOD__
+               );
+
+               if ( !is_object( $res ) || $res->numRows() == 0 ) {
+                       // nothing to do.
+                       return false;
+               }
+
+               // finish the read before starting writes.
+               $keys = [];
+               foreach ( $res as $row ) {
+                       array_push( $keys, $row->us_key );
+               }
+
+               return $keys;
+       }
+
+       /**
+        * Find or guess extension -- ensuring that our extension matches our MIME type.
+        * Since these files are constructed from php tempnames they may not start off
         * with an extension.
-        * XXX this is somewhat redundant with the checks that ApiUpload.php does with incoming 
+        * XXX this is somewhat redundant with the checks that ApiUpload.php does with incoming
         * uploads versus the desired filename. Maybe we can get that passed to us...
+        * @param string $path
+        * @throws UploadStashFileException
+        * @return string
         */
-       public static function getExtensionForPath( $path ) {   
+       public static function getExtensionForPath( $path ) {
+               global $wgFileBlacklist;
                // Does this have an extension?
                $n = strrpos( $path, '.' );
                $extension = null;
                if ( $n !== false ) {
                        $extension = $n ? substr( $path, $n + 1 ) : '';
                } else {
-                       // If not, assume that it should be related to the mime type of the original file.
+                       // If not, assume that it should be related to the MIME type of the original file.
                        $magic = MimeMagic::singleton();
                        $mimeType = $magic->guessMimeType( $path );
                        $extensions = explode( ' ', MimeMagic::singleton()->getExtensionsForType( $mimeType ) );
-                       if ( count( $extensions ) ) { 
-                               $extension = $extensions[0];    
+                       if ( count( $extensions ) ) {
+                               $extension = $extensions[0];
                        }
                }
 
@@ -193,55 +484,114 @@ class UploadStash {
                        throw new UploadStashFileException( "extension is null" );
                }
 
-               return File::normalizeExtension( $extension );
+               $extension = File::normalizeExtension( $extension );
+               if ( in_array( $extension, $wgFileBlacklist ) ) {
+                       // The file should already be checked for being evil.
+                       // However, if somehow we got here, we definitely
+                       // don't want to give it an extension of .php and
+                       // put it in a web accesible directory.
+                       return '';
+               }
+
+               return $extension;
        }
 
+       /**
+        * Helper function: do the actual database query to fetch file metadata.
+        *
+        * @param string $key
+        * @param int $readFromDB Constant (default: DB_REPLICA)
+        * @return bool
+        */
+       protected function fetchFileMetadata( $key, $readFromDB = DB_REPLICA ) {
+               // populate $fileMetadata[$key]
+               $dbr = null;
+               if ( $readFromDB === DB_MASTER ) {
+                       // sometimes reading from the master is necessary, if there's replication lag.
+                       $dbr = $this->repo->getMasterDB();
+               } else {
+                       $dbr = $this->repo->getReplicaDB();
+               }
+
+               $row = $dbr->selectRow(
+                       'uploadstash',
+                       '*',
+                       [ 'us_key' => $key ],
+                       __METHOD__
+               );
+
+               if ( !is_object( $row ) ) {
+                       // key wasn't present in the database. this will happen sometimes.
+                       return false;
+               }
+
+               $this->fileMetadata[$key] = (array)$row;
+               $this->fileMetadata[$key]['us_props'] = $dbr->decodeBlob( $row->us_props );
+
+               return true;
+       }
+
+       /**
+        * Helper function: Initialize the UploadStashFile for a given file.
+        *
+        * @param string $key Key under which to store the object
+        * @throws UploadStashZeroLengthFileException
+        * @return bool
+        */
+       protected function initFile( $key ) {
+               $file = new UploadStashFile( $this->repo, $this->fileMetadata[$key]['us_path'], $key );
+               if ( $file->getSize() === 0 ) {
+                       throw new UploadStashZeroLengthFileException( "File is zero length" );
+               }
+               $this->files[$key] = $file;
+
+               return true;
+       }
 }
 
 class UploadStashFile extends UnregisteredLocalFile {
-       private $sessionStash;
-       private $sessionKey;
-       private $sessionData;
+       private $fileKey;
        private $urlName;
+       protected $url;
 
        /**
-        * A LocalFile wrapper around a file that has been temporarily stashed, so we can do things like create thumbnails for it
-        * Arguably UnregisteredLocalFile should be handling its own file repo but that class is a bit retarded currently
+        * A LocalFile wrapper around a file that has been temporarily stashed,
+        * so we can do things like create thumbnails for it. Arguably
+        * UnregisteredLocalFile should be handling its own file repo but that
+        * class is a bit retarded currently.
         *
-        * @param $stash UploadStash: useful for obtaining config, stashing transformed files
-        * @param $repo FileRepo: repository where we should find the path
-        * @param $path String: path to file
-        * @param $key String: key to store the path and any stashed data under
-        * @param $data String: any other data we want stored with this file
+        * @param FileRepo $repo Repository where we should find the path
+        * @param string $path Path to file
+        * @param string $key Key to store the path and any stashed data under
         * @throws UploadStashBadPathException
         * @throws UploadStashFileNotFoundException
         */
-       public function __construct( $stash, $repo, $path, $key, $data ) { 
-               $this->sessionStash = $stash;
-               $this->sessionKey = $key;
-               $this->sessionData = $data;
+       public function __construct( $repo, $path, $key ) {
+               $this->fileKey = $key;
 
                // resolve mwrepo:// urls
                if ( $repo->isVirtualUrl( $path ) ) {
-                       $path = $repo->resolveVirtualUrl( $path );      
-               }
-
-               // check if path appears to be sane, no parent traversals, and is in this repo's temp zone.
-               $repoTempPath = $repo->getZonePath( 'temp' );
-               if ( ( ! $repo->validateFilename( $path ) ) || 
-                               ( strpos( $path, $repoTempPath ) !== 0 ) ) {
-                       wfDebug( "UploadStash: tried to construct an UploadStashFile from a file that should already exist at '$path', but path is not valid\n" );
-                       throw new UploadStashBadPathException( 'path is not valid' );
-               }
+                       $path = $repo->resolveVirtualUrl( $path );
+               } else {
+                       // check if path appears to be sane, no parent traversals,
+                       // and is in this repo's temp zone.
+                       $repoTempPath = $repo->getZonePath( 'temp' );
+                       if ( ( !$repo->validateFilename( $path ) ) ||
+                               ( strpos( $path, $repoTempPath ) !== 0 )
+                       ) {
+                               wfDebug( "UploadStash: tried to construct an UploadStashFile "
+                                       . "from a file that should already exist at '$path', but path is not valid\n" );
+                               throw new UploadStashBadPathException( 'path is not valid' );
+                       }
 
-               // check if path exists! and is a plain file.
-               if ( ! $repo->fileExists( $path, FileRepo::FILES_ONLY ) ) {
-                       wfDebug( "UploadStash: tried to construct an UploadStashFile from a file that should already exist at '$path', but path is not found\n" );
-                       throw new UploadStashFileNotFoundException( 'cannot find path, or not a plain file' );
+                       // check if path exists! and is a plain file.
+                       if ( !$repo->fileExists( $path ) ) {
+                               wfDebug( "UploadStash: tried to construct an UploadStashFile from "
+                                       . "a file that should already exist at '$path', but path is not found\n" );
+                               throw new UploadStashFileNotFoundException( 'cannot find path, or not a plain file' );
+                       }
                }
 
-                       
-
                parent::__construct( false, $repo, $path, false );
 
                $this->name = basename( $this->path );
@@ -250,10 +600,10 @@ class UploadStashFile extends UnregisteredLocalFile {
        /**
         * A method needed by the file transforming and scaling routines in File.php
         * We do not necessarily care about doing the description at this point
-        * However, we also can't return the empty string, as the rest of MediaWiki demands this (and calls to imagemagick
-        * convert require it to be there)
+        * However, we also can't return the empty string, as the rest of MediaWiki
+        * demands this (and calls to imagemagick convert require it to be there)
         *
-        * @return String: dummy value
+        * @return string Dummy value
         */
        public function getDescriptionUrl() {
                return $this->getUrl();
@@ -261,87 +611,73 @@ class UploadStashFile extends UnregisteredLocalFile {
 
        /**
         * Get the path for the thumbnail (actually any transformation of this file)
-        * The actual argument is the result of thumbName although we seem to have 
+        * The actual argument is the result of thumbName although we seem to have
         * buggy code elsewhere that expects a boolean 'suffix'
         *
-        * @param $thumbName String: name of thumbnail (e.g. "120px-123456.jpg" ), or false to just get the path
-        * @return String: path thumbnail should take on filesystem, or containing directory if thumbname is false
+        * @param string $thumbName Name of thumbnail (e.g. "120px-123456.jpg" ),
+        *   or false to just get the path
+        * @return string Path thumbnail should take on filesystem, or containing
+        *   directory if thumbname is false
         */
-       public function getThumbPath( $thumbName = false ) { 
+       public function getThumbPath( $thumbName = false ) {
                $path = dirname( $this->path );
                if ( $thumbName !== false ) {
                        $path .= "/$thumbName";
                }
-               return $path;
-       }
 
-       /**
-        * Return the file/url base name of a thumbnail with the specified parameters
-        *
-        * @param $params Array: handler-specific parameters
-        * @return String: base name for URL, like '120px-12345.jpg', or null if there is no handler
-        */
-       function thumbName( $params ) {
-               return $this->getParamThumbName( $this->getUrlName(), $params );
+               return $path;
        }
 
-
        /**
-        * Given the name of the original, i.e. Foo.jpg, and scaling parameters, returns filename with appropriate extension
-        * This is abstracted from getThumbName because we also use it to calculate the thumbname the file should have on 
-        * remote image scalers 
+        * Return the file/url base name of a thumbnail with the specified parameters.
+        * We override this because we want to use the pretty url name instead of the
+        * ugly file name.
         *
-        * @param String $urlName: A filename, like MyMovie.ogx
-        * @param Array $parameters: scaling parameters, like array( 'width' => '120' );
-        * @return String|null parameterized thumb name, like 120px-MyMovie.ogx.jpg, or null if no handler found
+        * @param array $params Handler-specific parameters
+        * @param int $flags Bitfield that supports THUMB_* constants
+        * @return string|null Base name for URL, like '120px-12345.jpg', or null if there is no handler
         */
-       function getParamThumbName( $urlName, $params ) {
-               if ( !$this->getHandler() ) {
-                       return null;
-               }
-               $extension = $this->getExtension();
-               list( $thumbExt, ) = $this->handler->getThumbType( $extension, $this->getMimeType(), $params );
-               $thumbName = $this->getHandler()->makeParamString( $params ) . '-' . $urlName;
-               if ( $thumbExt != $extension ) {
-                       $thumbName .= ".$thumbExt";
-               }
-               return $thumbName;
+       function thumbName( $params, $flags = 0 ) {
+               return $this->generateThumbName( $this->getUrlName(), $params );
        }
 
        /**
-        * Helper function -- given a 'subpage', return the local URL e.g. /wiki/Special:UploadStash/subpage
-        * @param {String} $subPage
-        * @return {String} local URL for this subpage in the Special:UploadStash space. 
+        * Helper function -- given a 'subpage', return the local URL,
+        * e.g. /wiki/Special:UploadStash/subpage
+        * @param string $subPage
+        * @return string Local URL for this subpage in the Special:UploadStash space.
         */
        private function getSpecialUrl( $subPage ) {
                return SpecialPage::getTitleFor( 'UploadStash', $subPage )->getLocalURL();
        }
 
-
-       /** 
-        * Get a URL to access the thumbnail 
-        * This is required because the model of how files work requires that 
-        * the thumbnail urls be predictable. However, in our model the URL is not based on the filename
-        * (that's hidden in the session)
+       /**
+        * Get a URL to access the thumbnail
+        * This is required because the model of how files work requires that
+        * the thumbnail urls be predictable. However, in our model the URL is
+        * not based on the filename (that's hidden in the db)
         *
-        * @param $thumbName String: basename of thumbnail file -- however, we don't want to use the file exactly
-        * @return String: URL to access thumbnail, or URL with partial path
+        * @param string $thumbName Basename of thumbnail file -- however, we don't
+        *   want to use the file exactly
+        * @return string URL to access thumbnail, or URL with partial path
         */
-       public function getThumbUrl( $thumbName = false ) { 
+       public function getThumbUrl( $thumbName = false ) {
                wfDebug( __METHOD__ . " getting for $thumbName \n" );
+
                return $this->getSpecialUrl( 'thumb/' . $this->getUrlName() . '/' . $thumbName );
        }
 
-       /** 
+       /**
         * The basename for the URL, which we want to not be related to the filename.
         * Will also be used as the lookup key for a thumbnail file.
         *
-        * @return String: base url name, like '120px-123456.jpg'
+        * @return string Base url name, like '120px-123456.jpg'
         */
-       public function getUrlName() { 
-               if ( ! $this->urlName ) {
-                       $this->urlName = $this->sessionKey;
+       public function getUrlName() {
+               if ( !$this->urlName ) {
+                       $this->urlName = $this->fileKey;
                }
+
                return $this->urlName;
        }
 
@@ -349,49 +685,75 @@ class UploadStashFile extends UnregisteredLocalFile {
         * Return the URL of the file, if for some reason we wanted to download it
         * We tend not to do this for the original file, but we do want thumb icons
         *
-        * @return String: url
+        * @return string Url
         */
        public function getUrl() {
                if ( !isset( $this->url ) ) {
                        $this->url = $this->getSpecialUrl( 'file/' . $this->getUrlName() );
                }
+
                return $this->url;
        }
 
        /**
-        * Parent classes use this method, for no obvious reason, to return the path (relative to wiki root, I assume). 
-        * But with this class, the URL is unrelated to the path.
+        * Parent classes use this method, for no obvious reason, to return the path
+        * (relative to wiki root, I assume). But with this class, the URL is
+        * unrelated to the path.
         *
-        * @return String: url
+        * @return string Url
         */
-       public function getFullUrl() { 
+       public function getFullUrl() {
                return $this->getUrl();
        }
 
-
        /**
-        * Getter for session key (the session-unique id by which this file's location & metadata is stored in the session)
+        * Getter for file key (the unique id by which this file's location &
+        * metadata is stored in the db)
         *
-        * @return String: session key
+        * @return string File key
         */
-       public function getSessionKey() {
-               return $this->sessionKey;
+       public function getFileKey() {
+               return $this->fileKey;
        }
 
        /**
         * Remove the associated temporary file
-        * @return Status: success
+        * @return status Success
         */
        public function remove() {
+               if ( !$this->repo->fileExists( $this->path ) ) {
+                       // Maybe the file's already been removed? This could totally happen in UploadBase.
+                       return true;
+               }
+
                return $this->repo->freeTemp( $this->path );
        }
 
+       public function exists() {
+               return $this->repo->fileExists( $this->path );
+       }
 }
 
-class UploadStashNotAvailableException extends MWException {};
-class UploadStashFileNotFoundException extends MWException {};
-class UploadStashBadPathException extends MWException {};
-class UploadStashBadVersionException extends MWException {};
-class UploadStashFileException extends MWException {};
-class UploadStashZeroLengthFileException extends MWException {};
+class UploadStashException extends MWException {
+}
 
+class UploadStashFileNotFoundException extends UploadStashException {
+}
+
+class UploadStashBadPathException extends UploadStashException {
+}
+
+class UploadStashFileException extends UploadStashException {
+}
+
+class UploadStashZeroLengthFileException extends UploadStashException {
+}
+
+class UploadStashNotLoggedInException extends UploadStashException {
+}
+
+class UploadStashWrongOwnerException extends UploadStashException {
+}
+
+class UploadStashNoSuchKeyException extends UploadStashException {
+}