Na swym trzecim albumie Stone Temple Pilots postawili na eksperymenty i otwartość. Efektem płyta "Tiny Music... Songs From The Vatican Gift Shop", która ukazała się 26 marca 1996 roku. Wydawnictwo wypełniła idealna mieszanka osobistych stylów poszczególnych muzyków, owocująca przebojami "Big Bang Baby", "Lady Picture Show" i "Trippin' On A Hole In A Paper Heart". Z okazji 25-lecia premiery ukazuje się nowa, zremasterowana wersja "Tiny Music... " poszerzona o niepublikowane nagrania studyjne i koncertowe.
Oba formaty wydawnictwa, tj. 3CD/1LP oraz 2 CD poza zremasterowanym albumem, zawierają 15 niepublikowanych utworów, przybliżających proces twórczy zespołu. W zestawach znalazły się wczesne wersje niemal każdej piosenki, która ostatecznie trafiła na płytę, w tym zalążki "Tumble In The Rough," "Pop's Love Suicide" czy "Seven Caged Tigers". Całość uzupełnia alternatywna wersja "Big Bang Baby" oraz perkusyjny miks "Trippin' On A Hole In A Paper Heart". Gratkę stanowią instrumentalne edycje "Ride The Cliché" i "Adhesive" oraz niepublikowany numer "Kretz's Acoustic Song".
Wydawnictwo Super Deluxe Edition (3CD/LP) zawiera ponadto niepublikowany wcześniej zapis występu, który Stone Temple Pilots dali 14 marca 1997 roku w Panama City Beach, na Florydzie. Na żywo zespół wykonał kawałki z nowego albumu ("Tumble In The Rough" i "Big Bang Baby"), jak również wcześniejsze przeboje ("Vasoline," "Plush" i "Interstate Love Song").