The Cave Singers son un trio de Seattle, Washington, que surgió tras la disolución de la banda Pretty Girls Make Graves en el año 2007. El bajista Derek Fudesco (ex-PGMG/Murder City Devils) cambió el bajo por una guitarra acústica y se juntó a Pete Quirk (Voces, ex-Hint Hint) y Marty Lund (bateria y guitarra, ex-Cobra High) y empezaron a tocar por Seattle y arrededores.
Pronto ficharon para Matador Records y grabaron un Lp en Vancouver, Canadá, al que titularon "Invitation Songs". Poco...