Le prime registrazioni risalgono al 1983 , ma non vengono mai

Le prime registrazioni risalgono al 1983 , ma non vengono mai pubblicate. Un EP omonimo viene pubblicato nel 1984 per la loro etichetta Blowing Fuses. Il gruppo autoproduce e pubblica nel 1985 una audiocassetta contenente una serie di demo conosciuta successivamente anche come The Doghouse Cassette (i brani verranno ripubblicati nel 1998 nella raccolta In a Doghouse ). Il brano Sinkhole , pubblicato in questi demo, raggiunge il primo posto nella classifica delle college radio nello stesso anno. I demo attirano l’attenzione del produttore discografico Ivo Watts-Russell che procura loro un contratto con l’etichetta britannica indipendente 4AD , facendo dei Throwing Muses il primo gruppo statunitense a firmare con la 4AD: nel 1986 viene quindi pubblicato l’album omonimo Throwing Muses .