Die Band wurde von Care Failure (bürgerlicher Name Caroline Kawa)

Die Band wurde von Care Failure (bürgerlicher Name Caroline Kawa) gegründet, nachdem ihre Eltern sie mit sechzehn Jahren vor die Tür gesetzt hatten. 2006 erschien ihre erste EP How to Kill , die sie noch alleine einspielte. Bei der Produktion halfen ihr Jesse F. Keeler und Al-P von MSTRKRFT . Noch im gleichen Jahr kamen Schlagzeuger Pat. M und Bassist Ethan Deth von The Big Dirty Band zur Band. Letzterer wird kurze Zeit später durch Anthony Bleed von Kill Cheerleader ersetzt. Es folgte die erste Tour im Vorprogramm von Guns N’ Roses . Im Sommer 2006 unterschrieb die Band zwar einen Plattenvertrag bei EMI , gründete aber wenig später unter dem Dach von Warner Music Kanada das eigene Plattenlabel How To Kill Music .