La band fu creata in tempi brevi: furono reclutati Adam Siska come

La band fu creata in tempi brevi: furono reclutati Adam Siska come bassista, Adrian LaTrace Jr come secondo chitarrista e Mike DelPrincipe come batterista. La prima incisione del gruppo fu un EP , The Academy , registrato nel 2004 sotto la LLR Recordings , un’etichetta di Chicago che aveva prodotto l’unico album dei Remember Maine. Il loro lavoro fu ascoltato da Peter Wentz , bassista dei Fall Out Boy , che fu tanto colpito dallo stile del nuovo gruppo che convinse la sua etichetta, la Fueled by Ramen , a mettere sotto contratto la band.