Sprout e Pollard editaron simultaneamente discos en solitario o mesmo

Sprout e Pollard editaron simultaneamente discos en solitario o mesmo día en 1996: o Carnival Boy de Sprout e o Not in My Airforce de Pollard, con dous aparecendo no álbum do outro. Pollard mantivo unha activa carreira en solitario e en proxectos paralelos xunto coa súa actividade en GBV durante o resto da existencia do grupo. Esas gravacións foron principalmente autoeditadas. Debido a que esas gravación contaban regularmente con membros de Guided by Voices e que se incluían con frecuencia nos concertos da banda, informalmente son consideradas parte do canon de GBV. En 1995 Pollard tamén colaborou coa canción “Sensational Gravity Boy” no recompilatorio Red Hot + Bothered producido pola Red Hot Organization pola loita contra o SIDA .