En abril de 1997, la banda se reunió en la casa de vacaciones de Buck

En abril de 1997, la banda se reunió en la casa de vacaciones de Buck en Kauai para grabar demos de material destinado al próximo álbum. La banda buscó reinventar su sonido y pretendía incorporar loops de batería y experimentos de percusión. ​ Justo cuando las sesiones debían comenzar en octubre, Berry decidió, después de meses de contemplación y discusiones con Downs y Mills, decirle al resto de la banda que se retiraba. ​ Berry les dijo a sus compañeros de banda que no renunciaría si se separaban como resultado, por lo que Stipe, Buck y Mills acordaron continuar como un trío con su bendición. ​ Berry anunció públicamente su partida tres semanas después, en octubre de 1997. Berry dijo a la prensa: «Ya no estoy tan entusiasmado como en el pasado por hacer esto… Tengo el mejor trabajo del mundo. Pero estoy listo para sentarme y reflexionar y tal vez dejar de ser una estrella del pop ». ​ Stipe admitió que la banda sería diferente sin un colaborador importante: «Para mí, Mike y Peter, como R.E.M., ¿seguimos siendo R.E.M.? Supongo que un perro de tres patas sigue siendo un perro. Solo tiene que aprender a correr de manera diferente». ​