Taking Back Sunday es el primer material grabado de Taking Back Sunday. Grabado en 2001, la formación en este EP poco o nada tiene que ver con la actual. En primer lugar, el cantante principal de la banda es Antonio Longo, cantante original de Taking Back Sunday; Jesse Lacey, actual líder de Brand New, es el bajista y coros; John Nolan era el guitarra y coros; Eddie Reyes, fundador y guitarra; Stevie D., batería únicamente en los temas Go On y Summer Stars; y Mark O'Connell, batería en el resto de canciones.

Longo, Lacey y Stevie D. sólo firman este trabajo y Lullaby EP, también de 2001. Abandonaron la banda en 2000, antes de que este EP fuese lanzado.