Dance Gavin Dance были сформированы после распада нескольких групп, включая Farewell Unknown, Ghost Runner on Third, Atherton и принадлежавшую ранее Rise Records группы Five Minute Ride. Джонни Крэйг и Шон О'Салливан пришли в 2005 и в начале 2006 года соответственно. Они выпустили их первое DIY EP 14 ноября 2006 г., названное Whatever I Say Is Royal Ocean через Rise Records. Название «Dance Gavin Dance» появилось на свет совершенно случайно благодаря тогдашнему главному вокалисту Джонни Крэйгу, который планировал так назвать свою предыдущую группу (Ghost Runner on Third).