YOUR FAVORITE ENEMIESはボーカルのAlex FosterとギターのSefがフォークロックバンドのThe Riddlersを結成した８年前に始まった。ベースのBen LemelinとボーカルのMiss Isabelが加わり、The Riddlersはナッシュビルに本拠地を置くアメリカの会社と取り引きのあるプロダクションと契約した。カナダでもアメリカ合衆国でも同様にツアーを行い、２枚の独自のアルバムをリリースした。約５年後、アメリカのフォークロックシーンでThe Riddlersとして名声を得たわりには、結論が出るには非常に難しい状況であり、グループのメンバーは方向性を変えるために2003年の春に活動を中止する事にした。