Изначально съёмки картины должны были пройти в Бостоне, где и развиваются события фильма, но из-за финансовых соображений основная часть съёмок прошла в Нью-Йорке.

Роль Квина должен был исполнить Геральд МакСорли, но не смог принять участия в фильме из-за занятости на других проектах.

Для того чтобы лучше подготовиться к роли, Мэтт Дэймон некоторое время работал в одном из массачусетских отделений полиции.

Изначально Джек Николсон отверг предложение сниматься в данном фильме, но после встречи с Мартином Скорсезе и Леонардо Ди Каприо, он согласился сыграть Фрэнка Костелло. Джек передумал, потому что, по его словам, в последнее время он слишком часто снимался в комедиях, и ему снова захотелось исполнить роль злодея.

Том Даффи был техническим консультантом на проекте. Он проработал почти тридцать лет в полиции и занимался организованной преступностью. Том также принимал участие в поимке известного бостонского гангстера Уайти Балгера, образ которого частично лег в основу Фрэнка Костелло (Джек Николсон).

Роль Мэделин могла достаться Кэйт Уинслет и Хилари Суонк.

Изначально Леонардо Ди Каприо должен был сыграть главную роль в фильме «Ложное искушение» (съёмки которого проходили одновременно со съёмками «Отступников»), но отказался, предпочтя сыграть Билли Костигана в данной картине, и тогда её исполнил Мэтт Деймон, который тоже играет в «Отступниках». Режиссер «Ложного искушения» Роберт Де Ниро отказался от роли Куинана, чтобы сыграть в своем фильме.

Фильм открывается «Gimme Shelter», классической мелодией группы «Rolling Stones». В саундтреке к фильму она отсутствует; ее место занимает «Comfortably Numb» в исполнении Роджера Уотерса и Вана Моррисона.

Слово «fuck» произносится в картине 237 раз.