Родился в крестьянской семье в деревне Большой Верх Данковского района Воронежской области (ныне – в Лебедянском районе Липецкой области). До ареста работал возчиком и учеником токаря в «Союзводстрое». Проживал в селе Покровское-Глебово Красногорского района Московской области (ныне – район на северо-западе Москвы).

Семья родителей была раскулачена, а сам он с 1930 года подлежал административной высылке, однако предпочел перейти на нелегальное положение. Считал, что от надзора «органов» скрылся, однако в справке на арест, последовавший 13 января 1938 года, значится: «Активный участник группы последователей ИПЦ Расторгуев Сергей Дмитриевич <...> неоднократно приезжал в Москву для установления прежних связей со своими единомышленниками и почитателями попа [Сергия] Мечёва, ныне осужденного за контрреволюционную деятельность. Расторгуев <...> в г.Москве организовал несколько нелегальных церквей на квартирах у своих единомышленников, где последние совершают тайные богослужения». В справке также говорится о проводившихся С. Д. Расторгуевым «денежных сборах среди почитателей Мечёва» для оказания материальной помощи сосланным и осужденным последователям ИПЦ. На допросе Сергей Дмитриевич показал, что долгое время прислуживал у отца Сергия Мечёва в алтаре, но все обвинения отверг, заявив, что никого из священнослужителей близко не знал.

Расстрелян на Бутовском полигоне под Москвой 17 февраля 1938 года.