В 1794 году 27 августа, а по новому стилю 9 сентября, батюшка Серафим ушел на жительство в Дальнюю пустынку.

Она находится в четырех километрах от монастыря Сарова, вверх по течению реки Саровки.
Здесь, в глухих лесах, начал он исполнять свой первый аскетический подвиг — отшельничество. Сразу после смерти настоятеля монастыря Пахомия старец Серафим попросил вновь назначенного настоятеля Исайю отпустить его побыть в одиночестве, испытать свои духовные силы. Целых 16 лет прожил старец Серафим в небольшой избушке на крутом берегу Саровки.
Много испытаний выпало батюшке Серафиму, и он с честью их все выстоял. Тысячу ночей он стоял на камне в лесу, а днем продолжал свой подвиг стояния на камне в келье, чтобы не мешали приходящие паломники. Здесь, на Дальней пустынке, избили его разбойники. Здесь он совершал свой подвиг молчальничества.
После кончины отца Серафима келья с Дальней пустынки была выкуплена благодетелем Дивеевской обители Н.А. Мотовиловым, которого батюшка Серафим исцелил в 1831 году. Келью разобрали на бревна, перевезли в Дивеево и устроили из нее алтарь церкви Преображения.
К Саровским торжествам 1903 года на Дальней пустынке была поставлена новая большая изба, это место благоустроили. К этой вновь поставленной келье приходил последний русский император Николай II со своей семьей, чтобы почтить память великого старца.
После закрытия монастыря место Дальней пустынки запустело и все было разрушено. В 1990 году члены исторического объединения «Саровская пустынь» здесь поставили деревянную часовню с крестом.
В 1991 году известный скульптор Вячеслав Клыков изготовил и подарил городу памятник преподобному Серафиму Саровскому. Монумент установили в районе Дальней пустынки, в лесу. Городские власти помогли благоустроить это место.
В 2000 году на Дальней пустынке стараниями руководства Российского федерального ядерного центра, местного прихода и благотворителей была построена каменная часовня с навесом, а к столетию прославления преподобного старца Серафима на месте найденного каменного фундамента построили деревянную избу, копию избы 1903 года.