Перед началом Второй мировой войны в 1939 году Софья Владимировна переезжает на свое последнее место жительство — в США, где вместе с Александрой Львовной Толстой основывает Толстовский фонд.
Во время войны делала все возможное  для облегчения участи советских военнопленных.

Прожила графиня Панина до глубокой старости и, забытая Россией, умерла в Америке в 1956 году в возрасте  восьмидесяти пяти лет.  До последних дней оставаясь оптимисткой с заразительным смехом, добрейшим сердцем и позитивным отношением к жизни.
Похоронена на кладбище Успенского женского монастыря в Нануете,штата Нью-Йорк.
Оставила после себя мемуары  «На Петроградской окраине», изданные в Нью-Йорке в 1957 году, уже после её смерти.

 В глубине парка стоит памятник любимой собаке Софьи Владимировны — ротвейлеру Султану. Считается, что это первый ротвейлер, завезенный в Россию. Почему-то у его ног всегда лежит мелочь, видимо, изваяние выполняет функции фонтана (чтобы вернуться). У Султана милая грустная мордашка, абсолютно не похожая на ротвейлерову, и нет одного глаза. Очень его жалко… Мои прогулки всегда начинались и заканчивались возле этого места, я обещала ему, что обязательно вернусь через год.

В один прекрасный солнечный день в усадьбе появились несколько конных экипажей, девушки и молодые люди, одетые по моде начала прошлого века. Как интересно! Подойдя к девушке в шляпке, очень похожей на  курсистку с картины Ярошенко, и закончившей разговор по мобильному телефону (забавное зрелище), я узнала, что идут съёмки  фильма «Кензели» про жизнь поэта Серебряного века Игоря Северянина.