Przez kolejne dwa lata prowadzący Dom nad Bobrem szukał ratunku poprzez organizowanie rozmaitych kursów. Niestety, w latach 1930-1931 z powodu trudności finansowych nastąpiło zaniechanie tej inicjatywy, a po 1932 r. dom opustoszał. w 1936 r. budynek został przejęty przez Hitlerjugend.

Czasy II wojny światowej W 1942 roku „Dom nad Bobrem” przestał być schroniskiem Hitlerjugend, a jego wnętrza przeznaczono do zupełnie odmiennych celów, m.in. jako zakwaterowanie dla francuskich robotników przymusowych czy od 1944 roku jako prowizoryczny lazaret, w którym umieszczano rannych i chorych żołnierzy walczących na froncie wschodnim.

Jesienią 1932 roku Komisariat Rzeszy przeznaczył lwówecki ośrodek dla Ochotniczej Służby Pracy (FAD). Jej członkowie uczestniczyli głównie w pracach rolnych, leśnych i przy budowie dróg. Organizacja ta w 1933 roku została przekształcona w Służbę Pracy Rzeszy (RAD). Po objęciu w Niemczech władzy przez nazistów i wzroście znaczenia organizacji Hitlerjugend, podjęto działania zmierzające do przejęcia Boberhaus. W 1942 roku „Bobrzański Dom” przekształcono w miejsce zakwaterowania francuskich robotników przymusowych.