Spoczywał na nim obowiązek jego utrzymania i zapewnienia chłopcom należytych warunków życia i nauki.
O. Rydlewski był jednym z pierwszych duchaczy w Bydgoszczy. 10 października 1922 r. Zgromadzenie Ducha Świętego zostało zarejestrowane jako Kongregacja Ducha Świętego z siedzibą w Bydgoszczy. W 1925 r. zyskało status wiceprowincji. Siedzibą bydgoskich duchaczy był początkowo Dom Św. Józefa przy ulicy Śniadeckich 54, gdzie o. Rydlewski pełnił funkcję kapelana kaplicy półpublicznej.
Po utworzeniu Domu zakonnego Zgromadzenia Ducha Świętego w Puszczykówku k. Poznania w 1933 r. i przeniesieniu tam nowicjatu z Bydgoszczy, został w nim superiorem i mistrzem nowicjatu.
Śmierć Po najeździe Niemiec na Polskę we wrześniu 1939 r. został aresztowany 2 listopada tego roku. Więziony był w Puszczykówku, Miejskiej Górce i Lubiniu. Zmarł 2 stycznia 1941 r. w klasztorze benedyktynów w Lubiniu, przekształconym przez hitlerowców na obóz internowania dla zakonników.
Ordery i odznaczenia Krzyż Walecznych (1921)Rozkaz Ministra Spraw Wojskowych L. 1987 z 1921 r. (Dziennik Personalny z 1921 r. Nr 39, poz.