Historia Obraz datowany jest na I poł. XVII w.. Sławę cudownego zyskał najpóźniej w XVIII stuleciu; wiadomo przy tym, że cerkiew była ośrodkiem szczególnego kultu maryjnego już w wieku XVII, gdy szczególnie uroczyście obchodzone w niej święto Narodzenia Matki Bożej. W protokole wizytacji unickiej cerkwi w Kożanach z 1773 zapisano, iż przy wystawionej w ołtarzu bocznym ikonie maryjnej znajdowały się wota dziękczynne. Wcześniej, w 1761, w parafii kożańskiej powstało bractwo Miłosierdzia Matki Bożej. Kult wizerunku trwał także po synodzie połockim, na którym parafie unickie na Podlasiu włączono do Rosyjskiego Kościoła Prawosławnego.
W latach 70. XIX w. cerkiew w Kożanach, jako stara i zniszczona, została rozebrana, a z materiału uzyskanego w ten sposób zbudowano cerkiew św. Jerzego w Rybołach. Do niej też przeniesiono Kożańską Ikonę Matki Bożej. Nową świątynię w Kożanach wzniesiono dopiero w latach 1883-1886. Po kolejnej dekadzie starań kożańska parafia uzyskała decyzję władz eparchii wileńskiej i litewskiej nakazującą parafii w Rybołach zwrot ikony. Tak też się stało.