Na gruntach ówczesnej wsi Syrokomla przystąpił do budowy wspaniałego bastjonowego zamku Janowiec (województwo lubelskie) w stylu późnego renesansu. Prace przy wielkiej rezydencji, mającej swym rozmachem przyćmić położony po drugiej stronie Wisły zamek w Kazimierzu, rozpoczęły się w roku 1507 i trwały około 20 lat (niektóre źródła podają datę 1526–37). Budowę dokończył jego syn Piotr Firlej.
W czasie wojny litewsko-moskiewskiej 1507–1508 stłumił powstanie Michała Glińskiego. W 1508 przeszedł do działań zaczepnych, pokonując Rosjan w bitwie pod Orszą. 16 października 1514 mianowany został wojewodą sandomierskim, a w 1515 hetmanem wielkim. Towarzyszył królowi w pertraktacjach na zjeździe wiedeńskim. W 1519 brał udział w bitwie pod Sokalem z Tatarami, zakończonej przegraną wojsk polsko-litewskich.