Według Jana Długosza murowany zamek biskupów krakowskich w Iłży został wzniesiony na stromym wzgórzu górującym nad miastem w latach 1326 - 1347.

Trzydzieści lat później zamek rozbudował biskup Florian z Mokrska, który przyczynił się też do obwarowania miasta i zamku kamiennym murem. Kolejna rozbudowa zamku była związana z przekształceniem go w renesansową warownię. Ok 1560 r. przedzamcze zostało otoczone murem obwodowym co przekształciło go w zamek dolny. Powstał też mur kurtynowy z trzema bastejami. W połowie XVII w. biskup Marcin Szyszkowski dokonuje kolejnej rozbudowy, która związana była z umocnieniem fortyfikacji i zabudową podzamcza. Na zamku dolnym swoją siedzibę miał starosta zamkowy i służba.  Powstały stajnie i budynki gospodarcze. Zamek główny wraz z wieżą wjazdową zostały zwieńczone attyką. Zamek został zniszczony w 1655 r. w czasie potopu szwedzkiego. W latach 1670, 1732 i w 1782 dokonano restauracji i prac remontowych zamku. Od połowy XVIII w. zabytek zaczął popadać w ruinę. W 1789 r. dobra biskupów krakowskich skonfiskowano na rzecz Skarbu Państwa. W kolejnych latach zamek był częściowo dzierżawiony, swoją siedzibę po rozbiorach miał tu lazaret. Ogromnych zniszczeń dokonał pożar, który wybuchł podczas zabawy urządzonej po wyjściu wojsk austriackich. Od 1812 r. to co pozostało z zamku stało się budulcem dla miasta. W tym czasie właścicielem zamku był Tadeusz Lubomirski, który kupił zamek i przekazał go na rzecz Towarzystwa Opieki nad Zabytkami Przeszłości. Odbudowę zamku przerwał wybuch I wojny światowej. Przez tę wojnę i potem przez II wojnę światową zniszczeniu uległa głównie wieża, służąca za doskonały punkt obserwacyjny. Obecnie ruiny zamku są zabezpieczone i udostępnione do zwiedzania. Nie ma możliwości wejścia na wieżę. Z zamkowego wzgórza roztacza się piękny widok na Iłżę i okolicę a teren ruin idealnie nadaje się do spaceru i odpoczynku.

Źródło: www.muzeumilza.pl