Budowę zamku szacuje się na lata 1405-1466, czyli okres w pokoju w Raciążu. Od początku zamek był własnością rodu Ogończyków, którzy z czasem zaczęli używać nazwiska Radzikowskich. W 1510 r przebudowany został przez Mikołaja Radzikowskiego, a po śmierci jego syna - Jana, posiadłość trafiła do rodu Pileckich, a następnie do Roliczów Tarnowskich.
Zamek miał plan kwadratu. Przy jednym z jego boków mieścił się piętrowy budynek mieszkalny, na każdej kondygnacji mający po trzy sale. W murze po przeciwnej stronie, w niewysokiej wieży zlokalizowana była brama wjazdowa. Budowla została uszkodzona podczas potopu szwedzkiego, a od pocz XIXw. zaczęła popadać w ruinę.
