A mintegy 900 négyzetméter alapterületű Tolna megyei erődítményt 1416-ban kezdte építtetni Ozorai Pipo, Zsigmond király Firenzéből származó hadvezére.
Az itáliai mesteremberek és művészek által alkotott négyzetes alaprajzú, kétemeletes, nyeregtetős gótikus stílusú várat a főúr özvegye a Héderváry családra hagyta, melytől száz évvel később Török Bálint hódította el.
A várkastély 1545-ben elesett a török elleni harcokban, majd Buda felszabadítását követően sokáig romokban állt. A falakat az 1730-as években az Esterházyak építtették újjá. Az épületeket a XIX. századtól használták megyei börtönnek és magtárnak is, a vár, valamint a környék feltárási, felújítási munkálatai 1981-ben kezdődtek, s kisebb nagyobb megszakításokkal azóta is tartanak.
Lassányi elmondta, hogy a beruházás a végéhez közeledik; a Kincstári Vagyoni Igazgatóság 1995 óta 200 millió forintot költött a várépületek rekonstrukciójára, és a Széchenyi-tervnek köszönhetően idén további 180 milliót fordíthat rá. Az elmúlt két évtizedben megerősítették a belső vár tetőszerkezetét, valamint helyreállították a belső homlokzatokat, 2002-es tervekben pedig a torony tetőterének felújítása és a fűtés korszerűsítése szerepel.
