Klasycystyczny pałac w Żywcu pochodzi z XVIII wieku i nazywany jest Nowym Zamkiem. W XIX wieku wcześniejszy pałac został przebudowany przez Habsburgów, nadając budowli obecny kształt. Zamek w Żywcu zniszczono w 1477. Gdy Piotr Komorowski poparł Macieja Korwina króla Węgier, wtedy Kazimierz Jagiellończyk uznając czyn ten za zdradę, wyruszył zbrojnie na Żywiec niszcząc wtedy zamek, który wtedy był niczym …