Miasto stanowi 4,9% powierzchni powiatu żywieckiego.
W latach 1945–1975 miasto administracyjnie należało do województwa krakowskiego, natomiast w latach 1975–1998 do województwa bielskiego...
Warunki naturalne Centrum znajduje się na wysokości około 345–350 m n.p.m. Najniżej położonymi terenami są okolice zajezdni MZK – ok. 340 m n.p.m. (poniżej maksymalnego poziomu Jeziora Żywieckiego), a najwyżej północno-wschodnie krańce, w rejonie Jaworzyny w Beskidzie Małym – ok. 830 m n.p.m. Najbardziej wyróżniające się szczyty górskie widoczne z okolic miasta to: pobliski Grojec (612 m n.p.m.), Łyska (614 m n.p.m.), Pilsko (1557 m n.p.m.), Babia Góra (1725 m n.p.m.), Lipowska (1324 m n.p.m.), Wielka Rycerzowa (1226 m n.p.m.), Romanka (1365 m n.p.m.), Wielka Racza (1236 m n.p.m.) oraz Skrzyczne (1257 m n.p.m.).
Do 1940 r. miejscem o najniższej zarejestrowanej temperaturze w Polsce –40,6 stopni Celsjusza był Żywiec. Taka temperatura wystąpiła w 1929 r. Stracił to miano w 1940 r. na rzecz Siedlec, gdzie zarejestrowano temperaturę –41 stopni Celsjusza.