Mimo że dzielnica charakteryzuje się zwartą zabudową, nie brakuje tutaj terenów zielonych, takich jak Park Zamkowy, czy skwer między Aleją Legionówi Aleją Wolności.
Rudza
Częścią Śródmieścia jest Rudza, najstarszy fragment miasta. Pierwsi osadnicy zostali tam sprowadzeni w XIII wieku przez rodzinę Thurzonów, która otrzymała pozwolenie na eksploatację minerałów na Grojcu i w jego okolicyMonika Ćwikłowska- „Żywiec na dawnej pocztówce” (Żywiec 1995). Podczas II wojny światowej duża część drewnianych zabudowań uległa zniszczeniu, zachowały się jednak resztki dawnego budownictwa. Znajduje się tam kościół św. Krzyża, wybudowany pod koniec XIV wieku.
Zbiorniki i cieki wodne thumb|230px|Soła w Żywcu Główną rzeką przepływającą przez Śródmieście jest Soła, prawy dopływ Wisły o długości 88,9 km i powierzchni dorzecza wynoszącej 1,4 tys. km². Soła zaczyna się jako połączenie kilku potoków górskich Beskidu Żywieckiego w okolicach Rajczy. Rzeka uchodzi do Wisły w okolicach Oświęcimia, zwiększając jej przepływ o około 59% (najwięcej w skali kraju).
Prawym dopływem Soły jest Koszarawa. Początek bierze w rejonie wsi Koszarawa. Następnie płynie przez tereny gmin: Koszarawa, Jeleśnia, Świnna oraz przez miasto Żywiec, gdzie wpada do Soły w rejonie mostu kolejowego.