Nie istniała tam żadna infrastruktura komunalna i drogi, a ponadto nie była doprowadzona sieć energetyczna.
Koleby thumb|Uroczystość otwarcia nowego budynku szkoły w Kolebach w 1938 W połowie XVI wieku w wyniku prawie całkowitego wycięcia lasu miejskiego Kabat, Jan Komorowski przydzielił Żywcowi las Łyska razem z polem Okle, włączając ten obszar w jego granice. Założone tu zostały później miejskie pastwiska i pola uprawne, a następnie na ich terenie wytworzyła się osada Koleby.
Obszar Koleb podzielony był administracyjnie na część należącą do miasta Żywiec oraz do Sporysza (Pierwogóra). W sporyskiej części osady w 1922 powstała czteroletnia szkoła powszechna z siedzibą w budynku pod adresem Sporysz 305 (współcześnie ul. Pierwogóra 6). Stanowisko jej dyrektora pełnił do 1935 Wenancjusz Zych.
W 1938 r. na terenie Koleb został otwarty nowy budynek szkoły, który wzniesiony został na działce zlokalizowanej na zboczu Łyski i przekazanej na ten cel przez Akademię Umiejętności. Działająca w nim placówka funkcjonowała początkowo jako Szkoła Podstawowa nr 3, a później jako Szkoła Podstawowa nr 4 w Żywcu. 15 sierpnia 1960 ukończona została rozbudowa obiektu.