Był on właścicielem rozległych włości na Górnym Śląsku, obejmujących między innymi Stare Gliwice, Niepaszyce, Zabrze, Pszów, Gierałtowice, Czechowice, Chudów, Paniówki, Orzegów, Szombierki. Do jego spadkobierców Łabędy należały aż do 1945 roku. Według opisu miejscowości z 1783 roku w Łabędach znajdował się pański folwark, katolicki kościół i szkoła, 14 gospodarstw kmieci, 21 gospodarstw zagrodniczych oraz 16 chałupniczych. Wieś liczyła 232 mieszkańców.
Przez długi czas Łabędy pozostawały osadą wiejską, będąc od średniowiecza również parafią. Jeszcze w 1830 roku we wsi znajdowały się 64 domy, kościół i szkoła katolicka, gorzelnia oraz browar. Wieś zamieszkiwały 493 osoby, w tym tylko 3 ewangelików i 3 Żydów. W ośrodek przemysłowy rozwinęła się dopiero w połowie XIX wieku, co znacznie zwiększyło liczbę mieszkańców. Wówczas to w latach 40. gliwicki przemysłowiec Moritz Isaac Caro wybudował tu nowoczesną hutę "Hermina" (której dzisiejszym spadkobiercą jest Huta Łabędy).