Nazwa Nazwa należy do grupy nazw patronomicznych i pochodzi od imienia założyciela miejscowości Karola. Heinrich Adamy w swoim dziele o nazwach miejscowości na Śląsku wydanym w 1888 roku we Wrocławiu wymienia jako najstarszą zanotowaną nazwę miejscowości Karlowice podając jej znaczenie „Dorf des Karl”, czyli po polsku „Wieś Karola”.
Topograficzny słownik Prus z 1835 roku notuje miejscowość pod polską nazwą Carlowice, a także niemiecką Carlowitz, natomiast wydany pół wieku później Słownik geograficzny Królestwa Polskiego i innych krajów słowiańskich wymienia ją pod nazwą Karlowice.
Historia Osada została założona przez opata klasztoru św. Wincentego, Carla Kellera około roku 1699, jednak w dokumentach została odnotowana po raz pierwszy dopiero w roku 1736 pod nazwą Carlwitz (od imienia założyciela osady). Kilka lat później wieś pojawia się w dokumentach już pod nazwą Carlowitz. Do roku 1810 osada należała do klasztoru, po czym przeszła w ręce prywatne. Jeszcze w XIX w. dominowała we wsi ludność polska, a ostatnim wójtem mówiącym po polsku był ok. 1850 r. Antoni Szulc (pradziadek Jana Edmunda Osmańczyka). W latach 1894–1901 trwała budowa neogotyckiego kościoła i utrzymanego w podobnym stylu klasztoru franciszkanów.