Wstąpił tam w 1759 roku do szkoły kadetów, którą ukończył po trzech latach.

Brat Anny Teresy Potockiej z Ossolińskich, był młodszym bratem Maksymiliana Hilarego, który po odziedziczeniu majątku swego dziadka Franciszka Maksymiliana Ossolińskiego, pozostał we Francji, i ożenił się dopiero po śmierci matki w roku 1774 ze stryjeczną bratanicą Anną Ossolińską na Tęczynie i Sterdyni h. Topór, z którą wziął rozwód, i ponownie się ożenił w 1784 r. z Matroną Pęcherzewską, a jego była żona wzięła ślub w 1782 r. z Kazimierzem Krasińskim (1725–1802) – szambelanem królewskim, z którym miała dwoje dzieci Józefa i Elżbietę Krasińską.

Józef Salezy pozostał głównym dziedzicem majątku ojca w Rzeczypospolitej. Po powrocie do kraju w 1762 roku Józef Salezy poszedł śladami ojca i rozpoczął karierę u boku Sasów. Po śmierci Augusta III Sasa stanął w czołówce przeciwników Stanisława Augusta Poniatowskiego i bez żadnych skrupułów poszedł na współpracę z ambasadą rosyjską.

19 czerwca 1764 – brał udział w obradach przybyłych do Krosna wojsk Konfederatów, po klęskach pod Leskiem i Brzozowem.