Życie prywatne Od 1930 był żonaty z Marią z Bobrzyńskich, córką historyka Michała (objął wówczas majątek teścia w Garbach). Miał dwóch synów: Kazimierza (1931–1945) i Jerzego (1935–1997), polityka i kierownika Ministerstwa Obrony NarodowejMaria Mielcarzewicz, Milewski Józef (Inek) (1892–1940), [w:] Powstańcy Wielkopolscy. Biogramy uczestników Powstania Wielkopolskiego 1918–1919, tom VII (pod redakcją Bogusława Polaka), Poznań 2010, s. 141–142.. W powstaniu wielkopolskim walczył także starszy brat Józefa – Janusz Witold Milewski (1887–1953), ziemianin, rotmistrz WP, komendant Obwodowej Komendy Uzupełnień w ŚrodzieMaria Mielcarzewicz, Milewski Janusz Witold (1887–1953), [w:] Powstańcy Wielkopolscy. Biogramy uczestników Powstania Wielkopolskiego 1918–1919, tom VII (pod redakcją Bogusława Polaka), Poznań 2010, s. 140–141..
Awanse podporucznik porucznik – 6 stycznia 1921 kapitan – 1922
Ordery i odznaczenia Krzyż Srebrny Orderu Wojskowego Virtuti Militari nr 1320 – 29 października 1921 Krzyż Niepodległości Krzyż Walecznych czterokrotnie