W wyniku zajęcia Królestwa Polskiego przez państwa centralne Kobylecki otrzymał nowe obowiązki. W okresie 20 listopada 1915–24 marca 1916 roku zajmował się kwestią uchodźców w oddalonych od frontu obszarach Imperium Rosyjskiego. 24 marcia 1916 roku został skierowany do gubernatora inflanckiego jako pomocnik. Zakończył służbę w kwietniu 1917 roku.
Odznaczenia Oriest Kobylecki był kawalerem następujących orderów:
Ordery Imperium Rosyjskiego Order Świętego Stanisława: III klasa – 6 lipca 1879 roku, II klasa – 26 czerwca 1888 roku, I klasy – 6 grudnia 1911 roku. Order Świętej Anny: III klasa – 15 maja 1883 roku, II klasa – 30 sierpnia 1892 roku, I klasy – 30 lipca 1915 roku. Order Świętego Włodzimierza: IV klasa – 6 grudnia 1895 roku, III klasa – 29 marca 1909 roku.
Ordery zagraniczne Perski order Lwa i Słońca III klasy – 24 marca 1906 roku.
Medale Srebrny – 26 listopada 1896 roku, Ciemnobrązowy – 30 stycznia 1897 roku. Medal pamiątkowy 300-lecia Domu Romanowych – 21 lutego 1913 roku,
Inne odznaki Znak Bractwa św. Bogurodzicy w Chełmie II kategorii – 25 października 1893 roku, Złoty znak pamięci w 200-lecie Sankt Petersburga – 1903 rok, Znak z okazji 50-lecia uregulowania kwestii chłopskiej w Królestwie Polskim – 13 marca 1914 roku.