W okresie powstania styczniowego i później w latach 1866–1867 bywał w Grybowie Artur Grottger (przyjeżdżający do swojej narzeczonej, Wandy Monné), a około 1900 przybyli do Grybowa Stanisław Wyspiański i Józef Mehoffer.
Od 1876 miasto posiada połączenie kolejowe. W okresie międzywojennym na terenie miasta występował drobny przemysł. W czasie okupacji niemieckiej od października do grudnia 1939 znajdował się tam obóz przejściowy dla jeńców polskich, a w latach 1944–1945 obóz pracy przymusowej dla Polaków i Żydów.
W początkowym okresie okupacji niemieckiej utworzono getto, do którego przesiedlono Żydów z okolicznych miejscowości. 24 kwietnia 1942 w parku miejskim rozstrzelano 11 członków Rady Żydowskiej. 20 sierpnia tego samego roku szef nowosądeckiego Gestapo Heinrich Hamann przystąpił do likwidacji getta grybowskiego. 360 osób rozstrzelano w Białej Niżnej, a pozostałych popędzono do sądeckiego getta.
W 1961 zmarł w Grybowie wybitny polski architekt Zdzisław Mączeński.
1 stycznia 1973 do Grybowa włączono wieś Biała Wyżna..