Hiszpanie stopniowo wycofali się z tego rejonu, a gdy w 1763 roku sprzedali Florydę Brytyjczykom opuścili tereny całkowicie. W roku 1730 twórca kolonii Georgia (1732-1777), generał James Edward Oglethorpe założył na przeciwległych stronach wyspy dwa forty obronne. On też na cześć Williama Augustusa Diuka de Cumberland zmienił nazwę wyspy na obowiązującą do dzisiaj. W 1750 roku na wyspę dotarli plantatorzy wykorzystujący niewolników, których posiadanie było wtedy ograniczone do wybrzeża. Plantacje działały aż do momentu zniesienia niewolnictwa w 1763 roku.
W 1783 roku amerykański bohater wojny o niepodległość Stanów Zjednoczonych Nathanael Greene wraz z żoną kupili wyspę. Zbudowali oni posiadłość o nazwie Dungeness, której ruiny istnieją do dzisiaj i są objęte ochroną jako należące do National Register of Historic Places. W tym samym roku ścięli pierwsze dęby wirginijskie na wyspie, a pozyskane z nich drewno posłużyło do zbudowania pływającej do dziś fregaty USS Constitution.