W międzyczasie z grupy odeszli Fiend, Parlé oraz Jin, który odszedł z wydawnictwa z powodu zbyt małej sprzedaży albumu The Rest Is History.
Rok później Ruff Ryders nagrali mixtape z udziałem DJ-a Absolut, We in Here (Official Ruff Ryder Mixtape)''.
W 2007 z grupy odszedł Drag-On, zarzucając wytwórni wydanie tylko dwóch albumów w ciągu 10 lat współpracy. Z wytwórnią rozwiązał kontrakt też raper Styles P, pozostając w niej jako część grupy The Lox. W wywiadzie z XXL Magazine wyjaśnił, że powodem było to, że choć na scenie jest długo, nie zarobił zadowalającej ilości pieniędzy.
W jednym z wywiadów Swizz Beatz powiedział, że aktualnie pracuje nad kolejną płytą grupy. W tym samym roku od Ruff Ryders odszedł również Infa.Red. W wywiadzie powiedział, że powodem było to, że przez blisko 10 lat, nie wydali żadnej jego płyty.
W 2011 nakładem nowej wytwórni pod Ruff Ryders, , wydana została kolejna składanka, „Ruff Ryders Past Present Future”. Wystąpili na niej starsi członkowie grupy - DMX, The Lox, Drag-On, Eve i Swizz Beatz, a także nowsi, w tym Murda Mook (jako po prostu Mook), Shella, Hugo. Jedynym gościnnie występującym wykonawcą jest Akon na singlu „Freaky” promującym płytę.