W połowie lat 70. XX w. rozpoczął się długotrwały kryzys klubu związany z pogarszającą się kondycją kolejnictwa. Sekcje stopniowo likwidowano, a z braku funduszy nie przeprowadzano modernizacji obiektów sportowych. W 1986 PKP przejęły stadion, a w 1996 zrezygnowały z opieki nad klubemhttp://bydgoszcz.wyborcza.pl/bydgoszcz/1,128852,15695339,Od_swietnosci_do_upadku_klubu_Brda.html dostęp 2017-03-21.. Dotychczasowy Środowiskowo-Kolejowy Klub Sportowy Brda przekształcono w jednosekcyjny Bydgoski Klub Piłkarski Brda. W 2001 kompleks sportowy powrócił do miasta w ramach spłaty zadłużenia PKP wobec Skarbu Państwa. Wiosną 2002 rozwiązano męską drużynę seniorów, która występowała w V lidze. W kolejnych kilku latach kontynuowano szkolenie młodzieży oraz założono pierwszą w Bydgoszczy żeńską drużynę piłkarską, która w 2006 awansowała na zaplecze ekstraklasy. W sierpniu 2007 przekazano ją do nowo powołanego Kobiecego Klubu Piłkarskiego Bydgoszcz. W 2008 dokonano ostatecznej likwidacji klubu.