Silická Brezová rozwinęła się w XIV w. O powstaniu wsi na tych bezwodnych z natury, krasowych terenach zadecydowało stałe, silne wywierzysko, usytuowane w jej górnej części. Wspominana była w 1399 r. pod nazwą Borzua jako majątek Stefana Szalonnaya (Silonaya). W 1427 r. miała 18 gospodarstw, pola orne, pastwiska, pewną ilość gruntów świeżo wytrzebionych oraz kamienny kościół bez wieży. Należała wówczas do żupy turniańskiej. Właścicielami wsi byli Bebekowie z Plešivca, następnie ród Andrássych, a ostatnimi posiadaczami wsi była rodzina Esterházych. W latach 1938 – 1945 wieś należała do Węgier.
Mieszkańcy zajmowali się rolnictwem, hodowlą i wyrobem drobnego sprzętu gospodarskiego. Niewielka kopalnia rudy ołowiu funkcjonowała krótko i nie przyniosła wsi znaczących korzyści.