Brudzewscy odgrywali doniosłą rolę w życiu politycznym kraju. Piastowali wiele urzędów, zarówno centralnych jak i ziemskich. Byli m.in. wojewodami, kasztelanami, starostami, cześnikami, podkomorzymi, łowczymi, kanonikami, a także przebywali na dworze królewskim.
Z okresu przedlokacyjnego Brudzewa najbardziej znaną postacią tego rodu był Jarand z Grabi i Brudzewa. Był on wojewodą inowrocławskim i sieradzkim, stolnikiem brzeskim, chorążym gniewkowskim, uczestniczył w bitwie pod Grunwaldem.
Do niedawna panował pogląd, że siedzibą panów na Brudzewie był zamek obronny wzniesiony w XIII wieku w północno-wschodniej części miejscowości, z którego zachowały się jedynie ślady w postaci fortyfikacji ziemnych. Przeprowadzone w lipcu 2004 roku na tym terenie badania archeologiczne podważyły jednak tę hipotezę. Natrafiono jedynie na ślad drewnianej fortalicji pochodzącej z początku XVII wieku. Zabytków archeologicznych z okresu średniowiecza nie znaleziono. Wydaje się jednak mało prawdopodobne, aby tak znamienity ród, których przedstawiciele w trzech kolejnych pokoleniach piastowali urząd wojewody sieradzkiego, nie posiadali w Brudzewie żadnej siedziby. Obecnie przypuszcza się, że siedziba taka istniała, ale znajdowała się w zupełnie innym miejscu. W grę wchodzą dwie możliwości.