Poetka przyjechała do Żarnowca wraz z przyjaciółką, malarką Marią Dulębianką.
W dworku przebywali; Henryk Sienkiewicz, Stanisław Wyspiański, Włodzimierz Tetmajer i Lucjan Rydel. Poetka mieszkała tu z przerwami przez 7 lat, do 1910 r., kiedy to nie powróciła ze swej ostatniej podróży do Lwowa, gdzie zmarła.
W czasie okupacji mieściła się tu komenda obwodu krośnieńskiego ZWZ AK.
Do 1956 r. dworek pozostawał w posiadaniu rodziny Konopnickiej. W tymże roku córka poetki Zofia Mickiewiczowa przekazała dworek państwu. W dworku od 15 września 1960 r. mieści się Muzeum Marii Konopnickiej. W jego zbiorach można znaleźć liczne pamiątki po poetce, m.in. pierwodruki oraz reedycje jej dzieł. We wnętrzach można obejrzeć także meble i wyposażenie wnętrz - z czasów życia pisarki.
Żarnowiec podobnie jak okoliczne miejscowości nawiedzały epidemie morowego powietrza, klęski żywiołowe, szczególnie wylewy Jasiołki. Nade wszystko niszczyły go jednak najazdy wojsk obcych: tatarskich w 1624 r., szwedzkich w 1655 r., węgierskich w 1657 r., rosyjskich w 1769 r., austriackich w 1772 r.