Vermeer miał bardzo liczną rodzinę – jedenaścioro (a może nawet piętnaścioro) dzieci, z których kilkoro zmarło we wczesnym dzieciństwie. Wiadomo, że w latach 1667, 1669 i 1673 odbyły się pogrzeby dzieci Vermeerów. Po śmierci malarza w dokumentach pojawia się informacja raz o ośmiorgu małoletnich dzieci, a raz o dziesięciorgu. Z imienia znane są: Maria, Elisabeth, Cornelia, Aleydis, Beatrix, Johannes, Gertruyd, Franciscus, Catharina i Ignatius. Aby ich wyżywić, artysta oprócz malarstwa wykonywał także inne zawody. Niewykluczone, że prowadził oberżę ojca, a niemal pewne jest, że tak jak on, zajmował się handlem dziełami sztuki. Był także ich rzeczoznawcą. W 1672 roku został wraz z innymi malarzami (m.in. Hansem Jordaensem z Delftu) powołany na biegłego i miał wykonać ekspertyzy obrazów, przypisywanych Michałowi Aniołowi, Tycjanowi i Rafaelowi. Stwierdził wówczas, że są one tandetnymi i złymi dziełami, a nie dziełami wielkich artystów. Najprawdopodobniej Vermeer malował dla konkretnych odbiorców, a nie na wolny rynek. Jednym z takich mecenasów był Hendrick Van Buyten – piekarz oraz Jacob Dissius – drukarz, który w 1682 roku posiadał 19 dzieł Vermeera.