Układ budynku center|600px|Schemat Białego Domu patrząc z góry Biały Dom składa się z trzech głównych części: tzw. Rezydencji Wykonawczej, Zachodniego Skrzydła oraz Wschodniego Skrzydła. Do tzw. kompleksu Białego Domu (White House Complex) zaliczane są także sąsiadujący z Białym Domem gmach Urzędu Wykonawczego Prezydenta Stanów Zjednoczonych oraz przyległe tereny zielone, w tym dwa ogrody.
Rezydencja Wykonawcza (Executive Residence) thumb|left|Plan parteru Rezydencji Wykonawczej thumb|Cały kompleks Białego Domu widziany z lotu ptaka Mianem Rezydencji Wykonawczej określana jest najstarsza część kompleksu, umiejscowiona w jego centrum i utożsamiana przez wiele osób z całym Białym Domem. Jej pierwsze piętro nazywane jest piętrem państwowym (State Floor) i służy do celów reprezentacyjnych i ceremonialnych. Parter mieści bibliotekę i mniejsze pomieszczenia o charakterze oficjalnym, a także pomieszczenia gospodarcze, m.in. kuchnię. Drugie i trzecie piętro mają charakter prywatny i służą jako miejsce zamieszkania i wypoczynku prezydenta i jego rodziny (choć niekiedy są tam zapraszani również ważni oficjalni goście, przede wszystkim głowy państw i politycy szczególnie blisko związani z prezydentem).