出生于爱尔兰的詹姆斯·霍班(上图为蜡像)
总统住宅的设计直到比赛结束一年后才最终确定下来，尽管基础工作是根据L 'Enfant的原始设计开始的，但华盛顿总统也参与了房屋的起草。最终，定稿为一座模仿林斯特住宅(Leinster House)的乔治亚风格的爱尔兰宅邸——白宫(White House)。经过几次重大的翻修和重整，这栋房子终于成为美国重要的象征之一。
Leinster House为白宫的原型,Leinster House现是爱尔兰国家议会的所在地
虽然霍班是建筑师，但华盛顿总统在纽约和费城担任两届总统期间一直监督了这栋房子的建设。白宫主要有石头建成，从波托马克河下游40英里处的Aquia Creek采石场非常方便，这种建筑材料是主要是砂岩，因为在当地很容易开采，可以大大减少建造成本。
1798年石匠们为了保护石头把建筑粉刷为白色，因此后来这座建筑被称为“白宫”。华盛顿要求对原来的设计进行修改，增加独特的玫瑰和橡子雕刻装饰，并削减建筑的高度。
西奥多·罗斯福总统创造了“白宫”这个名称
今天的拉斐特广场和白宫北草坪上散布着砖厂和窑炉、木匠的大厅、仓库、炊事室和石匠的小屋。在南草坪上有一个锯木厂和多个用来烧砖的窑。在当时政府的工资单上，像“Jerry,” “Charles,” “Len,” “Dick,” “Bill,” 和“Jim” 这样的黑人劳工都是从他们的主人那里雇来的。有经验的木匠和石匠大师在美国是很少见的，所以大多数熟练的工匠是苏格兰人、爱尔兰人和英国人。
华盛顿特区负责建设新城的委员们最初计划从欧洲招聘工人来美国建造，但效果并不好。幸运的是他们找到了大量当时在美国非裔的工人，包括奴隶或者自由身的工人。
亚当斯家族
1799年12月14日，乔治·华盛顿在总统的房子完工前去世。这座始建于1792年的建筑花了8年时间才准备好容纳总统，可惜的是华盛顿总统没能看到它。1800年11月1日，约翰·亚当斯(John Adams)成为第一个入住白宫的总统，他们家族也称为第一个入住白宫的家族。
