要以宅基地面积为准，宅基地面积是通过个人审批而才能修建的，然后通过房产局实地丈量而产生的，附图它只不过是确定你的建房方位样式，四至的定位，所以要以宅基地面积为准，宅基地面积和附图配合对你也有保护作用，一旦有纠纷这就是最好证据。