依据法律规定，房屋实际面积小于合同约定面积的，面积误差比在３％以内（含３％）部分的房价款及利息由出卖人返还买受人，面积误差比超过３％部分的房价款由出卖人双倍返还买受人。因此在本案中，如果您继续履行合同的话，对方需要就超过3%部分双倍返还房款；如果您决定不继续履行合同，那么依照合同约定处理定金问题，要么全部返还，要不不返还，绝对没有返还大部分的做法。