我在北海付首付买的房子，合同上写着如果贷款下不了需要付全款退房要扣百分之二十违约金 我在北海付首付买的房子，合同上写着如果贷款下不了需要付全款退房要扣百分之二十违约金，当时我们买房问过这个问题，他们知道我们的情况，说贷款能下来，下不了也会想办法给解决，说合同只是那么写不用管合同，现在贷款没下来让他们解决结果就变成按合同来要扣我们百分之二十，不承认当初说过的话，我们没有让他立字据录音也没有证据，可以告他们欺诈么？