没有签订合同，2017年9月1日，签订了定金同意意向书，其中协议第三条约定 没有签订合同，2017年9月1日，签订了定金同意意向书，其中协议第三条约定，在9月15日前签订《房屋买卖居间协议》，但由于房东原因致使9月15日不能签订相关合同，双方口头约定我经中介公司见证，通过银行转账系统向房东转账十万人民币，于9月16日房钥匙交给我，进行修补！转账后房东还清了银行的按揭尾款，向我写了收条，加盖手印，中介经办人同时签字按手印确认，并加盖了中介公司公章，于16日交涉交房过程中，对方以定金同意书中补充条款交清38.5万房屋尾款为由拒绝交钥匙，双方产生分歧，我觉得房东信用不好，想退房，请问该怎么办？