可与卖家协商，若达成一致，可以要回该笔款项。
若卖家不愿意返还，且不愿意卖房，则系卖家违约，可以解除合同，要求返还预付款及追究卖家违约责任。
可以不理会中介。

你好，可以要回来的

是否解除协议，决定权在于你和上家。中介之所以不同意，是在乎中介费。但是中介无权决定你们是否签订购买合同。
卖家不买，是违约，但是卖家也不可能遥遥无期的等待你出售房子，所以从公平角度，你方也有责任。建议协商返还定金和首付即可，就此了结。

１、需要依据居间协议中具体约定处理。

２、你们双方协商一致，可签订解约协议。

３、若需帮助，可来电或预约当面洽谈。

虽然没有约定首付时间，但对方催告并给出合理期限的话，法律是认可的。如果因为迟迟不付款，导致卖家解除合同，定金不好退了，预付款可以要回来。