看合同约定。

你好，要看具体的事实和依据，如果签订了购房合同，退房属于违约，需要承担责任，借款合同违约如果有违约金条款也可能需要承担赔偿。

需要承担违约金，才可以解除合同的。