你违约，押金要退，但是你要承担违约责任

你违约。《合同法》第107条规定， 当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。你可以继续履行，或帮他再找一个租客来补救他的损失，或者直接赔偿违约金。
   先看看你们当时签订的租赁合同有无约定违约金的数额，有约定按约定，无约定可根据《合同法》第113条，当事人一方不履行合同义务或者履行合同义务不符合约定，给对方造成损失的，损失赔偿额应当相当于因违约所造成的损失，包括合同履行后可以获得的利益，但不得超过违反合同一方订立合同时预见到或者应当预见到的因违反合同可能造成的损失。

看合同的具体规定。

看合同的具体约定，没有书面合同的话，根据公平原则可以主张适当返还。