我承包修理厂里面承包喷漆项目，当时合同约定的每月承包租金5500 我承包修理厂里面承包喷漆项目，当时合同约定的每月承包租金5500，合同期限五年，但我有权可以随时终止合同，约定给他交一万的押金用来做安全生产的保证。合同终止押金退回。现在我不干了，他不想如数退还，说合同约定的是5500，后来几个月交的是3000，这租金改变的事情是后来我们经过协商他同意过的，我怎么办