我今年9月份在中介订的房子，现在因大洼新成立了不动产，在房屋过户过程中 我今年9月份在中介订的房子，现在因大洼新成立了不动产，在房屋过户过程中，因房子是老家属楼无土地使用证，不动产不予过户，找中介想退房，中介不同意，说我违约，要求不退还已交付的中介费4200元，态度强硬，可是现在我和房主已商量好了，同意和解，直接退款，因这种情况不是我们双方的责任都不付违约金，可中介不同意，要求我们必须有一方付中介费，请问我应该怎么办