我在网上找了个小额无抵押贷款，开始的时候没说要交钱，合同签好之后和我说要交2000元的综合保险金 我在网上找了个小额无抵押贷款，开始的时候没说要交钱，合同签好之后和我说要交2000元的综合保险金，合同最后一条写了要交的，我没看清，我说我从没听说过贷款要交保险金的，就说我亲自去你们公司交，然后他说可以，地址也给我了，但是太远了，就没去，就回来和他说我心里没底，我不贷了，可是他说如果今天不按照合同履行的话，我就得承担法律责任，我该怎么办。