因为钱不凑手不够交首付，开发商建议签署借款协议，名义把钱借给我们实际上没给现金 因为钱不凑手不够交首付，开发商建议签署借款协议，名义把钱借给我们实际上没给现金，但给了首付款已交的条子，限期让还钱，若到期还不上需付借款20%违约金还有银行四倍的利息，因为我们钱还没到手，现在还不能还但已超俩月，请问我们一定得交所谓的违约金吗，合法吗