我们买的房子，之前同时找的两家中介公司看的房子，我爸跟第一家中介公司去楼盘看的期房

我们买的房子，之前同时找的两家中介公司看的房子，我爸跟第一家中介公司去楼盘看的期房，然后我跟我妈在4天后跟第二家中介去售楼部看的房子，第二家中介承诺我们贷款下来后可以返2万多钱，然后我们就直接跟第二家中介在售楼部把房子买了，然后第一家中介知道后就去售楼部闹，最后这个单子就给了第一家中介，可是第一家中介不愿意返那么多钱给我们，请问一下应该怎么办