中级法院终审判决被告人偿还我65000元，然后被告人一直拖着不给，法院也跟着和稀泥，一直让我少要点。

中级法院终审判决被告人偿还我65000元，然后被告人一直拖着不给，法院也跟着和稀泥，一直让我少要点。然后我说可以考虑少要一部分，口头暂时说到48000但是并未确认，今天被告人向法院上交部分款项，法院让我要去签订同意调解的协议书，同意对方支付48000以后，就可以结案，但是这样我太吃亏。我问法院这个被告人上交的2万元可不可以先给我，因为急需用钱，法院却说要我邮寄同意少要一部分的协议书过去。可是我觉得太吃亏。所以，请问，如果我拒绝签订，那么被告人已经上交到法院的款项，法院是否可以一直扣着不给我（执行庭也是想赶紧完事，所以一直让我少要，向着被告）