杨律师你好，我有一事须向你咨询，广元皇泽寺有个建筑公司，开发皇泽寺 杨律师你好，我有一事须向你咨询，广元皇泽寺有个建筑公司，开发皇泽寺，我们想揽点活，托人从那个经理承诺给我们活是皇泽寺停车场，但是要交保证金100万，我们几个联伙投了60万，也有条据，还写了个大概临时协议，是2015年11月20日，过后工程一直没下来，他一月一月的推，我们合伙的等不住，在去年退了40万走，我还抱了一线希望留了20万等他的工程，他也另外給我写了20万的收条，最后也是同样的下场至今无话，我退钱他也同意，也是今天推明天，我在广元等了四五天他还说出不要脸的话，我的钱还是贷的款。请问律师我现在该咋办。谢谢！