老板包工包料，把工程分包给我清工，由于石头供应不齐，把别的石头罗用到赶工的地方，原本老板大算把多余的

老板包工包料，把工程分包给我清工，由于石头供应不齐，把别的石头罗用到赶工的地方，原本老板大算把多余的石头做到另一栋上，另一栋老板又和甲方没谈成，导致出现多余的石头，老板现在威胁要我承担50%的石头多余量，价钱还得比他购买贵，还得无条件让他扣我平方数，不同意就不给结账，差不多得扣我五万多，这个价太高了我承担不起，我该怎么办