我在小厂里干活！活不多了！我们两夫妻对老板说！不干了，回家了 我在小厂里干活！活不多了！我们两夫妻对老板说！不干了，回家了，老板同意了，并且帐也算好了，但是他没有那么多钱，就说先给我们五千！剩下的过年腊月二十再给！然后我们就去慈溪了！但是就两天他就给我们打电话说我们不给他干活！工资一毛钱都不给，要把帐本给销毁！让我们去联合国日本都要不到这钱！他这是不是属于威胁我们了？请问怎么解决？