诉讼时效的问题？ 03年我和原单位签劳动合同的时候同时附加一份服务期协议约定了巨额的违约金。05年3月我提前离职，按照协议我应该交纳5万的违约金。但我拒绝，08年单位经过仲裁后起诉，现在还未开庭。我有理由认为这个协议不合理而且显示公平，并且认为已过2年的诉讼时效，但单位认为这几年他一直在催要这笔钱，未过诉讼时效。
请问，诉讼时效到底是怎么算的？我从一开始就拒绝支付，难道他永远要下去，就是时效永远存在吗？谢谢！