我在公司做销售的，我们是按季度做业绩的，每个季度都是有任务要求的，根据个人的星级待遇来制定相关的任务，一年两个季度，季度完了之后过两个月才结算季度提成，然后业绩kpl考核，公司没有及时做考核跟及时调整工资，现在说我去年秋季的考核是要降星级，降工资的。但是没有及时做调整，还是按照原来的工资发的，现在要把之前给我多发的工资给扣回去。我去年秋季都还是在孕期的，然后说我有三个季度没完成的，有两个季度因为有产假跟哺乳期所以不给我算，只核对一个季度，就是去年秋季的，请问工资要扣回去这个钱是合理的吗。我可以拒绝吗