你好，根据你的描述，个人银行卡被单位扣留，从银行卡办下来就一直被单位财务扣留，而且本人不知道密码，当初就叫本人带身份证去银行认证了一下（银行工作人员知道的，因为不是一个人而是一批人）然后上级部门发的所谓的绩效被单位财务统一取出来再扣留了发给了你们一部分的情况，单位的行为属于违法行为，可以向当地的劳动监察部门进行投诉处理或者向劳动部门申请劳动仲裁，以维护自己的合法权益。