根据《中华人民共和国劳动法》规定，用人单位应当按照合同约定的时间足额支付劳动者工资。如果单位拒绝支付剩余的工资，您可以向当地劳动监察部门投诉或申请劳动仲裁，要求单位支付剩余的工资并按法律规定支付相应的赔偿金（如未及时支付工资的双倍工资）。同时，如果您认为自己遭受了歧视或其他不公平待遇，也可以向劳动监察部门举报。建议您先与单位进行协商解决，若协商不成可以采取上述措施维护自己的合法权益。