我在一家夜总会上班，跟着一个商务经理女手下，现在我不想跟她要换一个商务经理，公司规定要离职一个月，我已离职一个月回来，我的经理说不允许我换必须得跟她，我想问下这算不算侵犯我的人身自由，