你好！根据我国劳动法的规定，劳动者的工作成果与工资待遇应当是直接挂钩的。如果单位的人事调动导致你的工资待遇下降，那么你可以要求单位退还你所获得的超额部分的工资作为补偿。 另外，如果你认为自己的工作得到了应有的报酬，并且没有任何过错的情况下，也可以拒绝退还这部分额外的工资。最终决定权在于你自己，你需要考虑清楚自己的利益和风险，做出最适合自己的选择。