根据法律规定，如果您的行为符合刑法规定的犯罪情节，并且您已经服完刑期，那么新的公安机关有权依据相关法律法规对您的居住地进行审查和管理。但是，如果您没有再犯的迹象，也没有违反当地的法律法规，那么可能不会被驱逐。 建议您与当地派出所沟通，了解他们的具体要求和理由，以及是否有其他可行的解决方案。同时，您可以向相关部门申诉或寻求法律援助，以维护自己的合法权益。