在您和配偶之间签署了解除同居关系的协议，并且已经签字确认之后，通常情况下并不需要再到派出所进行盖章。这是因为这种类型的协议通常是通过书面形式达成的，不需要政府机关或相关部门的认可。 不过，如果您担心协议的有效性或者有其他相关问题，建议您咨询专业的法律顾问，以确保您的权益得到充分保护。他们可以为您提供更具体的法律建议，帮助您解决任何可能存在的疑问。