您的情况比较复杂，建议您先收集一些证据，如婚前协议、双方的聊天记录、证人证言等。这些证据可以帮助证明你们之间的感情破裂，并且可以作为法庭上支持离婚的理由。 其次，您可以考虑与对方进行沟通，尝试通过协商解决分歧。如果对方坚持要求退还盖房子的钱，您可以向法院申请强制执行，但需要注意的是，这需要有足够的证据来支持请求。 最后，如果您决定通过法律途径解决问题，建议聘请一位经验丰富的律师为您代理诉讼，以确保案件能够顺利进行并得到公正裁决。在任何情况下，保持冷静、理智，避免情绪化的反应是至关重要的。