您的情况确实比较复杂，需要考虑多个方面。 首先，您有权要求房产的所有权或使用权，因为这是基于婚姻关系的财产分配。如果您和您的孩子作为共同所有人之一，那么房产应该是属于你们的。 其次，关于孩子的抚养权问题，您应该争取得到孩子的监护权，并且在离婚协议中明确写明这一点。这有助于确保孩子有一个稳定的生活环境。 最后，如果孩子的爷爷们试图阻止您改嫁并占有房产，您可以寻求法律援助。您可以通过向当地的法院提起诉讼来维护自己的权益。 总之，在处理这类争议时，重要的是要保持冷静，收集证据，并遵循法律程序。同时，与孩子们一起面对困难，给予他们足够的支持和鼓励。