在没有正式的婚姻关系的情况下，您和您的前夫之间并没有共同财产或任何其他形式的财产权益。因此，在这种情况下，无论您是否有孩子的抚养权，您都没有权利要求对方归还房屋所有权。 然而，如果您已经与他人结婚并有共同财产（例如，您可能拥有与您的新配偶共有的财产），那么您可以根据相关法律规定请求分割这些财产。此外，如果您有证据证明您为购买该房产做出了经济贡献，例如支付首付或其他费用，您也可以提出请求来确保您的权益得到尊重。 请记住，每个人的具体情况都是不同的，因此建议您咨询一位专业的法律顾问以获取更具体的建议。