首先，根据中国婚姻法的规定，夫妻双方离婚后，无论是否经过法院判决或协议离婚，如果双方没有对财产进行分割，那么该房产仍然属于夫妻共同财产，除非有明确的证据证明该房产是个人财产。 其次，您提到的大儿子和小女儿跟随您生活，这表明您与他们之间存在一定的家庭关系，因此您可以作为法定继承人之一来主张对该房产的份额。 最后，关于孩子抚养权的问题，您可以向法院申请变更抚养权，要求对方承担更多的抚养责任，并且争取孩子的抚养权。 总之，面对这种情况，建议您尽快寻求专业的法律帮助，以便更好地保护自己的权益。