根据法律规定，父母对未成年子女有抚养教育的义务。在您的情况下，您作为孩子的母亲，在没有其他监护人的情况下，有责任照顾您的孩子。因此，即使孩子出生时由前男友或其他男性领养，并且这些男性后来与您离婚或去世，但您仍然有权要求法院确认您为孩子的法定监护人。 此外，如果您认为您的大儿子和您的小女儿需要更多的关注和照顾，您可以考虑寻求社会福利机构的帮助来确保他们的基本需求得到满足。同时，您可以尝试与前男友或现任丈夫协商，看看是否可以找到一种既尊重双方意愿又能满足孩子们需求的方式。 最终，您应该与您的家庭成员进行深入的讨论，以确定最合适的解决方案。如果无法达成一致意见，您可以考虑聘请一位专业的家庭法顾问来帮助解决这个问题。记住，保护孩子的最佳利益是最重要的目标。