您好，关于您提出的问题，我作为专业的律师，在此为您提供一些建议。 首先，根据《中华人民共和国民法典》的规定，父母对子女的抚养义务是无条件的。因此，即使一方违反法律规定或协议，另一方仍然有权要求对方履行其抚养义务。 其次，如果双方同意由一方单独抚养孩子，且另一方愿意支付相应的抚养费，那么在满足一定的条件下（如孩子的健康状况、生活环境等），法院可能会允许这一决定。在这种情况下，法院会考虑孩子的最佳利益，并平衡双方的利益。 最后，如果您担心小儿子的情况，建议您与律师进行详细的咨询和协商，以确定最有利于孩子的方案。同时，考虑到孩子年龄较小，可能需要更多的时间和关注，您可以考虑寻求心理咨询师的帮助，帮助您更好地处理这个问题。