首先，您需要考虑的是双方的感情状况和当前的实际情况。在处理这类问题时，重要的是要保持冷静和理智，并尊重彼此的感受和需求。 如果男方仍然不愿意离婚并且表现出不忠诚的行为，那么这可能表明他并不真正关心您的感情和家庭。在这种情况下，您可能需要寻求专业的心理咨询或关系治疗来帮助双方更好地理解对方的需求和期望，并找到一个共同的解决方案。 此外，您可以尝试与男方进行开放和诚实的对话，讨论你们的问题和担忧，以及寻找解决它们的方法。如果您觉得有必要，可以考虑请一位调解人或者法律顾问介入，以确保双方的利益得到保护，并促进和平解决争端。 无论结果如何，最重要的是保持积极的态度，相信自己有能力解决问题并重建幸福的家庭。同时，也要记得照顾好自己的情绪和健康，避免过度焦虑和压力。