是否构成犯罪需要根据具体情况来判断。一般情况下，未经配偶同意而与他人发生性行为的行为可能构成强奸罪或猥亵儿童罪等犯罪。然而，在这种情况下，由于你没有提供足够的信息，我无法确定该男子的行为是否违法。 如果你担心自己被侵犯了隐私权或其他权利，请及时向相关部门报告，并寻求适当的法律帮助。同时，保持冷静和理性，不要轻信谣言或偏见。在任何情况下，保护自己的合法权益是最重要的。