您好，根据我国法律规定，债务人自愿偿还债务的行为是合法有效的。因此，您是否有义务偿还该款项并不取决于您的婚姻状况或新的家庭情况。 然而，如果该男子多次骚扰并试图追讨债务，这可能侵犯了您的隐私权和安宁权，并且可能会给您带来不必要的心理压力和经济负担。在这种情况下，您可以考虑与该男子进行沟通，表达您的不满和要求尊重您的个人空间和隐私的权利。如果需要，您也可以寻求法律帮助来保护自己的权益。