首先，您提到的女方与他人发生不正当关系，并且向男方借款用于偿还债务。这种行为违反了婚姻法中的忠诚义务和道德规范。 关于高利贷的问题，它通常是指以高利率为条件的贷款。如果男方因为借款而被要求作为担保人，则可能涉及合同违约责任和法律责任。然而，在这种情况下，具体的责任应根据双方签订的协议来确定。 在处理此类纠纷时，建议您寻求专业的法律帮助，以便了解您的权益并采取适当的行动。同时，确保收集所有相关证据，包括书面协议、证人证言等，以便支持自己的主张。此外，协商解决问题也是一个有效的选择，可以避免冲突升级。最后，请记住保护自己和家人的利益是最重要的。