您的丈夫在您不在场的情况下在外借款并用于不同的用途，这需要具体情况具体分析。如果这些借款是在您和您的丈夫结婚前发生的，并且没有明确的书面协议或口头约定还款期限，则可能被视为夫妻共同债务。 然而，在某些情况下，债权人可能会要求借款人偿还全部债务，包括尚未偿还的部分以及利息。在这种情况下，如果您认为您的丈夫应该承担全部责任，您可以考虑与他协商解决这个问题。 请注意，您需要根据当地法律规定和实际情况来决定是否需要一同偿还这笔债务。如果您对如何处理这个情况有疑问，请咨询当地的法律顾问。