在您的情况下，根据我国法律规定，合伙人之间应当按照出资比例或者合同约定来分配利润与亏损。如果你们之间的投资金额相同，并且没有书面协议或合同明确约定如何分配利润和亏损，则可以认为双方的投资额是等值的。 因此，在这种情况下，您有权要求按照出资比例来分担亏损，但无法直接要求退回本金。建议您先进行详细的财务审计，以确定实际的亏损情况，然后与您的合伙人商议具体的处理方式。如果分歧较大，可能需要通过第三方调解或诉讼程序来解决。