您好！根据我国相关法律规定，如果您与他人签订的协议书中明确约定由一方承担损害赔偿责任，则应当按照该约定承担责任。但是，在没有明确约定的情况下，通常情况下会根据实际情况进行判断。 如果您在私下里与他人约架，并且签署了协议书，那么对方的伤残可能构成民事侵权行为，需要承担相应的法律责任。具体而言，这可能涉及到违约责任、人身伤害赔偿等法律条款。因此，建议您仔细阅读协议书中的相关内容，了解自己的权利和义务，并寻求专业的法律帮助来处理此事。同时，也建议双方尽量通过协商解决纠纷，避免采取过激的行为给彼此造成不必要的损失。