首先，您与单位签订的协议是否具有法律效力取决于双方的真实意思表示以及协议的内容是否合法。如果该协议符合法律规定，并且双方都同意履行，则该协议是有效的。 然而，由于您的情况较为特殊，建议您在考虑再次回到原单位时，仔细评估自己的实际情况并寻求专业的法律意见。根据您的描述，可能存在一些潜在的问题，例如协议中的条款可能不适用于您的具体情况，或者存在其他争议导致无法继续履行合同。 此外，如果您已经支付了部分款项或有其他相关费用，您可能需要考虑这些费用是否能够得到补偿或解决。最后，请确保了解所有可能的法律和财务后果，并在做出任何决定之前咨询专业人士的意见。 总之，为了保护自己的合法权益，建议您尽快咨询一位经验丰富的法律顾问，以获取有关您当前状况的专业建议。