在这种情况下，您有权通过法律途径追回剩余的保证金。首先，您需要收集所有与该工程和合同相关的证据，包括合同文本、支付保证金的凭证、对方退还部分款项的记录等。这些证据对于证明您的主张至关重要。 接下来，您可以聘请一位专业律师，向法院提起民事诉讼，请求判令对方返还剩余的保证金，并可能要求赔偿因对方违约而造成的损失。在诉讼过程中，律师会帮助您准备诉讼材料，代表您出庭，并与对方进行法律辩论。 如果对方存在欺诈行为，您还可以考虑向公安机关报案，要求追究其刑事责任。即使之前报警未立案，但在有了更充分的证据后，可以再次尝试。 请注意，诉讼可能涉及一定的时间和成本，因此在决定起诉前，您应与律师充分沟通，评估案件的胜诉可能性和诉讼的经济合理性。同时，您也可以考虑与对方进行协商，看是否能够通过和解的方式解决问题，这有时可以节省时间和成本。