在您所描述的情况下，如果您已经与骗子进行了私下调解，并且骗子退回了7000元，那么剩下的2000元应该属于您的合法财产。因此，即使剩余的2000元没有被退还，也不构成诈骗罪。 然而，如果这个案件涉及到其他犯罪行为（如非法集资、盗窃等），则需要根据具体情况进行判断是否构成诈骗罪。此外，对于涉及金额较大的案件，建议及时向公安机关报案，由警方进行调查处理。 请注意，以上信息仅供参考，具体情况需依据相关法律法规及事实情况来确定。如有疑问，请咨询专业的法律顾问。