根据您提供的信息，您的行为可能构成诈骗罪。诈骗罪是指以非法占有为目的，使用欺骗手段骗取他人财物的行为。在您的情况下，您的朋友认为自己被“诈骗”并要求返还钱财，这表明您实施了欺诈行为，意图使对方陷入错误认识并获得财产。此外，您在与其他人交往过程中并未明确告知或承诺会将钱款返还给对方，这也增加了诈骗的可能性。建议您积极应对此事，并寻求专业的法律帮助来解决纠纷。