合伙开了一家饭店，预估15万，当初说的我出5万，剩下他他来出，店里由我来运营，投资下来将近17万，他出了11.5万，一个多月都没有盈利，他就天天给我算账，说投资用不了那么多，他算下来也是那么多，还是不相信我，他说要不让我把他投资的钱给他，他还说知道我手里没钱，晚一点给他也行，我想着既然他这样说了，我就跟他说我把他投资的钱给他，他说可以，也就两三天我周转到资金了，昨天去找他，他说要分这一个多月的利润，我也同意了，我把他投资的钱转给他，他一直不收，也不说话，饭店干了四五十天了，也就这几天开始见利润了，他是不是不想撤资了，我该怎么办，进退两难，请求帮助。我们之间没有协议，没有合同。