在您与老人之间的遗赠扶养协议中，双方已经就财产分配达成了一致意见，并且签订了公证书。根据该协议，老人同意将一栋房屋留给您，并获得一定的补偿金。如果您按照协议妥善照顾老人，那么您有权要求保留房屋以及相应的补偿金。 然而，在房屋拆迁的情况下，您是否需要支付其他费用取决于具体的法律规定和实际情况。一般来说，拆迁补偿款应该按照公平合理的原则进行分配，包括但不限于对老年人的生活保障、搬迁安置费等。如果您认为自己的权益受到了损害，建议及时咨询专业的法律人士，以获取更准确的法律意见。同时，您可以考虑通过协商或诉讼的方式解决争议，确保自身合法权益得到保护。