如果您和他人签订了房屋建造的协议，并且已经按照协议进行了施工，但后来对方拒绝履行协议，您应该采取以下步骤。 首先，您需要确认对方是否违反了协议中的任何条款。如果对方确实违反了协议，您可以要求其承担违约责任。 其次，您可以考虑向法院提起诉讼。在这种情况下，您可能需要聘请一位律师来帮助您进行起诉。 最后，即使您选择了通过法律途径解决问题，也建议您尽量与对方进行协商，以寻求一个双方都能接受的结果。这样不仅可以避免冲突升级，还可以维护您的权益。