首先，您需要确认这个人在拆除围墙时是否有合法的依据和权限。如果此人是您的工人或者承包商，且有权按照合同条款进行工作，则他的行为可能属于正当的行为。 然而，在没有得到您的许可或合同约定的情况下，擅自拆墙并将其作为大门使用，这违反了合同中的规定，并构成了违约。此外，这种行为也可能构成侵权行为，因为未经同意而改变他人的财产。 如果您已经与对方进行了协商但无法达成一致，您可以考虑通过法律途径解决。可以先尝试调解或仲裁，以寻求和平解决。如果调解失败，可以向法院提起诉讼，要求对方赔偿损失。 请注意，具体的法律程序可能会因地区而异，请根据当地法律法规和实际情况选择合适的解决方案。同时，为了保护自己的权益，建议保留所有相关的证据和沟通记录。