您好，针对您所描述的情况，您可以采取以下法律措施维护自己的权益： 1. **收集证据**：首先，您需要收集和保留所有与此事相关的证据，包括但不限于照片、视频、证人证言等，证明您的墙面受损情况以及对方的行为。 2. **协商解决**：尽管您已经尝试过协商，但仍然可以再次尝试与对方沟通，寻求合理的解决方案。如果可能，可以邀请第三方如村委会或调解组织参与协商。 3. **报警处理**：如果对方的行为涉及到破坏您的财产，您可以向当地公安机关报警，要求依法处理。 4. **民事诉讼**：您可以向人民法院提起民事诉讼，要求对方赔偿因墙面受损造成的损失，并要求对方停止侵害、排除妨碍。 5. **行政举报**：由于对方建设厂房没有合法手续，您可以向当地城乡规划、土地管理等相关部门举报，要求查处其违法建设行为。 6. **行政诉讼**：如果行政主管部门未依法履行职责，您可以提起行政诉讼，要求其履行查处违法建设的职责。 在整个过程中，建议您咨询专业律师，获取更具体的法律意见和帮助。同时，保持冷静，依法行事，避免采取过激行为，以免自身权益受损。