你好！根据《中华人民共和国城乡规划法》的规定，新建的加工厂房属于违反城市规划的行为。你与农贸市场领导签订的合同中应该包括对违法建筑拆除的责任约定。如果合同没有明确说明，那么责任应当由农贸市场承担。如果你认为自己已经按照合同规定履行了义务，且合同没有明确规定责任，你可以要求农贸市场赔偿你的经济损失。同时，你也可以向法院提起诉讼，请求人民法院判决农贸市场承担相应的法律责任。建议你在处理此事时，尽可能地收集相关证据，以便更好地维护自己的合法权益。