根据您的描述，如果拆除工作在施工过程中未采取有效的安全措施或者存在安全隐患，导致了楼下的裂缝和损坏，那么可能需要承担一定的责任。然而，具体的责任划分还需要考虑以下几点。 施工方是否尽到了合理的注意义务？是否遵守了相关的施工标准和安全规定？ 是否存在施工中的不当行为或疏忽大意的情况？ 施工方是否有足够的证据证明其没有过错或其他免责事由？ 此外，如果您认为施工方的行为不符合法律规定，建议您保留相关证据，并及时与业主沟通协商解决方案。如果双方无法达成一致，可以考虑寻求第三方调解或提起诉讼。最后，希望您能够妥善处理此事，避免不必要的纠纷和损失。