根据法律规定，您需要向负责施工的人承担责任。因为是他们没有按照建筑规范进行施工导致了事故的发生，所以应该由他们承担赔偿责任。如果您对他们的行为不满或者有其他疑虑，建议您寻求法律援助，以便更好地维护自己的合法权益。