根据《最高人民法院关于审理人身损害赔偿案件适用法律若干问题的解释》的规定，如果是在工作时间和工作岗位上因工作原因受到伤害或者患职业病的，应当认定为工伤。因此，在本案例中，由于死者在工地上的休息时间也是其工作的一部分，所以应该被认定为工伤。 然而，具体的责任认定需要考虑多个因素，包括但不限于事故发生的地点、当时的情况、双方的行为等。此外，如果有证据证明是第三人故意或过失导致的事故，那么也可能需要追究第三人的责任。 在实际操作中，应由相关部门对事故进行调查，并依据调查结果确定责任归属。同时，家属和当事人也可以向相关单位提出索赔请求，要求获得相应的赔偿。最终的处理结果可能会涉及到民事诉讼程序，由法院依法判决。